iconMaxCompute - 产品介绍icon

MaxCompute是一款多功能、低成本、高性能、高可靠、易于使用的数据仓库和支持全部数据湖能力的大数据平台,支持超大规模、serverless和完善的多租户能力,内建企业级安全能力和管理功能,支持数据保护和安全共享,数据/生态开放,可以满足数据仓库/BI、数据湖非结构化数据处理和分析、湖仓一体联邦计算、机器学习等多业务场景需求。

简单易用,SQL 可以支持全部数仓开发场景
多引擎,集成Spark,分布式Python(Mars),图计算等引擎,支持多业务场景,无缝对接开源生态
可上可下 开放的接口和数据通道
统一元数据、统一的账号和权限体系,完善的企业级安全能力
云源生的多租户系统,安全高效的跨业务&跨组织数据连接与共享 自适应的按需弹性资源,精准匹配业务规模的变化,避免资源浪费或不足
业务负载隔离,消除业务间资源争抢
支持TB到EB级的大规模部署应用和扩展; 连接广泛外部数据源,支持结构化和非结构化数据存储、处理和分析,支持联邦计算
积累多年双11自动优化和稳定可靠能力
全托管免运维+阿里最佳实践专家服务支持
iconMaxCompute - 产品架构icon
iconMaxCompute - 应用场景icon

现代化的数据平台(Modern data platform) 要求企业能够对业务做更实时的响应、处理不断增加的不同类型数据、利用新技术挖掘数据更深入的价值。

iconMaxCompute – 核心能力icon
iconMaxCompute – 高性能、低成本、高稳定性icon
iconMaxCompute – 企业级安全icon

多租户体系下企业级可信赖的数据管理平台-MaxCompute拥有全面的安全管理机制,提供业界领先的安全能力

iconMaxCompute 某保险集团基于MaxCompute大数据平台
打造数据中台 ——交互式分析/实时离线一体化icon
客户简介
• 国内领先的综合性保险集团,并是首家在上海、香港、伦敦三地上市的保险公司。为近1.6亿客户提供保险服务。连续11年入选《财富》世界500强,排名进至第158位。国内保险公司前三甲之一。
客户需求
• 数据湖建设项目:通过数据统一数据湖建设,将 全集团各个子公司数据统一管理,为集团资源共享,挖掘数据价值打下坚实基础。
• 集团数据统一入湖,开展全集团的数据资产做专项数据治理工作
• 容灾和数据安全体系
• 数据实时入仓,构建统一实时数据数据平台。
Why MaxCompute
• 完整的从hadoop体系sparkstreaming+hbase+hive迁移阿里体系至flink+Hologres+MaxCompute,承载了数据统一入数据湖/仓、数据治理、容灾等全部金融数据中台能力。
• 最终使用的资源只有友商H大数据系统完成全部资源的1/2
• 打通了实时入湖链路,包括dataworks实时数据集成数据入湖能力、datahub-flink-hologres的的实时链路,也包括T+1增量离线同步和与历史数据merge(update/delete/insert)任务。
iconMaxCompute - 产品组合icon
目标客户 适用于互联网、金融、政府、传统企业等大数据仓库 同时有海量ETL处理和实时洞察需求
客户需求/痛点 低成本(资源、运维) 开发简单、服务间易于集成、开发效率高
产品组合 MaxCompute + Hologres + DataWorks + DataHub
方案优势 快速上手、服务稳定、安全可靠;数据集成和OSS等外表 多种方式批量加载数据入MaxCompute;支持结构化数据及非结构化数据通过extractor加载入MaxCompute;DataWorks开发、调度、采集和数据治理一体化平台;Datahub流式数据直接投递MaxCompute,实时写入Hologres;Hologres提供高并发查询、亚秒级交互式分析能力,与MC通过外表等方式交互数据,实现联邦分析加速查询
iconMaxCompute - 产品组合 湖仓一体解决方案icon
目标客户
• 已有开源Hadoop平台,需要保留投资,
• 需要从数仓统一纳管数据湖 或多个数据源系统
• 通过湖仓一体联邦/抽取hadoop平台高价值数据,进行数据归集
方案优势
• 支持MaxCompute和客户既有Hadoop生态大数据平台互通,不需要客户“二选一”
• 扩展支持阿里优秀自研及开源引擎接入湖仓一体,MaxCompute提供高效的数据访问通道
• DataWorks支持湖仓一体,统一调度编排,统一数据地图数据血缘
产品组合
MaxCompute + DataWorks + 开源Hadoop体系 / OSS数据湖 /OTS表格存储、Hbase 等联邦数据源
功能说明
① Hadoop数据无须迁移,MC即可联邦计算
② MC可以读写HDFS,提升数仓数据开放性
③ 可进一步优化企业数据架构,湖和仓分层存储和管理,既保持湖的开放性又增强数仓的管控性
④ 助力搬站场景,不用完全完成搬站即可使用,快速启动,降低成本,insidehadoop亦可用于抽取数据
⑤ Hadoop元数据一键镜像 自动创建hive database逻辑映射,联邦计算,无缝融合Hadoop生态
⑥ DW将支持湖仓一体连接管理,调度湖中和仓中任务,统一数据血缘,降低两套平台的管理成本
iconMaxCompute 某知名互联网社媒公司通过湖仓一体实现大数据
AI协同 ——湖仓一体联合并查询几乎任何数据icon
客户简介

主要做社交媒体领域里的推荐 / 排序、文本 / 图像分类、反垃圾 / 反作弊等。在开源 Hadoop数据湖的基础上,借助阿里巴巴MaxCompute和PAI,解决了超大规模下的特征工程、模型训练等性能问题,形成了MaxCompute 和Hadoop数据湖共存的格局

客户痛点

数据同步安排专人专项负责,工作量巨大;训练数据体量大,导致耗时多,无法满足实时训练要求;新写 SQL 数据处理 query,无法复用 Hive SQL 原有 query

Why MaxCompute

通过湖仓一体,无须进行数据搬迁和作业迁移,原有生产作业无缝灵活调度MaxCompute 集群和 EMR 集群中,且性能有提升;封装构建AI计算中台,极大提升该团队的业务支撑能力

iconMaxCompute 某互联网金融客户基于MaxCompute实现用户
画像、推荐、风控 ——机器学习与大数据的融合平台icon
客户简介

某集团打造以大数据为驱动,模型为决策的智能风险管理体系,自主研发的大数据信用平分、坏账预测系统,为实际消费场景增加受众范围、降低入门门槛,承担起”护城河”的使命。

客户痛点

Hadoop多集群版本不一致,集群管理复杂,导致稳定性不足、性能极差、经常被业务团队投诉;算法平台比较传统、实时性不足。

Why MaxCompute

集团数仓迁移到飞天大数据平台后,任务基线整体提前3小时,性能提升30%。采用MMA 实现Hadoop->MaxCompute迁移策略,2周实现PB级数据上万张表的高效迁移,上千个核心任务只用了5天完成迁移改造。在离线计算和数仓基础上拓展了实时计算和金融AI领域的需求,MC数仓离线计算用户画像数据,增加实时计算Flink处理kafka数据对接Hologres实时数仓并归档MC,并使用MC+Hologres+Flink+PAIAlink打造推荐、风控等场景。

产品推荐 查看更多>>
    阿里云AIoT智慧门禁

    阿里云AIoT智慧门禁,云端能力硬件化,提供集成安全管理、健康码等能力的智慧门禁产品,端到端服务客户。通过集成门禁服务SDK,植入阿里云IoT的云端能力,硬件形态落地高性能服务。阿里云通行SaaS提供管理端、用户端标准的管理台与APP端,满足通用需求的场景。

    云&端一体

    口罩识别

    灵活布控

    “证码脸”三合一

    阿里云消息队列RocketMQ版

    RocketMQ诞生于阿里内部核心电商系统,主要为业务系统提供异步化、低延迟、业务解耦、削峰填谷、异构数据复制的能力。功能多样,高性能,高可靠容灾,可观测运维,帮助业务系统完成高价值数据传输和驱动。解决CDC增量同步、顺序交易撮合难题,解决分布式定时调度难题。

    异步化

    业务解耦

    可观测运维

    削峰填谷

    阿里云数据库Redis/Tair

    阿里云数据库Redis/Tair,通过对硬件信息,带外信息和信号综合探测,准确快速识别真正的异常状态。避免慢查询对心跳ping的干扰,触发误切换动作。 可配置开启多db的支持,更好的兼容集群架构升级。Slot迁移解决相同slot多key命令迁移期间失败问题。

    精准探活

    Slot迁移

    兼容性

    多db支持