大数据MaxCompute教程（阿里云离线数仓项目）学习笔记20231128
·
2.2.x DataWorks 和 MaxCompute
DataWorks 基于阿里云MaxCompute/Hologres/EMR/CDP等大数据引擎，为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。
MaxCompute 是面向分析的企业级SaaS模式云数据仓库，以Serberless框架提供快速、全托管的在线数据仓库服务，消除了传统数据平台在资源扩展性和弹性方面的限制，最小化用户运维投入，使您可以经济并高效的分析处理海量数据。数以万计的企业正基于MaxCompute进行数据计算与分析，将数据高效转换为为业务洞察。
MaxCompute：
SQL MR 图计算 机器学习
MaxCompute Engine 统一计算引擎
伏羲：分布式调度系统
盘古：分布式文件系统
存储集群 存储集群 存储集群
盘古👉Hadoop中的HDFS
伏羲👉Hadoop中的YARN
MaxCompute👉MR、Tez等计算引擎
MaxCompute和DataWorks一起向用户提供完善的ETL和数仓管理能力，以及SQL、MR、Graph等多种经典的分布式计算模型，能够更快速的解决用户海量数据计算问题，能降低企业成本，保障数据安全
魔乐社区（Modelers.cn) 是一个中立、公益的人工智能社区，提供人工智能工具、模型、数据的托管、展示与应用协同服务，为人工智能开发及爱好者搭建开放的学习交流平台。社区通过理事会方式运作，由全产业链共同建设、共同运营、共同享有，推动国产AI生态繁荣发展。
更多推荐
4
0- 0
已为社区贡献1条内容
所有评论(0)