莫方教程网

专业程序员编程教程与实战案例分享

阿里大数据用了哪些架构设计(阿里大数据用了哪些架构设计软件)

数据研发

全链路过程包括数据集成、数据开发、运维中心、数据质量、数据地图、数据安全以及数据服务等



数据治理:

计算和存储的优化建议

数据治理。任务运行结束对于集群或者任务管理人员来讲并没有结束,还需

要去看任务跑得好不好,这个时候服务治理就可以提供很多优化建议,比如

某个数据跑到最后没有人用,那与其相关的链路是否可以取消,这种治理不

管对于内部系统还是外部系统来讲可以节省很多的资源开销

数据地图

数据、任务之间的关系,帮助用户对后续业务的处理。

数据分层

从 ods 层 cdm 层,然后 ads 层,去一层一层的往上去做精细,







参考:《阿里巴巴大数据及AI实战》

未来数据智能技术发展的两大方向,一是实时化的大数据能力,二是人工智能技术。云时代的数据智能,可以真正处理海量的数据,可以真正实时地进行数据的分析,也可以真正把人工智能和大数据完美结合,提炼数据的内在规律。

控制面板
您好,欢迎到访网站!
  查看权限
网站分类
最新留言