莫方教程网

专业程序员编程教程与实战案例分享

阿里、网易等主流互联网公司大数据架构解析

#大数据# #Hadoop# #阿里巴巴# #网易# #互联网#

当前以BAT为代表的互联网公司中,Hadoop生态都是大数据平台的基础。在阿里巴巴早年的数加平台(整个大数据部分统称为数加)介绍中,阿里云大数据事业部数加平台技术负责人陈廷曾表示,阿里统一的自主可控的大数据平台是在Hadoop的基础上构建的,这套平台支撑了阿里很重要的一些业务,可见Hadoop对于阿里大数据平台的构建起到了至关重要的作用。

Hadoop生态图解

网易大数据平台-网易猛犸,底层基本完全构建于Hadoop生态系统,数据集成、数据存储、资源管理都和Hadoop生态系统有关。这套系统支持HDFS、Hbase、Kudu等从GB到PB级别的存储方案,支持Hive和MapReduce等批量计算、Spark内存计算、Kylin多维分析等多种计算方案。


控制面板
您好,欢迎到访网站!
  查看权限
网站分类
最新留言