中国联通大数据平台公布今年目标:数据节点4400个 存储量150PB

【数据猿导读】 大数据的演进并没有真正跟上云计算的步伐,不管是原来的Hadoop也好,还是现在的Spark。我们主要使用的底层平台还是物理机x86平台,并没有真正用到虚拟化

中国联通大数据平台公布今年目标:数据节点4400个 存储量150PB

3月30日消息,“2016中国通信行业云计算峰会”昨日在北京召开。在峰会上,中国联通信息化事业部副总经理范济安指出,大数据和云计算属于典型的平台型经济,数据体积大、数据来源多、云计算需要通过网络连接来获取资源、技术与应用服务。

中国联通大数据平台的发展越来越面向外部的合作伙伴,所以中国联通也定义了一套大数据生产运营的机制,即总体的框架结构。范济安表示,虚拟机可以为了充分利用硬件资源,中国联通x86架构物理机平均使用率不到10%,希望通过虚拟化技术提高设备利用率,但虚拟机装载OS和应用后太沉重,业界在探讨轻量级的“容器”承载,中国联通也在尝试使用“容器”技术,可以直接允许应用落在物理机上,又能够享受虚拟化、云化技术的优越性。

“大数据的演进并没有真正跟上云计算的步伐,不管是原来的Hadoop也好,还是现在的Spark。我们主要使用的底层平台还是物理机x86平台,并没有真正用到虚拟化。”范济安指出,中国联通经过测试验证发现,针对Hadoop数据处理,物理机和虚拟机的性能差别非常可观,达到2到3倍的数据,“我们正在尝试把应用拆成一个一个容器化的应用。”

正是基于这个原因,中国联通采用了以物理机为主搭建大数据平台。范济安在演讲中也透露了中国联通大数据平台的三年规划,2015年规模是2000个节点,存储的容量是20PB;2016年目标4400个节点,存储量达到150PB;2017年将达到6000个节点、220PB。此外还从原来单一支撑的Hadoop集群,迅速发展到了Spark、Storm、Kafka、MySQL等多元化的集群。

范济安表示,未来的中国是一个超大规模的大数据市场,必定会培育出一批优秀的大数据云计算企业,在数据获取、存储、挖掘、分析、应用和运营方面会创造出新的技术、新的产品和新的模式。中国联通希望与合作伙伴强强联手,挖掘大数据带来新一轮云计算增长高潮的发展机会。


来源:C114中国通信网

声明:数据猿尊重媒体行业规范,相关内容都会注明来源与作者;转载我们原创内容时,也请务必注明“来源:数据猿”与作者名称,否则将会受到数据猿追责。

相关精彩内容推荐

我要评论