腾讯云夺冠计算奥运冠军,创下史上最好大数据成绩,凭的是什么?

中国白银网(http://www.zhongguobaiyin.com/)11月17日讯,2016年11月10日,具有计算奥运会之称的SortBenchmark全球排序竞赛公布结果,其中,腾讯云用98.8秒完成100TB的数据排序,打破阿里

背后的腾讯云大数据平台

蒋杰认为,最近几年国内互联网公司频频在该大赛中夺冠,说明国内公司在云计算、大数据等领域已经有了长足的进步,本次夺冠就是腾讯多年来技术积累的成果。在今年实际参赛时,组委会突然宣布比寒提前一个月进行,这出乎很多参赛团队的预料,但这也考验了参赛团队的技术能力。

腾讯云参赛团队所使用的大数据平台“数智”,是腾讯云于2016年发布了的大数据解决方案,这是基于腾讯十余年海量数据处理核心能力所打造的一站式大数据处理平台。在对微信每天160亿级别的多维分析场景中,“数智”平台能够做到6秒返回结果。

“数智”结合腾讯在互联网海量数据处理经验、开源生态和自研组件服务,具有稳定易用、技术开放、秒级多维分析处理、安全可靠等特性。在基础架构上,腾讯云大数据团队对包括YARN、HIVE、PIG、SPARK、Kylin等众多开源组件进行深度优化,大幅提升了平台性能;在使用上,可以按需部署大数据处理服务,包括数据仓库建设、报表展示、数据分析、客户画像等大数据应用。除此之外,“数智”还囊括了腾讯自研的机器学习引擎和内置算法库,可视化操作方式让非技术人员也可能轻松驾驭数据挖掘。

蒋杰介绍说,腾讯云“数智”平台的诞生是因为腾讯要处理海量数据的自身需求。截至2015年底,腾讯QQ、QQ空间、微信等产品线背后,有着3万亿条数据接入、100亿次数据分发、120PB的存储、8.6PB的离线计算、2.5万亿的实时计算、500万次任务调度等亿万级的数据处理经验和能力,这些都是腾讯云“数智”这一大数据产品的基础。

编辑:私念
免责声明本站发布此文目的在于促进信息交流,不存在盈利性目的,此文观点与本站立场无关,不承担任何责任。部分内容文章及图片来自互联网或自媒体,我们尊重作者版权,版权归属于原作者,不保证该信息(包括但不限于文字、图片、图表及数据)的准确性、真实性、完整性、有效性、及时性、原创性等。未经证实的信息仅供参考,不做任何投资和交易根据,据此操作风险自担。
  • 最新报价
  • 最新资讯
  • 热门报价