腾讯云夺冠计算奥运冠军,创下史上最好大数据成绩,凭的是什么?

中国白银网(http://www.zhongguobaiyin.com/)11月17日讯,2016年11月10日,具有计算奥运会之称的SortBenchmark全球排序竞赛公布结果,其中,腾讯云用98.8秒完成100TB的数据排序,打破阿里

(上图:近三年来Sort Benchmark最好成绩对比)

今年腾讯云总共参加了Sort Benchmark的两项主要比赛:GraySort和MinuteSort。GraySort比拼的主要是参赛系统对大规模数据的处理能力,MinuteSort则评测参赛系统的效率。具体来说,GraySort比拼的是在最短时间内将总共100TB、一共1万亿条无序的100字节记录、按照从小到大的顺序排序;而MinuteSort比拼的是在1分钟之内能够完成多少数据量的排序。每个比赛还再分为Indy(专用目的排序)和Daytona(通用目的排序)两个子项。

腾讯云“数智分布式计算平台”(以下简称“数智”)参加IndyGraySort测试,每分钟可完成60.7TB的数据排序,去年的最好成绩为18.2 TB/分钟(阿里云)、2014年最好成绩为8.38TB/分钟(百度);参加Daytona GraySort测试,每分钟可完成44.8 TB的数据排序,去年的最好成绩为15.9TB/分钟(阿里云)、2014年最好成绩为4.35TB/分钟(UCSD,加州大学圣地亚哥分校)以及4.27TB/分钟(Apache Spark)。

腾讯云“数智”参加Indy MinuteSort测试的成绩为55TB,去年的最好成绩为11TB(阿里云)、2014年的最好成绩为7 TB(百度);参加Daytona MinuteSort测试的成绩为37 TB,去年的最好成绩为7.7TB(阿里云)、2014年的最好成绩为3.7 TB(三星)。

根据Sort Benchmark官网,可以看到腾讯云此次所取得的成绩即便在Sort Benchmark历史上也算得上是最强。而蒋杰介绍说,腾讯云今年能取得好成绩,不仅得益于腾讯云平台自有的强大调度能力,还由于腾讯云平台对自身的调度系统做了大量优化工作,目前在腾讯内部系统中每天的调度达2亿次,可以说是在海量系统中不断验证磨合出的大数据处理能力。

相应花了多少成本?

在本次Sort Benchmark比赛中,腾讯云参赛系统主要采用的是512台IBM的OpenPOWER服务器和迈络思的100Gb网卡。蒋杰强调,这样配置的平台并不是专门为了本次比赛所搭建,而是来自于腾讯的日常计算服务网络。

编辑:私念
免责声明本站发布此文目的在于促进信息交流,不存在盈利性目的,此文观点与本站立场无关,不承担任何责任。部分内容文章及图片来自互联网或自媒体,我们尊重作者版权,版权归属于原作者,不保证该信息(包括但不限于文字、图片、图表及数据)的准确性、真实性、完整性、有效性、及时性、原创性等。未经证实的信息仅供参考,不做任何投资和交易根据,据此操作风险自担。
  • 最新报价
  • 最新资讯
  • 热门报价