发布者认证信息(营业执照和身份证)未完善,请登录后完善信息登录
 终于理解腾讯云98.8秒处理100TB数据创造新纪录 - 三农网
Hi,你好,欢迎来到三农网
  • 产品
  • 求购
  • 公司
  • 展会
  • 招商
  • 资讯
当前位置: 首页 » 资讯 » 三农时评 找商家、找信息优选VIP,安全更可靠!
终于理解腾讯云98.8秒处理100TB数据创造新纪录
发布日期:2021-12-06 03:07:26  浏览次数:4

11月10日,有计算奥运会之称的Sort Benchmark全球排序竞赛公布了2016年最终成绩,腾讯云大数据联合团队用时仅仅秒,就就完成了100TB的数据排序。

这打破了阿里云去年创造的329秒纪录,而在更早的时候,百度曾经的纪录是716秒,Hadoop的纪录是4222秒。

全球大数据性能进化史

在这次竞赛中,腾讯云数智分布式计算平台夺得了GraySort、MinuteSort两个项目的冠军,同时创造四项世界纪录,将阿里云去年的纪录整体提高了2-5倍。

GraySort项目比的是如何在最短的时间内将总量100TB的1万亿条无序100字节纪录,从小到大进行排序。腾讯云用时秒完成,相当于每分钟处理,而去年冠军的成绩是/分钟。

MinuteSort比的则是在1分钟之内能够完成多少数据量的排序。腾讯云的成绩是55TB,而去年只有11TB。

Sort Benchmark通过排序竞赛考量一家公司或机构大规模计算能力的综合实力,通过排序这个最基本的计算问题,不仅全面评测分布式系统软件架构能力(如海量数据分布式存储、计算任务切片调度、节点通信协调同步、数据计算监控容灾等性能),也评测了硬件架构能力(如服务器硬件选配、网络架构调优、IDC规划建设能力等)。

为了参加此次竞赛,腾讯云大数据联合团队在基础架构上采用了512台IBM OpenPower服务器和迈络思公司的100Gb互联技术。

VIP企业最新发布
全站最新发布
最新VIP企业
背景开启

三农网是一个开放的平台,信息全部为用户自行注册发布!并不代表本网赞同其观点或证实其内容的真实性,需用户自行承担信息的真实性,图片及其他资源的版权责任! 本站不承担此类作品侵权行为的直接责任及连带责任。

如若本网有任何内容侵犯您的权益,请联系 QQ: 1130861724

网站首页 | 实时热点 | 侵权删除 | 付款方式 | 联系方式 | 法律责任 | 网站地图 ©2022 zxb2b.com 三农网,中国大型农产品交易电商平台 鄂公网安备42018502006996 SITEMAPS | 鄂ICP备14015623号-20

返回顶部