10月12日,集团公司高级副总裁周在阿里云大会上宣布了阿里云在大数据数学计算方面的新突破:将BigBench的数据信息规模扩大到100T计算流量最高值2.0每秒可达10000QPS,整体路由协议为亚秒级;E-MapReduce的性能比同行业的平均性能高3倍。
周表示,数据信息是智能装备自主创新的基础,只有经过充分的数学计算,数据信息的使用价值才能充分释放。我们期待根据持续发布的阿里云预计营收,协助开发者抢占大量销售市场机会。
BigBench在全球首次实现100TB
TPCx-BigBench是业内真正复杂的大数据端到端测试标准。现阶段TPC官网发布的测试是大规模10TB,性能最好的是1491.23BBQpm。
当天,阿里云与英特尔合作。在全新的Intel硬件配置上,根据公有云公布的MaxComputePAI上的BigBench,全球首次扩展规模至100TB,达到7000BBQpm,这也是首个基于公有云服务器的基准测试。
据悉,交流会结束后,MaxCompute将在公有云中开放为期一个月的接口测试,MaxComputePAI上的BigBench开源SDK(继承自TPCx-Bigbench,运行于阿里云的大数据自然环境)将供开发者认证使用。
规模上的出色表现归功于MaxCompute的海量信息求解能力和深度学习优化算法的准确性。MaxCompute按照阿里云自主研发的分布式系统计算机 *** 作系统飞行,单个集群服务器规模可达万辆以上,数据信息规模可达EB级。
性能方面,MaxCompute新一代解决方案模块从编译器、优化器、运行时等控制模块进行持续深度优化。此外,MaxCompute与Intel深度合作,深度优化软硬件整合。
英特尔大数据中心业务部高级副总裁罗伯特·海斯——“我们很高兴与阿里云在全新的英特尔至强可扩展CPU服务平台上对MaxCompute进行深度优化,并确认阿里云MaxCompute在BigBench测试中的出色表现”。
用于快速流计算的StreamCompute2.0
在流计算层面,周透露,9月底将在公有云中公布新的版本号。StreamCompute2.0基于ApacheFlink,展示了阿里巴巴内部针对开源社区的许多改进和优化。
新版串流计算2.0的功能包括:
1.高吞吐量、低延迟的解决方案能力,每作业最高QPS数百万,比StreamCompute1.0高10倍。
2.基于SQL的流分析语言。阿里巴巴网络公司的测量和业务部门立即测量集团核心的开发和设计,并感谢社区的BlinkSQLBlinkSQL适用于完美的流式词义解析,包括各种对话框、乱序容差和详细的DDL应用。
3.精确的数据处理方法字义,显示精确-一次解决字义。另外为了减少硬盘的IO,显示检查点的增减,优化存储空间空。
E-MapReduce性能提高了3倍。
E-MapReduce产品是基于阿里云上开源系统大数据的云服务器产品,包含15个开源系统组件,是一站式大数据解决方案。周现场宣布了从本地计算机硬盘分离出来的大数据解决方案及其计算和存储。
周详细介绍,为了应对大数据解决方案和深度学习的统一生产调度困难。E-MapReduce产品完成了CPU/GPU混合生产调度计划,促进了数据预处理和数据信息训练在一个服务平台上处理。
E-MapReduce对于数据信息素养的表现尤为重要。根据阿里云OSS的优化,读写方面的性能OSS是同行业的三倍。测量和存储分离的大数据解决方案的实用方式越来越实用。
欢迎分享,转载请注明来源:内存溢出
评论列表(0条)