文 | 曾响铃
来源 | 科技 向令说(xiangling0815)
新基建浪潮下,作为底层支撑力量的数据与计算正变得越来越重要。
最近,由中国大数据与智能计算产业联盟主办,以“新算力 新基建 新经济”为主题的第二届中国超级算力大会ChinaSC在北京召开,包括国内外院士、知名学者和产业大咖在内的600多人参加,探讨了超级计算、新基建、云计算、大数据、人工智能、区块链等前沿技术进展。
这个奖项的颁出,官方给出的标准是,“能够把当前的各种技术有机的整合在一起,以满足不同应用场景下的各种综合的软硬件及系统方案,集科学性、先进性、稳定性、经济性等众多实际指标于一身,是技术转变为实际应用的关键环节。”
显然,这个权威奖项最关心的,是大数据解决方案在推动技术向实际应用转变的能力,而这也正是当下市场环境对大数据的核心需求。笔者尝试拆解鲲鹏大数据解决方案从宏观到 *** 作层面的布局,希望能给予相关从业者这方面的行业借鉴。
技术竞赛不停, 但大数据需求转向应用落地
数据的价值越来越明显,更好地释放数据价值的技术在不断演化,但是,随着更多政企组织开始着手利用大数据能力帮助现实业务提升,其需求也开始更多倾向于技术能否更好地实现应用落地,大数据解决方案正是为此而生。
以鲲鹏为案例,在推动技术落地的过程中,其大数据解决方案表现出符合时代需要的三大特征,让它在新趋势下占据领先优势,受到客户广泛欢迎并获得ChinaSC权威认可。
1、超高性能仍然是应用落地的最有力支撑
大数据解决方案要推动技术实现各种场景的落地,其前提和支撑,是底层软硬件性能本身要足够强悍,否则,再完善和深度的解决方案,没有性能支撑也只能是空中楼阁。
而也只有性能足够强悍,在应用落地阶段才能够尽可能去满足客户各类数据价值需求。
得益于底层软硬件能力的深度开发,鲲鹏大数据解决方案就拥有超高性能,为应用做好了充分的准备以及支撑。
例如,硬件方面,采用自主研发高性能鲲鹏920处理器,软件方面,则拥有在大数据场景下获得倍级性能提升的独创IO智能预取和Spark机器学习&图增强算法。
以鲲鹏与浙江移动的合作为例,2019年,浙江移动相继完成了IT云鲲鹏服务器测试,营业厅前台系统、CRM、计费、大数据、CDN等系统的验证及上线商用。这其中,浙江移动的CRM&BOSS系统在鲲鹏大数据方案支撑下,整体得到了较大提升,在规模承载网络运营支撑业务的情况下,该系统现在已经稳定运行一年。
目前,浙江移动围绕网络云,IT云和移动云,已经打造了全球首个运营商领域ICT全场景样板点。
2、全栈方案才能推动技术全面落地
解决方案本身并不是一种具体的技术,其价值在于各种技术的有效融汇,作为统一的输出方式面向政企客户。而在政企客户需求日益加深的情况下,尽可能满足多种场景、多种技术诉求的解决方案,就必须建立一套尽可能完善的全栈体系,将各种技术有机地、系统地、全面地整合在一起。
这正是华为鲲鹏大数据解决方案的体系构成,其基于鲲鹏处理器,构建了端到端打通硬件、 *** 作系统、中间件、大数据软件的全栈体系,并对应进行了全栈性能优化,推动各类技术汇聚成高性能解决方案:
可以看到,这套全栈体系,一方面通过有机整合,能够较为容易地同时满足科学性、先进性、稳定性、经济性等需求(例如,加速特性和大数据组件能够帮助方案更有效率同时成本更低);另一方面,作为全面、完整、一体化的信息化解决方案,也更容易去适应政府、金融、电信、互联网、大企业等不同行业应用需求。
从技术到应用落地,“全栈”成为重要的中间转换环节,不但“无损”,而且“增益”。
3、符合政企个性化需求让技术落地更具现实价值
在最终面向单个客户落地时,大数据解决方案还需要真正贴合这个客户的实际需要,这是从技术到应用落地的“临门一脚”,毕竟,不论性能如何强悍,全栈体系如何完善灵活,落实到客户头上,最终还是需要符合业务实际,产生现实价值。
既要有能力,更需要契合,鲲鹏大数据解决方案就是这么做的。
2019年,江苏省基于鲲鹏架构打造了全国首个省区市县三级政务大数据,未来将有越来越多的政务系统可以由自主可靠的鲲鹏计算平台来承载;
在广西,区内首个鲲鹏产业生态云项目——“壮美广西·玉林政务云(鲲鹏云)”已于不久前上线,这是该市全面推广应用广西数字政务一体化平台的体现,而其推出的广西首个市级公共数据开放管理办法,就与鲲鹏的大数据解决方案紧密相关;
目光转到浙江,在鲲鹏生态落子浙江的过程中,浙江推动形成“用鲲鹏”的共识,城市被当成鲲鹏生态的“试验场”,杭州市政务云已经选用鲲鹏作为算力底座,基于鲲鹏技术架构的解决方案和应用在政府服务场景中得到广泛应用。
总得看来,仅有高高在上的技术而无法产生实际价值的大数据玩法已经行不通,鲲鹏大数据解决方案跨越技术与应用的鸿沟,已经在众多行业、场景和企业中实现落地。
电信行业三巨头中,中国移动已实现鲲鹏大数据解决方案规模商用,中国电信则基于鲲鹏打造了天翼云,中国联通则基于鲲鹏构建了天宫IT系统;政务方面,北京、广东、江苏、浙江、广西等政务云都出现鲲鹏身影,当下其已经成为首选技术路线;在金融行业,鲲鹏正在帮助银行系统加速完成国产化。
可以说,鲲鹏大数据解决方案有力推动了中国数字经济发展,尤其是信息技术应用创新的落地。
领先优势下, 鲲鹏三个角度出发为大数据技术落地“铺路”
1、走得更稳——回应数字时代重要的安全关切
因此,鲲鹏大数据解决方案在安全方面一直加大投入,最典型的,是在底层硬件而非软件层面进行安全保障——鲲鹏920处理器内置硬件加速、业界首创支持国密算法加速,这种CPU内置加速模块的做法,被称作“内生安全”,配合国密算法在技术上更为安全。
而与通常的大数据解决方案为了保证安全不得不让渡较多的性能随时监控系统运行不同,华为鲲鹏大数据解决方案内生安全的做法,做到了加密对业务性能的损耗低于5%——既解决安全痛点问题,也解决“为了安全需要”本身导致的痛点问题。
2、走得更顺——用兼容性保护既有数据软硬件投资
前文提到政务云大数据解决方案中,与现有的服务器的混合部署,这其中有一个十分重要的兼容性做法——由于鲲鹏大数据解决方案建立在鲲鹏处理器基础之上,而很多政企组织原有的软硬件投资都基于X86架构,所以鲲鹏要让技术的应用落地走得更顺,还需要在技术上完成对X86在部署层面的兼容,这样还能保护政企客户现有的数字化投资。
可以看到,当下的鲲鹏方案已经支持大数据组件TaiShan服务器与其他架构服务器混合部署。
以江苏电信为例,去年7月,其宣布成功上线全球首个基于鲲鹏处理器的运营商大数据平台。作为核心的业务系统,该大数据平台基于鲲鹏处理器的华为TaiShan服务器和开源Hadoop软件构建,承载着江苏电信所有生产系统的运行数据、存储及分析:
在项目进行过程中,双方携手完成基于鲲鹏处理器的开源Hadoop源代码编译,让关键的大数据业务组件在华为TaiShan服务器上的成功部署和运行,在原有集群上实现了传统架构服务器和TaiShan服务器融合部署。
这种兼容的做法,有效结合了江苏电信大数据业务特点和未来演进趋势,且充分发挥鲲鹏处理器的性能,提高了数据存储、计算等资源的使用效率。
3、走得更宽——生态开放才能让大数据拥有内生动力
鲲鹏生态的主要推动者华为一直强调的理念是“硬件开放、软件开源、使能合作伙伴”,在大数据解决方案中,这种理念同样得到了应用。
例如,在鲲鹏全栈方案中,顶层大数据平台就支持华为自研的FusionInsight大数据平台以及开源Apache、开源HDP/CDH、星环大数据平台,可以有效对接各类场景需要。今年8月,星环 科技 就发布了基于鲲鹏的大数据平台软硬件联合解决方案,由星环 科技 的TDH大数据平台提供软件层面优异的功能,由鲲鹏芯片提供硬件层面强大的性能,拥有极致性能、平滑迁移、丰富的场景支持以及快速部署多重优势,为行业创造价值。
此外,鲲鹏主导的数据虚拟化引擎openLooKeng开源,就支持跨数据格式、跨数据源、跨数据中心的海量分析,最终帮助方案的性能大幅度提升,典型的如北明数据资产管理平台V40就基于openLooKeng技术,解决了数据资产管理数据冗杂、标准不一、难以管理等痛点问题,为企业守护和挖掘数据的价值。
开放的生态,将帮助更多合作伙伴发展服务器和PC等计算产品,帮助构建高质量的基础软件生态,也让更多生态伙伴获得端、边、云的全场景开发能力,最终促进鲲鹏计算生态的繁荣,也加速大数据行业应用创新。
打好基础、做好标杆, 鲲鹏进入“强者恒强”周期
弥合技术与应用落地的鸿沟后,鲲鹏大数据解决方案拥有越来越多的政企实践,它们中大多数都是行业典型客户,本身既是大数据发展过程中的优质案例。
拥有这些客户资源的鲲鹏,实际上已经进入了强者恒强的发展周期,这不仅仅是因为它获得了诸多标杆合作案例、领先于行业,更重要的还在于,技术到应用实践的通路打通后,实践也将不断反馈技术,不断帮助鲲鹏锤炼自身的技术能力,从而形成有效的正反馈循环。
一旦这种循环形成,大数据解决方案就会进入“飞轮”式发展进程,越转越快、越难以停下,也很难以被后进者追赶,逐步成为政企客户最有竞争优势的选择。
更进一步来看,大数据服务从来都不是孤立存在的,在计算需求多样化的时代,鲲鹏计算产业生态的主要推动者华为在物联网、5G、AI等方面的能力和生态布局,无疑将帮助鲲鹏大数据解决方案有更多横向技术连接和融合的想象空间,满足更多政企客户潜在的创新业务需求。
总而言之,在以鲲鹏大数据解决方案为代表的优质案例引领下,数据与计算的时代正在加速到来,最终,“新算力”将推动“新基建”全面落地,带来“新经济”动能,更多政企客户将享受到技术带来的价值红利。
本文均来源于网络
完
曾响铃
1钛媒体、品途、人人都是产品经理等多家创投、 科技 网站年度十大作者;
2虎啸奖评委;
3作家:移动互联网+ 新常态下的商业机会等畅销书作者;
4《中国经营报》《商界》《商界评论》《销售与市场》等近十家报刊、杂志特约评论员;
5钛媒体、36kr、虎嗅、界面、澎湃新闻等近80家专栏作者;
6“脑艺人”(脑力手艺人)概念提出者,现演变为“自媒体”,成为一个行业;
7腾讯全媒派荣誉导师、多家 科技 智能公司传播顾问。
鲲鹏服务器的宿写鲲鹏服务器的宿写
1 使用鲲鹏服务器可以提供高性能的服务,可以支持大量用户的访问和使用。
2 鲲鹏服务器可以支持多种 *** 作系统,支持Linux、Windows和Mac OS等 *** 作系统。
3 鲲鹏服务器提供了高效能的存储能力,可以支持大量的数据存储,满足企业的各种需求。
4 鲲鹏服务器支持多种网络连接,可以支持Ethernet、Wi-Fi和3G/4G等网络连接。
5 鲲鹏服务器支持多种应用,可以支持数据库、网站、邮件服务器、虚拟主机等应用。
6 鲲鹏服务器支持多种服务,可以支持服务器托管、云计算、云存储、虚拟主机等服务。自2019年以来,美国对华为连续实施了三轮制裁,然后对华为影响最大的还是“芯片禁令,根据禁令的要求,未经过美国商务部的许可,凡是含有美国技术成分的芯片不得出售给华为。
这也是最致命的就是想把华为的自研芯片堵上,由于国内技术的欠缺,在很多高端芯片领域,我们都是仰仗西方技术,也就是技术壁垒,华为是国内拥有最大芯片自研能力的企业,相比于其他国内企业,而最大的一个技术优势华为的自研芯片能力。
华为的三大主要业务分为:运营商业务、消费者业务、企业业务,并且这几大业务都是基于自研芯片的竞争力的,华为在运营商业务中有自研的5G基站芯片,消费者业务中的手机芯片,还有企业业务中的企业服务芯片等,而自研芯片之路被阻,对于华为的未来发展就着严重的影响。
根据媒体报道今年的前三个季度,华为的净利率和销售增速都出现了下滑,其中销售增速从244%降到了99%,暴跌了近60,如果按照这样发展,会逐渐变为负增长,那么其实一切的根源还是芯片,其实芯片问题早就有了前车之鉴,之前中兴被美国打压,之后还赔付巨额赔款,中兴之后也是一蹶不振,各大业务都出现下滑。
早在今年的8、9月份就出现了相关的前兆,当时有媒体报道华为和荣耀因为缺货的问题。从而导致渠道商加价的情况。
华为的手机业务占营收的很大一部分,从华为2019年的年报,可以看出华为消费者业务占据4673亿元,首次出现占比50%,如果不能解决华为芯片的问题,这也会导致华为手机市场份额,营收的减少。
当然华为也早就意识到这个问题,任正非留好”后手“,华为官方也是表示已经准备好”备胎“,华为在去年年底就向台积电追加了5G基站核心天罡芯片的订单,预计贮备了超过200万颗7nm的天罡芯片,这可以保证华为的主营通信业务至少3年正常发展。
华为也在早早地就准备好了后手,来保证企业的正常发展,开拓新的战场,实现营收的稳步增长。
一、鸿蒙os
很多人以为鸿蒙只是手机 *** 作系统,但这个其实是片面的,鸿蒙os是实现万物互联的,手机只是其中一种,而华为之前也是发布了鸿蒙20,预计今年年底可能会搭载手机上,我们常见的家电、平板、 汽车 都可以搭载鸿蒙系统,组成一个完整的鸿蒙生态。
二、鲲鹏服务器
服务器是所有互联网业务的基石,我们所有的 游戏 、APP、办公系统等都需要运行在服务器上面的,预计就中国的服务器市场就近万亿。
而鲲鹏服务器是华为自研的服务器架构,从底层芯片到架构都是华为自主研发的,目前基于华为鲲鹏架构的服务器市场占比已经超过50%!而未来是5G与大数据时代,数据的计算和储存需要大量的服务器,市场会不断增长。
三、笔记本等其他的业务
华为的消费者业务广泛,手机芯片被封锁,但是笔记本业务芯片没有,AMD以及英特尔依然可以为华为供货cpu芯片,华为也是可以将自己独有的技术搭载在华为笔记本业务上的,并且华为的笔记本业务也是不断增长,市场占有率并不断提高,有望明年超过联想。
最后的话,华为尽管现在在手机市场举步艰难,但是回首过去,我们可以看到华为进入的各个领域都是排名前列的,所以时间是最好的见证者,华为终将打破这种封锁。广电鲲鹏服务器是广电运通与华为合作,基于华为鲲鹏920处理的ARM架构的服务器,我这这里测试的是GRGBanking 200 (Model RK2280)型号,2U高度,配置两个64核的Kunpeng 920处理器。
区别于Intel和AMD的X86平台,广电鲲鹏服务器使用的 *** 作系统和应用软件都是ARM版本的。
CPU信息如下:
CPU架构显示是aarch64。指令集于X86的也不相同。
安装CentOS Linux release 771908 (AltArch) *** 作系统
在图形化界面信息下识别不了CPU信息:
安装好 *** 作系统之后想跑一下Unixbench跑分。Unixbench是一个类unix系(Unix,BSD,Linux)统下的性能测试工具,一个开源工具,被广泛用于测试linux系统主机的性能。
先看下GCC的版本:
在X86平台下直接执行Run命令就可以进行Unixbench跑分。
但是在ARM平台下进行Unixbench跑分出现报错:
这是由于CPU的架构不同,-march和-mtune不支持native参数,需要进行修改。
修改MakeFile文件,将 -march=armv8-a -mtune=cortex-a53
再次运行Unixbench就可以正常进行编译跑分了。云宏CNware国产虚拟化平台简介:
CNware®是云宏拥有自主知识产权的虚拟化平台,通过对物理资源、虚拟资源、业务资源统一管理,为客户的应用系统提供高性能、高安全、高可靠的计算、存储、网络服务,构建高度可用、按需服务的虚拟数据中心。
广电鲲鹏服务器是广电运通与华为合作,基于华为鲲鹏920处理的ARM架构的服务器,我这里测试的是GRGBanking 200 (Model RK2280)型号,2U高度,配置两个64核的Kunpeng 920处理器。
广电鲲鹏RK2280启动界面,配置两颗HiSilicon Kunpeng 920-7261K 64核CPU,256G内存。
通过光盘启动进入安装界面。
我这里使用的是ARM版的安装镜像,第一项就是支持华为的kunpeng CPU,另外还支持Mavell、Ampere、飞腾的CPU。目前主流的ARM版服务器CPU都可以支持。
进入安装界面,浓郁的Centos味道。
配置安装界面
选择安装磁盘
选择安装计算节点还是管理节点,另外可以安装分布式存储组件。
设置root密码。
完成安装,点击重启
启动界面,前面两个是云宏的虚拟化 *** 作系统,后面两个是之前测试UOS的残余,可以忽略。
完成启动进入登陆界面。
系统信息:
可以看出这是基于Centos+KVM的解决方案。鲲鹏芯片一款兼容ARM指令集的服务器芯片鲲鹏920,其拥有性能强悍、64个物理核心等特点,而对于大部分已经支持ARM64的 *** 作系统和软件而言,鲲鹏仍然是一个架构为arm64或者aarch64的芯片。可以应用于泰山2280,泰山5280,泰山X6000等型号的服务器中,按理说所有可以支持ARMv8指令集的 *** 作系统应该都可以兼容鲲鹏芯片,例如EulerOS28,ubuntu1804,CentOS75。
经过这几年的实践,ARM服务器不太被中外市场认可,风光和前几年是不能比了,再加上美国限制令的影响,华为的鲲鹏服务器大概要休息一阵子了。
鲲鹏920是2019年发布的7纳米工艺ARM架构处理器,也是你所说的鲲鹏服务器的主力核心芯片。没看错,鲲鹏也是7纳米工艺台积电代工,所以现在鲲鹏的情况大家也就明白了吧。鲲鹏服务器和麒麟手机一样,都是在数着仓库里芯片的数量过日子。所以,就不用讨论鲲鹏芯片的性能到底是强是弱了,因为它也处于用一片少一片的窘境下。所以,你觉得鲲鹏是在扩大市场还是坚守市场,或者让出市场?
不过,也算是有一个让中国人依旧无法高兴地“好”消息吧。那就是鲲鹏920的直接对手,飞腾FT2000处理器也被美国人的限制令波及了。飞腾和华为是中国大陆获得了ARM公司ARMv8架构完全开发权的唯二的两家公司,理论上两家公司都拥有在ARMv8架构上进行任意开发的权力,而且两家公司也确实都开发出来了性能几乎相当的处理器。但很可惜,美国人的限制令把两家公司都扫到了,现在鲲鹏920黄掉了,但它的直接对手飞腾FT2000也一样黄掉了。
至此,华为的鲲鹏服务器有变成一个梦的趋势,而其直接对手,飞腾FT2000连梦都没来得及做,也成了昨日黄花。所以,现在非X86服务器市场上,中国最有希望的两个平台就都因为同一个原因出局了。
但又有一个算是可以让人高兴点的消息,就是ARM架构服务器并没有想象中那么好的市场前景,虽然高通、AMD、华为、飞腾等等中外主打ARM架构的公司在一个劲儿地扇呼,但市场并不是太买帐,AMD和高通折腾了几年,已经都认输了,砍掉了ARM服务器的研发部门。现在,华为和飞腾再被美国人废掉武功,ARM架构在服务器领域内对X86的进攻差不掉就偃旗息鼓了。
所以现在的这个鲲鹏服务器,市场前景大概就是上面说的这些了。估计,华为或许还不甘心于无法切入服务器市场,但在美国的限制令下,国内的ARM平台服务器大概也是进入了低潮,一时半会儿是缓不过劲儿来了。
1 鲲鹏CPU可以复用。2 鲲鹏CPU采用和x86不同的指令集架构,所以需要专门的编译器和库来支持。
但是,如果在 *** 作系统层面进行适配,就可以实现在鲲鹏CPU上运行x86的应用程序,从而实现复用。
3 具体实现方法可以采用虚拟化技术,在鲲鹏CPU上运行虚拟机,再在虚拟机中安装x86 *** 作系统和应用程序,这样就可以实现在鲲鹏CPU上运行x86程序。
欢迎分享,转载请注明来源:内存溢出
评论列表(0条)