历经24小时近百位一线专家及从业者的讨论、思考和沉淀,形成的主流方向:1. ARM+Hadoop黄金组合观点针锋相对;2.打造产业链需要时间;3.百度ARM服务器仅是局部尝试,对行业借鉴意义不强;4.纯技术讨论;5.国际现状及产业研讨。//[超火]百度商用了ARM服务器,你怎么看?
1. ARM+Hadoop黄金组合观点针锋相对
引用:黄晖在接受CSDN云计算采访的回复:ARM服务器的到来,并未给Hadoop带来多大的推进,毕竟关心的是性能而不是功耗。
@CSDN谭茂的观点,【ARM架构并未给Hadoop带来实质帮助】“Hadoop作为分布式系统,分布式的文件占70%,剩余30%是分布式计算。其计算的瓶颈和通用构架关系不大,而通常在于应用端的计算。所以,ARM服务器的到来,并未给Hadoop带来多大的推进,毕竟关心的是性能而不是功耗。”
与之针锋相对的是@狒哥:这个本来就是伪命题。一看架构就知道了,这个ARM服务器本质上相当于存储服务器,计算要求很低,所以可以用32位的ARM,做云存储,与Hadoop没啥关系。整机柜部分,百度用了些至强E5-2400的服务器,倒是与Hadoop有关。
对此,谭茂的回复是: 怎么叫伪命题呢?分布式计算的每个节点,Hadoop并不要求其性能能够与高功耗、高性能的专用处理器相媲美,相反,对单个节点的性能要求其实是非常低的,从这点上来看,ARM倒还真是挺合适的。
然后,狒哥自此评论:将来不是,但现在就是。ARM还没到64位,你用32位的CPU搞Hadoop的分布式计算?而且,这“性能要求非常低”从何说起呢?
还有无数参与者在讨论中......
@阿忠王:arm服务器技术还是太弱了,很多特性都没有,roadmap14年才会支持虚拟化,而且还是很弱的那种。现在的功能在服务器领域应该还只是尝试,暂成不了主流。
@爱吃爱玩的KK:ARM服务器在存储上的运用是必然趋势,目前X86的性能远远超过存储的需求,ARM存储服务器经受过市场考验后必然成为存储行业的主流!
2.打造产业链需要时间
@阿明1977:回复@袁大善人:没有"链条"的拉动,很难做到产业化。没有形成上下游产业链,ARM服务器何来可持续发展? //@袁大善人:明总[威武],问的有深度!@狒哥 //@阿明1977:ARM服务器起得来起不来,仅仅靠百度一下,似乎解决不了本质问题?
这个观点赢得了大部分博友的认可。
3.百度ARM服务器仅是局部尝试,对行业借鉴意义不强。
@非仙居:企业政府对于Hadoop的应用还多数会在分析决策这一方向。所以计算型的需求会偏多,对于单台节点的性能会有较高需求,而节点数倒不会很多。所以不是适合ARM处理器的应用场景。百度的ARM服务器也只是作为其冷数据的归档,场景很单一对于别的行业借鉴意义不强。
@zedware:传统企业存储里头的CPU也是多得可以跑VM的。//@jebtang: //@游峰_美地森:ARM服务器纯跑云存储确实是个好的选择,类似我们的云存储软件一般占到一台服务器的8G内存,4核CPU,使用普通CPU是很浪费;不过我们自己的解决方案是计算存储一体化的混合路线,即使用运行云存储软件之外的富裕能力运行虚拟机,这样这台服务器既是磁盘阵列,又是虚拟机,作二合一机器。
4.纯技术讨论
@蓝色冰湖:ARM的MIIPS可以达到35000(4核A15 ,2.5 GHz),Intel Xeon W3520的MIPS才8199(4.4GHz),ARM的MIPS(不过两者指令集不一样)完全不是问题,只是他的流水线和超标量性能差一些,并且以后A50/53/57出来后,性能会有更大的提升,还有,ARM芯片往往只用1%的晶体管数达到intel芯片的10%的性能。
@挨踢装逼侠:exa*几款机器就应该放到arm平台上去。//@挨踢装逼侠: 所以intel害怕了,某些场合在忽悠hadoop即是intel,intel即hadoop。
5.产业研讨
张立华:
- 戴尔去年11月份的时候已经测试了基于64位ARM处理器的服务器(详情),并且此前他们还宣称测试过基于32位ARM的服务器, 但戴尔并没有打算对外销售这些服务器,原因是基于ARM的服务器的生态系统(ecosystem)还没有完备。不管怎样,我想百度的不能真正算是第一家吧。另外PCWorld网站也提到分析家预测,第一款64位ARM服务器可能不会在2014年前上市。
- 我认为ARM和Hadoop的结合会有一定的市场潜力,原因是Hadoop上的许多应用并不是计算密集型的,就是说对处理器的计算能力特别是浮点运算的要求不是很高,这样 x86内核比ARM内核的较大计算性能优势在Hadoop应用中不一定会有太多体现,而再从成本及功耗的角度来讲,ARM比x86会有一定优势。
- 我相信AMD的基于64位ARM架构的Opteron处理器会对弥补ARM相对于x86的性能不足有所帮助,因为其基于APU的异构架构会带来额外的计算能力,这也是下一代高性能计算的趋势。
其他
@杨珉_天天的理想:我想买,哪里能有出售啊?
讨论再讨论,思考再思考。期待更多犀利观点!
以下为正文:
1月11日,CSDN与《程序员》总编刘江受邀参观了百度南京数据中心,其内部采用了ARM服务器、定制化机柜、万兆集群、自主研发SSD,并且均已实现生产环境规模化应用,并在微博上评论:“我对同行的倪光南院士说,他(百度)的核心系统自主化梦想终于有望成真了。”
图:数据中心年均PUE达到1.37(图/刘江)
另外从泄露的图片来看,2U机箱放置了6个节点,每节点4核ARM,挂接4个硬盘,节点间共享风扇和网络接入,可提升70%存储密度,整体功耗300瓦左右。另外,有爆料称:百度南京百度数据中心在系统设计时,将一个机柜内服务器作为一个节点整体设计,每个机箱仅有一根数据线连接,顶端放置交换机。电源集中在中部。整机紧凑简洁利落,大幅提升交付效率。不仅如此,百度除了定制ARM服务器之外,还在定制机柜、万兆集群、自主研发SSD等,其核心目标是:实现百度生产环境规模化应用。
图:百度南京数据中心采用了自主研发的ARM架构的服务器
这类报道在CSDN云计算频道屡见不鲜。但主角一般都是Google,Amazon,Facebook及其他一些国际上通过DIY--定制服务器的大型互联网公司及有志于降低功耗的ISV。(Facebook甚至发起的Open Compute项目)比如这几篇文章:谷歌服务器建设之谜;Facebook创建Claspin 为Cache服务器装备心电图;章文嵩:服务器定制与绿色计算等。
背景:
ARM发力服务器的声音由来已久,但真正让业内见到落地希望还是在2012年。在跳票一年后,2012年10月底,ARM推出基于64位处理器架构的产品——“Cortex-A50”系列。首批包含Cortex-A53、Cortex-A57两款型号,其中前者是ARM性能最高的应用处理器,号称可在同样的功耗水平下达到当今顶级智能手机性能的三倍;后者是世界上能效最高、面积最小的64位处理器,同等性能下能效是当今高端智能手机的三倍。二者可以分别独立使用,也能以ARM big.LITTLE的配置协同工作,兼顾高性能与低功耗。已经购买Cortex-A50系列授权的厂商包括:AMD、博通、Calxeda、海思(HiSilicon)、三星、意法半导体。ARM预计设计产品会在2014年出货。详情可查看
图:Cortex-A53架构
与此同时,AMD宣布2014年推出64位ARM架构的Opteron处理器。虽然2012年6月,AMD曾宣布会在明年的APU中引入基于ARM Cortex-A5架构的TrustZone硬件安全技术,并逐步扩展到整个产品线,但合作如此深入还是大出业内预料。AMD认为云计算是杀手级的应用,数据中心则是云服务的基石,密集型计算又是数据中心里发展最快的服务器领域,而遍布其中的小型高度并行工作负载在传统的服务器架构上并不理想,更适合交给ARM架构来处理。其表示:首批ARM处理器预计于2014年问世,仍是Opteron皓龙品牌。这种64位的多核心SoC会针对数据中心中份额最大的密集型高能效服务器进行优化,提供现代计算体验,并整合收购而来的SeaMicro Freedom超级计算光纤互联技术。
图:AMD将在2014年推出64bit ARM处理器
由于二者都将时间点定在2014年,业内默认会在此时间点前后才会有大的动作。不想,今日爆料了百度南京数据中心商用了ARM服务器。时间提前相当多,且旗号为自主研发(有媒体称其为全球第一款)。
对于RAM定制发展,业内希望出现RAM+Hadoop的黄金组合等问题,我们采访了业内服务器领域技术专家:美国多核技术有限公司开发部部门经理黄晖,并在网站和微博挂出投票,欢迎大家分享看法。
专家视点
图:美国多核技术有限公司开发部部门经理 黄晖
CSDN:您认为百度商用的ARM服务器CPU是哪一款或者系列?
黄晖:我认为是ARM9 32位芯片,支持armv7指令级。这款芯片做服务器目前有很好的软件和外围硬件支持。有网友爆料:其采用的是四核ARM Cortex A9,1.6GHz。
CSDN:是否可以被称为全球第一款ARM商用服务器?为什么?
黄晖:这个不好说。从我了解的信息看,全球有不少公司也在做定制的ARM服务器。其中Calxeda在今年也陆续推出不少ARM服务器卡。单从功耗上看,百度定制这款ARM服务器只有150W/U的功耗,而传统的x86构架的HPC至少需要400W/U,功耗上确实有不少优势。个人认为,目前商用的噱头仅在定制和功耗两个方面。
CSDN:对崇尚定制的企业而言,是否有必要等待64位ARM架构的Opteron处理器出现?
黄晖:我觉得对超大数据分析和计算的应用来说,等待是必然的。除了64位带来大容量内存访问优势,Opteron整体体现的性能优势比较明显,包括同等功耗,增强的64位指令级以及NEON SIMD引擎(VFPv3+)等。其次,64位的ARM服务器的支撑软件并未成熟。
CSDN:2013国内是否会进入服务器定制年?
黄晖:绿色的低功耗微处理服务器是个发展趋势。在此之前Intel S1200基于x86构架的微处理服务器已经出现在一些网站前端服务器上。
CSDN:哪些技术或许还是障碍?
黄晖:基于ARM服务器的软件支持。尤其是64位服务器软件,以及在服务器维护中占有重要的地方的虚拟化技术。
CSDN:对于ARM定制发展以及业内希望出现ARM+Hadoop的黄金组合,您的看法是什么?
黄晖:Hadoop作为分布式系统,分布式的文件占70%,剩余30%是分布式计算。其计算的瓶颈和通用构架关系不大,而通常在于应用端的计算。所以,个人认为,ARM服务器的到来,并未给Hadoop带来多大的推进,毕竟关心的是性能而不是功耗。