第二代分布式计算联盟成立
9月16日,在北京中奥马可波罗酒店举行的“第二代分布式计算技术峰会”上,China Hadoop联合OpenPOWER基金会、新浪网等多家单位启动第二代分布式计算联盟,推动新一代计算技术和应用的发展。
在发布会现场,第二代分布式计算联盟主席、中国Hadoop专家委员会主席何建军倒计时5、4、3、2、1后,与来自OpenPOWER基金会、IBM研究院、新浪网、Xilinx、深圳恒扬科技、无锡中太等部分到场的联盟初创成员代表,共同推动启动推杆,正式启动了第二代分布式计算联盟。联盟成员将一起努力,致力于消除系统中软硬件鸿沟,打通系统任督二脉,推动“互联网+大数据”时代下的硬件加速技术和应用创新与变革。联盟的初创成员涵盖了“硬件基础架构”、“硬件设计与编程”、“分布式系统软件开发与应用”等三个层面。现场到会的联盟成员还包括阿里巴巴、京东研发中心、VMWare、星环科技、品友互动、新桥网络、红象云腾、群智合软件、联科集团、锐泰利集团等数十名代表。
图为第二代分布式计算联盟的启动仪式
“硬件基础架构”方向的代表,IBM大中华区科技战略合作总经理姜锡岫表示,“OpenPOWER基金会是全球性的开放式研发成员组织,致力于企业服务器生态系统的开放式创新,并不断引领计算技术的发展潮流。”、“支持并积极参与第二代分布式计算联盟的成立是这种努力的最新例证。”。
“硬件设计与编程”方向的代表,联科集团总裁孙纬武表示:“联科公司投入FPGA应用研发多年,有多项FPGA加速应用技术专利及产品。我们希望通过启动第二代分布式计算联盟,更多的应用开发商可以和我们一起进入高速增长的服务器应用领域,实现新的业务增长点。”
“分布式系统软件开发与应用”方向的代表,新浪研发中心总经理童剑表示,“云计算和大数据的迅猛发展对于架构和系统带来更高的需求和挑战,第二代分布式计算概念的提出,有助于我们应对这些挑战并给出有效的应对方案,也有助于解决微博、互联网、电商行业的现实需求。作为第二代分布式计算联盟的创始成员之一,新浪愿意通过与产业链上公司的紧密合作,在实现自身业务创新发展的同时,继续为中国的互联网用户带来更好的产品体验。”
中午,到场的联盟初创成员一起,愉快地展开了联盟第一次研讨。经过硬件加速专家、CAPI技术首席设计师Bruce和来自联科的硬件编程专家详细讲解后,大家统一认识到,当前技术已经足够成熟,消除系统中一直存在的软硬件鸿沟的时机已经到来。席间代表们踊跃发言,争相阐述各自对第二代分布式计算的理解及当前面临的需求和存在的问题。第一次研讨会在热烈的氛围中结束,代表们都表示,期待着下一次研讨的开始。第二代分布式计算联盟主席何建军表示,接下来将逐步整合联盟成员的硬件资源,继续组织研讨会,帮助联盟成员明确需求,加强沟通,推进多方合作,体现联盟价值。
▍背景知识:第二代分布式计算时代到来 顺应大数据时代发展需求
在互联网时代的早期,Web应用被分散运行于服务器上,并通过大量增加小型和低成本的通用服务器系统来进行扩展。第一代分布式计算技术保证了在扩展系统时无须重写代码,极大方便了应用的扩展。
然而,随着移动互联网、物联网、云计算和大数据时代的到来,数据量呈爆炸式增长,新的工作负载不断涌现,企业在数据处理方面面临巨大的挑战,迫使其不得不寻求更加先进、高效的数据处理能力和基础架构。
随着支撑单位硬件计算能力提升的摩尔定律越来越接近极限,数据中心的空间和电力供应也已经无法跟上服务器数量的疯狂增长。分布式计算在软件和硬件架构上迎来了新的变化:新一代应用迫切需要通用处理器计算和特定目的的协处理器计算(加速器,如FPGA)混合异构工作。不同类型的应用负载可以被加载在两种甚至多种类型的处理器件上,以获得超过十倍甚至百倍的性能增速,同时能够相应减少服务器的数量,降低功耗和服务器占用空间。
充分利用FPGA可编程硬件强大的硬件加速能力,实现软硬结合的异构计算,大幅提高对数据应用的处理性能。
IBM中国研究院院长沈晓卫表示,“今年是摩尔定律发现50周年,工业界都在积极探讨后摩尔定律时代,以及数据中心和云计算的未来发展方向。第二代分布式计算是对该话题的积极探索。第二代分布式计算强调的是异构计算及数据中心可重构,即下一代数据中心将大量引入加速器技术参与各种应用的计算,提高数据中心的性能功耗比及计算实时性。同时,组成数据中心的计算(包括CPU和加速器)、内存、存储、网络等重要部件可以根据应用特点来动态重构。第二代分布式计算将充满各种技术挑战,但它的成功,将会促进下一代数据中心和云计算的又一次重要发展。”
灵思公司全球销售与市场亚太区副总裁杨飞表示:“第二代分布式计算技术联盟的成立将加速新一代计算技术的发展,为云计算和大数据时代带来崭新的发展动力。当今行业发展面临三大挑战:响应动态市场变幻的灵活的服务、大数据对于巨大计算性能的需求,大数据对于高能效的需求——提升每瓦性能比。赛灵思FPGA独特的功能是能够解决上述三大挑战的唯一选择。第二代分布式计算平台的OpenPower和CAPI技术加Xilinx的FPGA将带给云计算和大数据时代带来更大创新能力。”
微信名:
HadoopSummit
微信ID:
hadoopinchina
中国Hadoop技术峰会是亚太地区举办最早、规模最大、影响力最广阔的大数据盛会。
Chinahadoop.com是China Hadoop Summit的内容网站。
HadoopSummit是Chinahadoop.com的微信发布平台。