在高性能计算的实际应用中,计算、存储、网络、软件等不同领域的“短板”一直在影响着整体系统的计算能力,如何将各个领域的性能相协调并推动创新,是推动高性能计算快速发展和广泛应用的关键。
有机整合的方案包支持更均衡的HPC系统
英特尔也正在通过计算、网络、存储部件的创新和产品的更新,包括Xeon、Xeon Phi、Omni-Path高速互联网络、存储、SSD等技术紧密地整合在一起,并通过推动OpenHPC开源软件项目形成整体的解决方案组合,这就是英特尔SSF可扩展系统框架。它也是一种高级架构和互联技术,用于支持可扩展性更强、更灵活和更均衡的HPC系统。
去年年底,英特尔推出了Omni-Path架构作为SSF的核心组件。这是一项专为优化高性能计算的全新互联技术,它可以帮助更广泛的用户享受到HPC集群的性能优势。目前已超过100家OEM合作伙伴与英特尔合作去构建自己的Omni-Path平台,而随着相当数量的合作伙伴在Omni-Path架构下做系统优化和系统测试,Omni-Path也将正式投入商用。
现在回过头来看看英特尔HPC的布局:既有核心Xeon CPU,也有众核KNL,网络还有Omni-Path,存储有杀手级的颠覆性存储技术3D XPoint,文件系统IEEL(Intel Enterprise Edition for Lustre)。除此之外,英特尔还提供最新版本软件工具Parallel Studio XE 2016以支撑代码现代化。
用英特尔高性能计算事业部市场营销总监Hugo Saleh的话说,英特尔在HPC方面的战略,首先就是要保持各个重要的计算部件,存储部件和网络部件的领先性。比如Xeon、Xeon Phi和Omni-Path高速互联架构的网络、3D XPoint存储技术、并行文件系统等多项技术;其次,通过可扩展系统框架把这些部件有机地整合在一起形成完整的解决方案,提供给用户更多价值。另外,在软件生态系统方面,英特尔会广泛联合合作伙伴,包括教育科研机构,商业合作伙伴、ISV一起把软件代码做到现代化,并应用在最新的系统平台架构上。它不仅可以更好地利用CPU性能,也可以最大化地发挥计算、存储、网络各个部件的整个系统的性能。

因此,现在再来看SSF这个整合解决方案包,可谓好处尽显:一,它可以适应从小集群到超大TOP 500的超级计算机。二,这套框架可以适应计算密集型和数据密集型,包括HPC、大数据、机器学习的场景。第三,英特尔的统一架构只有单一的编程模型和编程语言。第四,能够实现本地快速部署,实现为满足客户需求的或者基于云的解决方案。也因此有越来越多的硬件厂商包括ISV商业软件厂商都加入了SSF阵营,目前全球已经有50家的合作伙伴。
在国内,英特尔又一次与老伙伴并行科技携手推出Knights Landing“Developer Access Program”(DAP项目),它是基于最新一代Knights Landing处理器的为开发者所构建的平台,既有塔式工作站形态,也有机架式服务器。

基于KNL开发者平台,并行科技和英特尔正在进行的两个重要项目,一是CMP(代码现代化),另一个则是PAC并行应用挑战赛。 在CMP方面,并行科技在全国范围培训的一线工程师、老师、学生现在已经超过500多人。 并行科技和英特尔合作的“并行应用挑战赛”,今年已是第四届。并行科技首席总经理陈健在采访中谈到,相对过去使用的平台只有Xeon 处理器和Xeon Phi协处理器。今年将是一个自启动的CPU形态的处理器完整的芯片而不再是以协处理器的形式出现,这对国内做HPC的用户来说是个福音。

陈健希望基于这样的硬件平台,通过PAC全国性的比赛,使其作为一个教育项目真正推动中国HPC的快速发展,让国内的HPC用户在最短的时间接触到全世界最领先的KNL的产品和技术。统一标准化的软件推动HPC部署作为可扩展系统框架中另外一个核心内容就是软件。要想确保HPC能够更好地被用户使用,就需要标准化的软件堆栈。在去年的SC大会上,英特尔发起了以社区为导向的HPC构建模块——OpenHPC。英特尔希望通过统一标准化的软件来推动更易于部署、更易管理、更稳定的HPC系统。英特尔作为OpenHPC发起者正在与业界伙伴联合推进高性能计算软件的完整解决方案和软件堆栈。把软件做得更易用、更模块化,解决过去零散、不易用的问题,同时希望以开源的方式提供给更多的用户,正是OpenHPC的宗旨。据Hugo Saleh透露,预计在2016年下半年,英特尔会推出其完整的软件方案。
而作为英特尔在高性能计算方面的中国伙伴,并行科技所做的事情,正是解决了软件和硬件之间的配合问题。这也是双方正同开启“代码现代化”项目的动因之一。并行科技做的大量工作就是帮助软件开发商,更好地把应用在英特尔这样的领先性硬件平台上跑起来。 用陈健的话说,国内除了传统、狭义的HPC,现在广义的HPC已经有很大的市场。它的教育、普及,正是大家共同努力的结果。并行科技作为软件的供应商或者作为生态环境中的一环,在其中确实也起到了推动作用。 如今,HPC为越来越多的行业带来颠覆性的变化,比如精准医疗、人工智能等新兴领域对HPC的诉求。英特尔正在通过持续创新和做大HPC生态圈,不断扩展HPC功能并降低应用门槛,推动HPC的广泛和快速普及。
文章来源: 搜狐