在广东珠海举行的全国高性能计算学术年会(ccf hpc china 2021)上,中国科学技术大学与华为联合发布了基于open mpi的在网计算联合创新成果。
基于open mpi的在网计算联创成果发布现场
open mpi是当前高性能计算领域广泛使用的一个消息传递接口(mpi: message passing interface)库项目,用于高性能计算集群中服务器间通信,被广泛应用于天气预报、加密技术、流体力学、天体物理学、粒子动力学(交互作用计算)、模式匹配(dna比较、图像处理)等各领域的计算任务,在业界具有广泛的使用基础。
传统的超算集群,网络仅用于计算节点之间互联,整个计算过程以计算节点为中心。当多个计算节点一起参与通信时,会有通信步骤多,通信效率低等问题。在网计算技术是当前高性能计算(hpc)和人工智能等领域的前沿课题之一,将部分计算卸载到网络中,实现计算时延与服务器数目无关,可以有效地降低时延,提高通信效率,从而缩短计算任务的完成时间。
中国科学技术大学与华为联合开展基于open mpi的在网计算项目合作,联合研究针对高性能计算场景的应用加速技术,中国科学技术大学完成基于open mpi的方案设计和开发,华为在网络设备端完成在网计算方案的设计和研发,联合研究成果基于open mpi良好的应用生态,为高性能计算领域带来了一个针对时延敏感型计算任务性能提升的服务器端与网络端协同的方案,可有效提升计算业务性能。
本次联合研究成果在中国科学技术大学超级计算中心的高性能计算集群中使用,经过验证,运行osu mpi benchmark性能提高了30%。
中国科学技术大学是以前沿科学和高新技术为主的重点大学,华为是全球领先的信息与通信基础设施以及智能终端提供商,也是技术创新头部企业,双方的合作将对超算产业的发展发挥重要意义。双方领导肯定了这一突破性的合作成果,并将成果开源到社区,希望在先进的技术和开放的生态下,共同为企业和用户提供更加丰富的产品,实现产业合作共赢。
在此次hpc行业盛会的华为论坛上,华为数据中心网络解决方案总监张磊表示,当前云数据中心正在向算力中心迈进,业务驱动网络技术融合。”单位能效算力””算力的确定性供给”成为算力网络核心指标。华为超融合数据中心网络cloudfabric 3.0攻克了传统以太网易丢包难题,通过智能无损、在网计算等技术创新,基于全无损以太架构可打破传统通用计算、存储和高性能计算三套网络架构的限制,最大化实现数据的无障碍流动,有效提升算力能效比,并实现整网全生命周期自动化和智能运维。经权威第三方机构tolly专业测评,华为超融合数据中心网络相比ib网络,性能最高可提升17%。
中国科学技术大学计算机学院教授、超级计算中心主任李京认为,高性能计算网络目前的痛点是如何兼得低延迟和高带宽以及如何针对目标场景(高性能计算、存储网络、异构计算/ai网络)的特点进行网络优化。目前中国科学技术大学以vasp和openfoam的典型算例为研究对象,针对流量特征,优化了开源的open mpi软件。下一步中国科学技术大学将结合应用流量特征进一步对拥塞控制进行优化以及针对高性能计算网络的建设进一步研究,比如异构计算网络及针对多校区异地高性能组网的实现等。
原文标题:中国科学技术大学与华为联合发布基于open mpi的在网计算联创成果
文章出处:【微信公众号:华为数据通信】欢迎添加关注!文章转载请注明出处。
国辰智企MES管理系统助力企业实现一体化管理与高效生产
单片机芯片74HC595的引脚图详解
教你如何根据配电变压器响声判断故障
CATV中dBm,dBmV和dBµV的转换
最干净的国产安卓7.0系统,体验还不错
华为针对流量特征优化开源的Open MPI软件
东风悦达起亚召回部分KX3纯电动汽车
数模混合信号链和时钟芯片设计公司核芯互联完成数亿元B轮融资
海信在日打破电视市场中“海外品牌卖不出去”的魔咒,击败松下等品牌
有超载和短路保护的可调稳压电源,Adjustable power supply
区块链服务存在的法律问题探讨
可肿瘤诊断与治疗的微纳机器人
京东方尴尬了!华为下单三星Dynamic AMOLED 显示屏
NLA的简单介绍以及基本工作原理
数据量的增大导致主流3D NAND闪存已经不够用
无刷锂电池割草机方案设计——24V电压锂电池割草机的优缺点
中兴通讯南京滨江5G智能制造基地打造“5G+智能制造”示范工厂
如何预防PCB上的污染?
AI与5G赋能机器人更具智能化
智能传感技术是实现智能制造的关键