| 分类: 科技 |
7月8日,2021世界人工智能大会在上海举行。笔者在现场看到,人工智能(AI)领域应用、平台、计算框架、处理器等产业链企业,以及大量互联网企业纷纷亮相。这里陆续举办的数十个分论坛,汇聚世界AI发展的最新成果和观点。
就在8日下午,华为携手上海交通大学发布了“数据密集型超算示范中心”。我很好奇,在大家都在大谈AI、大谈计算的时候,华为为何要联合上海交通大学发布“数据密集型”超算中心?该超算中心使用了什么存储方案,给产业提供了哪些价值?笔者有幸在现场得到答案。
顺应趋势,打造超密集型超算示范中心
AI包含了算力、数据和算法。高性能计算可以提供大量算力,可谓“国之重器”,它在人类的科技发展中发挥着无可替代的重要作用,成为社会进步的重要驱动力,得到世界各国战略级重视。在我国“十四五”和“新基建”的驱动下,中国各省市持续战略投入,超算进入爆发期。
但是我们也发现超算产业的两大变化。一方面,从业务发展趋势看,超算已从科研走向商业,从实验走向生产;超算的应用走向更多的AI与大数据结合的应用,以数据价值赋能千行百业。
另一方面,从技术发展趋势看,随着大数据、AI等新的数据分析工具广泛应用,数据分析手段更为丰富,HPC与大数据/AI等的结合也越来越紧密,以进一步挖掘数据潜在价值。同时,传统HPC业务由于本身技术进步,产生和积累的数据越来越多,PB级数据量成为常态。
正是在这两方面因素的推动下,数据变得更加重要,我们看到超算正在由算力服务传统时代逐步迈入数据价值新时代,数据密集型超算中心成为未来演进方向。
所以华为与上海交大联手,顺应趋势,打造数据密集型超算中心。谈及新示范中心的价值,上海交通大学党委常委、副校长奚立峰表示,该示范中心具有两方面积极意义:一方面,是国内高校建设的第一个ARM超算;另一方面,在国内高校中第一次践行“数据密集型超算”的建设理念。
在该超算中心建设过程中,双方重点解决了四个难点问题。上海交通大学网络信息中心副主任林新华介绍,这四个问题分别是:应用部署“能不能”、结果验证“对不对”、软件运行“快不快”、用户操作“易不易”。
据悉,双方已经在超算中心中成功部署十余种科学计算软件,完成了典型应用结果的正确性验证。
华为显威:破解超算升级带给的三大挑战
如上所述,数据密集型超算成为未来趋势方向。然而,超密集超算也为存储带来了三大挑战。
首先,企业对数据价值有了更深刻的认识。企业愿意去更多、更久地保存数据,数据量从PB向EB级跨越,需要更高扩展性和更低TCO的存储系统。
其次,算力多样化(除了x86架构,还有ARM等)带来更复杂负载,需要一套存储能够支持不同类型负载。因为,多样性算力和负载的统一调度器,支持大规模高效率跨领域资源协同,并可做到无代码侵入的AI和大数据应用生态整合,公有云和跨DC资源协同。
最后,数字企业对数据需求的提升,要求数据能够在各设备之间流动,对数据进行高性能分析。反观高性能分析要求数据高效流转,需要实现多种协议共享一份数据,免数据迁移。
此外,随着人工智能技术发展,超算技术演进呈现应用容器化、算力异构化、网络融合化、数据密集化、运营自动化与架构集群化六大演进趋势。
为应对挑战并顺应趋势,华为拿出拳头方案——面向数据密集型超算场景的OceanStor Pacific存储,支持上海交大数据密集型超算中心建设。
在会上,华为数据存储与机器视觉产品线总裁周跃峰介绍,华为OceanStor Pacific存储具备三大优势,可助产业加速向数据密集型超算升级。
第一,创新的超高密设计,在5U的高度里最高支持120块硬盘,裸容量达1.6PB;第二,创新的面向混合负载设计,能同时支持大带宽和高OPS业务;第三,创新的多协议互通,多个业务只需一份数据,极大地提升数据分析效率。
我们看到,该存储解决方案以非凡存储之力,释放数据潜力,保证数据全生命周期价值顺利变现。而且,该超算中心创新性地采用统一的数据存储底座,实现对算力异构化的支撑,为用户带来无感、便捷的使用体验。
持续合作:未来将发布更多创新成果
本次华为之所以能与上海交通大学联合顺利推出数据密集型超算示范中心,离不开两者之前良好的合作基础。
早在2012年,上海交通大学就与华为就建立了长期合作关系,在信息技术、通信、新材料、工程技术等领域,开展了科研、人才培养和网络建设等合作。2019年,双方又签署了战略合作。今年4月,上海交通大学与华为联合成立了高性能计算存储技术联合创新中心。
据悉,在此次合作后,双方后续还将持续定期发布创新成果,在解决数据管理痛点、行业应用端到端IO优化与中国超算存储产业标准制定等方面共同探索,加快构建数据密集型超算发展新能力,打造全球一流的数据密集型超算示范中心,点燃超算发展新引擎。
笔者相信,该超算示范中心将发挥自身的示范效应,支持更多的产学研合作探索数据密集型超算,树立了榜样,从产业、技术和应用等维度,吸引业界全面构筑数据密集型超算解决方案,持续推动HPC超算产业升级和可持续发展。

加载中…