- 亿玖动态
- 行业资讯
华为与中国移动发布AI存储解决方案,哈尔滨智算集群实现150PB存储!
发布时间:2024-09-26
在2024年的华为全联接大会上,华为与中国移动联合宣布了一项具有划时代意义的技术成就——推出了超大规模集群AI存储解决方案。这项技术突破预示着人工智能在大规模模型训练领域的重大进步,为处理庞大的非结构化数据提供了坚实的支持。
大模型技术的崛起
近年来,大模型技术迅速发展,模型的参数规模不断增长,已经达到了万亿甚至十万亿的级别。这种增长对计算和存储能力提出了前所未有的要求,传统的存储系统已难以满足需求。中国移动集团的首席专家张昊强调,随着大模型规模的扩大,尤其是在处理海量非结构化数据时,传统存储系统面临着性能、多协议处理和数据管理效率等多方面的挑战。
华为OceanStor AI存储平台的创新
为了应对这些挑战,华为推出了基于OceanStor AI存储平台的多协议融合存储系统,并在中国移动哈尔滨的超大规模智算集群中实现了首次大规模部署,存储集群的容量达到了150PB。这一创新的存储系统采用了高性能融合存储架构,包括并行客户端、高密度全闪介质、冷热数据自动分级和GSE全调度以太网,显著提高了大模型训练的效率。
智算中心的建设
中国移动智算中心(哈尔滨)已于8月30日完成建设并投入使用,这是国内运营商最大的单集群智算中心。它以其巨大的单集群算力和国产化网络设备组网规模而闻名,将所有AI加速卡整合成一个集群,以支持训练具有千万亿级参数的大模型。
技术与理念的融合
华为与中国移动的合作不仅仅是技术上的联合,更是理念上的融合。通过这次发布的超大规模AI存储方案,双方希望构建一个多元化的基础设施,以支持AI技术的未来发展趋势。随着AI技术在各个行业的深入应用,存储需求也在快速增长。传统的IT架构已经难以满足日益复杂的计算请求,这是由大数据和人工智能技术驱动的一场革命性变革。
技术进步带来的思考
随着数据存储技术的快速发展,大规模AI存储所带来的安全风险和数据隐私保护问题也日益凸显。在AI技术应用的背景下,如何平衡创新与伦理,确保数据的安全性和隐私,是未来面临的重要挑战。超大规模AI存储的落地应用将极大地推动AI领域的创新和生产力。无论是在科研、医疗、金融还是制造业,AI技术的普及将打破传统界限,创造更智能的新模式。