5G|打破三重壁垒,华为OceanStor定义下一代HPC并行存储

HPC造福社会 , 深入影响生活的方方面面
随着信息化的飞速发展 , 人类对信息处理能力的要求越来越高 , 海量的数据需要高效的计算与存储 , 高性能计算HPC应运而生 , 并且开始在我们的社会进步中发挥着无可替代的重要作用 。
在新药研发领域 , 借助HPC可以加速药物筛选和分子分析 , 使得新药的研发周期大幅缩短;在新车研发领域 , 通过HPC实现车辆碰撞的技术仿真 , 用数据来模拟物理碰撞 , 大幅降低了研发费用和周期;在基因测序领域 , 人类第一次完整全基因组的测序花了13年的时间 , 而今在HPC的加持下 , 这个时间已经降低到1天以内;在天气预报领域 , 如今的预报准确率相比十年前有了很大的提升 , 这些进步的背后HPC技术功不可没 。
5G|打破三重壁垒,华为OceanStor定义下一代HPC并行存储
文章图片

文章图片

5G和AI时代新趋势、新挑战 , HPC存储升级正当时
随着5G、大数据和AI等技术的发展和成熟 , 数据的潜在价值进一步凸显 , 各行业的数据量都迎来了新一轮爆发式增长 。新一代基因测序设备日产出数据可达6TB , 单颗商业卫星年采集数据量高达1PB , 每辆自动驾驶训练车每天产生60TB数据 。作为HPC的数据底座 , 高性能海量存储对于高性能数据价值挖掘的作用进一步凸显 。
数据量增长的同时 , HPC也开始与大数据、AI等技术融合 , 向以HPDA(Highperformance data analytics )和HPC-based AI为代表的新计算架构演进 , 将HPC产业带入新的发展阶段 。
【5G|打破三重壁垒,华为OceanStor定义下一代HPC并行存储】新的趋势下意味着更大的机遇 , 同时也给存储带来了新的挑战:
HPDA和HPC-based AI对数据分析效率提出了更高的要求 , 数据处理过程变得多样化 , 一份数据在不同的阶段需要通过不同的协议访问 。传统方式下一套存储只提供一种协议访问能力 , 这就形成了服务壁垒 , 跨协议访问时需要多次数据拷贝 , 效率低下 。
随着CPU+GPU异构计算技术的快速发展 , 需要更大带宽、更低时延的存储以充分释放算力潜能 , 同时 , 需要适配不同的性能模型以匹配业务负载的多样化趋势 , 比如同时提供对带宽与OPS(Operations per Second)的支持 。传统存储仅擅长一类性能模型 , 高带宽与高OPS不可兼得 , 这就形成了性能壁垒 , 难以应对复杂性能模型 。
由于数据的价值不断释放 , 企业愿意去更多、更久地保存数据 , 数据量从PB向EB级跨越 , 需要存储系统支持数据全生命周期的管理 , 不断的优化TCO 。传统存储无法兼顾性能与成本 , 冷热数据需手工在不同存储间搬迁 , 这就形成了成本壁垒 。
如何打破这三重壁垒的限制 , 充分释放算力潜能 , 成为了当下HPC产业的重要课题 , 这也是HPC产业实现升级的必由之路 。
OceanStor Pacific新一代高性能并行存储 , 引领HPC产业升级
2020年9月在上海举行的华为全连接2020上 , 华为基于OceanStor Pacific系列推出了新一代高性能并行存储方案 , 通过打破三大壁垒定义下一代HPC并行存储 , 引领HPC产业升级浪潮 。
5G|打破三重壁垒,华为OceanStor定义下一代HPC并行存储
文章图片

文章图片

打破服务壁垒 , 架构升级 , 多协议无损互通
OceanStor Pacific系列全新推出了下一代并行文件系统 , 支持NFS/CIFS/HDFS/S3多种协议访问同一份文件数据 , 实现全流程0拷贝 。在自动驾驶、精准医学、智能制造等新兴的HPDA场景中 , 大幅提升数据访问效率 。
最能体现OceanStor Pacific系列创新能力的 , 是它的协议互通能力无需安装任何网关或插件 , 每种服务都能够提供完整的语义和性能 , 真正把协议互通能力做到大规模商用级别 , 这与当前业界存在诸多限制的网关式协议互通有本质差别 。


推荐阅读