筑牢数据存储底座,天翼云 HPFS赋能企业高效“掘金”数据
创始人
2024-08-13 13:21:14

近年来,随着各行业数智转型逐步深入以及人工智能大模型的蓬勃发展,气象分析、大模型训练、自动驾驶、石油勘探、EDA仿真、基因分析等高性能计算(HPC)场景和智算场景(AI)不仅对算力需求激增,也产生了图片、视频等大规模非结构性数据,企业在实践中面临着数据量大、存储性能不足等问题,导致训练阻塞、算力利用率低甚至训练中断现象频繁发生。在此背景下,企业需要不断创新和优化存储系统技术架构,以便实现更加高效、可靠和灵活的存储解决方案。

作为云服务国家队,天翼云坚持科技创新,不断加快推进数据存储基础设施建设,创新推出并行文件服务HPFS(CT-HPFS,High Performance File Storage),助力企业构建高性能存储底座。天翼云HPFS支持全NVMe闪存和InfiniBand高速网络,并融入RDMA技术,可提供最高千万IOPS和TBps吞吐,同时保证亚毫秒时延。该产品具有高性能、高可靠性、高可扩展性的特点,可充分满足企业在HPC和AI等场景下的存储需求。

天翼云HPFS具备共享访问、弹性扩展、安全可信、性能优越四大产品优势。在共享访问方面,HPFS支持数千台客户端挂载同一文件系统,从而实现共享访问;无缝适配主流应用程序进行数据读写,满足多客户端并行计算场景需求。在弹性扩展方面,HPFS元数据采用集群架构,单文件系统文件数量可达百亿级别,文件系统支持在线扩展。在安全方面,HPFS采用多种EC纠删码方式、热备盘备份来保证数据的可靠性,同时,支持HA,故障时自动切换,服务可用性在99.90%以上,有效保障数据安全。在性能方面,HPFS使用100G以太网或IB、RoCE网络,性能随文件系统容量增长呈线性提升,同时可保证亚毫秒时延。

天翼云HPFS在高性能并行文件存储方向持续突破,面向HPC/AI场景大规模非结构化数据及性能深度优化,保障用户数据安全、实现高效存储。

在HPC场景,天翼云HPFS支持并行计算MPI-I/O(Message Passing Interface)接口,在多客户端同一时间并发读写同一个文件时,通过字节粒度锁机制,保证文件一致性,大幅提高多客户端读写同一文件的性能。

在AI应用领域,天翼云HPFS支持万亿参数大模型,助力客户构建高速大模型训练平台,根据不同AI业务流程特点,灵活调用存储服务能力,满足数据预处理、训练、仿真等数据存储能力的要求,并大幅提升训练数据读取和checkpoint回写速度,降低企业AI训练成本投入,加速模型迭代。

未来,天翼云将继续加大数据存储产品技术创新,以扎实的数据存储能力,为客户打造高性能存储底座,持续推动技术创新与产业协同发展,为构建安全、高效的数据基础设施贡献力量。

⚠️
本网站信息内容及素材来源于网络采集或用户发布,如涉及侵权,请及时联系我们,发送链接至2697952338@QQ.COM,我们将第一时间进行核实与删除处理。

相关内容

热门资讯

最新!顶点订购app亏钱了怎么... 白银现货平台骗局大起底:高收益背后的财富陷阱与维权实战”在抖音、今日头条等平台打广告的顶点订购app...
最新!珍牛订购APP亏钱了怎么... 白银现货平台骗局大起底:高收益背后的财富陷阱与维权实战”在抖音、今日头条等平台打广告的顶点订购app...
国融证券兜兜满靠谱吗?虚假宣传... 国融证券兜兜满靠谱吗?虚假宣传欺骗股民,被骗交费已退国融证券不靠谱,推荐费股票不可信,交的服务费是可...
国融证券财富中心靠谱吗?退款... 国融证券财富中心靠谱吗?退款指南来了,交巨额服务费升级服务亏损这样做能退款!国融证券不靠谱,推荐费股...
国融证券投顾靠谱不?不靠谱!... 国融证券投顾靠谱不?不靠谱!答案是可以退的!荐股套路已曝光,已退款!国融证券不靠谱,推荐费股票不可信...
国融证券兜兜满靠谱吗?真实经历... 国融证券兜兜满靠谱吗?真实经历曝光!收费实为陷阱!投资者真实经历讲述国融证券不靠谱,推荐费股票不可信...
国融证券交服务费能退吗?交了2... 国融证券交服务费能退吗?交了29800稳赚吗,诱导交服务费股票亏损严重赶紧看过来!国融证券不靠谱,推...
国融证券交服务费能退吗?根本... 国融证券交服务费能退吗?根本没实力,高额服务费换来几乎都是垃圾票国融证券不靠谱,推荐费股票不可信,交...
国融证券是正规平台吗?虚假宣传... 国融证券是正规平台吗?虚假宣传欺骗股民,退款背后隐藏的真相公开!国融证券不靠谱,推荐费股票不可信,交...
国融证券是正规平台吗?合规退投... 国融证券是正规平台吗?合规退投顾服务费,怎么申请退款流程公布!国融证券不靠谱,推荐费股票不可信,交的...