发现者网
产业经济 科技业界 3C数码 文化传媒 移动智能 家电行业 AI大模型 汽车出行 热点资讯

EROFS文件系统升级,48位寻址助力AI训练突破容量限制

2025-03-24来源:ITBEAR编辑:瑞雪

在科技界的一则最新动态中,知名科技博客Phoronix于3月23日披露,随着Linux 6.15内核版本的临近,开源社区中的EROFS(增强型只读文件系统)即将迎来一次重大革新。此次升级的核心亮点在于,EROFS将引入48位寻址支持,以满足人工智能模型训练过程中对数据存储容量的迫切需求。

一直以来,EROFS受限于32位块寻址机制,其最大容量被限定在16TiB(在4KiB块大小下)。而48位寻址技术的加入,将彻底打破这一瓶颈,使得EROFS能够轻松应对AI训练中所需的大规模数据集存储挑战,同时也为对象存储客户端提供了更为广阔的存储空间。

除了容量上的大幅提升,此次EROFS的更新还涉及到了核心磁盘结构的全面扩展,包括inode、设备槽以及inode块的优化。为了支持基本的时间戳功能,新版EROFS引入了32字节紧凑inode的mtime字段,这一改进无疑将进一步提升文件系统的实用性和灵活性。

在性能优化方面,新版EROFS同样不遗余力。针对Zstd压缩算法,新版EROFS引入了字节导向的编码扩展,这一改进使得压缩器能够保持其原有的高效压缩方法,从而在提升压缩效率的同时,也确保了数据压缩质量。据测试数据显示,在启用48位寻址后,Zstd镜像的构建时间得到了显著缩短,特别是在Intel Xeon Platinum 8163 CPU上,构建时间从原先的3分52秒骤降至12秒,这一提升无疑将为AI训练等高性能应用场景带来极大的便利。

EROFS,这一由华为最初开发并随后由全球开源社区共同维护的轻量级只读文件系统,自问世以来便以其出色的存储效率和性能表现赢得了业界的广泛关注。此次重大升级,不仅进一步巩固了EROFS在只读文件系统领域的领先地位,更为AI、大数据等前沿科技领域的发展提供了强有力的支持。

随着人工智能技术的不断发展和普及,对于数据存储和处理能力的需求也将持续增长。EROFS此次的升级,无疑为这一趋势提供了强有力的技术支撑,我们有理由相信,在未来的科技发展中,EROFS将继续发挥其独特优势,为更多领域的应用场景提供高效、可靠的存储解决方案。

中国电信2025年云网路由交换设备集采结果揭晓
中国电信近日宣布,其云网路由交换设备(2025年)集中采购项目已顺利完成评审工作。此次采购项目规模庞大,涉及多个关键网络设备领域,旨在进一步优化和提升云网基础设施能力。

2025-11-13

Kernelcom“智能键盘”来袭:12.5英寸超宽屏,AMD/Intel双版本可选
快科技11月12日消息,近日一款名为Kernelcom的设备正在Kickstarter上众筹,虽然其本质上是一款功能完备的笔记本电脑,但制造商还是将其宣传为“智能键盘”。 这款设备最大的特点是其12.5英寸超…

2025-11-13

漫步者花再拍拍耳机拆解:时尚设计遇上趣味彩屏,内部配置大揭秘
耳机内部搭载了13mm大动圈单元,内置一颗麦克风拾音,采用MIC-POWER微电新能源3.85V/40mAh钢壳扣式电池供电;主板上,搭载了JL杰理科技JL6973D8的蓝牙音频SoC,WINSEMI稳先微…

2025-11-10

2025年AI智能鼠标深度体验:星火大模型赋能,它能替代哪些办公工具?
AI智能鼠标2025深度测评:星火大模型加持,AI问答、AI绘图能替代哪些工具?当一款鼠标,内嵌了如科大讯飞星火这般强大的认知大模型时,它所带来的,远不止是光标移动的流畅,更是一场关于效率与创造力的革命。我们…

2025-11-10

王江:借互联网之力 促多元文化交流 共筑网络空间文化新辉煌
王江认为,随着互联网深度融入人类生产生活,网络空间已成为全球多元文化繁荣发展的新平台、文明交流互鉴的新场域、各国人民情感共鸣的新纽带,网络文化交流发展呈现了许多新气象。要高度重视青年群体在网络文明对话和交流…

2025-11-09

即时配送系统深度剖析:万象生鲜系统如何助力企业配送效率与服务双提升
通过有效整合这些功能和应用场景,即时配送系统能够支撑企业在激烈市场中处于竞争优势。万象生鲜系统如何优化配送效率与服务体验万象生鲜系统通过集成先进的即时配送技术,大幅提升了配送效率和服务体验。 结论即时配送系…

2025-11-08

HPE深耕中国40年:以科技之力,共答可持续数字化转型的时代之卷
作为全球领先的科技企业,HPE在推动2040年全价值链净零的过程中,通过在人工智能、混合云与网络技术领域提供低碳高效的解决方案,帮助企业在数字化转型的同时加速IT的可持续发展,携手上下游生态合作伙伴以更可持续…

2025-11-07

小米通话App即将停服,王化回应称与手机通话功能无关,服务终止时间已定
王化在其个人微博发文表示,2010年12月10日发布的米聊中就嵌入了小米通话的功能,当时市面上的“网络通话”App有限,小米通话的初衷是解决米粉之间移动网络沟通的需求。 而如今大家可以通过很多常见的App实…

2025-11-07

中兴AI全光智会屏亮相移动大会,以融合创新赋能多行业数字化转型
具体而言,AI全光智会屏以中兴通讯领先的全光网技术为核心底座,具备4K无损画面、零延迟智能交互、可靠安全及统一运维四大核心优势,能够为高端智能会议应用提供极致服务体验。 从应用价值来看,AI全光智会屏以全光…

2025-11-07

中兴携手中国移动推出移动屏,融合多技术成家庭智慧生活新枢纽
此次推出的移动屏,依托中国移动爱家泛屏一体化解决方案,深度融合5G通信与AI智能技术,集超大PAD、电视、云电脑等多元功能于一身。27英寸高清触控大屏成为家庭信息交互的核心载体,打破传统设备功能边界,将通信、…

2025-11-07