Hugging Face Blog·· 2025-03-18精选AI 评分73
Hugging Face Hub 正式集成 Xet 存储系统
Xet is on the Hub
AI 导读
Hugging Face 宣布将首个模型和数据集仓库从 LFS 迁移至 Xet 存储,标志着 Xet 正式在 Hub 上线。Xet 采用内容定义分块技术实现字节级去重,显著提升了大文件传输效率,例如内部数据库上传时间从 13 分钟缩短至十分之一秒。用户可通过加入等待列表启用新存储,未来 huggingface_hub 将自动集成 hf_xet 包以支持无缝升级。
推荐理由
官方详述了从 LFS 迁移至 Xet 存储的工程实践与性能优化,为开发者提供了理解底层架构演进及获取新存储权益的参考。
来源:Hugging Face Blog · huggingface.co