Hugging Face Blog·· 2025-02-12精选AI 评分65
Hugging Face 开源 Xet 技术加速 Hub 上传下载
From Chunks to Blocks: Accelerating Uploads and Downloads on the Hub
AI 导读
Hugging Face 开源 xet-core 和 hf_xet，通过内容定义分块与块聚合技术加速 Hub 上的文件传输。该技术将分块聚合成最大 64MB 的块，显著减少网络请求和存储开销，实测上传速度提升近 2 倍。
推荐理由
通过引入块聚合机制优化上传下载速度，为处理大型模型仓库提供了可复用的工程实践。
来源：Hugging Face Blog · huggingface.co