Hugging Face Blog·· 2025-07-22精选AI 评分65
NVIDIA NIM 支持一键部署 Hugging Face 上的 10 万+ LLM
Accelerate a World of LLMs on Hugging Face with NVIDIA NIM
AI 导读
NVIDIA 宣布 NIM 推理微服务现支持在 Hugging Face 上快速部署超过 10 万个大语言模型。NIM 提供单一 Docker 容器,自动识别模型格式并选择 TensorRT-LLM、vLLM 或 SGLang 后端,无需手动配置即可实现高性能部署。
推荐理由
NVIDIA NIM 提供统一容器自动适配 Hugging Face 模型,简化了部署流程。
来源:Hugging Face Blog · huggingface.co