Hugging Face Blog·· 2025-08-05精选AI 评分92
OpenAI 发布 GPT OSS 开源推理模型,Hugging Face 详解部署与推理优化
Welcome GPT OSS, the new open-source model family from OpenAI!
AI 导读
OpenAI 发布 GPT OSS 开源模型系列,包含 120B 和 20B 两个 MoE 版本,采用 mxfp4 量化以支持单卡部署。Hugging Face 提供详细指南,涵盖 transformers、vLLM 和 llama.cpp 等框架的本地推理、Flash Attention 3 优化及工具调用能力。
推荐理由
OpenAI 发布开源推理模型,Hugging Face 提供从本地量化部署到云端推理的完整工程支持。
来源:Hugging Face Blog · huggingface.co