Hugging Face Blog·· 2022-10-14精选AI 评分61
Hugging Face 发布 Inference Endpoints 托管推理服务
Getting Started with Hugging Face Inference Endpoints
AI 导读
Hugging Face 发布 Inference Endpoints,允许用户通过几步操作将模型从 Hub 直接部署到 AWS 等云厂商的托管基础设施。服务支持 Public、Protected 和 Private 三种安全模式,其中 Private 模式可通过 AWS PrivateLink 实现 VPC 内网访问,并提供自动扩缩容、监控日志和 API 调用能力。
推荐理由
官方发布托管推理服务,提供从公开到私有VPC的多级安全部署选项,降低生产环境部署门槛。
来源:Hugging Face Blog · huggingface.co