Hugging Face Blog·· 2022-12-14AI 评分31
Habana Gaudi2 在模型训练与推理中比 Nvidia A100 快约两倍
Faster Training and Inference: Habana Gaudi®2 vs Nvidia A100 80GB
AI 导读
Habana Gaudi2 在模型训练和推理速度上约为 Nvidia A100 80GB 的两倍。在 BERT 预训练中,Gaudi2 相比初代 Gaudi 提速 3.04 倍,相比 A100 提速 1.89 倍。在 Stable Diffusion 推理中,Gaudi2 延迟比 A100 低 2.84 倍,且支持更大批量处理。
来源:Hugging Face Blog · huggingface.co