Hugging Face·· 2022-12-14AI 评分46
训练与推理性能对比:Habana Gaudi2 vs Nvidia A100 80GB
Faster Training and Inference: Habana Gaudi®2 vs Nvidia A100 80GB
AI 导读
Habana Gaudi2 在模型训练与推理性能上约为 Nvidia A100 80GB 的两倍。在 BERT 预训练中,Gaudi2 吞吐量最高达 1835.8 samples/s(A100 为 1082.6 samples/s);Stable Diffusion 推理延迟达 0.925 秒/图,比 A100 快 2.84 倍。
来源:Hugging Face · huggingface.co