跳到正文
原文
LINUX DO 最新· logan22·· 3 小时前AI 评分72

DeepSeek 开源大规模云服务推理框架 DeepInfer

DeepSeek开源了大规模云服务推理框架 DeepInfer

AI 导读

DeepSeek 正式开源大规模云服务推理框架 DeepInfer。官方基于该框架实现了 DeepSeek V4.1 Flash 的高吞吐与低延迟推理服务,披露目前单一集群服务吞吐为 155 万亿 Tokens/天,整体收入为每卡每小时 38 美元。

来源:LINUX DO 最新 · linux.do