LINUX DO 最新· logan22·· 3 小时前AI 评分72
DeepSeek 开源大规模云服务推理框架 DeepInfer
DeepSeek开源了大规模云服务推理框架 DeepInfer
AI 导读
DeepSeek 正式开源大规模云服务推理框架 DeepInfer。官方基于该框架实现了 DeepSeek V4.1 Flash 的高吞吐与低延迟推理服务,披露目前单一集群服务吞吐为 155 万亿 Tokens/天,整体收入为每卡每小时 38 美元。
来源:LINUX DO 最新 · linux.do