跳到正文
原文
Hugging Face·· 2024-08-12AI 评分56

Falcon Mamba 发布:首个无 Attention 机制的 7B 模型

Welcome Falcon Mamba: The first strong attention-free 7B model

AI 导读

Hugging Face 宣布推出 Falcon Mamba,称其为首个性能强劲且不依赖 Attention 机制的 7B 参数规模模型。当前材料仅有标题信息,具体架构与评测细节未在正文中展开。

来源:Hugging Face · huggingface.co