跳到正文

语音与音频

AI 语音与音频的进展:语音合成、实时对话、音乐生成与音频理解的模型与产品。

42条精选相关主题多模态AI 视频产品更新

最新精选

第 41–42 条 · 共 42 条
3月12日周五
  1. Hugging Face62

    在 Hugging Face Transformers 中微调 Wav2Vec2 英文语音识别模型教程

    Hugging Face 发布了在 Transformers 中微调 Wav2Vec2 预训练模型用于英文语音识别的完整教程。指南以 5 小时训练数据的 Timit 数据集为例,在不接入外部语言模型的情况下结合 CTC 算法训练端到端声学模型,实现了 22.1% 的词错误率。文章涵盖了词表构建、音频特征提取、动态批填充以及将检查点推送到 Hub 的完整代码实现。

    推荐理由:教程展示了无需外接语言模型、仅靠CTC微调端到端声学模型的完整流程,提供了可直接复用的数据处理与动态批填充实现方案。

4月30日周四
  1. OpenAI75

    OpenAI 推出音乐生成模型 Jukebox 并开源代码与权重

    OpenAI 推出音乐生成神经网络 Jukebox,能够以原始音频形式生成涵盖多种流派和艺术家风格的音乐,并包含基础的人声演唱。官方同时开源了模型权重与代码,并提供了用于浏览和试听生成音频样本的工具。

    推荐理由:该模型直接以原始音频形式生成音乐与歌声,并开放了代码与权重供社区探索。