disrouter.aiAI 情报台

disrouter.aiAI 情报台

图片:The Decoder

模型发布重要The Decoder

Nvidia 开放 Nemotron 3.5 Transcribe 语音模型

以文本指令统一完成多语转写、英译互译、说话人识别与录音问答。

为什么重要

单GPU运行与开放权重降低了多语音频理解和专业领域适配门槛。

阅读原文the-decoder.com

AI 解读(根据原文生成)

Nvidia 发布开放语音模型 Nemotron 3.5 Transcribe,以文本指令统一完成转写、英译互译、说话人识别及录音内容问答,并支持术语提示。模型共有300亿参数、每步约激活40亿参数,可在单张 Nvidia GPU 上运行。同期发布含844,000小时音频的 Granary v2 和专业领域适配工具。原文称模型开放,但未提供权重或代码地址。

要点(AI 据原文整理,数字均已与原文核对)

  • 模型有30 billion parameters,但每个处理步骤仅约4 billion处于激活状态,可在单张Nvidia GPU上运行。
  • 模型可转写40种语言,将其中31种与英语互译,并在13种语言中识别说话人。
  • 在NVFP4精度下,RTX PRO 6000 Blackwell Server Edition处理100 hours of audio用时不到three minutes。
  • 模型在Hugging Face英文Open ASR Leaderboard上的平均词错误率为5.33 percent;VoiceArena测试14个系统时,其漏词率为8.32 percent,中位数约为31 percent。
  • Granary v2包含844,000 hours of audio。

全部来源(1)