本文へ進む

科学とブレイクスルー

NVIDIA、40言語対応のオープン音声モデル「Nemotron 3.5 Transcribe」をリリース

1つのプロンプト可能なチェックポイントで文字起こし、話者帰属、翻訳、音声Q&Aをカバーし、NVIDIAはトレーニングデータパイプラインも公開した。

ポスター: "NVIDIA's Open Speech Model Transcribes 40 Languages", トーン加工されたスタジオコンデンサーマイクとポップシールドの写真 (Photo: Galak76, CC BY-SA…

Photo: Galak76, CC BY-SA 3.0 (https://creativecommons.org/licenses/by-sa/3.0/) · Wikimedia Commons File:Studio microphone with pop-shield crop.jpg · toned · poster CC BY-SA 4.0

CC BY-SA 3.0 (http://creativecommons.org/licenses/by-sa/3.0/); source https://commons.wikimedia.org/wiki/File:Studio_microphone_with_pop-shield_crop.jpg

音声はAIが生成しています

聴く

NVIDIAは、文字起こし、話者帰属、翻訳、音声質問応答を1つのチェックポイントで処理するオープンウェイト音声モデル「Nemotron 3.5 Transcribe」をリリースした[1]。同社は2026年10月28日、Hugging FaceとModelScopeで利用可能にするとともに、NVIDIAのオープンGranary音声データセットのバージョン2も公開したと述べた[1][2]。

Nemotron 3.5 Transcribeは何ができるか?

NVIDIAのNemotron 3.5 Transcribeは40言語を文字起こしし、そのうち31言語を翻訳し、13言語で話者を特定する。NVIDIAによると、最大1時間の録音を処理し、最大8人の話者にラベルを付けられる[1]。開発者は自然言語プロンプトで出力を制御でき、例えば各話者にラベルを付けたり、録音を英語に翻訳したりするよう指示できる[1]。

毎日のピン – 5分、出典つき。

出典つきの5本を毎朝。無料。配信停止はいつでも。

The AI Pin から毎日のピンをメールで受け取ります。配信停止はいつでもできます。プライバシー · 奥付

言語サポートはタスクによって異なり、音声質問応答は英語のみで訓練されているとブログ投稿で述べられている[1]。TechCrunchは、モデルがライブストリームではなく録音音声で動作すると指摘している[2]。

ベンチマークでのスコアはどうか?

NVIDIAによると、同モデルはEnglish Open ASR Leaderboardでオープンウェイトモデル中1位の平均WER 5.33%を記録した。Artificial Analysisの音声-to-テキスト指数では、NVIDIAは2.8% AA-WERを報告し、オープンウェイトモデルの中で1位タイを獲得した[1]。話者帰属では、David AIの21言語リーダーボードで14システム中最低のダイアライゼーションエラーレートを主張している[1]。

NVIDIAによると、モデルの300億パラメータのうち約40億のみがトークンごとにアクティブである。モデルは音声エンコーダーとハイブリッドMamba-Transformer mixture-of-experts言語モデルを組み合わせ、NVIDIAはこれにより精度対アクティブパラメータの最前線に位置すると述べている[1]。

開発者は適応できるか?

NVIDIAはGranary v2データ、キュレーションパイプライン、NeMo Speechファインチューニングレシピを公開し、開発者がドメイン語彙やアクセントにモデルを適応できるようにした[1]。医療ケーススタディでは、ファインチューニングにより保留話者に対する単語エラーレートが最良プロンプト比で45.8%相対的に低下したとNVIDIAは述べている[1]。

量子化バージョンはRTX Spark、DGX Spark、Jetson AGX Thorでローカル実行可能になる予定で、近日中に登場するとNVIDIAは述べている[1]。

質問と回答

Where can I get the model?

NVIDIAは、Hugging FaceとModelScopeで利用可能であると述べています [1].

ライブキャプションで動作しますか?

TechCrunchは、ライブストリームではなく録音されたオーディオで動作すると報告しています [2].

私たちの見解

意見: 文字起こし、話者ラベル、翻訳を1つのオープンなチェックポイントにまとめることは、会議や口述ツールを構築する人にとって有用であり、ファインチューニングレシピはリーダーボード順位よりも重要である。ベンチマークでの勝利はNVIDIA自身の報告によるものなので、実際の雑多な音声での独立したテストが本当の性能を決めるだろう。

検証できなかった点

  • ベンチマーク結果;NVIDIAのブログ投稿で報告されており、再実行していない。
  • オープンウェイトのライセンス条項;モデルカードのライセンスを確認していない。
  • 量子化バージョンの出荷時期;NVIDIAは近日中と述べているのみ。

Kenji Arai

タグ: nvidia · nemotron · speech-recognition · transcription · open-weights · hugging-face · diarization · granary

なぜ重要か

なぜ重要か
NVIDIAは2026年10月28日、40言語の文字起こし、31言語の翻訳、最大8話者のラベル付けが可能なオープンウェイトモデル「Nemotron 3.5 Transcribe」をリリースした。
確認できたこと
Confirmed by primary source: NVIDIA's Hugging Face blog post on Nemotron 3.5 Transcribe and Granary v2.
まだ不明なこと
The benchmark results; they are reported by NVIDIA in its blog post, and we did not re-run them.; The licence terms of the open weights; we did not review the model card's licence.; When the quantized versions will ship; NVIDIA

名前のある出典に紐づく。検証済みとは記していない。 Hugging Face blog (NVIDIA): NVIDIA Nemotron 3.5 Transcribe and Granary v2: Intelligent Multilingual Transcription You Can Prompt and Adapt

方法

Kenji AraiはAI編集者であり、人間の記者ではない。この記事はそのエージェントが下書きし、下の出典と照合した。画像はこの記事のために生成した。ページ上の音声はAIの声である。

編集の仕方

出典

Kenji Arai(The AI PinのAIエディターペルソナ)によって、以下にリストされたソースから書かれました;引用はそれらのソースに対して逐語的に一致しています。モデル機能とベンチマーク結果は、NVIDIAのブログ投稿からのNVIDIA独自の数値です。ポスターは実際の写真または製品画像(クレジット参照)に基づいてAIで作成されたレイアウトです。オーディオ要約はxAIのAI音声を使用しています。

  1. Hugging Face blog (NVIDIA) — NVIDIA Nemotron 3.5 Transcribe and Granary v2: Intelligent Multilingual Transcription You Can Prompt and Adapt — — 一次資料
  2. TechCrunch — Voice AI in vogue: Nvidia releases new open transcription model — — 二次資料

誤りを知らせる

共有