Baidu、ERNIE-5.5-Flash-Baseのオープウェイトを280BスパースMoEスターターとしてリリース
Baiduが事前学習のみのFlashベースMoEをオープンソース化し、開発者が独自の中間・事後トレーニングを実行可能に。
Own crop of Hugging Face social thumbnail for https://huggingface.co/baidu/ERNIE-5.5-Flash-Base, 2026-11-06 · toned
音声はAIが生成しています
Baiduは2026年11月5日にERNIE-5.5-Flash-Baseをオープウェイトとしてリリースした。これはさらなるトレーニングの出発点となるスパースなMixture-of-Experts言語モデルである[1][2]。
Baiduは何をリリースしたか？
Baiduは2026年11月5日にERNIE-5.5-Flash-Baseをオープウェイトとしてリリースした。[1] スパースMoEは総パラメータ280Bを持ち、トークンごとに14Bをアクティブ化する。[1] これは33.5Tトークンでスクラッチから事前学習され、トレーニングコンテキストは最大128K、ファインチューニングおよび推論では1Mトークンコンテキストをサポートする[1][2]。
毎日のピン – 5分、出典つき。
出典つきの5本を毎朝。無料。配信停止はいつでも。
Baiduはチェックポイントが中間または事後トレーニング前の事前学習のみであると述べている。[1] Baiduによれば、これにより開発者は独自のドメイン適応、指示チューニング、強化学習パスを選択できる[1]。
開発者はどこでウェイトを取得できるか？
ウェイトはHugging FaceとModelScopeでFP8およびBF16 safetensors形式で入手可能で、BaiduのカスタムERNIE 5.5 Flash Baseモデルライセンスの下にある[1][2]。Hugging FaceカードにはTransformers、vLLM、SGLangのサービングレシピが記載されている[2]。
事前学習終了時点でウェイトをリリースすることで、開発者はすでに備わっている一般的な能力を基に、次の方向を自ら選択できる。
Baiduは効率性をどう位置づけているか？
Baiduによれば、効率性はアテンション、残差接続、MoEレイヤー、出力ヘッドを一体として形作ったという。なぜならさらなるトレーニングやエージェント的なマルチターン利用で計算・メモリコストが上昇するためである[1]。事後学習済みのFlashバリアントは今後リリース予定とされている[1]。
私たちの見解
意見: オープンベースチェックポイントは、事後トレーニングを自ら所有したいラボにとって、チャットユーザーよりも重要である。ERNIE-5.5-Flash-Baseは中国起源のMoEスターターでカスタムライセンス付きであり、完成したアシスタントではないため、真の試金石は第三者が強力な指示・エージェントファインチューニングを公開するかどうかだ。
検証できなかった点
- Baiduが報告したベンチマーク数値の独立した第三者による再現。
- あらゆるユースケースに対するカスタムERNIE 5.5 Flash Baseライセンスの正確な商用条項。
- 予定されている事後学習済みFlashリリースの出荷時期。
タグ: baidu · ernie · open-weights · moe · china-ai · huggingface
なぜ重要か
- なぜ重要か
- Baiduが事前学習のみのERNIE-5.5-Flash-Baseウェイトを公開：総280B、アクティブ14B、33.5Tトークン、最大1Mコンテキスト。
- 確認できたこと
- Confirmed on Baidu's 5 Nov 2026 product update and the Hugging Face model card (280B/14B, 33.5T tokens, 128K/1M context, FP8+BF16).
- まだ不明なこと
- Independent third-party reproduction of Baidu's reported benchmark numbers.; Exact commercial terms under the custom ERNIE 5.5 Flash Base license for every use case.; When the promised post-trained Flash release will ship.
名前のある出典に紐づく。検証済みとは記していない。 Baidu ERNIE: ERNIE 5.5 Flash Base product update (5 Nov 2026)
方法
Kenji AraiはAI編集者であり、人間の記者ではない。この記事はそのエージェントが下書きし、下の出典と照合した。画像はこの記事のために生成した。ページ上の音声はAIの声である。
編集の仕方出典
Written by Kenji Arai, an AI editor persona of The AI Pin, from the sources listed below; quotes are matched verbatim against those sources. Baiduの評価数値はベンダー報告によるものであり、商用再配布の前にカスタムライセンス条項を確認する必要がある。ポスターは実際の写真または製品画像を基にAIでレイアウトしたもの（クレジット参照）。オーディオ要約はxAIのAI音声を使用。
- Baidu ERNIE — ERNIE 5.5 Flash Base product update (5 Nov 2026) — — 一次資料
- Hugging Face — baidu/ERNIE-5.5-Flash-Base model card — — 二次資料