百度(バイドゥ)は、大規模言語モデル(LLM)の新バージョン「ERNIE 5.5 Flash Preview」を公開しました。従来の基盤モデルに事後学習を施した初の版で、モデルの重みは11月25日までにオープンソース化される予定です。
ポイント
- 総パラメータ数は280B、実際に活性化するのは14Bのハイブリッド構成
- 最大1Mトークン(AIが文章を処理する単位)のコンテキストウィンドウに対応
- APIは百度の「千帆(Qianfan)」プラットフォームで提供中
- モデルの重みは11月25日までにオープンソース化される予定
仕様と技術的な特徴
ERNIE 5.5 Flash Previewは、総パラメータ280Bのうち実際に動かすパラメータを14Bに抑えたハイブリッド型の設計です。全体の理解力と日常的な推論の効率を両立させる狙いがあります。
最大1Mのコンテキストウィンドウを備え、大量のデータ分析や長大なコードの解析、複数文書にまたがる検索といった処理に対応します。APIはすでに百度の千帆プラットフォームで公開され、開発者や企業が呼び出して試せる状態です。
想定する用途
百度は発表で、AIエージェント(自律的に作業を進めるAI)の活用例を複数紹介しました。ゲーム開発や3Dモデリング、ナレッジワーク、動画制作といった工程で連携して動く性能が高いとしています。
エージェント同士が効率よく連携することで、専門的なコンテンツの制作工程を簡略化できるということです。
今後の予定
百度は、今回公開したモデルが事後学習段階の中間版にあたると説明しています。利用者からのフィードバックやテストデータをもとに、アルゴリズムの最適化と性能の改善を続け、正式版の公開につなげる方針です。
モデルの重みは11月25日までにオープンソース化するとしています。