テンセント混元、770Bパラメータと100万コンテキストのHy4 previewを公開

テンセント混元は、Hy4 previewと呼ぶオープン大規模言語モデルを公開した。発表情報によると、総パラメータ数は770B、推論時にアクティブになるパラメータは4.9B、コンテキスト長は100万に達する。混元は、コード、オフィス業務、科学分野などの生産性タスクで、オープンモデルの上位グループに入る性能を主張している。

主なポイント

• 総容量とアクティブ規模を分離：総パラメータ770Bに対して、アクティブパラメータは4.9Bとされる。モデル全体の容量を大きく保ちながら、1回の推論で扱う計算量を抑える設計が意図されていると考えられる。ただし、この数値だけでは実際の速度や運用コストまでは判断できない。
• 100万のコンテキスト長：長いコード、文書、継続的な作業履歴を扱うための基盤となる。もっとも、長い入力を使いこなせるかどうかは、推論基盤、情報の選択方法、関連情報を保持する能力にも左右される。
• 複数の公開・提供経路：Hy4 previewはHugging Face、GitHub、ModelScope、Gitcodeで公開された。また、Tencent Cloud TokenHubとOpenRouterにも提供されており、開発者は環境に応じて直接検証やAPI利用を選択できる。
• Agentとしての利用を重視：今回の特徴は、パラメータ数やコンテキストだけではない。ゲームエンジンやMCP関連のツールとの連携例を示し、文章を生成するだけでなく、既存の環境内でツールを呼び出し、作業を進めるモデル像を打ち出している。

意義と注意点

Hy4 previewは、長文脈、オープンな配布、Agent向けの実装という複数の方向を一つのリリースにまとめた点に意味がある。ゲームエンジンやMCPに対応するツールチェーンへ接続できれば、モデルを単独のチャット画面ではなく、すでに構造化された操作やデータを持つアプリケーションの内部に組み込みやすくなる。

一方、現時点で確認できる情報は発表概要が中心である。「オープンモデルの上位グループ」という評価を、概要だけから独立して検証することはできない。評価方法、ライセンス、必要なハードウェア、提供形態ごとの費用、ローカル利用とAPI利用の差なども、今後確認が必要だ。導入時には、パラメータ数やコンテキスト長だけでなく、自社のタスクで性能と運用性を試すべきだろう。

今回の発表が示すのは、大規模モデルの競争軸がパラメータ数だけではなくなっていることだ。公開エコシステム、長文脈の信頼性、ツール利用、Agentとしての実装力が、モデルの価値を左右する要素になっている。

出典：OSChina