記事一覧へ戻る
AIエージェント

Occamy-1.0、35B級モデルで協働エージェントのコスト効率を追求

読了目安 3 分

導入

実務で使われるエージェントに必要なのは、難しい質問へ一度で答える能力だけではありません。情報を探し、ツールを呼び出し、コードを書き、ファイルを編集し、途中の状態を維持しながら、エラーが起きた場合には作業を復旧して最後まで進める必要があります。モデルの呼び出しが積み重なるほど、遅延と費用も増えるため、実用性は最高性能だけでなく、一連の処理をどれだけ安定かつ効率的に完了できるかで決まります。

arXivで発表されたOccamy-1.0は、この課題を主眼に置く35B級モデルです。後学習済みQwen3.6-35B-A3Bチェックポイントをさらに訓練し、単発の推論能力を拡大するよりも、ツールを介した長い業務フローの実行能力を高める方向に設計されています。

主なポイント

  • 最終回答だけでなく実行過程を学習。 研究チームは、実行に根ざしたデータと環境を構築し、複数のハーネスで再生可能な長期軌跡を収集しました。これにより、ツールとのやり取り、作業の進行、失敗後の復旧なども学習対象になります。
  • 段階的な後学習を採用。 論文によれば、状態追跡、協調、復旧、タスクのフォローアップといった相互補完的な能力を段階的に育成し、統合しています。日常業務では重要ですが、短いプロンプトでは見えにくい能力です。
  • エピソード全体のコストを評価。 幅広い協働エージェント向けベンチマークで、同程度の規模のモデルの中でも強い結果を示したとされています。論文が定めた評価・価格設定の下では、4つの代表的ベンチマークの総合結果が、観測されたコスト性能Paretoフロンティアの低コスト側の屈曲点付近に位置しました。一部のタスクでは、かなり大きなフロンティアモデルとも競合すると報告されています。
  • 用途を限定しない補助評価。 ツール呼び出し、コーディング、指示追従の評価も行われ、実行特化によって広いエージェント能力が失われていないことを確認しようとしています。
  • 重みと一部データを公開。 モデル重みと訓練データの一部を公開し、実用的な協働エージェントやエージェント向け後学習の研究を支援します。

意義と留意点

Occamy-1.0が示すのは、エージェントの競争軸が「最も賢いモデル」から「長い仕事を許容できる費用で安定して終えられるモデル」へ広がっていることです。多数の呼び出しを必要とする自動化では、状態管理、ツール操作、エラー復旧、作業の完了が、単一の難しい推論よりも導入効果を左右する場合があります。中規模のオープンモデルを実行向けに特化する考え方は、研究用途や社内自動化にとって現実的な選択肢になり得ます。

一方、提供された素材には、各ベンチマークの具体的なスコア、遅延、価格、競合モデルとの詳細比較は含まれていません。「低コスト側の屈曲点」という評価は、論文のプロトコルに基づく結果として読むべきで、あらゆる環境にそのまま適用できる結論ではありません。公開される重みやデータが一部に限られる点も踏まえ、今後は独立再現と実際のツールチェーンでの長期検証が必要です。

arXiv

コメント

ログイン状態を確認中…

コメントを読み込み中…

関連記事

CCTest · Blog
SearchHorizonBench:AIエージェントは「もう一度検索すべきか」を判断できるか
AIエージェント
cctest.ai
AIエージェント

SearchHorizonBench:AIエージェントは「もう一度検索すべきか」を判断できるか

SearchHorizonBenchは、問題の難しさと追加検索による期待利益を切り分け、AIエージェントの検索判断を評価するベンチマークです。履歴データは校正を改善する一方、検索ゲインの正確な予測は依然として難しいことが示されました。

続きを読む
CCTest · Blog
The Trinity:能力を軸に多モーダルエージェントを再帰的に改善
AIエージェント
cctest.ai
AIエージェント

The Trinity:能力を軸に多モーダルエージェントを再帰的に改善

The Trinity は、タスクの表面的な分類ではなく、複数のタスクに共通する能力を中心に、多モーダルエージェントの世界生成と Harness の進化を結び付ける枠組みです。能力木、シミュレーション学習、モジュール選択を一つのループに組み込みます。

続きを読む
CCTest · Blog
RSI Arena、AIエージェントによるモデル訓練と人間フィードバックの反復を検証
AIエージェント
cctest.ai
AIエージェント

RSI Arena、AIエージェントによるモデル訓練と人間フィードバックの反復を検証

RSI Arenaは、AIエージェントが言語モデルの追加学習を自律的に行い、人間の評価を使ってさらに改善できるかを調べた研究です。嗜好評価は改善した一方、ベンチマーク性能や安全性が同じように向上するとは限らないことが示されました。

続きを読む