記事とガイド

Claude API 中継局のガイド、検出の仕組み、LLM API の実測ノウハウ

全 1636 件の記事

CCTest · Blog
Multimodal Flow、言語と視覚を一つの連続生成プロセスで統合
マルチモーダル
cctest.ai
マルチモーダル

Multimodal Flow、言語と視覚を一つの連続生成プロセスで統合

HUST Vision Lab は、言語と画像を同じ連続空間で扱う Multimodal Flow を提案した。画像を離散トークンへ量子化せず、連続ハイパーチャンクと共有 Flow Matching バックボーンで両モダリティを統一的にモデル化する。

続きを読む
CCTest · Blog
AutoDataBench、AI研究エージェントの「データ知能」を測る
モデル評価
cctest.ai
モデル評価

AutoDataBench、AI研究エージェントの「データ知能」を測る

AutoDataBenchは、学習フレームワークや計算量などの要因を固定し、LLM研究エージェントが学習データを診断・整理・構築する能力を評価する制御型テストベッドです。データ介入の効果を事前に予測できるか、研究軌跡を追加学習に利用できるかも検証します。

続きを読む
CCTest · Blog
検索エージェントはなぜ「共謀」するのか:CrossFitで自律進化の誤った改善を抑える
AIエージェント
cctest.ai
AIエージェント

検索エージェントはなぜ「共謀」するのか:CrossFitで自律進化の誤った改善を抑える

自律進化型の検索エージェントでは、提案者と解答者が同じ誤りに同意し、内部報酬だけが上昇する場合がある。CrossFitは、学習に使う情報源と評価経路を分離して、この問題を緩和する。

続きを読む
CCTest · Blog
OSWorld-Science、AIエージェントの科学ソフト利用能力を評価
AI科学研究
cctest.ai
AI科学研究

OSWorld-Science、AIエージェントの科学ソフト利用能力を評価

OSWorld-Scienceは、分子描画、病理画像解析、統計計算、物理シミュレーションなどを対象に、コンピューター利用エージェントを評価するベンチマークです。画面操作だけでなく、生成された科学的成果物の正しさも確認します。

続きを読む
CCTest · Blog
MILO:マルチエージェント進化でAgent Harnessを自動発見
AIエージェント
cctest.ai
AIエージェント

MILO:マルチエージェント進化でAgent Harnessを自動発見

MILOは、AIエージェントの実行やツール利用を制御するHarnessと、その探索戦略を同時に進化させる枠組みです。3つの長期タスク向けベンチマークで、既存のHarnessおよび探索手法を上回る結果を報告しています。

続きを読む
CCTest · Blog
CUA-SWE、画面を見て修正を検証するソフトウェア工学エージェントを評価
モデル評価
cctest.ai
モデル評価

CUA-SWE、画面を見て修正を検証するソフトウェア工学エージェントを評価

CUA-SWEは、コード編集、コマンド実行、GUI操作、視覚的なフィードバックの確認を一つのタスクに統合するベンチマークです。コーディングエージェントとコンピュータ操作エージェントの間にある評価上の空白を埋めようとしています。

続きを読む
CCTest · Blog
連続動画ストリームで自己教師あり学習が難しくなる理由
視覚・動画
cctest.ai
視覚・動画

連続動画ストリームで自己教師あり学習が難しくなる理由

フレームを時間順に処理し、全体シャッフルや複数エポックの再利用を行わない環境では、従来の視覚自己教師あり学習が大きく性能を落とす。研究チームは、入力パイプラインを調整したStreamMAEでこの問題に取り組んだ。

続きを読む
CCTest · Blog
Physis-Lang:進化する物理言語で動画世界モデルを改善
世界モデル
cctest.ai
世界モデル

Physis-Lang:進化する物理言語で動画世界モデルを改善

NVIDIAの研究チームは、物体や因果関係、相互作用、時間変化を記述する物理言語を、動画の収集・学習・生成に共通する表現として扱うPhysis-Langを提案しました。原子レベルの断言評価と言語誘導検索により、物理的に妥当な動画生成を目指します。

続きを読む
CCTest · Blog
A2Z GameSpec-Bench、コーディングエージェントのゲーム設計忠実度を検証
モデル評価
cctest.ai
モデル評価

A2Z GameSpec-Bench、コーディングエージェントのゲーム設計忠実度を検証

A2Z GameSpec-Benchは、100件の長文ゲーム設計書を基に、コーディングエージェントが実行可能なコードだけでなく設計意図まで再現できるかを評価する。ソースコード検査に加え、シナリオ再生と適応的プレイテストも組み合わせる。

続きを読む
CCTest · Blog
PatchHolmes、リスト全体を比較するエージェントで脆弱性修正コミットを特定
AIエージェント
cctest.ai
AIエージェント

PatchHolmes、リスト全体を比較するエージェントで脆弱性修正コミットを特定

PatchHolmesは、ハイブリッド検索で候補を絞り込んだ後、エージェントに候補リスト全体を比較させ、脆弱性を修正したコミットを選ぶ。個別判定方式より高いトップ1検索精度を、少ない対話回数で実現した。

続きを読む
CCTest · Blog
AREX-2:長期的な反省と反復で成長するAIエージェント
AIエージェント
cctest.ai
AIエージェント

AREX-2:長期的な反省と反復で成長するAIエージェント

AREX-2は、自己改善型エージェントに必要な能力を「反省」と「長期実行」に分け、機械学習やアルゴリズムプログラミングから長期改善の軌跡を合成する手法を示した。技術タスクで学習した能力は、深い調査のベンチマークにも転移した。

続きを読む
CCTest · Blog
AIM、研究アイデアを管理する自律型リサーチ基盤を提案
AI科学研究
cctest.ai
AI科学研究

AIM、研究アイデアを管理する自律型リサーチ基盤を提案

自動化された科学研究では、実験を実行するだけでなく、どの研究方向に資源を投入するかを判断する必要があります。AIMはアイデアの整理、選択、実装監査、実験予算の配分を検索ループに組み込みます。

続きを読む
CCTest · Blog
潜在通信がマルチエージェントの新たな安全リスクに
AIセーフティ
cctest.ai
AIセーフティ

潜在通信がマルチエージェントの新たな安全リスクに

新たな研究は、基盤モデルを変更しなくても、学習可能な潜在通信リンクが拒否挙動を弱める可能性を示した。リンクを悪意ある目的で最適化すれば有害な要求への従属をさらに高められる一方、安全性を重視した報酬による修復も可能だという。

続きを読む
CCTest · Blog
WUSH-KV:データ適応型変換で低ビット KV キャッシュ量子化を改善
メモリ・コンテキスト
cctest.ai

WUSH-KV:データ適応型変換で低ビット KV キャッシュ量子化を改善

WUSH-KV は、キャリブレーションデータから Key と Value 用の変換を個別に構築し、低ビット KV キャッシュ量子化の誤差を抑える手法です。2-bit 評価では、検証したモデルと下流タスク全体で OSCAR 変換と同等以上の結果が報告されています。

続きを読む
CCTest · Blog
非侵襲型ブレイン・トゥ・テキストの成績を押し上げた「時間の近道」
モデル評価
cctest.ai
モデル評価

非侵襲型ブレイン・トゥ・テキストの成績を押し上げた「時間の近道」

非侵襲型の脳活動からテキストを復元するモデルが、脳信号ではなく単語の発話時間を利用していた可能性が示された。時間情報の漏洩を抑える単純な設計変更により、反復観測と言語モデルの効果も高まった。

続きを読む
CCTest · Blog
ロボットは記憶だけでは足りない:変化する世界を進むEvolvingNav
ロボティクス・フィジカルAI
cctest.ai

ロボットは記憶だけでは足りない:変化する世界を進むEvolvingNav

ロボットが向かっている間に、記憶された物体の位置が変わることがあります。EvolvingNavは、時間付き3D記憶と確率的な信念更新を組み合わせ、変化する環境でのナビゲーションを目指します。

続きを読む