CCTest · Blog
WideSWE、コードエージェントのリポジトリ横断協調を検証
コーディングAI
cctest.ai
コーディングAI

WideSWE、コードエージェントのリポジトリ横断協調を検証

従来のコードエージェント評価は単一リポジトリに集中していました。WideSWEは、実際のソフトウェアエコシステムから集めた120件の課題を使い、複数リポジトリにまたがる変更を完遂できるかを調べます。

続きを読む
CCTest · Blog
WorldPlay2、分解型制御と圧縮メモリで対話型世界モデルを拡張
世界モデル
cctest.ai
世界モデル

WorldPlay2、分解型制御と圧縮メモリで対話型世界モデルを拡張

WorldPlay2は、リアルタイムの操作性と長期ロールアウトの一貫性を両立することを目指す対話型世界モデルです。フレームに対応した行動制御、構造化された意味制御、共有メモリトークン、Stable Forcing蒸留を組み合わせています。

続きを読む
CCTest · Blog
QwenGyre、超長期エージェント強化学習のGPU待機と軌跡の重複に対応
強化学習
cctest.ai
強化学習

QwenGyre、超長期エージェント強化学習のGPU待機と軌跡の重複に対応

Qwenは、極端に長いタスク向けのオンライン強化学習フレームワーク「QwenGyre」を提案した。ロールアウトと学習の間でGPUを柔軟に再配分し、分岐履歴の再構成や軌跡の重複排除を行う。

続きを読む
CCTest · Blog
モデル内部情報はLLMの安全性にいつ役立つのか?表現工学を比較評価
AIセーフティ
cctest.ai
AIセーフティ

モデル内部情報はLLMの安全性にいつ役立つのか?表現工学を比較評価

DPO、表現ステアリング、内部プローブ、テキスト監視器を、LLMの安全制御とリスク検知の両面から比較した研究です。表現工学は行動アラインメントの代替ではないものの、低データ環境や低コスト監視で有用性を示します。

続きを読む
CCTest · Blog
視覚エンコーダーは不要になるのか?マルチモーダル学習の拡大則を検証
マルチモーダル
cctest.ai
マルチモーダル

視覚エンコーダーは不要になるのか?マルチモーダル学習の拡大則を検証

Tencent Hunyuanの研究チームは、視覚エンコーダーを使うモデルと使わないモデルのスケーリング特性を比較した。エンコーダーなしのモデルは小規模では不利だが、計算量の増加によって差を縮められる可能性が示された。

続きを読む
CCTest · Blog
SkillDRE、実行前検査と実行時フィードバックでエージェント技能を進化
AIセーフティ
cctest.ai
AIセーフティ

SkillDRE、実行前検査と実行時フィードバックでエージェント技能を進化

SkillDREは、実行前スキャンと実行時防御を結び付け、エージェント技能を反復的に評価・改変する二段階のレッドチーム手法を提案する。単一の防御段階だけでは、適応的に変化する技能のリスクを過小評価する可能性がある。

続きを読む
CCTest · Blog
端末上のプライバシー保護がオークション予算を狂わせる理由
モデル評価
cctest.ai
モデル評価

端末上のプライバシー保護がオークション予算を狂わせる理由

機械学習による入札判断をプライバシー保護端末へ移すと、予算情報も分散し、同期遅延が発生する。新たな監査研究は、古い残高が過剰支出を拡大し、支払い変換が操作可能なインセンティブを生む可能性を示した。

続きを読む
CCTest · Blog
LLMのPrefillとDecodeを分離量子化するDQ、速度と精度を両立
推論・デプロイ
cctest.ai
推論・デプロイ

LLMのPrefillとDecodeを分離量子化するDQ、速度と精度を両立

Disaggregated Quantization(DQ)は、LLM推論のPrefillとDecodeに異なる量子化方式、重み、保存場所を割り当てる手法です。低ビット推論の効率を維持しながら、長いプロンプトの処理速度と生成精度の改善を狙います。

続きを読む
CCTest · Blog
VLA-Precision:VLAロボットの実世界オンライン強化学習を安定化
強化学習
cctest.ai
強化学習

VLA-Precision:VLAロボットの実世界オンライン強化学習を安定化

VLA-Precisionは、視覚言語行動モデルを実世界でオンライン強化学習する際の方策ドリフトと計算コストに取り組む。ACoBによる段階的な価値校正と、ACoB-Streamによるストリーミング処理を組み合わせる。

続きを読む
CCTest · Blog
TRACEが示す、ストリーミング動画理解に単一スコアが足りない理由
モデル評価
cctest.ai
モデル評価

TRACEが示す、ストリーミング動画理解に単一スコアが足りない理由

TRACEは、証拠が有効になる時点、視覚履歴の扱い、応答を開始する条件を明示するストリーミング動画理解の評価 framework を提案する。研究結果は、同程度のQA精度でも、完了度や回答の有効性、生成負荷、応答タイミングが大きく異なり得ることを示した。

続きを読む
CCTest · Blog
InternW0-Δ:2万時間超のオープンデータで視覚予測とロボット行動を統合
世界モデル
cctest.ai
世界モデル

InternW0-Δ:2万時間超のオープンデータで視覚予測とロボット行動を統合

InternW0-Δは、視覚ダイナミクス、シーン意味論、4Dの幾何・運動事前分布、ロボット行動生成を一体化するWorld Action Modelです。論文では、シミュレーションと実ロボットの評価で従来手法を上回ったと報告しています。

続きを読む
CCTest · Blog
RayOrch、マルチモーダルデータ準備に血統管理付き並列処理を導入
フレームワーク・ツール
cctest.ai

RayOrch、マルチモーダルデータ準備に血統管理付き並列処理を導入

RayOrchは、文書や動画を可変数の子タスクへ分割するデータ準備向けのプログラミングモデルと分散実行基盤です。親子関係と順序を保ちながら、GPU向けに異なる親の処理をまとめて実行します。

続きを読む
CCTest · Blog
PISA、ブロック疎注意を O(N log N) の対数線形複雑度へ
メモリ・コンテキスト
cctest.ai

PISA、ブロック疎注意を O(N log N) の対数線形複雑度へ

ByteDance Seed の研究チームが、粗い候補から細かい候補へ段階的に絞り込む PISA を提案しました。ピラミッド型 Top-K 選択により、長文脈モデルにおけるブロック選択の二次コストを抑えます。

続きを読む
CCTest · Blog
静的スコアを超えて:対戦で大規模言語モデルを評価するGame Arena
モデル評価
cctest.ai
モデル評価

静的スコアを超えて:対戦で大規模言語モデルを評価するGame Arena

Kaggle Game Arenaは、チェス、ポーカー、人狼を使って大規模言語モデルを競争環境で評価する試みです。固定ベンチマークでは捉えにくい計画性、適応力、不確実性への対応を、実際の対局を通じて調べます。

続きを読む
CCTest · Blog
AgentWorld、長期タスクでLLMエージェントの協調性を検証
モデル評価
cctest.ai
モデル評価

AgentWorld、長期タスクでLLMエージェントの協調性を検証

AgentWorldは、複数のLLMエージェントが単なる能力の寄せ集めではなく、長期的に協調できるかをMMORPG型サンドボックスで評価する。実験では、通信、役割分担、共有計画に大きな課題が残ることが示された。

続きを読む
CCTest · Blog
人の手の器用さをロボットへ:Morphometric Imitationが動作転写からゼロショット実機制御までを接続
ロボティクス・フィジカルAI
cctest.ai

人の手の器用さをロボットへ:Morphometric Imitationが動作転写からゼロショット実機制御までを接続

UCバークレーなどの研究者は、人間の手と物体の相互作用をロボットの実行可能なデモンストレーションへ変換する3段階の手法、Morphometric Imitationを提案した。3種類のロボットハンドと10種類の相互作用タスクで評価し、実環境のゼロショット試験で89.3%の成功率を報告している。

続きを読む
CCTest · Blog
HybridInfer、スマホの熱余裕を使ってLLMの実行先を選択
推論・デプロイ
cctest.ai
推論・デプロイ

HybridInfer、スマホの熱余裕を使ってLLMの実行先を選択

HybridInferは、実際のAndroid端末で端末内・エッジ・クラウドのLLMを動的に振り分ける強化学習ルーターです。モバイル推論の問題は単なる速度低下ではなく、連続生成による実行環境の不安定化にも及ぶと指摘します。

続きを読む
CCTest · Blog
LLM審査員はなぜ失敗するのか:Text-to-SQL本番監査の教訓
モデル評価
cctest.ai
モデル評価

LLM審査員はなぜ失敗するのか:Text-to-SQL本番監査の教訓

本番のText-to-SQLパイプラインを監査した研究から、LLM-as-Judgeが人間の判断と大きく食い違い、正しいSQLを過剰に問題視するケースが明らかになった。モデルの入れ替えと慎重なルーティングが、単純なモデル追加より有効だった。

続きを読む