VideoRAE:動画基盤モデルの表現を生成向け潜在空間へ変換
VideoRAE は、凍結された動画基盤モデルの表現を、再構成可能で生成モデルに扱いやすい動画潜在表現へ変換する手法だ。従来の 3D-VAE が抱える、画素再構成偏重という課題に焦点を当てている。
続きを読むVideoRAE は、凍結された動画基盤モデルの表現を、再構成可能で生成モデルに扱いやすい動画潜在表現へ変換する手法だ。従来の 3D-VAE が抱える、画素再構成偏重という課題に焦点を当てている。
続きを読むarXiv の新論文は、満洲語歴史文献の OCR を対象に、視覚スタイルごとに専門モデルへ振り分けるマルチエキスパート方式を検討している。軽量なページ単位分類器が、正書・行書・奏折の半草体を判別する。
続きを読むABAW11 多タスク学習チャレンジに関する arXiv 論文は、表情分類、行動単位検出、価性・覚醒度推定に同じ融合設計を強制すべきではないと示している。
続きを読むarXiv 論文は、言語モデリングで提案された Screening 機構を視覚認識へ拡張する VisionScreen を提案している。すべての画像パッチに相対的な重みを与えるのではなく、関連性の低いパッチを明示的に除外する点が特徴だ。
続きを読むarXiv の新論文は、ダンスを連続的な姿勢列としてだけでなく、意味を持つ「原子的な動き」の系列として扱う生成フレームワークを提案している。音楽に合わせた構造計画と動作補完を分ける点が特徴だ。
続きを読むarXiv に掲載された論文は、心理学の「ピーク・エンドの法則」に着想を得た動画美学評価フレームワーク Peak-End-Net を提案している。モデルは動画全体を均等に扱うのではなく、印象的な瞬間と終わり方に注目する。
続きを読むarXiv に投稿された新論文は、低照度画像強調で輝度ストリームと色度ストリームをどのように再融合するかに注目する。TCA-Net は固定 Top-K ではなく、信頼度しきい値に基づくクロスアテンションを中核に据える。
続きを読むPiVoT は、ノイズの多いレーダー点群に対して、学習不要で多物体検出と追跡を同時に行う手法として提案された。外部のクラスタリングや検出器に頼らず、位置情報とドップラー計測を扱う点が特徴だ。
続きを読むarXiv の新論文は、高周波の視点非依存テクスチャをコンパクトなテクスチャアトラスへ焼き込む Spatial Texture-Atlas Splatting を提案した。著者らは、3DGS に対して最大 5 倍の高速化を実現し、消費者向けハードウェアで 4K 60FPS のリアルタイム描画が可能だとしている。
続きを読むRainDancer は、RGB 動画とイベントカメラの手掛かりを組み合わせる雨除去フレームワークです。単純な融合ではなく、各モダリティ内で雨と背景を分解してから相互作用させる点が特徴です。
続きを読む