CCTest · Blog
τ^τ-Bench, 코딩 에이전트의 실제 에이전트 납품 능력을 평가하다
모델 평가
cctest.ai
모델 평가

τ^τ-Bench, 코딩 에이전트의 실제 에이전트 납품 능력을 평가하다

τ^τ-Bench는 코드 생성이 아니라 현실적인 업무 제약 속에서 사용 가능한 에이전트를 구축하고 납품하는 능력을 평가한다. 현재 시스템과 전문가가 작성한 참조 구현 사이에는 여전히 큰 격차가 확인됐다.

더 보기
CCTest · Blog
정형화된 거부문 없이 안전성을 학습하면 오거부를 줄일 수 있을까
AI 안전
cctest.ai
AI 안전

정형화된 거부문 없이 안전성을 학습하면 오거부를 줄일 수 있을까

한 연구가 안전 튜닝 응답을 정형화된 거부 문구와 거부 이유로 나누어 분석했습니다. 거부 이유만 학습하는 방식은 유해해 보이는 단어가 포함된 정상 요청에 대한 오거부를 줄이면서 비슷한 수준의 안전성을 유지할 가능성을 보여줍니다.

더 보기
CCTest · Blog
VLM은 무엇에 답하지 말아야 하는지도 알아야 한다
모델 평가
cctest.ai
모델 평가

VLM은 무엇에 답하지 말아야 하는지도 알아야 한다

새로운 벤치마크 KoNA는 질문 전체를 거부하는지보다, 복합 요청에서 답할 수 없는 부분만 정확히 거부하는지를 평가합니다. 결과적으로 시각언어 모델은 과도한 순응과 과도한 거부 사이의 경계를 아직 안정적으로 구분하지 못하는 것으로 나타났습니다.

더 보기
CCTest · Blog
마이크로소프트, AI 거버넌스를 런타임 실행으로 전환
정책·규제
cctest.ai
정책·규제

마이크로소프트, AI 거버넌스를 런타임 실행으로 전환

마이크로소프트가 AI 거버넌스의 중심을 정책 문서에서 런타임 통제, 지속적인 평가, 관측 가능성, 감사 증적으로 옮기는 아키텍처를 제시했습니다. 핵심은 AI 시스템이 운영되는 동안 규칙이 실제로 지켜지는지 검증하는 것입니다.

더 보기
CCTest · Blog
엔비디아, 유휴 PC를 사설 AI 클러스터로 연결하는 PAIR 공개
오픈소스
cctest.ai
오픈소스

엔비디아, 유휴 PC를 사설 AI 클러스터로 연결하는 PAIR 공개

엔비디아가 로컬 네트워크에서 호환 컴퓨터를 찾아 로컬 AI 추론에 함께 사용할 수 있도록 하는 오픈소스 소프트웨어 Personal AI Router(PAIR)를 공개했습니다. 주요 대상은 GeForce RTX 시스템이며, 애플 M4 이후 칩도 참여할 수 있습니다.

더 보기
CCTest · Blog
Motion-Omni, 대화 음성과 전신 동작을 한 번에 생성한다
멀티모달
cctest.ai
멀티모달

Motion-Omni, 대화 음성과 전신 동작을 한 번에 생성한다

Motion-Omni는 음성 대화와 표정, 손동작, 상·하체 움직임을 공유된 은닉 상태에서 함께 생성하는 엔드투엔드 모델입니다. 기존의 음성 생성 후 동작을 추가하는 방식보다 효율적으로 오디오와 움직임의 정렬을 학습합니다.

더 보기
CCTest · Blog
Iris, SFT와 강화학습의 반복으로 검색 에이전트를 고도화
AI 에이전트
cctest.ai
AI 에이전트

Iris, SFT와 강화학습의 반복으로 검색 에이전트를 고도화

Iris-mini와 Iris-pro는 웹 링크 구조에서 다단계 검색 과제를 만들고, 지도 미세조정과 온라인 강화학습을 번갈아 수행하는 검색 에이전트입니다. 긴 탐색 과정에서 증거를 관리하는 컨텍스트 관리도 핵심 설계 요소로 다뤄집니다.

더 보기
CCTest · Blog
WorldSculpt: 단일 객체 3D 생성 사전지식으로 조합 가능한 세계 구축
월드 모델
cctest.ai
월드 모델

WorldSculpt: 단일 객체 3D 생성 사전지식으로 조합 가능한 세계 구축

WorldSculpt는 단일 객체용 3D 생성 사전지식을 자세 추정이 포함된 다중 시점 영상에 적용합니다. 심한 가림이 발생하는 수백 개 객체 규모의 복잡한 장면을 하나의 덩어리가 아닌 개별 메시들의 세계로 재구성하는 것이 목표입니다.

더 보기
CCTest · Blog
ShallowStream: 얕은 층으로 색인하고 깊은 층으로 답하는 영상 이해
비전·비디오
cctest.ai
비전·비디오

ShallowStream: 얕은 층으로 색인하고 깊은 층으로 답하는 영상 이해

ShallowStream은 MLLM의 얕은 층을 활용해 스트리밍 영상의 프레임 인코딩과 검색 색인 구축을 수행하고, 질의가 들어올 때만 깊은 층을 사용합니다. 논문은 프레임별 프리필 지연을 최대 52.1배, 10초 엔드투엔드 지연을 최대 11.9배 줄였다고 보고합니다.

더 보기
CCTest · Blog
DM-Align, 동영상 생성의 증류와 선호 정렬을 한 번에 수행
비전·비디오
cctest.ai
비전·비디오

DM-Align, 동영상 생성의 증류와 선호 정렬을 한 번에 수행

arXiv 연구가 동영상 생성 모델의 증류와 인간 선호 정렬을 단일 단계에서 결합하는 DM-Align을 제안했다. 샘플 분포 차이로 선호 유도 그래디언트를 구성해 기존 강화학습 파이프라인의 계산량과 불안정성을 줄이는 것이 목표다.

더 보기
CCTest · Blog
ASR 환각은 어디서 시작되는가: 인코더 마지막 단계의 역할
음성·오디오
cctest.ai
음성·오디오

ASR 환각은 어디서 시작되는가: 인코더 마지막 단계의 역할

음성과 무관하지만 유창한 문장을 생성하는 음성인식 시스템의 ‘환각’을 새로운 연구가 분석했다. 인코더 마지막 단계는 음성 정보를 디코더가 읽을 수 있는 텍스트 표현으로 정리하는 핵심 지점이지만, 이 단계만 손상한다고 자연스러운 환각이 바로 발생하는 것은 아니다.

더 보기
CCTest · Blog
하이브리드 언어 모델의 분업: 어텐션은 기억하고 순환 상태는 표현을 결정한다
메모리·컨텍스트
cctest.ai
메모리·컨텍스트

하이브리드 언어 모델의 분업: 어텐션은 기억하고 순환 상태는 표현을 결정한다

Qwen3.5와 Falcon-H1을 분석한 연구에서 KV 캐시와 고정 크기 순환 상태가 뚜렷하게 다른 역할을 맡는 것으로 나타났다. 어텐션은 문맥에 나온 정보를 검색하고, 순환 상태는 출력 언어와 페르소나를 주로 결정한다.

더 보기