CCTest · Blog
프로액티브 에이전트에 필요한 것은 정확성만이 아니다
AI 에이전트
cctest.ai
AI 에이전트

프로액티브 에이전트에 필요한 것은 정확성만이 아니다

프로액티브 LLM 에이전트는 사용자가 요청하기 전에 유휴 연산을 활용해 필요한 지원을 준비한다. 새로운 연구는 작업 능력, 시간 배분, 신뢰를 3T 원칙으로 정리하고 장기 효과를 평가하는 Proactivity-Gym을 제안했다.

더 보기
CCTest · Blog
언어 모델이 분자 최적화기를 개선해 힘 계산을 줄인 AutoSella
AI 과학 연구
cctest.ai
AI 과학 연구

언어 모델이 분자 최적화기를 개선해 힘 계산을 줄인 AutoSella

연구진은 언어 모델 에이전트가 분자 기하 최적화기 Sella를 직접 수정하도록 하고, 조기 종료와 과적합을 막는 평가 게이트로 후보를 선별했습니다. 그 결과 나온 AutoSella는 보지 못한 분자와 DFT 테스트에서도 힘 평가 횟수를 줄였습니다.

더 보기
CCTest · Blog
IDU, 생성 모델의 1단계 증류와 선택적 데이터 삭제를 결합
확산 모델
cctest.ai
확산 모델

IDU, 생성 모델의 1단계 증류와 선택적 데이터 삭제를 결합

Inverse Distillation Unlearning(IDU)은 확산 모델이나 플로 매칭 모델을 1단계 생성기로 증류하면서, 지정한 학습 데이터 부분집합에 해당하는 출력을 억제하는 방법이다. 전체 데이터로 학습한 교사 모델과 삭제 대상 샘플만 필요하다.

더 보기
CCTest · Blog
LoGRA, 저랭크 그래디언트 스케치로 LLM 강화학습 메모리 절감
강화학습
cctest.ai
강화학습

LoGRA, 저랭크 그래디언트 스케치로 LLM 강화학습 메모리 절감

LoGRA는 대규모 언어 모델 강화학습에서 유용한 그래디언트 신호를 저랭크 스케치로 저장하고, 예측 KL 기반 스텝 제어를 결합한 방법입니다. 논문 요약에 따르면 추론 과제에서 평균 학습 메모리를 최대 45.7% 줄였습니다.

더 보기
CCTest · Blog
UndoBench: AI 에이전트는 작업 완료보다 안전한 복구를 평가받아야 한다
모델 평가
cctest.ai
모델 평가

UndoBench: AI 에이전트는 작업 완료보다 안전한 복구를 평가받아야 한다

UndoBench는 도구를 사용하는 AI 에이전트의 정상적인 작업 수행 능력과 장애 이후 안전하게 복구하는 능력을 분리해 평가한다. 실험 결과, 작업을 완료하더라도 중복 외부 효과를 막지 못하는 사례가 상당수 나타났다.

더 보기
CCTest · Blog
LLM 수학 추론의 약점은 계산보다 ‘발견’일 수 있다
모델 평가
cctest.ai
모델 평가

LLM 수학 추론의 약점은 계산보다 ‘발견’일 수 있다

새 연구는 대규모 언어 모델의 수학 추론을 발견, 생성, 이해, 실행의 네 능력으로 나누어 분석한다. 최종 정답률만으로는 모델의 실제 역량 구성을 알기 어렵다고 지적하고, 수학적 프리미티브를 활용한 보완 방법을 제안한다.

더 보기
CCTest · Blog
모델이 자신의 출력에서 배우면 왜 불안정해지는가
모델 평가
cctest.ai
모델 평가

모델이 자신의 출력에서 배우면 왜 불안정해지는가

테스트 시 학습에서 모델이 스스로 생성한 텍스트를 계속 학습하면 장기 적응 과정에서 독립적인 인간 작성 텍스트에 대한 예측 성능이 떨어질 수 있다는 연구가 나왔다. 업데이트를 확정하기 전에 독립 데이터로 검증하는 방식이 효과적인 완화책으로 제시됐다.

더 보기
CCTest · Blog
Kandinsky 6.0 Video, 영상·음성·립싱크를 한 번에 생성
멀티모달
cctest.ai
멀티모달

Kandinsky 6.0 Video, 영상·음성·립싱크를 한 번에 생성

Kandinsky 6.0 Video는 텍스트나 이미지를 입력해 44kHz 음성과 립싱크가 맞는 약 5초 길이의 영상을 생성하는 모델군입니다. 영상 스트림과 음성 스트림을 양방향으로 연결하는 CrossDiT 구조로 시간적·의미적 정합성을 높입니다.

더 보기
CCTest · Blog
OSWorld-Pro, 컴퓨터 사용 에이전트를 최종 결과 너머에서 평가하다
모델 평가
cctest.ai
모델 평가

OSWorld-Pro, 컴퓨터 사용 에이전트를 최종 결과 너머에서 평가하다

OSWorld-Pro는 컴퓨터 사용 에이전트가 최종 상태에 도달했는지만 보지 않고, 연속적인 하위 목표를 어떻게 수행했는지 평가한다. 클릭 오류와 키보드 입력 실수, 목표와 무관한 행동까지 분석할 수 있다.

더 보기
CCTest · Blog
딥페이크 탐지가 무너질 때, 이미지 재구성 가능성으로 진위를 인증한다
모델 평가
cctest.ai
모델 평가

딥페이크 탐지가 무너질 때, 이미지 재구성 가능성으로 진위를 인증한다

새로운 생성 모델과 적대적 섭동은 기존 딥페이크 탐지기의 성능을 크게 떨어뜨립니다. 한 연구팀은 알려진 생성기가 이미지를 충실하게 재구성할 수 있는지 확인하고, 오인증 위험을 보정하는 접근법을 제안했습니다.

더 보기