아티클 & 가이드

Claude API 중계소 가이드, 검출 원리, LLM API 실측 노하우

총 1636개의 아티클

CCTest · Blog
KaliBench, AI의 사이버보안 명령어 생성 능력을 세밀하게 평가
모델 평가
cctest.ai
모델 평가

KaliBench, AI의 사이버보안 명령어 생성 능력을 세밀하게 평가

KaliBench는 분석가의 의도를 Kali Linux에서 실행 가능한 명령어로 바꾸는 능력에 초점을 맞춘 벤치마크입니다. 도구 선택과 인자 구성을 나눠 평가하고 의미적 정확성과 실제 실행 가능성을 함께 확인합니다.

더 보기
CCTest · Blog
LLM 과학 코딩 에이전트에 실행 가능한 검사를 제공하다
AI 과학 연구
cctest.ai
AI 과학 연구

LLM 과학 코딩 에이전트에 실행 가능한 검사를 제공하다

Rules to Tools는 과학적 요구사항을 호출 가능한 실행 검사로 바꿔 LLM 코딩 에이전트의 코드 수정 과정을 평가했습니다. 일부 SciCode 과제에서는 성능이 높아졌지만, 효과는 과제별로 달랐고 CPU 사용량은 증가할 수 있었습니다.

더 보기
CCTest · Blog
World Observer, 세계 모델이 시야 밖 변화를 추적하는 방법
월드 모델
cctest.ai
월드 모델

World Observer, 세계 모델이 시야 밖 변화를 추적하는 방법

World Observer는 행동 주체의 시점과 관찰자 시점을 분리해 여러 시점을 함께 생성합니다. 물체가 행동 주체의 시야를 벗어난 뒤에도 관찰자 화면에서 계속 변화하도록 해, 다시 시야에 들어왔을 때 상태와 외관의 일관성을 높입니다.

더 보기
CCTest · Blog
GraphForge, 증거 그래프로 검증 가능한 업무형 에이전트 학습 구축
AI 에이전트
cctest.ai
AI 에이전트

GraphForge, 증거 그래프로 검증 가능한 업무형 에이전트 학습 구축

GraphForge는 실제 파일과 증거 그래프를 바탕으로 업무형 AI 에이전트의 학습 과제를 만드는 프레임워크입니다. 작업 공간과 지시문, 평가 기준을 파일 근거에 연결해 실행 가능성과 검증 가능성을 높입니다.

더 보기
CCTest · Blog
덜 보고 더 잘 움직이는 로봇: PyRUA-Lean의 토큰 절감 방식
로보틱스·피지컬 AI
cctest.ai
로보틱스·피지컬 AI

덜 보고 더 잘 움직이는 로봇: PyRUA-Lean의 토큰 절감 방식

PyRUA-Lean은 로봇 프리미티브를 실행 가능한 Python 셀로 조합하고, 조건 확인과 국소 재시도를 실행 환경에서 처리하는 프레임워크입니다. 700개 시뮬레이션 과제에서 같은 LLM 호출 예산으로 성공률을 63.1%에서 71.7%로 높였으며, 두 방식이 모두 해결한 과제에서는 입력 토큰을 65% 줄였습니다.

더 보기
CCTest · Blog
Argo-Bench, 기업 규모 업무 흐름에서 데이터 에이전트 평가
모델 평가
cctest.ai
모델 평가

Argo-Bench, 기업 규모 업무 흐름에서 데이터 에이전트 평가

Argo-Bench는 SQL 생성 능력만 확인하지 않고, 대규모 기업 데이터 웨어하우스에서 사실을 재구성한 뒤 분석과 업무 조치까지 수행할 수 있는지를 평가한다. 현재 모델은 다중 테이블 추론과 실제 의사결정에서 여전히 큰 과제를 안고 있다.

더 보기
CCTest · Blog
ScholarCatalyst: AI는 새 연구를 촉발할 논문을 찾을 수 있을까
RAG·검색
cctest.ai
RAG·검색

ScholarCatalyst: AI는 새 연구를 촉발할 논문을 찾을 수 있을까

ScholarCatalyst는 단순히 주제가 비슷한 논문이 아니라, 특정 연구 프로젝트를 실제로 발전시킬 수 있는 논문을 검색하는 능력을 평가합니다. 저자들의 판단을 기반으로 한 실험에서 현재의 AI 에이전트는 전문가 수준에 미치지 못했습니다.

더 보기
CCTest · Blog
HeteroFold, 서로 다른 모델 간 KV Cache 공유에 도전
메모리·컨텍스트
cctest.ai
메모리·컨텍스트

HeteroFold, 서로 다른 모델 간 KV Cache 공유에 도전

HeteroFold는 서로 다른 모델 패밀리로 구성된 멀티 에이전트 LLM에서 수신 측 재계산을 없애기 위한 KV Cache 전송 방법입니다. 논문은 32K 컨텍스트의 한 전송 방향에서 기본 Prefill 대비 약 10.7배의 속도 향상을 보고했습니다.

더 보기
CCTest · Blog
MemFold, 장기 개인화를 위한 소프트 메모리를 행동 중심으로 학습
메모리·컨텍스트
cctest.ai
메모리·컨텍스트

MemFold, 장기 개인화를 위한 소프트 메모리를 행동 중심으로 학습

MemFold는 질의와 관련된 텍스트 기억을 고정된 수의 연속 벡터로 압축하고, 그 기억이 실제 응답 행동에 얼마나 도움이 되는지를 기준으로 최적화합니다. 학습에는 과제 보상과 동결된 텍스트 기억 교사의 신뢰도 게이트 온폴리시 증류가 함께 사용됩니다.

더 보기
CCTest · Blog
아마존의 데이터센터 10억 달러 대책, 왜 반발을 키웠나
정책·규제
cctest.ai
정책·규제

아마존의 데이터센터 10억 달러 대책, 왜 반발을 키웠나

아마존은 앞으로 5년간 데이터센터 인근 지역에 10억 달러 이상을 지원하고 신규 프로젝트에서 비밀유지계약을 폐지하겠다고 밝혔다. 그러나 환경단체는 발전소 오염, 물 사용량, 디젤 비상발전기 문제를 외면한 계획이라고 비판한다.

더 보기
CCTest · Blog
Helion을 vLLM에 통합해 양자화 GEMM을 자동 최적화하다
추론·배포
cctest.ai
추론·배포

Helion을 vLLM에 통합해 양자화 GEMM을 자동 최적화하다

PyTorch는 Helion을 vLLM의 linear backend에 통합해 고수준 커널 DSL과 입력 형상별 자동 튜닝으로 양자화 GEMM 구현을 단순화하는 방안을 검토했습니다. NVIDIA Hopper에서는 평가된 일부 워크로드에서 처리량이 10% 이상 향상됐습니다.

더 보기
CCTest · Blog
3억 달러 엔비디아 서버 사건이 드러낸 AI 칩 수출통제의 허점
정책·규제
cctest.ai
정책·규제

3억 달러 엔비디아 서버 사건이 드러낸 AI 칩 수출통제의 허점

미 법무부는 Earthmade Computer의 CEO가 허위 서류와 아시아 중계 경로를 이용해 엔비디아 GPU 서버를 중국으로 우회 반출했다고 주장했습니다. 이번 사건은 완제품 서버에 탑재된 AI 칩의 최종 목적지를 확인하기가 얼마나 어려운지 보여줍니다.

더 보기
CCTest · Blog
AI 에이전트 위험 커지자 애플, macOS ‘전체 디스크 접근’ 통제 강화
AI 안전
cctest.ai
AI 안전

AI 에이전트 위험 커지자 애플, macOS ‘전체 디스크 접근’ 통제 강화

애플이 데스크톱 AI 에이전트의 활용 범위가 넓어지면서 macOS의 ‘전체 디스크 접근’ 권한에 새로운 통제 장치를 추가하겠다고 밝혔다. 권한 자체를 일괄 축소하기보다는 사용자가 위험을 이해하고 더 명확하게 동의하도록 만드는 데 초점이 맞춰졌다.

더 보기
CCTest · Blog
OpenAI의 Dot, 저녁 주문도 가능한 기업용 소프트웨어형 에이전트
AI 에이전트
cctest.ai
AI 에이전트

OpenAI의 Dot, 저녁 주문도 가능한 기업용 소프트웨어형 에이전트

OpenAI의 Dots는 클라우드 컴퓨터와 데스크톱 앱, 음성 입력을 결합한 AI 에이전트다. 실제 사용에서는 웹사이트 개편과 영상 편집처럼 사용자가 통제하는 작업에 강했지만, 인증·로그인·결제 과정에서는 여전히 사람의 개입이 필요했다.

더 보기
CCTest · Blog
HC-DLM, 병렬 확산 생성에서 토큰 의존성을 보존하다
확산 모델
cctest.ai
확산 모델

HC-DLM, 병렬 확산 생성에서 토큰 의존성을 보존하다

HC-DLM은 이산 토큰 출력과 지속적인 연속 잠재 상태를 결합해 병렬 확산 디코딩에서 끊기기 쉬운 토큰 간 의존성을 다루는 방법입니다. 논문은 스도쿠, Countdown, LM1B에서 같은 규모의 이산·연속 확산 기준선보다 나은 결과를 보고합니다.

더 보기