AI 벤치마크
4개의 글을 이 주제로 묶었습니다. 최근 글은 2026년 10월 17일 에 발행한 AI 영상 판별 실험: 테슬라 로드스터 시연, GPT·Gemini·Grok·Claude는 대부분 가짜로 봤다입니다.
AI 영상 판별 실험: 테슬라 로드스터 시연, GPT·Gemini·Grok·Claude는 대부분 가짜로 봤다
진짜 테슬라 로드스터 시연 영상 2편을 GPT, Gemini, Grok, Claude에 소리까지 그대로 보여 주고 실제 촬영인지 물었습니다. 24번 중 5번만 알아봤고, 영상을 직접 받는 Gemini도 6번 모두 틀렸습니다. AI가 영상을 본 방식과 오판 근거, 한계를 정리합니다.
Claude Opus 5.5 effort 레벨 비교: low부터 max까지 같은 과제로 본 비용과 품질
Claude Opus 5.5에 뮤직비디오와 3D 강남역 탐험 과제를 주고 effort 레벨만 low부터 max까지 바꿔 돌렸습니다. 단계별 API 환산 비용, 결과물 차이, 블라인드 평가, 선택 기준과 설정 방법을 정리했습니다.
Gemini 4 Argon 벤치마크 정리: GPT-6 Astra·Claude Opus 5.5 비교와 가격·공개 시점
Gemini 4 Argon이 Google 공개 벤치마크 18개 중 13개에서 1위를 했습니다. 롱 컨텍스트·업무 자동화·코딩 결과를 GPT-6 Astra, Claude Opus 5.5와 비교하고 가격, 출력 1M 토큰, 공개 시점을 정리했습니다.
Graft 토큰 42% 절감 직접 실측: Claude Code 코드 지식 그래프는 어디서 효과가 있나
Claude Code용 코드 지식 그래프 Graft가 주장한 툴콜 46%, 토큰 42%, 시간 60% 감소를 실제 프로젝트 두 개로 직접 재봤습니다. 동작 원리, 설치와 텔레메트리 설정, 주장별 판정을 정리합니다.