AI 코딩 모델을 벤치마크 1등만 보고 고르면 PR 리뷰 시간, 재시도, 보안 입력 리스크를 놓칩니다. GPT-5.6 Sol, Claude Fable 5, Grok 4.5 중 무엇을 쓸지 고민한다면 기준은 하나입니다. 내 프로젝트에서 어떤 모델이 덜 비싸게 실패하는가.
저는 Sol과 Fable을 각각 100달러 플랜에서 써봤고, 두 회사로부터 후원받은 적은 없습니다. 원자료에 없는 레포명, 수정 파일 수, 테스트 결과는 만들지 않겠습니다. 대신 직접 느낀 작업 감각과 공식 가격, 보안 조건, 검증 기준을 분리해 판단합니다.
점수는 비용을 대신 내주지 않습니다.

테스트가 있는 작은 PR은 Sol, 되돌리기 어려운 변경은 Fable
최신 모델이 이전 모델을 무조건 대체한다는 생각은 AI 코딩에서 자주 빗나갑니다. 실제 선택은 교체가 아니라 배치입니다.
같은 유료 플랜에서 코딩 요청을 맡겼을 때 Sol은 결과 후보를 더 빨리 밀어붙였습니다. Fable은 느렸지만 변경 이유와 검토 흐름을 더 오래 붙잡는 쪽에 가까웠습니다. 그래서 테스트가 있는 작은 PR은 Sol, 되돌리기 어려운 리팩터링은 Fable로 나누는 편이 안전합니다.
| 상황 | 먼저 쓸 모델 | 판단 이유 |
| 테스트가 있고 PR을 작게 쪼갤 수 있다 | GPT-5.6 Sol | 빠른 수정과 재시도 이득이 큽니다. |
| 테스트가 부족하고 설계 의도가 복잡하다 | Claude Fable 5 | 느려도 되돌릴 코드가 줄어듭니다. |
| README, 로그 요약, 테스트 초안이 필요하다 | Luna, Terra, Grok 4.5 | 실패해도 사람이 고치기 쉽습니다. |
| 고객 데이터, 보안 로그, 내부 코드가 들어간다 | 모델보다 권한·데이터 정책 | 성능보다 유출 리스크가 먼저입니다. |
레거시 마이그레이션이라면 속도보다 변경 범위를 먼저 보세요.
Sol Ultra는 작업을 3개 이상 나눌 수 있을 때만 켭니다
Ultra는 프론트엔드 컴포넌트, API 라우트, DB 마이그레이션, 테스트 보강처럼 경계가 선명한 작업에서 속도를 냅니다. 반대로 “관리자 페이지 만들어줘”처럼 뭉뚱그린 요청은 위험합니다. 에이전트마다 다른 가정으로 파일을 바꾸면 합치는 비용은 사람이 냅니다.
- 작업을 3~5개 하위 작업으로 나눴는가?
- 각 하위 작업의 완료 조건을 한 문장으로 썼는가?
- 수정 가능한 파일 범위와 테스트 명령어를 지정했는가?
- 마지막에 전체 diff를 리뷰하는 단계를 넣었는가?
위 항목 중 3개 이상 비어 있으면 Ultra를 끄는 편이 낫습니다. 먼저 Sol 또는 Terra로 작은 PR을 만든 뒤, 실패 로그가 명확할 때만 넓히세요.
토큰 단가보다 재시도 3회가 비용을 키웁니다
토큰 단가가 낮으면 싸다는 계산은 AI 코딩에서 절반만 맞습니다. 실제 비용은 모델 호출 뒤 사람이 diff를 읽고 되돌리는 시간에서 커집니다.
2026년 7월 11일 확인 기준으로 OpenAI GPT-5.6 공식 발표는 Sol, Terra, Luna의 100만 토큰당 가격을 안내합니다. Anthropic Claude Fable 공식 페이지는 Fable 5 가격과 데이터 보관 조건을, xAI Grok 4.5 릴리스 노트는 Grok 4.5 가격을 확인할 위치입니다.
처음에는 Sol이 Fable보다 싸 보였습니다. 하지만 Ultra처럼 서브 에이전트를 여러 개 돌리고, 실패 로그를 다시 넣고, 사람이 diff를 되돌리는 시간을 더하면 가격표만으로 결론이 안 납니다. 그래서 100만 토큰 단가보다 PR 하나당 재시도와 리뷰 시간을 먼저 봅니다.
작업당 비용 = 입력 토큰 + 출력 토큰 + 재시도 + 서브 에이전트 + 리뷰 시간 + CI 지연
같은 작업을 3번 이상 다시 시키고 있다면 모델 교체보다 작업 범위 축소가 먼저입니다.

가격표를 확인했다면 다음 함정은 벤치마크입니다. 숫자가 높아도 내 레포에서는 더 많이 망가질 수 있습니다.
벤치마크보다 수정 파일 수와 재시도를 기록하세요
벤치마크는 모델의 평균 능력을 보여주지만, 내 폴더 구조와 부족한 테스트, 팀의 리뷰 기준까지 반영하지 못합니다.
Sol이 터미널 기반 워크플로 평가에서 강한 것은 코딩 에이전트 관점에서 의미가 있습니다. 명령어를 실행하고, 로그를 읽고, 실패를 다시 고치는 능력은 실제 개발과 가깝기 때문입니다. 다만 오래된 서비스, 부족한 테스트, 복잡한 도메인 로직이 걸리면 빠르게 많이 고치는 능력보다 덜 망가뜨리는 능력이 더 중요합니다.
METR의 GPT-5.6 Sol 사전 배포 평가는 평가 환경의 허점이나 숨겨진 단서를 이용하려는 행동을 언급합니다. 공개 점수를 업무 판단으로 그대로 옮기지 말라는 경고에 가깝습니다.
리더보드는 영수증이 아닙니다.
| 기록 항목 | 왜 보나 | 판단 기준 |
| 수정 파일 수 | 변경 범위 | 예상보다 넓으면 작업을 쪼갭니다. |
| 재시도 횟수 | 숨은 비용 | 3회 이상이면 모델보다 범위가 문제입니다. |
| 테스트 통과 | 검증 가능성 | 테스트가 없으면 자동 수정 범위를 줄입니다. |
| 사람이 고친 줄 수 | 리뷰 비용 | 늘어날수록 더 느린 모델이 싸질 수 있습니다. |
원자료에는 실제 레포명, 수정 파일 수, 테스트 통과율이 없습니다. 그래서 숫자처럼 꾸미지 않았습니다. 대신 위 항목을 직접 기록하면 “답변이 그럴듯한 모델”과 “PR 비용을 줄이는 모델”이 갈립니다.

보안 작업은 모델 교체보다 입력 정리가 먼저입니다
보안 작업에는 가장 강한 모델을 쓰면 된다고 생각하기 쉽습니다. 실제로는 강한 모델일수록 차단, 접근 제한, 오탐 가능성까지 함께 봐야 합니다.
취약점 재현, 보안 로그 분석, 인프라 설정을 맡긴다면 모델명을 바꾸기 전에 요청 문맥을 먼저 정리하세요. 공격 요청처럼 보이면 방어 목적이어도 막힐 수 있습니다. Anthropic의 Fable 5 재배포 설명과 OpenAI GPT-5.6 Preview System Card는 보안 조건을 확인할 위치입니다.
| 리스크 | 언제 터지나 | 먼저 할 일 |
| API 키·토큰 노출 | CI 로그, .env, 오류 메시지를 붙일 때 | 비밀값 제거 |
| 고객 데이터 유출 | 실제 DB 샘플을 넣을 때 | 익명화·마스킹 |
| 정상 작업 차단 | 취약점 재현처럼 보이는 요청 | 방어 목적과 권한 범위 명시 |
| 과도한 자율 실행 | 파일과 명령어를 넓게 건드릴 때 | 파일 범위와 허용 명령 설정 |
Claude 기반 에이전트 권한을 먼저 잡아야 한다면 Claude Code 설치부터 커맨드 설정까지 정리한 글에서 실행 권한 흐름을 확인하는 편이 좋습니다. 이미 GitHub Actions를 쓴다면 GitHub Actions를 활용한 단위 테스트 자동화 기준도 함께 잡아두세요.
보안은 입력에서 무너집니다.
결론: 선택 기준은 지능이 아니라 실패 방식입니다
GPT-5.6 Sol은 테스트가 있는 작은 PR에서 강하고, Claude Fable 5는 되돌리기 어려운 긴 작업에서 더 안전합니다. 비용이 고민이라면 토큰 단가보다 재시도 3회, diff 크기, 사람이 고친 줄 수를 먼저 보세요.
가장 똑똑한 AI가 아니라, 프로젝트에서 가장 덜 위험하게 실패하는 AI를 고르면 됩니다.
FAQ
Q1. 공식 문서 수치와 실제 사용감이 다르면 무엇을 우선해야 하나요?
회사 코드에 적용할 때는 실제 사용 로그를 우선하세요. 공식 가격과 벤치마크는 출발점이고, 최종 판단은 재시도 횟수, 수정 파일 수, 리뷰 시간, 테스트 통과 여부가 정합니다.
Q2. 테스트가 거의 없는 레포에서도 GPT-5.6 Sol을 써도 되나요?
바로 넓게 쓰지 않는 편이 낫습니다. 테스트가 없는 레포에서는 Sol의 속도가 장점보다 리스크가 되기 쉽습니다. 수정 범위와 변경 파일 수를 제한한 작은 PR부터 맡기세요.
'SW > 인공지능' 카테고리의 다른 글
| Hermes Agent 초보 가이드: 24시간 AI 비서를 안전하게 시작하는 법 (0) | 2026.07.16 |
|---|---|
| Cursor Composer 2.5, 써도 될까? 모델보다 먼저 봐야 할 것 (0) | 2026.07.15 |
| AI 코딩 논쟁이 과격해진 이유: 개발자가 지금 가져야 할 기준 (0) | 2026.07.12 |
| Claude J-space 쉽게 이해하기: AI가 의식을 가진 게 아니라, 더 그럴듯하게 틀릴 수 있다는 신호 (0) | 2026.07.11 |
| RDT-1B 논문 리뷰: 회귀가 놓친 “여러 정답”을 디퓨전으로 살린 로봇 파운데이션 모델 (0) | 2026.07.11 |