입점 신청회원가입로그인

Folkbench · AI API 중계 서비스 평가와 순위실제 환경에서
AI의 가치를 측정합니다

중계 서비스 현황을 파악하고 작업에 맞는 모델과 경로를 고르세요

업데이트평가 방법: 신뢰할 수 있는 통제 비교
검사성능 저하 모니터링
빠른 진단약 60초 만에 엔드포인트 하나 검사
데이터 기간: 최근 24시간 · 10분마다 동기화
OpenAI · 모델 9개Anthropic · 모델 13개DeepSeek · 모델 5개xAI Grok · 모델 4개Kimi · 모델 1개Google Gemini · 모델 10개Alibaba Qwen · 모델 3개Zhipu GLM · 모델 4개같은 개발사의 모델은 같은 색 계열의 명암으로 구분합니다

가용성

↗
최근 24시간 요청 성공률 · 높을수록 좋음
데이터가 있는 경로: 145개
99.0ModelflareDeepSeek V4 Pro100FluxLaneGPT 6 Astra100CheapAIClaude Fable 5100MuskAIDeepSeek V4.1 Flash100NexoTokenGPT 6 Astra100ZNB.aiDeepSeek V4.1 Flash100ZashmodelGPT 6.1 Sol100ApiporterClaude Fable 5.1100IKunCodeGPT 6 Astra100CheapRouterGPT 6 Astra

첫 토큰 지연 시간

↗
첫 토큰까지 걸린 시간(초) · 낮을수록 좋음
데이터가 있는 경로: 136개
0.86ModelflareGPT 5.6 Terra1.83FluxLaneDeepSeek V4.1 Flash3.02CheapAIKimi K31.95境AiClaude Fable 52.03ApiporterClaude Opus 5.52.38ZashmodelClaude Opus 5.52.51ZNB.aiDeepSeek V4.1 Flash2.88IKunCodeClaude Sonnet 53.31CloudbridgeGrok 4.73.52MuskAIClaude Sonnet 5

세션 비용

↗
코딩 세션당 비용(¥) · 낮을수록 좋음
가격이 있는 경로: 145개, 1달러 = 6.7698위안으로 환산
0.28ModelflareGrok 4.60.03CheapAIGPT 5.6 Luna0.32YisamaAPIDeepSeek V4.1 Flash0.62境AiGPT 5.6 Sol0.66CheapRouterGPT 6.1 Sol0.66aruhub APIGemini 3.8 Flash1.12Fuel ApiGPT 5.6 Terra1.27IKunCodeGrok 4.72.04A6apiGPT 6 Sol2.38ZashmodelGPT 6.1 Sol

Switch 앱

Folkbench 제작
macOS · Windows
로컬에서 원클릭으로
중계 서비스와 모델 전환

성능 저하 모니터링

모든 중계 서비스가 같은 비공개 문항에 답하며, 원시 정답률, 토큰 수, 모델 핑거프린트를 공개합니다

소식

↗
새 글 · 10월 23일
Kimi K3.1 Pro 심층 분석: 장기 코딩 작업, 3D 역량, 실제 사용 비용
새 글 · 10월 11일
AI가 직장에서 말을 잘하는지는 듣기 좋은 말솜씨가 아니라, “비꼬는 말”을 사실과 경계, 다음 단계로 바꿀 수 있는지에 달려 있습니다
새 글 · 10월 11일
요리를 하는 모델인가, 레시피만 쓰는 모델인가? 가정 주방 12가지 장면이 드러낸 모델의 실행 가능성
새 글 · 10월 11일
“분위기 깨지 않기”가 “솔직함”을 이길 때: 엄마 요리 칭찬 테스트가 드러낸 AI 감성 지능 평가의 사각지대
새 글 · 10월 9일
Haiku 5.5는 실제로 얼마나 강할까? 공식 성적표에서 봐야 할 것은 1위가 아닙니다
안정성 · 9월 17일

99% 가용성에 더는 속지 마세요: 저희가 겪은 AI API 중계 서비스의 함정과 안정성 테스트 가이드

가짜 200 응답, 스트림 끊김, 야간 지연에서 출발해 실제 프로덕션 경험을 좌우하는 안정성 지표와 테스트 방법을 설명합니다.

소프트웨어 엔지니어링 · 9월 17일

코딩 환경에서 AI 중계 서비스를 평가하는 소프트웨어 엔지니어링 가이드

코드 생성, 에이전트 툴체인, 긴 컨텍스트, 캐시 프로토콜을 중심으로 소프트웨어 엔지니어링 환경에서 중계 서비스의 품질을 점검하는 방법을 정리합니다.

평가 · 10월 5일

모델이 정말 ‘너프’됐을까? 실패한 스크린샷 한 장에서 신뢰할 수 있는 대조 실험까지

한 번의 실패는 모델이 실수했다는 사실을 증명할 수 있습니다. 하지만 그것만으로 모델이 예전보다 더 자주 실패한다는 것까지 증명할 수는 없습니다. 이 글은 그런 의심을 다른 사람이 다시 검증할 수 있는 증거로 바꾸는 방법을 다룹니다.

주요 모델의 중계 서비스별 지능, 비용, 가용성을 Folkbench가 독립적으로 실측했습니다

지능 vs. 세션당 비용

중계 서비스 가격 · 입력 200만 + 출력 4만 토큰의 코딩 세션 1회 기준, 공식 API와 같은 축

최적 사분면파레토 최적선GPT 6 SolGPT 6 AstraDeepSeek V4.1 FlashClaude Fable 5.1GPT 6.1 SolClaude Opus 5.5Grok 4.7DeepSeek V4 Pro 0813GPT 5.6 LunaGemini 4 ArgonKimi K3DeepSeek V4 ProQwen 3.8 MaxClaude Opus 5GPT 5.6 TerraGrok 4.6Gemini 3.8 FlashGLM 5.3
102030405060¥0.03¥0.1¥0.3¥1¥3¥10¥30¥100지능 지수(Artificial Analysis)코딩 세션당 비용(¥, 로그 스케일)GPT 5.6 Luna @ CheapAIGPT 5.6 Terra @ CheapAIDeepSeek V4.1 Flash @ YisamaAPIGPT 6.1 Sol @ ModelflareClaude Opus 5.5 @ 境Ai

파레토 최적선

공식 API 가격

Gemini 4 Carbon지능 60 · ¥59.6 / 세션
GPT 6.1 Sol지능 54.6 · ¥29.8 / 세션
GPT-6.1 Terra지능 51.3 · ¥14.9 / 세션
Claude Haiku 5.5지능 36.5 · ¥1.49 / 세션
Agnes 2.5 Pro Theta지능 24 · ¥1.44 / 세션
Nemotron 3.5 Lightning지능 5.5 · ¥0.87 / 세션

파레토 최적선

전체 중계 서비스 가격

Claude Opus 5.5 @ 境Ai지능 59.1 · ¥1.58 / 세션 · API 배율 0.027
GPT 6.1 Sol @ Modelflare지능 54.6 · ¥0.44 / 세션 · API 배율 0.015
DeepSeek V4.1 Flash @ YisamaAPI지능 32.6 · ¥0.32 / 세션 · API 배율 0.074
GPT 5.6 Terra @ CheapAI지능 32.3 · ¥0.27 / 세션 · API 배율 0.0089
GPT 5.6 Luna @ CheapAI지능 23.8 · ¥0.027 / 세션 · API 배율 0.0089

성능 저하 모니터링

성능 저하 모니터링 보기

같은 모델에 대해 모든 중계 서비스가 같은 모델 식별 프로브에 답하며, 프로브 일치율, 입력 토큰 수, 모델 핑거프린트의 원시 데이터를 공개합니다

성능 저하 모니터링

출제같은 시간대에 모든 중계 서비스가 같은 프로브에 답하며, 매번 표현을 바꿉니다
비교응답을 해당 모델의 기준 답변과 비교합니다
측정 항목프로브 일치율, 입력 토큰, 추론 토큰, 모델 핑거프린트
공개판정 없이 원시 수치를 그대로 공개합니다
모델 @ 중계 서비스프로브 일치율입력 토큰모델 핑거프린트가용성첫 토큰세션 비용
GPT 6 Sol@ Modelflare100%109–24,260GPT 6 Sol97.7%1.21 s¥0.44
DeepSeek V4.1 Flash@ Modelflare100%109–24,260DeepSeek V4.1 Flash98.2%1.31 s¥2.59
DeepSeek V4 Pro@ Modelflare100%109–24,260DeepSeek V4 Pro99.0%1.35 s¥11.4
Qwen 3.8 Max@ Modelflare100%109–24,260Qwen 3.8 Max98.0%1.06 s¥20.4
GPT 5.6 Sol@ Modelflare100%109–24,260GPT 5.6 Sol97.1%1.31 s¥1.12
GPT 5.6 Sol@ Modelflare100%109–24,260GPT 5.6 Sol97.8%1.84 s¥5.95
GPT 5.6 Sol@ Modelflare100%109–24,260GPT 5.6 Sol97.8%1.34 s¥37.2
GPT 5.6 Sol@ Modelflare100%109–24,260GPT 5.6 Sol98.1%1.24 s¥2.23