Folkbench/folkbench

• 무엇인지 — AI API 중계 서비스(中转站)의 가용률·응답 시간·가격을 측정해 공개하는 folkbench.com과 짝을 이루는 데스크톱 클라이언트 Folkbench Switch 저장소다. 고른 중계 경로를 Claude Code·Codex 등의 설정 파일에 써 넣는다.
• 왜 지금 떴나 — 2026-10-11 첫 Beta 공개 뒤 10-14, 10-17, 10-22에 Beta 릴리스가 이어졌고, 10-13 Hugging Face 포럼 글과 10-22 무렵 Instagram 홍보 릴스가 나오면서 급등일(10-12, 10-18, 10-24)과 맞물려 관심이 커진 것으로 보인다.
• 어떤 의미인지 — 중국권에서 Claude·GPT 계열 모델을 중계 서비스로 쓰는 개발자에게, 실측 데이터를 보고 여러 코딩 에이전트의 API 설정을 한곳에서 바꾸는 도구가 생겼다. 다만 아직 Beta이고, 순위표에 스폰서 이해관계가 섞여 있다는 점을 감안해야 한다.

• 2026-10-11 Folkbench Switch 0.1.0-beta.1이 공개됐다. 로컬 AI 코딩 도구의 API 서비스를 가져오고 미리 보고 전환할 수 있으며, Folkbench에 공개된 경로별 평가도 볼 수 있다. 같은 날 beta.2가 나와 모델 목록 조회와 Aider·OpenCode 사용량 읽기를 추가했다. GitHub 릴리스 · GitHub 릴리스 (확인)
• 2026-10-13 Folkbench 제작 참여자가 Hugging Face 포럼에 '모델이 멍청해졌나'를 측정하는 방법론 글을 올리고, 글 끝에 Folkbench 리더보드를 링크했다. discuss.huggingface.co (확인)
• 2026-10-14 0.1.0-beta.3에서 간이 모드와 첫 사용 안내, 같은 사이트의 여러 Key 관리, 로컬 사용량 표시가 추가됐다. Claude API 주소 기록과 Codex 인증 설정 문제도 고쳤다. GitHub 릴리스 (확인)
• 2026-10-17 0.1.0-beta.4에서 앱 내 업데이트 확인, CLI 설치 창, Node/npm/Homebrew 누락 감지가 들어갔다. 다음 날인 10-18 급등과 시점이 겹친다. GitHub 릴리스 (추정)
• 2026-10-22 0.1.0-beta.5가 나왔다. 서비스 카드에 사용자가 고른 모델 대신 순위표 기본 모델이 표시되던 문제를 고쳤다. GitHub 릴리스 (확인)
• 2026-10-22 오픈소스 소개 Instagram 계정이 Folkbench를 다룬 릴스를 올렸다. 10-24 급등 직전의 외부 노출로 볼 수 있다. instagram.com (추정)

중국 개발자 사이에서는 Claude·GPT·Gemini 같은 해외 모델을 공식 API 대신 서드파티 중계 서비스(中转站)로 호출하는 경우가 많다. 이런 서비스는 수가 많고 안정성·가격·데이터 처리 방식이 제각각이라 어디를 써야 할지 판단하기 어렵다. folkbench.com은 각 중계 서비스를 계속 테스트해 성공률·응답 시간·가격·데이터 보안 등급을 공개하고, 종합·안정성·가성비 순위와 모델별 순위를 제공한다. FAQ는 게시된 견적과 실측 가용률이 서로 다른 사실이라고 구분한다.

이 저장소는 그 사이트와 짝을 이루는 데스크톱 클라이언트 Folkbench Switch의 코드다. 사용자가 순위표에서 고른 중계 경로를 Claude Code, Codex, Gemini CLI, OpenCode 등 AI 코딩 도구의 설정에 써 넣는다. 브라우저로 Folkbench에 로그인한 뒤 서비스를 찾아 연결하고, 설정을 가져오기·미리보기·전환할 수 있다. 같은 사이트에 Key를 여러 개 등록하고, 모델 목록을 불러오고, Aider·OpenCode 등의 로컬 사용량을 보는 기능도 있다.

안전장치도 갖췄다. 단일 인스턴스 실행과 공유 설정 쓰기 잠금을 두고, 작업이 실패하면 이번에 쓴 내용만 되돌리며, 외부에서 설정이 바뀐 것을 감지하면 멈춰서 다른 도구의 설정을 덮어쓰지 않는다. 배포본은 macOS(Apple Silicon/Intel)용 .dmg와 Windows x64용 .exe이고 SHA256 체크섬을 함께 제공한다. 현재 0.1.0 Beta 단계다.

근거가 있는 항목이 없다.

• Folkbench 제작 참여자가 모델 성능 저하('nerf') 주장을 반복 샘플링으로 채점하는 방법론을 공유하면서, 그 결과를 모아 보는 곳으로 Folkbench 리더보드를 제시했다. discuss.huggingface.co (확인)
• Claude Code·Codex·OpenCode·Hermes 등에 중계 서비스 API 주소와 인증 정보를 직접 고쳐 쓰는 대신, GUI에서 경로를 골라 일괄 적용하는 용도로 쓴다. GitHub · GitHub 릴리스 · GitHub 릴리스 (확인)
• 특정 모델(GPT·Claude·Grok·DeepSeek 계열)이 중계 서비스별로 어떤 실측 성능을 내는지 모델별 순위표로 비교한 뒤 공급자를 고르는 데 쓴다. GitHub (확인)

• 모든 릴리스가 0.1.0 Beta이고 Stable이 아니다. Windows 설치 파일에는 Authenticode 서명이 없어 보안 경고가 뜰 수 있다. 개발 도구 설정 파일을 직접 고치는 앱이므로 초기 버그의 영향이 크다. GitHub 릴리스 · GitHub 릴리스 · GitHub 릴리스 · GitHub 릴리스 (확인)
• README 맨 위에 중계 서비스 스폰서(Modelflare, CheapAI, FluxLane)의 홍보 문구와 추천 링크가 실려 있다. 같은 운영자가 중계 서비스 순위를 매기는 구조라 이해충돌 가능성이 있으니, 순위의 중립성은 별도로 따져 봐야 한다. GitHub (추정)
• 외부 노출 근거 상당수가 제작자 본인의 포럼 글이나 홍보성 SNS 게시물이다. Instagram 릴스의 'Rust로 작성' 같은 주장은 README에서 확인되지 않는다. 독립적인 사용 후기는 수집되지 않았다. instagram.com · discuss.huggingface.co (추정)
• 이 도구가 연결해 주는 중계 서비스는 프롬프트와 코드를 제3자 서버로 보낸다. 데이터 보안 등급을 표시한다고 해도, 회사 코드에 쓰기 전에는 각 서비스의 데이터 처리 방식을 따로 확인해야 한다. GitHub (추정)

• 2026-10-29 처음 작성 — 기준일 2026-10-24 · 근거 25건

• E1 Folkbench/folkbench — GitHub
• E2 Folkbench/folkbench Folkbench Switch 0.1.0-beta.5 — GitHub 릴리스 · 2026-10-22
• E3 Folkbench/folkbench Folkbench Switch 0.1.0-beta.4 — GitHub 릴리스 · 2026-10-17
• E4 Folkbench/folkbench Folkbench Switch 0.1.0-beta.3 — GitHub 릴리스 · 2026-10-14
• E5 Folkbench/folkbench Folkbench Switch 0.1.0-beta.2 — GitHub 릴리스 · 2026-10-11
• E6 Folkbench/folkbench Folkbench Switch 0.1.0-beta.1 — GitHub 릴리스 · 2026-10-11
• E13 Instagram — instagram.com · 2026-10-22
• E24 We kept arguing about whether models "got dumber" — so we started scoring it, pelican by pelican - Show and Tell - Hugg… — discuss.huggingface.co · 2026-10-13