GitHub OSS 코퍼스 기반 기획 검증
기획은 AI로,
검증은 vibe-bench와 함께
기획서를 실제 GitHub repo 코퍼스와 비교합니다.
인용한 경쟁 repo는 실존 여부까지 확인하고, 근거가 부족하면 점수를 단정하지 않습니다.
MD·PDF·이미지 파일을 이 영역에 끌어다 놓거나 파일 버튼으로 첨부할 수 있어요. Enter 로 검증을 시작하고 Shift+Enter 로 줄을 바꿉니다.
벤치마크 · 전 수치 실측
같은 프론티어 모델도
검증 레이어를 통과하면 다르게 답합니다.
인용을 실제 GitHub 코퍼스에 대조하고, 근거가 부족하면 보류하도록 감싼 결과를 그대로 호출한 모델과 비교했습니다.
88
vibe-bench 신뢰 점수
인용 실존율과 범위 밖 보류율을 동일 가중
60/60
인용한 repo 실존
근거로 든 GitHub 저장소를 실제로 확인
0건
독립 재검증 오탐
8건의 독립 검증에서 잘못 경고한 사례
1.00 : 0.65
환각 적발 비교
GitHub 검증과 LLM 자기 검토의 적발률
TRUST LEADERBOARD
신뢰 순위
- 1100%75%88vibe-bench검증 레이어
인용 100% · 보류 75%
- 293%0%47Claude Opus 4.8
인용 93% · 보류 0%
- 382%0%41GPT-5.5
인용 82% · 보류 0%
- 458%0%29Grok 4.3
인용 58% · 보류 0%
- 549%0%24GLM 5.2
인용 49% · 보류 0%
실제 분석 화면
GitHub 비교 근거가 분석 아티클로 이어집니다.
내 기획과 가장 닮은 GitHub repo를 먼저 보여줍니다
인용한 저장소가 실존하지 않으면 링크와 함께 바로 드러냅니다
겹치는 기능과 비어 있는 기능을 기획 보강으로 모읍니다
검증을 통과한 사실만 액션 아이템과 수정 프롬프트로 정리합니다
모르면 점수를 지어내지 않고 보류합니다
내 기획과 가장 닮은 GitHub repo를 먼저 보여줍니다
인용한 저장소가 실존하지 않으면 링크와 함께 바로 드러냅니다
겹치는 기능과 비어 있는 기능을 기획 보강으로 모읍니다
검증을 통과한 사실만 액션 아이템과 수정 프롬프트로 정리합니다
모르면 점수를 지어내지 않고 보류합니다
붙여넣고, 대조하고, 가져갑니다
업로드한 기획서가 실제 OSS 생태계에서 어디에 놓이는지 읽고, 보강해, 다음 작업 환경으로 가져갑니다.
MD·PDF·이미지로 만든 기획서를 넣고, 원하면 비교하고 싶은 GitHub repo도 함께 적습니다.
실제 GitHub 코퍼스에서 가까운 repo를 찾아 겹치는 기능, 비어 있는 공백, 비교해야 할 대상을 계산합니다.
근거가 붙은 분석 아티클, 기획 보강, 액션 아이템, 주석 달린 MD와 MCP 실행 패킷으로 이어갑니다.
MCP 연동
Claude·GPT에서도 분석하고,
최신 작업 상태로 이어갑니다.
처음부터 MCP에서 분석을 요청하거나, 웹에서 보강한 내용을 내보내는 시점의 최신 작업 상태로 이어갈 수 있습니다. 같은 검증 기록을 사용하므로 작업 환경이 바뀌어도 맥락이 끊기지 않습니다.
어디서 쓰시나요?
- 1
설정 → 개발자 → 구성 편집을 열어요.
- 2
아래 구성을 붙여넣고 저장해요.
구성 파일 (JSON)
{ "mcpServers": { "vibe-bench": { "command": "npx", "args": ["-y", "mcp-remote", "https://kinvestment.ai/api/mcp"] } } } - 3
앱을 재시작하면 끝 — 대화창에서 이렇게 물어보세요.
예시 프롬프트
vibe-bench로 이 기획서를 검증해줘기획서 파일을 첨부하면 그대로 검증합니다.