GOBenchmark
한국어
전 세계 조직을 위한 독립 비영리 프로젝트

조직의 AI 전환을 어떻게 측정할까?

G2AI 주도 운영G4괴델 조직↓

실제 업무로 조직의 자기 개선을 검증합니다.

모든 부서가 AI를 사용한다면, 요청 접수부터 결과 검수까지 AI가 맡을 수 있는 핵심 업무는 얼마나 될까요? 조직은 오늘의 실수에서 배워 다음 업무에서 같은 오류를 예방할 수 있을까요?

공개 평가 기준 · v0.1

각 등급에서 무엇을 입증할까?

에이전트가 실제 업무 기록을 정리하고 버전이 고정된 채점기가 평가합니다. G2는 핵심 업무 과반의 전 과정 납품, G4는 반복적으로 검증한 개선, G5는 개선 체계 자체의 진화를 살펴봅니다.

등급을 선택하면 정의와 필요한 증거를 볼 수 있습니다.

괴델 기계

기계는 언제 자신을 다시 써야 할까?

1931년 수학자이자 논리학자인 쿠르트 괴델은 불완전성 정리를 증명하면서 논리식과 증명을 수로 부호화했습니다. 이로써 산술이 증명 자체에 관해 말할 수 있게 되었습니다. 이 자기 참조의 발상은 프로그램이 자신의 코드를 추론하고 개선할 수 있는지 묻는 계기가 됩니다.

2003년 위르겐 슈미트후버는 괴델 기계를 제안했습니다. 이 이론적 기계는 작업을 수행하면서 코드 수정안을 찾습니다. 주어진 목표와 공리 아래 지금 수정하는 편이 기존 프로그램을 실행하며 다른 안을 계속 찾는 것보다 기대 효용이 높음을 증명하면 수정안을 실행합니다.

증명을 찾는 절차도 다시 쓸 수 있는 코드입니다. 재귀적 자기 개선(RSI)이란 한 번의 개선이 다음 개선을 찾는 방식까지 바꾼다는 뜻입니다. 증명은 공리와 환경 가정, 효용 함수에 의존하며 유익한 변경도 증명을 찾지 못할 수 있습니다.

괴델 조직(GO)은 업무에서 배우고 배우는 방법까지 개선하는 조직을 뜻합니다. GO Benchmark는 AI가 납품한 성과, 지속되는 절차 개선, 개선을 검증하는 방법의 변화로 그 과정을 평가합니다.

슈미트후버의 논문 ↗ IAS의 쿠르트 괴델 소개 ↗
괴델 조직 · GO

팀은 개선하는 방법을 어떻게 개선할까?

업무 흐름을 기록하고 사람이 정한 권한 안에서 AI가 변경을 제안합니다. 팀은 후속 작업으로 효과를 검증합니다. G4에 이르면 운영 성과, 비교 결과, 의사 결정 기록을 근거로 괴델 조직이라 부릅니다.

G4 · 견적 절차 개선

AI가 원거리 주문에서 반복되는 배송비 누락을 발견합니다. 승인을 받아 새 규칙을 시험하고 후속 주문에서 누락과 소요 시간을 비교해 채택하거나 되돌립니다. 다른 문제에서도 이 순환이 반복되어야 합니다.

G5 · 실험 방법 개선

AI가 시험 사례가 흔한 주문에 치우친 점을 발견하고 유형별 검증 사례를 따로 둡니다. 다음 할인 규칙 시험에서 같은 예산으로 소규모 고객의 오류를 더 일찍 찾습니다. 이 능력은 연구 목표입니다.

실제 사례 01 · 프로젝트 출범

GO Benchmark는 자체 출범 과정을 어떻게 평가했나

요청, 작업 기록, 인수 증빙을 대조해 결과물 여덟 건을 복원했습니다. AI가 32단계 중 21단계를 단독으로 수행해 출범 기간의 회고 평가에서 G1을 뒷받침했습니다.

사례 읽기

자체 평가 시작

팀의 에이전트가 요청, 작업 기록, 인수 증빙에서 결과물을 복원하고 로컬에서 평가와 재계산을 수행합니다.

자체 평가 시작