자유 8월 검증 결과 공개 — 고위험 판정의 실제 사고율, 약속대로 전부 공개합니다

안녕하세요, 체크크립토 관리자입니다. 7월 10일에 미리 약속(사전 등록)해 둔 8월 검증 결과를 공개합니다. 사전 등록이란, 결과를 보기 전에 "무엇을·어떤 잣대로·언제 발표할지"를 먼저 박아두는 것입니다. 결과가 나쁘게 나와도 그대로 공개하기로 했고, 아래가 그 결과입니다. ■ 핵심 결과 (30일 창) 2026년 7월 한 달, 체크크립토가 "고위험(D·F)"으로 판정한 토큰 2,069개를 추적했습니다. 그중 34건이 이후 실제로 러그풀·허니팟 전환을 일으켰습니다. 같은 기간 "저위험(A·B)" 판정 5,509개에서는 20건이었습니다. 사고율로 보면 고위험 1.64% 대 저위험 0.36% — 고위험 판정군에서 실제 사고가 약 4.5배 더 자주 일어났습니다(통계 검정 p=0.00000007, 95% 신뢰구간 2.6~8.4배·승산비 기준). * 러그풀 = 개발자가 유동성(사고팔 수 있게 풀에 담긴 돈)을 빼서 도망가는 것 * 허니팟 = 사면 팔 수 없게 만들어진 토큰 ■ 정직 고지 - 이 수치는 판정 시점 이후의 '실측 변화'만 셉니다. 이미 확정 기록이 있던 토큰은 헤드라인에서 제외했습니다(자기 채점 방지). - 재관측되지 않은 토큰 2,938개는 분모에서 제외했으며 개수를 그대로 공개합니다. - 러그 모양이지만 페어 동일성·지속성이 증명되지 않아 제외한 사례: 1건. - 표본이 작습니다. 배수는 신뢰구간과 함께 읽어주세요. - 전체 창(7·14·21·30·45일) 결과를 모두 공개합니다 — 유리한 창만 고르지 않았습니다. ■ 전체 창 결과 (창 / 고위험 관측·사고 / 저위험 관측·사고 / 배수) 7일: 2,170 중 0건(0.00%) / 2,562 중 8건(0.31%) / 역방향 14일: 2,107 중 0건(0.00%) / 3,974 중 14건(0.35%) / 역방향 21일: 2,119 중 33건(1.56%) / 4,859 중 18건(0.37%) / 4.2배 30일(주 창): 2,069 중 34건(1.64%) / 5,509 중 20건(0.36%) / 4.5배 45일: 1,735 중 27건(1.56%) / 2,382 중 10건(0.42%) / 3.7배 ■ 최근 7·14일 창은 왜 뒤집혔나 (그대로 공개합니다) 최근 7·14일 창에서는 고위험군 사고가 0건, 저위험군에서 8·14건이 관측되어 방향이 뒤집혔습니다. 원인을 실측으로 확인했습니다. ①주된 원인은 재관측 빈도의 비대칭입니다 — 고위험 판정 토큰은 거의 매일 다시 살펴보지만(관측률 약 99%) 저위험 토큰은 드물게 봅니다(약 25%). 그래서 저위험 토큰의 오래된 붕괴가 '최근 며칠' 창에 뒤늦게 나타나고, 고위험 토큰의 사고는 이미 긴 창에 계상돼 최근 창에는 남지 않습니다. ②저위험 계상 사건(고유 토큰 13개)을 전수 대조한 결과 7개는 별도 검증 절차가 오탐(잘못된 사고 판정)으로 기각한 사례였고(잣대 동결 원칙 때문에 표에서는 거르지 않고 그대로 둡니다), 2개는 실제 사고였으며(저위험 판정의 실수 — 그대로 인정합니다), 4개는 아직 판정 전입니다. ■ 게시가 늦어진 이유 이 공표의 잣대와 문안은 7월 10일에 사전 등록되었고(변경 금지), 기준일은 8월 14일이었습니다. 게시가 약 일주일 늦어진 것은 같은 기간 진행한 시스템 전수 점검·수리 작업 때문이며, 결과를 보고 시점을 고른 것이 아닙니다 — 8월 11일 배포 검증 과정에서 이미 같은 잣대의 수치가 산출·기록되어 있었습니다. ■ 한계 - 이 발표의 잣대는 7월 10일에 동결된 버전입니다. 그 뒤 내부 검증 절차에는 오탐을 걸러내는 장치 4종이 추가됐지만, 약속을 지키기 위해 이 수치에는 적용하지 않았습니다 — 위 "뒤집힌 창" 분석이 그 차이의 실제 사례입니다. - 관측되지 못한 채 사라진 토큰은 사고로도 무사고로도 세지 않았습니다(개수 공개). - 머신러닝 성능 수치는 검증을 통과하기 전까지 공개하지 않습니다. 공개 점수는 지금도 전부 규칙 기반(휴리스틱)입니다. 추적은 계속되며, 표가 두꺼워지는 대로 같은 잣대로 다시 공표합니다. 이의·정정 요청은 상단의 "이의제기·정정" 페이지로 부탁드립니다.