HYEOKS 공개 확률 감사

70%라는 예측, 실제로 얼마나 맞았을까?

킥오프 전에 저장된 확률과 확정 결과를 대조합니다. 현재 모델로 과거 예측을 다시 계산하지 않습니다.

자료 조회 기준: 2026. 10. 27. 22:12 KST

검사 336행 · 포함 117개 고유 경기 · 제외 219행

포함 경기 기간: 2026. 09. 26. 22:00 KST ~ 2026. 10. 26. 05:00 KST
예측 저장 기간: 2026. 09. 26. 21:00 KST ~ 2026. 10. 26. 03:42 KST

경기별 공식 공개 기록과 원자료는 /performance에서 확인

이번 표본에서 확인한 것

검증된 117경기의 1순위 평균 확률은 50.4%, 실제 결과와 일치한 비율은 57.3%였습니다. 차이는 +6.9%p입니다.

세 결과 중 평균 예측과 실제 발생률의 절대 차이가 가장 큰 범주는 원정승입니다. 평균 예측 31.3%, 실제 발생 32.5%, 차이 +1.1%p였습니다.

이는 이번 표본에서 관측한 차이일 뿐 지속적인 모델 편향을 입증하지 않습니다. 확률 출처·리그·시점이 섞여 있고, 구간별 표본 수와 아래 불확실성 안내를 함께 봐야 합니다.

숫자를 읽기 전에

확률 보정(calibration)은 비슷한 확률을 제시한 경기에서 실제 발생 비율이 그 확률과 가까운지 보는 일입니다. 최고 확률 결과를 고르는 argmax 적중률과는 다릅니다. 70% 예측이 틀린 한 경기만으로 확률이 잘못됐다고 결론 내릴 수 없습니다.

첫 표의 관측 단위는 경기당 1행입니다. 저장된 1순위 확률로 구간을 나누고, 그 결과가 맞으면 1, 다르면 0으로 셉니다. 결과 빈도표는 각 경기의 홈승·무승부·원정승을 범주마다 하나의 사건으로 봅니다. 범주별 분모는 각각 N경기이며 3N개의 독립 경기가 아닙니다. 홈승 발생률은 홈승을 고른 예측의 적중률이 아닙니다.

차이는 실제 관측률 − 평균 예측 확률(%p)입니다. 음수면 예측이 관측보다 높았고 양수면 낮았습니다. 기대 발생 수는 해당 범주의 저장 확률 합으로 정수일 필요가 없습니다.

Wilson 95% 구간은 실제 관측 비율의 표본 불확실성입니다. 예측 확률 자체의 신뢰구간이나 모델 우수성 검정이 아닙니다. 경기 독립을 가정하므로 같은 팀·일정의 상관은 반영하지 못합니다. 구간별 30경기 미만은 소표본으로 해석을 유보합니다. 30경기 이상도 우수성을 입증하지 않으며 순위표를 만들지 않습니다.

1. 최고 확률은 실제 일치율과 가까웠나

전체 · 최고 확률 구간별 일치율(경기당 1행)
예측 구간	경기 수	평균 예측	실제 1순위 일치율	실제 − 예측	Wilson 95% 구간	주의
40% 미만	27	37.5%	29.6%	-7.9%p	15.9% ~ 48.5%	소표본 · 해석 유보
40~50%	37	44.0%	54.1%	+10.1%p	38.4% ~ 69.0%	불확실성 확인
50~60%	25	55.0%	72.0%	+17.0%p	52.4% ~ 85.7%	소표본 · 해석 유보
60~70%	20	63.5%	70.0%	+6.5%p	48.1% ~ 85.5%	소표본 · 해석 유보
70~80%	7	74.5%	85.7%	+11.2%p	48.7% ~ 97.4%	소표본 · 해석 유보
80~90%	1	88.0%	100.0%	+12.0%p	20.7% ~ 100.0%	소표본 · 해석 유보
90~100%	0	자료 없음	자료 없음	자료 없음	자료 없음	관측 없음

구간은 하한 포함·상한 미포함이며 마지막 90~100% 구간만 100%를 포함합니다.

2. 홈승·무승부·원정승을 얼마나 예상했나

전체 · 결과별 확률과 관측 빈도(범주마다 경기당 1사건)
결과	경기 수	기대 발생 수	실제 발생 수	평균 예측 확률	실제 발생률	실제 − 예측	Wilson 95% 구간
홈승	117	51.1	51	43.6%	43.6%	-0.1%p	34.9% ~ 52.6%
무승부	117	29.3	28	25.0%	23.9%	-1.1%p	17.1% ~ 32.4%
원정승	117	36.7	38	31.3%	32.5%	+1.1%p	24.7% ~ 41.4%

불확실성 확인 · 결과 빈도와 1순위 적중률을 혼동하지 마세요.

3. 확률 출처를 나누어 보기

서로 다른 입력을 한 모델의 능력으로 묶지 않습니다. model은 배당 혼합이 가능하고, market은 해외 배당, national은 국가대표 Elo입니다. none과 알 수 없는 출처는 제외합니다.

클럽 통계 모델(배당 혼합 가능) · 47경기 · 불확실성 확인

model · 최고 확률 구간별 일치율(경기당 1행)
예측 구간	경기 수	평균 예측	실제 1순위 일치율	실제 − 예측	Wilson 95% 구간	주의
40% 미만	9	37.6%	33.3%	-4.3%p	12.1% ~ 64.6%	소표본 · 해석 유보
40~50%	19	43.8%	68.4%	+24.7%p	46.0% ~ 84.6%	소표본 · 해석 유보
50~60%	10	55.2%	60.0%	+4.8%p	31.3% ~ 83.2%	소표본 · 해석 유보
60~70%	7	64.4%	85.7%	+21.3%p	48.7% ~ 97.4%	소표본 · 해석 유보
70~80%	2	75.4%	100.0%	+24.6%p	34.2% ~ 100.0%	소표본 · 해석 유보
80~90%	0	자료 없음	자료 없음	자료 없음	자료 없음	관측 없음
90~100%	0	자료 없음	자료 없음	자료 없음	자료 없음	관측 없음

model · 결과별 확률과 관측 빈도(범주마다 경기당 1사건)
결과	경기 수	기대 발생 수	실제 발생 수	평균 예측 확률	실제 발생률	실제 − 예측	Wilson 95% 구간
홈승	47	20.8	21	44.3%	44.7%	+0.3%p	31.4% ~ 58.8%
무승부	47	11.6	12	24.7%	25.5%	+0.8%p	15.3% ~ 39.5%
원정승	47	14.6	14	31.0%	29.8%	-1.2%p	18.7% ~ 44.0%

해외 배당 암시확률 · 70경기 · 불확실성 확인

market · 최고 확률 구간별 일치율(경기당 1행)
예측 구간	경기 수	평균 예측	실제 1순위 일치율	실제 − 예측	Wilson 95% 구간	주의
40% 미만	18	37.5%	27.8%	-9.7%p	12.5% ~ 50.9%	소표본 · 해석 유보
40~50%	18	44.2%	38.9%	-5.3%p	20.3% ~ 61.4%	소표본 · 해석 유보
50~60%	15	54.9%	80.0%	+25.1%p	54.8% ~ 93.0%	소표본 · 해석 유보
60~70%	13	63.1%	61.5%	-1.5%p	35.5% ~ 82.3%	소표본 · 해석 유보
70~80%	5	74.2%	80.0%	+5.8%p	37.6% ~ 96.4%	소표본 · 해석 유보
80~90%	1	88.0%	100.0%	+12.0%p	20.7% ~ 100.0%	소표본 · 해석 유보
90~100%	0	자료 없음	자료 없음	자료 없음	자료 없음	관측 없음

market · 결과별 확률과 관측 빈도(범주마다 경기당 1사건)
결과	경기 수	기대 발생 수	실제 발생 수	평균 예측 확률	실제 발생률	실제 − 예측	Wilson 95% 구간
홈승	70	30.2	30	43.2%	42.9%	-0.3%p	31.9% ~ 54.5%
무승부	70	17.7	16	25.2%	22.9%	-2.4%p	14.6% ~ 34.0%
원정승	70	22.1	24	31.6%	34.3%	+2.7%p	24.2% ~ 46.0%

국가대표 Elo · 0경기 · 관측 없음

national · 최고 확률 구간별 일치율(경기당 1행)
예측 구간	평균 예측	실제 1순위 일치율	실제 − 예측	Wilson 95% 구간	주의
40% 미만	자료 없음	자료 없음	자료 없음	자료 없음	관측 없음
40~50%	자료 없음	자료 없음	자료 없음	자료 없음	관측 없음
50~60%	자료 없음	자료 없음	자료 없음	자료 없음	관측 없음
60~70%	자료 없음	자료 없음	자료 없음	자료 없음	관측 없음
70~80%	자료 없음	자료 없음	자료 없음	자료 없음	관측 없음
80~90%	자료 없음	자료 없음	자료 없음	자료 없음	관측 없음
90~100%	자료 없음	자료 없음	자료 없음	자료 없음	관측 없음

national · 결과별 확률과 관측 빈도(범주마다 경기당 1사건)
결과	평균 예측 확률	실제 발생률	실제 − 예측	Wilson 95% 구간
홈승	자료 없음	자료 없음	자료 없음	자료 없음
무승부	자료 없음	자료 없음	자료 없음	자료 없음
원정승	자료 없음	자료 없음	자료 없음	자료 없음

버전 기록의 한계

현재 스냅샷 스키마에는 모델 버전이 기록돼 있지 않습니다. 따라서 버전별 분리나 변경 전후 효과 비교를 할 수 없습니다. 입력·설정이 바뀐 기록이 섞인 기간의 관측이며 현재 모델의 능력을 뜻하지 않습니다. 버전을 추정하거나 현재 코드로 소급해 붙이지 않습니다.

4. 리그별 관측 범위

리그 간 우열 비교가 아닙니다. 경기 구성·확률 출처·시점이 달라 단순 비교할 수 없습니다. 30경기 미만은 범주별 비교표를 보류합니다.

EPL · 25경기 · 소표본 · 해석 유보

소표본: 결과별 비교를 보류합니다.

UCL · 13경기 · 소표본 · 해석 유보

소표본: 결과별 비교를 보류합니다.

U네이션 · 48경기 · 불확실성 확인

U네이션 · 결과별 확률과 관측 빈도(범주마다 경기당 1사건)
결과	경기 수	기대 발생 수	실제 발생 수	평균 예측 확률	실제 발생률	실제 − 예측	Wilson 95% 구간
홈승	48	20.1	17	41.9%	35.4%	-6.5%p	23.4% ~ 49.6%
무승부	48	12.7	14	26.5%	29.2%	+2.7%p	18.2% ~ 43.2%
원정승	48	15.2	17	31.6%	35.4%	+3.8%p	23.4% ~ 49.6%

라리가 · 24경기 · 소표본 · 해석 유보

소표본: 결과별 비교를 보류합니다.

분데스리가 · 3경기 · 소표본 · 해석 유보

소표본: 결과별 비교를 보류합니다.

세리에A · 4경기 · 소표본 · 해석 유보

소표본: 결과별 비교를 보류합니다.

5. 포함·제외와 재현 기준

원천은 prediction_snapshots와 round_results입니다. /performance의 엄격 검증기를 사용해 유효한 저장 시각 < 유효한 킥오프, 정상 확률·최고 확률 픽·출처, 확정 결과와 점수·정산 시각 정합성을 요구합니다. 추가로 round_predictions.computed_at이 없거나 잘못됐거나 킥오프 이후인 입력도 제외합니다. 이 추가 필터 때문에 /performance와 경기 수가 다를 수 있습니다.

중복은 리그·홈팀·원정팀의 앞뒤 공백을 뺀 표기와 정규화한 킥오프 시각이 같은 경우입니다. 유효 기록 중 가장 늦은 킥오프 전 저장본 하나를 선택하며 동시각이면 round_match_id가 큰 것을 남깁니다. 회차 ID만으로 경기 수를 늘리지 않습니다. 표기 차이·일정 변경은 같은 경기로 확정할 수 없어 자동 병합하지 못하는 한계가 있습니다.

0건 · 예측 입력 계산 시각 누락·비정상(출처 확인 불가)
28건 · 예측 입력 계산이 킥오프와 같거나 이후
28건 · 아직 킥오프 전(집계 대상 아님)
162건 · 킥오프 전 예측 기록(스냅샷)이 없음 - 다시 계산해 채우지 않음
1건 · 결과 기록이 비정상(코드·점수 불일치, 정산 시각 이상)

한 행은 처음 걸린 제외 사유 하나만 셉니다. 조회 상한 5000행, round_matches.id 최신 등록순. 이번 조회는 상한에 걸리지 않았습니다.

검증된 고유 경기 100개 미만은 noindex로 운영합니다. 검색엔진 요구가 아니라 서비스 내부 편집 기준이며, 기준 도달은 통계적 검증이나 품질 보증이 아닙니다.

결과나 수익을 보장하지 않습니다. 구매는 만 19세 이상, 공식 판매처에서만 가능합니다. 도박 문제 상담 1336.