넘스탯
LEARN · SIMULATE · VERIFY
확률부터 LLM까지, 원리부터 제대로 배우는 자기주도 학습 플랫폼
신뢰구간 실습
구간은 그물, 모수는 물고기 — 95%는 이번 그물이 아니라 ‘그물 던지는 절차’의 성적표입니다
이 실습의 질문 — 95% 신뢰구간, 모수가 그 안에 있을 확률이 95%라는 뜻일까?
원하는 개념·랩·가이드를 검색해보세요
Ctrl K여론조사의 '±3.1%p, 95% 신뢰수준'이 정확히 무엇을 약속하는지 아시나요
선거철 뉴스는 “지지율 42%, 표본오차 ±3.1%p(95% 신뢰수준)”라고 말합니다. 많은 사람이 이를 “진짜 지지율이 38.9~45.1% 안에 있을 확률이 95%”로 읽지만, 이미 만들어진 구간은 참값을 잡았거나 못 잡았거나 둘 중 하나입니다 — 확률이 아니라 사실만 남아 있습니다. 95%가 붙는 대상은 구간 하나가 아니라 구간을 만들어내는 절차입니다. 이 실습에서는 참 평균을 아는 ‘신의 시점’에서 그물(구간) 100개를 던져, 그 절차가 정말 약 95%의 비율로 참값을 잡는지 실측으로 확인합니다.
이 페이지에서 배우고 나면
- 95%가 “이 구간 하나”가 아니라 구간을 만드는 절차의 장기 포획률임을 100개의 실측 구간으로 설명할 수 있습니다.
- 신뢰수준을 올리면 구간이 길어지고 표본을 키우면 짧아지는 확신-정밀도 거래를 공식 x̄ ± z*·σ/√n 과 연결할 수 있습니다.
- “내 구간이 참값을 잡았는지는 알 수 없다”는 현실의 한계를 μ 숨기기 모드로 체험하고, 신뢰구간을 올바른 문장으로 보고할 수 있습니다.
예측 먼저 — 실험 전에 답을 정해 보세요
예측 → 실험 → 확인
정답을 몰라도 괜찮습니다 — 먼저 예측을 정해야 시뮬레이션 결과가 기억에 남습니다. 예측을 고른 뒤 아래 시뮬레이션으로 직접 확인하고, 그다음 결과를 열어 보세요.
1. "95% 신뢰구간 [170cm, 174cm]"의 올바른 해석은?
2. 신뢰수준을 95%에서 99%로 올리면 구간의 길이는?
낚싯대 100개 — 구간이라는 그물 던지기
던질 때마다 표본 20개를 실제로 추출해 구간 x̄ ± z*·σ/√n 을 만들고, 참 평균 μ를 잡았는지(파랑) 놓쳤는지(빨강)를 기록합니다.
던진 구간 수
0
포획 수 (μ 포함)
—
실측 포획률
—
이론 (신뢰수준)
95%
속도
신뢰수준
표본 크기 n = 20 → 구간 반너비 z*·σ/√n = ±4.38
실측 요약 — 이 실습이 보여주는 것
모집단 N(50, 10²)에서 표본 n개를 실제로 추출해 신뢰구간 x̄ ± z*·σ/√n을 최대 1만 개 만들고, 참 평균 μ=50을 잡았는지(파랑)/놓쳤는지(빨강)를 쌓아 "95%"가 구간 하나의 성질이 아니라 구간 생성 절차의 장기 포획률임을 실측하는 실험입니다.
- 95% 설정·n=20으로 구간 100개를 던진 시드 고정 실측 예: 첫 실행은 95개, 다음 실행은 97개가 μ를 포획 — "정확히 95개"가 아니라 실행마다 요동하고, 1만 개를 던지자 포획률 94.98%로 이론에 수렴했다 (90% 설정에서는 1만 개 중 90.18%)
- 신뢰수준을 올리면 구간이 길어진다: n=20에서 구간 반너비는 90% → ±3.68, 95% → ±4.38, 99% → ±5.76 (z* = 1.645 → 1.96 → 2.576) — 확신의 대가는 정밀도다
- 같은 95%에서 표본을 키우면 반너비는 n=5 → ±8.77, n=20 → ±4.38, n=80 → ±2.19 — n을 4배로 키우면 폭이 정확히 절반이 되는 √n 법칙
바로잡는 오개념: "이미 계산된 95% 신뢰구간 안에 모수가 있을 확률이 95%"라는 해석 — 만들어진 구간은 참값을 잡았거나 못 잡았거나 둘 중 하나이며, 95%는 개별 구간이 아니라 구간을 만드는 절차의 장기 성공률이다.
AI 튜터에게 물어보기
베타
— 정답 대신 힌트로 유도합니다. 지금 화면의 실험 상태를 알고 답해요.
예: “방금 결과가 이론과 다른데 왜죠?”, “이 값을 올렸는데 왜 반대로 변하죠?”
직접 해보기 — 실습 과제
- 100개의 성적표: 신뢰수준 95%에서 “100개 던지기”를 눌러 포획 수를 세어 보세요. 정확히 95개인가요? 리셋 후 다시 100개 — 이번에는 몇 개인가요? 95%는 한 판의 점수가 아니라 무한 반복의 장기 비율입니다.
- 확신의 가격: 신뢰수준을 90% → 99%로 바꿔가며 던져 보세요. 빨간 막대(미포획)는 드물어지지만 막대가 눈에 띄게 길어집니다 — “더 확실하게”의 대가는 “덜 정밀하게”입니다.
- 데이터의 힘: 같은 95%에서 n을 5 → 20 → 80으로 키워 보세요. 회색으로 남은 이전 막대(고스트)와 비교하면 폭이 줄어드는 것이 보입니다. n을 4배로 키우면 폭은 얼마나 줄어드나요? (공식의 √n을 확인하세요)
- 현실 모드: “μ 숨기기”를 켜 보세요. 세로선이 사라지고 모든 막대가 회색이 됩니다 — 이것이 실제 연구자의 시점입니다. 논문의 신뢰구간 하나를 보며 우리가 말할 수 있는 것과 없는 것을 구분해 보세요.
- 미포획 사냥: 90%로 놓고 속도 MAX로 실행해 보세요. 실측 포획률이 90% 근처로 수렴하는 것, 즉 10%의 빨간 막대는 ‘오류’가 아니라 절차에 설계된 비용임을 확인하세요.
개념 정리 — 신뢰구간
- 신뢰구간(Confidence Interval): 표본으로부터 모수(예: 모평균 μ)를 덮도록 설계된 구간. 95% 신뢰구간이란 “같은 절차를 무한히 반복하면 만들어지는 구간들의 약 95%가 참값을 포함한다”는 뜻입니다. 예지 네이만(Jerzy Neyman)이 1937년에 이 정의를 정식화했습니다.
- 잘못된 해석 vs 올바른 해석: 이미 계산된 구간에 대해 “μ가 이 안에 있을 확률 95%”는 성립하지 않습니다 — μ는 움직이지 않는 상수이고, 무작위인 것은 구간 쪽입니다. 확률은 절차에, 사실은 개별 구간에 속합니다.
- 구간의 폭: 폭 = 2 × z*·σ/√n. 신뢰수준이 올라가면 z*가 커져 길어지고 (90% → 1.64, 95% → 1.96, 99% → 2.58), 표본이 커지면 √n으로 나뉘어 짧아집니다. n을 4배로 키우면 폭은 절반이 됩니다.
- 다음 질문: 95% 신뢰구간이 어떤 값(예: 0.5)을 포함하지 않는다면, 그 값을 “기각”할 수 있을까요? — 신뢰구간과 동전의 양면을 이루는 가설검정이 다음 실습의 주제입니다.
더 깊이 학습하기
- Neyman, J. (1937): “Outline of a Theory of Statistical Estimation Based on the Classical Theory of Probability” (Philosophical Transactions of the Royal Society A) — 신뢰구간 개념의 원전
- Freedman, Pisani & Purves (2007): “Statistics” (W. W. Norton) — 21장 표본오차와 신뢰구간의 올바른 해석
- Cumming, G. (2012): “Understanding The New Statistics: Effect Sizes, Confidence Intervals, and Meta-Analysis” (Routledge) — 신뢰구간 중심의 통계 보고