본문으로 건너뛰기
106 / STATISTICS LAB
먼저 알아두면 좋아요 · 연결된 선수 절의 확률·기대값·회귀·미분·극한
단원 목록 (600) · 우도·MLE·MAP와 사후평균
이해하는 속도로 읽으세요.개념도이론실험확인 문제
BUILD YOUR INTUITION

먼저 그림으로 이해하기

한 번에 한 단계씩 살펴보세요.

고정한 데이터의 우도와 사전 정보를 결합한 추정값들을 비교합니다.

Observed n=10, k=7; Beta(2,2) prior; posterior Beta(9,5); both profiles independently peak-scaled to 1

011.050
가로: 모수 p · 세로: 각각 최대값을 1로 맞춘 상대 곡선 · 파랑: 우도 · 주황: 사후 형태
quantityestimate
MLE0.7
MAP0.667
posterior mean0.643

MLE = 0.7

고정 기준 예제의 그림과 수치입니다. 각 단계에서 같은 그림의 의미를 차례로 살펴보세요. 고정된 기준 예제이며 아래 실험의 설정과 독립적입니다.
1 / 4

우도

데이터를 고정하고 모수를 바꿉니다.

L(p)=p⁷(1−p)³

실험에서 확인하기 →
이 단원 목차

데이터를 고정한 우도

10회 Bernoulli 시행 중 성공 k개를 관측했다고 합시다. 우도는 이 데이터를 고정하고 p를 바꾸는 함수입니다. 순서 표본의 우도와 성공 개수의 우도는 p와 무관한 이항계수만 달라 최댓값 위치가 같습니다. 우도는 p에 대해 적분 1인 분포가 아니며 사후분포로 읽으면 안 됩니다. 파랑은 최대 높이를 1로 조정한 상대 우도입니다.

L(p)∝pk(1−p)10−k,p^MLE=k/10.L(p)\propto p^k(1-p)^{10-k},\qquad\hat p_{\mathrm{MLE}}=k/10.

Beta 사전과 공액 갱신

Beta(α,β) 사전의 밀도는 p^(α−1)(1−p)^(β−1)에 비례합니다. 우도와 곱하면 같은 형태를 유지해 사후는 Beta(k+α,10−k+β)입니다. 실습은 α,β가 1 이상인 경우만 사용하므로 내부 또는 단일 경계 최빈값을 간단히 계산할 수 있습니다. α나 β가 1보다 작은 모든 Beta 사전의 경계 특성까지 구현한 것은 아닙니다.

p∣x∼Beta⁡(A,B),A=k+α, B=10−k+β.p\mid x\sim\operatorname{Beta}(A,B),\quad A=k+\alpha,\ B=10-k+\beta.

최빈값과 평균을 따로 읽기

기준 k=7,α=β=2에서는 MLE=0.7입니다. 사후 Beta(9,5)의 MAP는 8/12=2/3이고 평균은 9/14입니다. 서로 다른 추정 요약입니다. MAP는 선택한 p 좌표의 밀도 최빈값이며, 일반적으로 비선형 재매개화의 Jacobian에 영향을 받습니다. 사후평균은 제곱오차 사후 위험을 최소화하는 요약이지만 다른 손실에는 다른 요약이 적절할 수 있습니다.

p^MAP=A−1A+B−2,E[p∣x]=AA+B.\hat p_{\mathrm{MAP}}=\frac{A-1}{A+B-2},\qquad E[p\mid x]=\frac A{A+B}.

균등 사전과 경계 사례

균등 사전 α=β=1이면 MAP와 MLE가 일치하지만 사후평균은 다를 수 있습니다. k=0에서는 두 최댓값이 0이고 사후평균은 1/12입니다. 주황은 사후의 형태를 보여주지만 역시 최대 높이를 1로 따로 조정했으므로 두 곡선의 면적을 확률로 비교하지 마세요. MLE·MAP가 경계에 있다고 데이터가 모수를 확실히 증명한 것은 아닙니다.

확인 문제와 해설

  1. 사후 밀도는 무엇을 정규화하나요? 사전과 우도의 곱을 p에 대해 정규화합니다.
  2. 기준 사후평균은? 9/14≈0.643입니다.
  3. 균등 사전의 MAP와 평균은 항상 같나요? 아니요. MAP는 MLE와 같아도 평균은 다를 수 있습니다.

추가 읽기: MIT 18.650, Statistics for Applications.

CHECK YOUR UNDERSTANDING

설명할 수 있나요?

실험 설정과 무관한 기준 예제를 묻습니다. 답을 고르고 설명을 확인해보세요.

1. 우도는 항상 모수의 확률분포인가요?
2. 사후평균과 MAP는 항상 같나요?

선택한 답과 학습 표시는 이 브라우저에 저장됩니다. 다시 풀거나 표시를 해제할 수 있습니다.