15강 / 20강

얼마나 센 교란이면 이 결과가 뒤집히나

안 잰 것을 다룰 수 있는 유일한 방법

지금까지의 결론은 우울합니다 — 안 잰 교란은 조정할 수 없다.

그런데 물음을 바꾸면 답할 수 있는 것이 하나 생깁니다.

"이 결과를 지우려면 그 숨은 요인이 얼마나 세야 하는가"

이 값을 계산해 두면, 읽는 사람이 스스로 판단할 수 있습니다 — 그만큼 센 요인이 있을 법한가?

고등학생E-value라는 지표

관찰된 연관을 설명해 없애는 데 필요한 최소한의 교란 강도입니다.

관찰된 RR	E-value (대략)	뜻
1.5	2.4	교란요인이 양쪽과 2.4배 이상 연관돼야
2.0	3.4	—
5.0	9.5	매우 강한 교란이 필요
10.0	19.5	사실상 불가능

효과가 클수록 교란으로 설명하기 어려워집니다 — 4강의 흡연 이야기가 그렇습니다.

E-value 가 크면 <b>교란으로 지우기 어렵다</b>는 뜻입니다. 흡연-폐암은 47이 넘습니다.

Python 브라우저에서 실행

# E-value - 관찰된 관련을 지우는 데 필요한 최소한의 교란 세기
import numpy as np

def evalue(rr):
    rr = max(rr, 1/rr)                       # 1 보다 크게 맞춘다
    return rr + np.sqrt(rr * (rr - 1))

print("E-value: 숨은 요인이 노출과도, 결과와도 '이만큼' 얽혀 있어야")
print("         관찰된 관련이 통째로 설명된다.")
print()
print("  관찰된 RR    E-value    읽는 법")
for rr in [1.1, 1.2, 1.5, 2.0, 3.0, 5.0, 24.5]:
    e = evalue(rr)
    if e < 1.5:   note = "아주 약한 교란으로도 지워진다"
    elif e < 2.0: note = "흔한 교란으로 설명될 수 있다"
    elif e < 3.5: note = "꽤 센 교란이 필요하다"
    else:         note = "그만한 요인을 찾기 어렵다"
    print(f"    {rr:6.2f}    {e:7.2f}    {note}")
print()
print("맨 아래는 4강의 흡연-폐암(0.17 -> 4.17)이다.")
print(f"E-value 가 {evalue(4.17/0.17):.0f} 이라는 것은,")
print("숨은 요인이 흡연과도 폐암과도 각각 그만큼 얽혀 있어야 한다는 뜻이다.")
print("그런 요인은 알려진 것이 없다 - 그래서 이 결론이 버텼다.")

민감도 분석이 하는 일과 못 하는 일

한다

· 결론이 얼마나 튼튼한지를 수로 만든다
· 독자가 스스로 판단할 재료를 준다
· 작은 관련(RR 1.2)에 겸손해지게 한다

못 한다

· 숨은 교란을 없애 주지 않는다
· 그만한 요인이 실제로 있는지 말해 주지 않는다
· 선택 편향·정보 편향에는 그대로 쓸 수 없다

E-value 는 답이 아니라 저울입니다. "이 결론을 뒤집으려면 이만한 것이 필요하다" 를 적어 두고, 그런 게 있을 법한지는 그 분야가 판단합니다.

고등학생E-value를 읽는 법

E-value가	판단
작음 (1.5 정도)	알려진 요인으로도 설명 가능 — 약한 증거
중간 (3~5)	측정한 교란요인들보다 강해야 — 그런 것이 있나?
큼 (10 이상)	알려진 어떤 요인보다 강해야 — 강한 증거

판단 기준 — 이미 조정한 변수들의 연관 강도와 비교합니다.

예를 들어 흡연을 조정했을 때 결과가 20% 바뀌었다면, 안 잰 요인이 흡연보다 훨씬 강해야 한다는 뜻이에요.

고등학생민감도 분석의 다른 형태

방법	묻는 것
E-value	교란이 얼마나 세야 뒤집히나
음성 대조 결과	노출과 무관해야 할 결과에서도 연관이 보이나
용량-반응 확인	많이 노출될수록 더 큰가
다른 설계로 재현	다른 편향 구조에서도 같은 답인가

두 번째 줄이 영리합니다 — 연관이 없어야 할 곳에서도 보이면 편향입니다.

🤔 확인 문제

어떤 관찰연구가 RR 1.15 를 보고했고 E-value 는 1.57 이었습니다. 알맞은 태도는?