지도와 영토 (Map Is Not the Territory)
처음 실린 날 2026-05-31 · 마지막으로 고친 날 2026-09-27
다른 이름: 지도와 영토 · 지도는 실제가 아니다 · Map Is Not the Territory
한 줄 정의
현실을 설명하는 모든 표상(지도·모델·지표·진단명·개념)은 현실을 단순화한 사본이고, 원본의 구조 일부만 담는다 [Korzybski 1933]. 표상이 유용한 것은 현실과 "비슷한 구조"를 가질 때뿐이고, 그 구조가 어긋나면 정확해 보이는 지도가 오히려 길을 잃게 만든다.
일상 한 줄
지표·진단명·고정관념은 현실을 줄여 그린 지도다. 지도를 영토로 착각하면, 숫자는 맞는데 실제는 틀린 결정에 도달한다. "모든 모델은 틀렸지만 일부는 유용하다"는 말이 정확히 이 긴장을 가리킨다 [Box 1976].
이 카드의 따옴표 인용 중 원문과 대조하지 못한 것은 그렇다고 표시했습니다. "지도와 영토"는 인식의 원칙이라 효과를 한 숫자로 재는 메타분석이 없고, 그래서 confidence 를 B로 둡니다. 근거는 인접한 실증 연구(유창성·진실 효과, 지표 왜곡)로 보강했습니다.
흔한 장면
- 지표를 목표로 착각: KPI·평점·구독자 수를 올리는 데 몰두하다, 정작 그 지표가 대리하려던 실제 가치(고객 만족·건강·실력)는 정체되거나 악화된다. 지도(지표)를 영토(실제 상태)로 바꿔치기한 것.
- 진단명을 사람으로 환원: "ADHD다", "INTJ다", "번아웃이다"라는 라벨이 한 사람의 전체를 설명한다고 믿는 순간. 라벨은 증상 묶음의 약어일 뿐 그 사람의 영토 전부가 아니다.
- 모델 출력을 현실로 신뢰: 재무 모델·기상 예측·AI 점수가 소수점까지 떨어지면 "정밀=정확"이라 착각. 입력 가정이 현실과 다르면 정밀한 출력은 정밀한 오답이다.
- 평균·대표값으로 개인 판단: "20대 남성의 평균 소비"로 눈앞의 한 사람을 예측. 평균은 분포를 지운 지도라 개별 영토를 자주 빗나간다.
- 고정관념·고정 라벨로 사람 분류: "그 부서는 원래 느려", "재수강생은 의욕 없어." 과거의 거친 지도로 현재의 영토를 덮어쓴다.
- 차트·대시보드가 곧 현장이라는 착각: 회의실 대시보드만 보고 의사결정. 현장(영토)을 직접 보면 지표가 못 담은 신호가 보인다.
- 개념·용어로 본질을 안다고 착각: 단어를 외우면 현상을 이해했다고 느끼는 함정. 이름은 영토에 붙인 라벨이지 영토의 작동 원리가 아니다.
왜 빠지나 (메커니즘)
- 표상은 늘 손실 압축이다 [Korzybski 1933, p.58] — 지도가 쓸모 있는 것은 영토와 "비슷한 구조(similar structure)"를 가질 때이고, 모든 지도는 세부를 버리며 만들어진다. 버린 세부가 결과를 가르는 경우 지도는 조용히 틀린다.
- 모든 모델은 정의상 틀렸다 [Box 1976, p.792] — "Since all models are wrong the scientist cannot obtain a 'correct' one by excessive elaboration." 모델을 더 정교하게 만든다고 '맞는' 모델이 되지 않는다. Box 는 같은 글에서 "무엇이 중요하게 틀렸는지"를 가려 걱정하라고 했다.
- 측정이 행동을 바꾼다(지표의 자기무력화) [Goodhart 1975; Campbell 1979; Strathern 1997] — 지표를 목표로 삼는 순간 사람들이 지표만 맞추게 되어 지도와 영토가 더 벌어진다. 사회 지표가 의사결정에 많이 쓰일수록 왜곡·부패 압력을 받는다는 Campbell 의 법칙도 같은 현상이다. 지표와 목표가 어긋나는 경로는 회귀형·극단형·인과형·적대형 네 가지로 나눌 수 있다 [Manheim & Garrabrant 2018].
- 유창성·정밀성을 정확성으로 오인 — 읽기 쉬운 글자로 쓴 문장이 더 참으로 판단됐고 [Reber & Schwarz 1999], 여러 번 본 문장도 더 참으로 판단됐다(진실 효과, 51편 메타분석) [Dechêne et al. 2010]. 깔끔한 숫자·잘 그린 차트·익숙한 라벨도 같은 방식으로 진실감을 만든다. 정밀한 지도일수록 영토로 착각하기 쉽다.
빠져나오는 법
1. 지도와 영토를 의식적으로 분리해 명명한다 — "이건 지표(지도)이고, 우리가 실제로 원하는 건 무엇(영토)인가?"를 매번 적는다. Korzybski가 일반의미론에서 의도한 핵심 훈련이 바로 표상과 대상을 구별하는 의식("consciousness of abstracting")이다 [Korzybski 1933]. — 근거 수준: 이론(이 훈련의 효과를 통제 연구로 입증한 자료는 찾지 못함) 2. 모델의 가정을 명시화한다 — "이 모델/지표가 참이려면 무엇이 사실이어야 하나?"를 목록화. Box의 처방대로 모델을 신봉하지 말고 "얼마나 틀렸는지, 그 틀림이 결정을 바꾸는지"를 묻는다 [Box & Draper 1987, p.74]. — 근거 수준: 통계학자의 원칙(효과 연구 없음) 3. 지도를 복수로 둔다 — 같은 영토에 대한 다른 지도(다른 지표·다른 모델·다른 관점)를 겹쳐 본다. 단일 지도의 사각지대를 다른 지도가 메운다. — 근거 수준: 경험칙(직접 검증 연구 없음) 4. 영토를 직접 본다 — 대시보드 대신 현장·원자료·실제 사용자를 직접 관찰한다. 지표가 못 담은 신호를 잡는 방법이다. 의학에서는 대리지표 대신 실제 임상 결과(사망 등)를 주 평가변수로 두라는 권고가 이에 해당한다 [Fleming & DeMets 1996]. — 근거: 무작위 시험 [CAST Investigators 1989] (대리지표는 좋아졌는데 사망이 늘었다), 방법론 리뷰 [Fleming & DeMets 1996] 5. 지표를 목표로 굳히지 않는다 — 측정값을 보상에 직결하면 Goodhart 효과로 지도-영토 간극이 커진다. 지표는 진단 신호로 쓰고, 보상은 영토(실제 결과)에 건다. — 근거 수준: 게이밍 사례 연구 [Bevan & Hood 2006] (이 처방의 효과를 비교한 연구는 찾지 못함)
함께 쓰기 좋은 도구
- metric-gaming (지표 게이밍) — Goodhart 법칙의 구체 발현. 지도를 목표로 삼을 때 영토가 망가지는 메커니즘.
- systems-thinking (시스템 사고) — 영토(시스템 전체의 상호작용)를 보게 해, 단일 지표 지도의 한계를 보완.
- first-principles (제1원리 사고) — 라벨·관습(물려받은 지도)을 걷어내고 영토의 근본 사실에서 다시 짓는다.
- regression-to-mean (평균 회귀) — 평균이라는 지도가 개별 영토를 어떻게 오도하는지 보여주는 짝.
통념이 무너지는 순간
"모델/지표가 정밀할수록 현실에 더 가깝다"
⚠ 흔한 말: "소수점까지 나오는 모델이니까 더 정확하겠지. 데이터가 그렇다는데." ✓ 학술: George Box (1976) — "Since all models are wrong the scientist cannot obtain a 'correct' one by excessive elaboration" (verbatim, JASA 71(356):792). 정교화로 '맞는' 모델에 도달하지 못한다. 정밀성과 정확성은 다른 축이고, 모델은 정의상 모두 틀렸으며 일부만 유용하다 [Box 1976; Box & Draper 1987].
"라벨/진단명을 알면 그 대상을 안 것이다"
⚠ 흔한 말: "걔는 INTJ야 / 그건 ADHD야"라고 이름 붙이면 다 설명됐다고 느낌. ✓ 학술: Korzybski (1933) — "A map is not the territory it represents, but, if correct, it has a similar structure to the territory" (verbatim, Science and Sanity, p.58). 라벨은 영토에 붙인 지도이고, 잘해야 대상과 "비슷한 구조"를 가진다. 이름을 안다고 작동 원리를 아는 것은 아니다 [Korzybski 1933]. 실험에서도 사람들은 지퍼·변기 같은 장치를 안다고 평가했다가, 단계별 인과 설명을 직접 써 본 뒤 평가를 낮췄다 [Rozenblit & Keil 2002]. 어떤 설명 틀을 붙이느냐도 판단을 바꾼다. 같은 환자 사례를 생물학적 설명과 함께 읽은 정신건강 임상가는 심리사회적 설명과 함께 읽었을 때보다 공감을 덜 보고했다 [Lebowitz & Ahn 2014].
"지표를 목표로 박으면 그 지표가 좋아진다"
⚠ 흔한 말: "측정 가능한 걸 목표로 걸어야 관리가 된다." ✓ 학술: Goodhart 법칙의 Strathern (1997) 정식화 — "When a measure becomes a target, it ceases to be a good measure" (원문 대조 못 함 — 2차 출처 기반). 지표를 목표로 삼는 순간 사람들이 지표만 맞춰, 지도(측정값)는 좋아 보여도 영토(실제 가치)는 벌어진다 [Goodhart 1975; Strathern 1997]. 의학에서는 심근경색 뒤 부정맥(지표)을 억제한 약 encainide·flecainide 가 위약보다 전체 사망을 늘렸다(7.7% 대 3.0%, 상대위험 2.5) [CAST Investigators 1989].
"지도가 틀렸으면 버려야 한다"
⚠ 흔한 말: "모델이 틀렸다면서? 그럼 쓸모없는 거 아냐?" ✓ 학술: Box & Draper (1987) — "Essentially, all models are wrong, but some are useful" (p.424, 원문 대조 못 함 — 2차 출처 기반). 틀린 모델도 한계를 알고 쓰면 된다. 물어야 할 것은 "이 결정에 쓸 만큼 충분히 가까운가"이다. Box 는 1976년 글에서 이미 "중요하게 틀린 곳"에만 신경 쓰라고 했다 [Box 1976, p.792].
1차 출처
- Korzybski, A. (1933). Science and Sanity: An Introduction to Non-Aristotelian Systems and General Semantics. The International Non-Aristotelian Library Publishing Co. (인용 문장 p.58). 표현 "a map is not the territory"는 1931년 12월 미국수학회(American Mathematical Society) 발표 논문 "A Non-Aristotelian System and Its Necessity for Rigour in Mathematics and Physics"(AAAS 뉴올리언스 연례회의, 1931-12-28에 함께 열림)에서 처음 제시되었고, 1933년 저서에 Supplement III로 정식 수록 (검증: 2026-05-31, archive.org 원전 Science and Sanity p.58; 발표 귀속은 Institute of General Semantics 공식 기술).
- Box, G. E. P. (1976). Science and Statistics. Journal of the American Statistical Association, 71(356), 791–799. DOI: 10.1080/01621459.1976.10480949. "all models are wrong" 표현의 원전(p.792).
- Box, G. E. P., & Draper, N. R. (1987). Empirical Model-Building and Response Surfaces. Wiley. ISBN 978-0-471-81033-9. 완성형 인용 "Essentially, all models are wrong, but some are useful" (p.424) 및 "how wrong... to not be useful" (p.74).
- Goodhart, C. A. E. (1975). Problems of monetary management: The U.K. experience. Papers in Monetary Economics, Vol. 1. Reserve Bank of Australia. 재수록: Goodhart (1984), Monetary Theory and Practice (pp. 91–121). Palgrave. DOI: 10.1007/978-1-349-17295-54. 원형 문장은 "Any observed statistical regularity will tend to collapse once pressure is placed upon it for control purposes." (원문 대조 못 함 — 2차 출처 기반)
- Strathern, M. (1997). 'Improving ratings': Audit in the British University system. European Review, 5(3), 305–321. DOI: 10.1002/(SICI)1234-981X(199707)5:3<305::AID-EURO1843.0.CO;2-41234-981X(199707)5:3%3C305::AID-EURO184%3E3.0.CO;2-4) — 널리 인용되는 "When a measure becomes a target..." 정식화.
원문 핵심 인용
"A map is not the territory it represents, but, if correct, it has a similar structure to the territory, which accounts for its usefulness." — Korzybski (1933), Science and Sanity, p.58 "Since all models are wrong the scientist cannot obtain a 'correct' one by excessive elaboration." — Box (1976), JASA 71(356):792 "Since all models are wrong the scientist must be alert to what is importantly wrong. It is inappropriate to be concerned about mice when there are tigers abroad." — Box (1976), JASA 71(356):792 "Essentially, all models are wrong, but some are useful." — Box & Draper (1987), Empirical Model-Building and Response Surfaces, p.424 (원문 대조 못 함 — 2차 출처 기반) verbatim 검증: 2026-09-27 — Korzybski 인용은 archive.org 판 Science and Sanity 본문(p.58, 다음 쪽 59 표시로 쪽 확인), Box (1976) 두 인용은 JSTOR 판 PDF 사본 p.792 와 대조. Box & Draper (1987)는 책 원문을 구하지 못했다.
핵심 정의·메커니즘
원전 정의
- Korzybski (1933, p.58): "지도는 그것이 나타내는 영토가 아니다. 다만 맞는 지도라면 영토와 비슷한 구조를 가지며, 그 점이 지도의 쓸모를 설명한다." 두 가지를 함께 말한다. 표상과 대상은 다르다. 표상의 가치는 구조가 얼마나 닮았는지에 달려 있다.
- 추상화(abstracting): 영토(현실)에서 일부 특성만 골라 지도(표상)를 만드는 과정. 모든 언어·모델·지표는 추상화의 산물이며 필연적으로 손실이 있다 [Korzybski 1933].
- Box (1976, p.792) 는 같은 생각을 통계 모형에 적용했다. "모든 모형은 틀렸으므로 과학자는 지나친 정교화로 '맞는' 모형을 얻을 수 없다." 그리고 "무엇이 중요하게 틀렸는지"를 가려 보라고 했다.
- 이 카드에서 "지도"는 지도·통계 모형·성과 지표·대리 결과지표·진단명·설명 틀을 모두 포함한다. 효과를 재는 가설이 아닌 인식 원칙이므로, 실증은 "지도와 영토가 어긋날 때 무슨 일이 생기는가"를 보여 준 인접 연구에서 가져온다.
작동 기제
1. 추상화 → 구조 손실. 지도는 세부를 버려야 쓸모가 생긴다. 버린 세부가 결과를 가르면 지도는 조용히 틀린다 [Korzybski 1933]. 2. 지도 개선을 영토 개선으로 착각. 의료의 대리 결과지표(surrogate endpoint)가 대표 사례다. 대리지표가 쓸모 있으려면 치료가 대리지표에 준 효과가 실제 임상 결과에 준 효과를 믿을 만하게 예측해야 하는데, 실제로는 자주 실패한다. 질병이 대리지표를 거치지 않는 경로로 결과에 영향을 주거나, 치료가 예상하지 못한 다른 기전으로 결과를 바꾸기 때문이다 [Fleming & DeMets 1996]. CAST 시험에서 심근경색 뒤 부정맥(지도)을 억제한 약 encainide·flecainide 는 사망(영토)을 늘렸다 [CAST Investigators 1989]. 3. 지도가 보상이 되면 사람이 지도에 맞춰 움직인다. 영국 보건 서비스의 목표 관리는 일부로 전체를 대신하는 가정(제유, synecdoche)과 측정·게이밍 문제가 중요하지 않다는 가정 위에 서 있었고, 보고된 성공 뒤에 측정 문제와 게이밍이 있었다 [Bevan & Hood 2006]. 지표와 목표가 어긋나는 경로는 회귀형·극단형·인과형·적대형 넷으로 나뉜다 [Manheim & Garrabrant 2018]. 4. 익숙한 지도가 이해한 느낌을 만든다. 사람들은 지퍼·변기 같은 장치의 작동을 안다고 평가했다가, 단계별 인과 설명을 직접 써 본 뒤 평가를 낮췄다(설명 깊이의 착각) [Rozenblit & Keil 2002]. 반복해 본 문장이나 읽기 쉬운 문장은 더 참으로 판단됐다 [Reber & Schwarz 1999; Dechêne et al. 2010]. 깔끔한 숫자·익숙한 라벨도 같은 방식으로 "안다"는 느낌을 줄 수 있다. 5. 지도의 종류가 대상을 보는 방식을 바꾼다. 같은 환자 사례를 생물학적 설명과 함께 읽은 정신건강 임상가는 심리사회적 설명과 함께 읽었을 때보다 공감을 덜 보고했다 [Lebowitz & Ahn 2014].
언제 강해지고 언제 약해지나
- 대리지표가 검증됐는가. 대리지표는 2상 선별 시험에서 약이 생물학적으로 작용하는지 확인하는 데 쓸모 있다. 확증 3상 시험에서는 대리지표의 타당성이 엄격히 확립된 드문 경우가 아니면 실제 임상 결과를 주 평가변수로 써야 한다 [Fleming & DeMets 1996].
- 지표에 얼마나 큰 압력이 걸리나. Goodhart 효과의 크기는 대리지표를 최적화하는 데 쏟는 힘의 양에 달려 있다 [Manheim & Garrabrant 2018]. 제재·보상이 강하게 걸린 목표 체계에서 게이밍이 두드러졌다 [Bevan & Hood 2006].
- 지식의 종류. 설명 깊이의 착각은 인과 설명 지식에서 사실·절차·이야기 지식보다 훨씬 강했고, 눈에 보이는 부품이 있는 장치에서 가장 강했다 [Rozenblit & Keil 2002].
- 설명을 써 보게 하면 이해 착각은 줄지만 태도는 그대로일 수 있다. 복잡한 정책의 작동을 자세히 설명하게 하자 이해했다는 느낌이 줄고 태도가 덜 극단적이 됐으며(실험 1·2), 관련 단체 기부도 줄었다(실험 3). 정책을 지지하는 이유를 나열하게 한 조건에서는 이런 효과가 없었다 [Fernbach et al. 2013]. 그런데 사전등록한 가까운 재현 세 건(N = 306, 405, 343)에서 이해했다는 느낌은 다시 줄었지만 태도의 극단성과 자기 편 편애는 변하지 않았고, 핵심 효과는 모두 유의하지 않았다 [Crawford & Ruscio 2021]. 지도가 엉성하다는 걸 깨닫는 것과 태도가 바뀌는 것은 따로 봐야 한다.
- 대상에 대한 기존 지도. 조현병처럼 임상가가 원래 생물학적이라고 보는 장애에서는 생물학적 설명이 임상적 유용성 판단을 낮추지 않았다 [Lebowitz & Ahn 2014].
- 지도는 구조가 영토와 비슷하고, 쓰는 동안 영토가 크게 바뀌지 않고, 지도가 보상에 직결되지 않을 때 잘 작동한다.
어떻게 재나
- 대리지표 검증: 무작위 시험에서 치료가 대리지표(예: 부정맥 빈도)와 실제 결과(사망)를 같은 방향으로 움직이는지 함께 본다 [CAST Investigators 1989; Fleming & DeMets 1996].
- 설명 깊이 착각 패러다임 [Rozenblit & Keil 2002]: 7점 척도로 48개 장치·현상에 대한 이해도를 평가(T1) → 그중 4개에 단계별 인과 설명 쓰기 → 재평가(T2) → 진단 질문에 답하기(T3) → 전문가 설명 읽고 재평가(T4·T5). 평가가 떨어진 폭이 착각의 크기다.
- 진실 효과 패러다임: 문장 목록을 한 번 보여 준 뒤, 본 문장과 새 문장을 섞어 참 정도를 평정한다. 같은 문장의 첫 평정과 두 번째 평정 차이(항목 내 기준), 반복 문장과 새 문장의 차이(항목 간 기준) 두 가지로 잰다 [Dechêne et al. 2010].
- 설명 틀 조작: 같은 환자 사례를 생물학적/심리사회적 설명과 짝지어 읽게 하고 공감·치료 효과 판단을 비교한다 [Lebowitz & Ahn 2014].
- 지표-결과 괴리: 지표를 보상에 연결하기 전후로 지표와 독립적인 결과 측정치의 관계가 어떻게 달라지는지 본다 [Campbell 1979; Bevan & Hood 2006].
- 모형 오지정 점검: 같은 자료에 여러 모형을 맞춰 결론이 바뀌는지, 잔차에 구조가 남는지 확인한다 [White 1982].
헷갈리는 개념과의 차이
| 개념 | 핵심 | 지도와 영토와의 관계 | |---|---|---| | 지도와 영토 | 모든 표상은 대상과 다르고, 구조가 닮은 만큼만 쓸모 있다 | 가장 넓은 원칙 | | 구체성 오류(misplaced concreteness) | 추상 개념을 구체적 실재로 취급 (Whitehead 가 이름 붙임) | 지도를 영토로 착각하는 특수한 경우. 주로 과학 이론의 추상을 두고 쓴다 | | 물화(reification) | "지능", "시장" 같은 추상어를 물건처럼 다룸 | 라벨이 실체처럼 굳는 과정. 지도가 영토 행세를 하게 되는 언어적 경로 | | 굿하트 법칙(Goodhart's law) | 지표를 통제 목표로 삼으면 지표와 목표의 관계가 무너진다 | 지도가 보상이 될 때 영토가 지도에서 멀어지는 동적 과정. 지도와 영토는 정적인 차이도 다룬다 | | 대리 결과지표 실패 | 대리지표 개선이 실제 결과 개선을 보장하지 않음 | 의학에서 지도와 영토 문제를 무작위 시험으로 확인한 사례 |
주요 후속 연구·메타분석
### CAST Investigators (1989) — 부정맥은 줄었고 사망은 늘었다 New England Journal of Medicine, 321(6), 406–412. DOI: 10.1056/NEJM198908103210629
- 설계: 심근경색 뒤 무증상·경증 심실 부정맥(시간당 조기 박동 6회 이상) 환자. 2,309명이 약물 적정 단계에 들어갔고, 이 중 1,727명(75%)이 홀터 기록에서 부정맥이 억제돼 약물 또는 위약에 무작위 배정됐다. 평균 10개월 추적.
- 결과: encainide·flecainide 군에서 부정맥 사망·비치명 심정지 33/730명(4.5%) 대 위약 9/725명(1.2%), 상대위험 3.6(95% CI 1.7~8.5). 전체 사망 56/730명(7.7%) 대 22/725명(3.0%), 상대위험 2.5(95% CI 1.6~4.5). 이 두 약 부분은 중단됐다(PubMed 초록).
- 의미와 한계: 지도(부정맥 억제)를 개선한 약이 영토(생존)를 해쳤다. 참가자 선정 자체가 "지도에서 효과가 보인 사람"이었다는 점이 이 사례를 더 선명하게 만든다. 저자들은 다른 환자군에 이 결과가 적용되는지는 모른다고 적었다.
### Fleming & DeMets (1996) — 대리 결과지표는 왜 우리를 속이나 Annals of Internal Medicine, 125(7), 605–613. DOI: 10.7326/0003-4819-125-7-199610010-00011
- 설계: 종양 크기·콜레스테롤·혈압·CD4 세포 수 등 대리지표가 여러 질병 영역에서 실제 치료 효과를 잘못 보여 준 사례를 모아 원인을 분석한 리뷰.
- 결과: 대리지표가 쓸모 있으려면 치료가 대리지표에 준 효과가 실제 임상 결과에 준 효과를 믿을 만하게 예측해야 하는데, 실제로는 이 조건이 자주 깨진다. 원인은 (1) 질병이 대리지표를 거치지 않는 인과 경로로 결과에 영향을 주는 경우, (2) 치료가 의도하지 않은 다른 기전으로 결과를 바꾸는 경우다(초록 기준).
- 의미와 한계: "지도가 좋아졌다"가 "영토가 좋아졌다"로 이어지려면 무엇이 성립해야 하는지 구체적 조건을 준다. 저자들은 대리지표를 2상 선별에는 쓰고, 확증 3상에서는 실제 임상 결과를 쓰라고 권했다.
### Bevan & Hood (2006) — 목표와 공포로 다스린 영국 보건 서비스 Public Administration, 84(3), 517–538. DOI: 10.1111/j.1467-9299.2006.00600.x
- 설계: 2000년대 잉글랜드 공공 보건 서비스의 목표 관리 체계를 보고된 성공, 측정 문제, 게이밍 증거로 검토한 사례 연구.
- 결과: 목표 관리는 일부로 전체를 대신하는 가정(제유)과, 측정·게이밍 문제는 중요하지 않다는 가정에 기대고 있었다. 저자들은 이 가정이 흔들린다는 증거를 제시하고 소련식 목표 체제와 견줬다(초록 기준, 수치는 초록에 없음).
- 의미와 한계: 조직 수준에서 "지표가 영토를 대신한다"는 가정이 실패하는 과정을 보여 준다. 사례 연구라 게이밍의 규모를 한 숫자로 주지 않는다.
### Rozenblit & Keil (2002) — 설명 깊이의 착각 Cognitive Science, 26(5), 521–562. DOI: 10.1207/s15516709cog26051
- 설계: 12개 연구. 연구 1은 예일대 대학원생 16명, 연구 2는 학부생 33명. 7점 척도로 장치 48개 이해도를 평가한 뒤, 속도계·지퍼·피아노 건반·수세식 변기 등 4개에 단계별 인과 설명을 쓰고, 진단 질문에 답하고, 전문가 설명을 읽으며 매번 다시 평가했다.
- 결과: 거의 모든 참가자가 설명을 써 본 뒤 이해도 평가를 낮췄다. 시점 효과는 연구 1에서 F(4, 56) = 16.2, η² = .536, 연구 2에서 F(4, 124) = 38.9, η² = .555. 연구 7~10에서 이 착각은 사실·절차·이야기 지식보다 인과 설명 지식에서 훨씬 강했다(전문).
- 의미와 한계: 이름을 알고 겉모습을 본 것(지도)을 작동 원리(영토)를 아는 것으로 착각하는 현상을 실험으로 보였다. 대상은 기계 장치이고 표본이 작다.
### Lebowitz & Ahn (2014) — 생물학적 설명은 임상가의 공감을 낮췄다 PNAS, 111(50), 17786–17790. DOI: 10.1073/pnas.1414058111
- 설계: 미국 정신건강 임상가(정신과 의사·심리학자·사회복지사 등) 연구 1 n = 132, 연구 2 n = 105, 연구 3 n = 106. 조현병·사회공포증·우울증·강박장애 환자 사례를 생물학적(유전·신경) 설명 또는 심리사회적 설명과 함께 읽게 했다.
- 결과: 생물학적 설명 조건의 공감이 더 낮았다(연구 1 F(1,122) = 32.66, 연구 2 F(1,103) = 18.16, 둘 다 P < 0.001). 의사(MD)와 비의사 모두에서 같은 방향이었다. 생물학적 설명은 약물 효과 판단을 높이고 심리치료 효과 판단을 낮췄다(전문).
- 의미와 한계: 같은 사람(영토)도 어떤 설명 틀(지도)로 읽느냐에 따라 전문가의 태도가 달라진다. 가상 사례 연구이고, 실제 치료 행동까지 쟀지는 않았다.
그 밖의 문헌
- Dechêne, A., Stahl, C., Hansen, J., & Wänke, M. (2010). The truth about the truth: A meta-analytic review of the truth effect. Personality and Social Psychology Review, 14(2), 238–257. DOI: 10.1177/1088868309352251 — 51편 메타분석. 반복 문장과 새 문장의 차이(항목 간)가 같은 문장의 첫·두 번째 평정 차이(항목 내)보다 컸다. 효과크기 수치는 원문을 읽지 못해 싣지 않는다.
- Fernbach, P. M., Rogers, T., Fox, C. R., & Sloman, S. A. (2013). Political extremism is supported by an illusion of understanding. Psychological Science, 24(6), 939–946. DOI: 10.1177/0956797612464058 — 정책 작동을 설명하게 하자 이해 착각과 태도 극단성이 함께 줄었다(초록).
- Crawford, J. T., & Ruscio, J. (2021). Asking people to explain complex policies does not increase political moderation: Three preregistered failures to closely replicate Fernbach, Rogers, Fox, and Sloman's (2013) findings. Psychological Science, 32(4), 611–621. DOI: 10.1177/0956797620972367 — 사전등록 재현 3건(N = 306·405·343). 이해 착각 감소는 재현, 태도 완화는 재현 안 됨(초록).
- Reber, R., & Schwarz, N. (1999). Effects of perceptual fluency on judgments of truth. Consciousness and Cognition, 8(3), 338–342. DOI: 10.1006/ccog.1999.0386 — 흰 배경에서 잘 보이는 색으로 쓴 문장은 우연 수준보다 참으로 더 많이 판단됐고, 중간 정도로 보이는 문장은 우연 수준이었다.
- Manheim, D., & Garrabrant, S. (2018). Categorizing variants of Goodhart's Law. arXiv:1803.04585 — 지표와 목표가 어긋나는 네 경로. 대리지표 최적화에 쏟는 힘이 클수록 효과가 커진다.
- Campbell, D. T. (1979). Assessing the impact of planned social change. Evaluation and Program Planning, 2(1), 67–90. DOI: 10.1016/0149-7189(79)90048-X — 양적 사회 지표가 의사결정에 많이 쓰일수록 왜곡 압력을 받는다는 "Campbell 의 법칙".
- White, H. (1982). Maximum likelihood estimation of misspecified models. Econometrica, 50(1), 1–25. DOI: 10.2307/1912526 — 모형이 틀렸을 때 추정량이 무엇을 추정하는지, 표준오차를 어떻게 고쳐 쓰는지.
- Hayakawa, S. I. (1939/1941). Language in Action (개정판 Language in Thought and Action). Harcourt, Brace. — 일반의미론을 대중 교재로 옮긴 책(DOI 없음).
- Whitehead, A. N. (1925). Science and the Modern World. Macmillan. — "구체성을 잘못 놓는 오류(fallacy of misplaced concreteness)"를 이름 붙인 책(DOI 없음, 이번 작업에서 원문 대조 안 함).
- 이 개념 자체를 대상으로 한 메타분석은 없다. 효과를 한 숫자로 재는 가설이 아니기 때문이다.
비판·한계
재현성
- "지도는 영토가 아니다"는 실험 가설이 아니어서 재현 대상이 아니다. 인접 실증의 상태는 갈린다.
- 대리지표 실패는 무작위 시험에서 직접 확인됐다(CAST, 전체 사망 상대위험 2.5) [CAST Investigators 1989].
- 설명 깊이의 착각은 원 논문 안에서 12개 연구로 반복됐다 [Rozenblit & Keil 2002]. 진실 효과는 51편 메타분석이 있다 [Dechêne et al. 2010].
- 설명 깊이 착각이 태도를 누그러뜨린다는 확장 결과 [Fernbach et al. 2013] 는 사전등록 재현 3건에서 재현되지 않았다. 이해 착각이 줄어드는 부분만 다시 나왔다 [Crawford & Ruscio 2021].
- 게이밍 증거는 주로 사례 연구다 [Bevan & Hood 2006]. 게이밍 규모를 여러 조직에 걸쳐 잰 메타분석은 찾지 못했다.
대표 반론
- "그래서 지도를 버리라는 말인가": Box (1976) 는 모든 모형이 틀렸다는 전제에서 오히려 "중요하게 틀린 곳"만 신경 쓰라고 했다. Fleming & DeMets (1996) 도 대리지표를 버리라고 하지 않고 2상 선별처럼 맞는 자리에 쓰라고 했다. 지도 비판의 목적은 지도의 용도와 한계를 정하는 것이다.
- 일반의미론 운동의 과학적 한계: Korzybski 는 표상과 대상을 구별하는 훈련이 사고와 행동을 바꾼다고 봤지만, 이 훈련의 효과를 통제 연구로 입증한 자료는 찾지 못했다. 이 카드는 비유와 인접 실증만 근거로 쓴다.
- Goodhart 정식화 귀속 혼동: 가장 자주 인용되는 "measure becomes a target" 문장은 Goodhart 본인의 문장이 아니고 Strathern(1997)의 정리다. Goodhart 원형은 통화 통계의 규칙성이 통제 목적으로 쓰이면 무너진다는 좁은 주장이었다 [Goodhart 1975; Strathern 1997].
- 생물학적 설명 논쟁의 양면: 생물학적 설명은 환자 책임을 덜어 낙인을 줄인다는 기대가 있었다. Lebowitz & Ahn (2014) 은 임상가 공감이 오히려 줄었다고 보고했지만, 같은 연구에서 조현병처럼 원래 생물학적이라고 보는 장애에서는 유용성 판단이 떨어지지 않았다. 어떤 지도가 "틀렸다"기보다 지도마다 가리는 부분이 다르다.
쓰면 안 되는 상황
- 검증된 절차가 필요한 긴급 상황: 의료 프로토콜·안전 수칙에서 "지도는 영토가 아니다"를 이유로 절차를 무시하면 안 된다. 지도를 버릴 근거는 영토에서 관찰한 구체적 불일치여야 한다.
- 허무주의로 쓸 때: "어차피 다 틀렸다"며 쓸모 있는 모델까지 버리는 것 [Box 1976].
- 대안 지도 없이 기존 지도를 깎아내릴 때: 대리지표를 비판하면서 실제 결과를 잴 방법을 내놓지 않으면 결정이 멈춘다. Fleming & DeMets (1996) 처럼 "무엇으로 대신 잴지"를 함께 제시한다.
관련 모델
- 지표 게이밍 / Goodhart 법칙 (metric-gaming) — 지도를 목표로 삼을 때의 붕괴.
- 시스템 사고 (systems-thinking) — 영토 전체의 상호작용을 보는 시야.
- 제1원리 사고 (first-principles) — 물려받은 지도를 걷고 영토의 사실로 재구성.
- 평균 회귀 (regression-to-mean) — 평균이라는 지도가 개별 영토를 오도.
사고 도구 다른 글