Paperis 아티클
교과서와 강연을 채운 발견들이 다시 해 보니 사라졌다 — 그리고 과학은 어떻게 더 단단해졌나
이 글이 근거로 삼은 논문 중 ‘거인의 어깨’에 오른 초석 연구예요. 개념을 익혔다면 원전으로 가보세요.
심리학 논문 100편을 원저자와 협의한 설계로 다시 수행했습니다. 널리 인용되는 "36%만 재현"보다 무거운 문장은 그다음이었습니다 — 재현된 효과의 크기가 원본의 절반이었다는 것. 개별 연구의 진위가 아니라 문헌 전체의 크기 감각을 바꾼 작업입니다.
이 분야의 거인의 어깨 →이 글은 AI가 연구 논문을 바탕으로 작성한 교육·정보 제공용 콘텐츠이며, 전문가의 조언을 대체하지 않습니다. 오류를 발견하셨나요? 알려주세요
© 2026 네오쿤스(Paperis) · 링크 공유는 환영합니다. 전문 전재·재배포는 사전 허가가 필요합니다.
심리학 교과서와 TED 무대를 채운 발견들이 있었다. "의지력은 근육처럼 쓸수록 고갈된다"는 자아고갈, "2분간 당당한 자세를 취하면 호르몬과 자신감이 바뀐다"는 파워포징, 짧은 단어 하나에 사람의 행동이 달라진다는 사회적 점화. 직관적이고, 강연에 어울리고, 한 줄로 요약되는 이야기들이었다. 우리는 그것들을 "과학이 증명한 사실"로 믿었다.
그런데 지난 10여 년 사이, 그 믿음의 상당 부분이 무너졌다. 다른 연구실이 똑같은 실험을 다시 해 보면 결과가 재현되지 않았던 것이다. 이 글은 그 붕괴 — 심리학의 재현 위기(replication crisis) — 를 따라간다. 무엇이 무너졌고, 왜 무너졌으며, 그리고 그 위기가 어떻게 심리학을 더 정직한 과학으로 바꾸고 있는지를.
방아쇠는 2015년이었다. 전 세계 수십 개 연구실이 힘을 합쳐 심리학 주요 학술지에 실린 연구 100편을 그대로 다시 수행한 대규모 프로젝트(Open Science Collaboration)의 결과가 발표됐다. 원래 연구의 97%가 통계적으로 유의한 결과를 보고했지만, 재현에서 유의한 결과가 나온 것은 36%뿐이었다. 재현된 효과의 크기마저 원래의 절반 수준이었다 (PMID 26315443). 한 편이 아니라 분야 전체를 흔든 숫자였다.
이 결과를 두고 곧바로 반론이 나왔다는 점도 짚어 둘 만하다. 한 비판은 통계적 오류를 지적하며 "심리학의 재현성은 사실 높다"고 주장했고 (DOI: 10.1126/science.aad7243), 원 저자들은 이에 재반박했다. 위기의 출발점 자체가 논쟁이었다는 사실은, 이 이야기가 단순한 '폭로'가 아니라 과학 내부의 자기 검증임을 보여준다.
더 근본적인 문제는 따로 있었다. 재현이 그토록 중요하다고 말하면서도, 정작 직접 재현 연구 자체가 거의 출판되지 않았다는 점이다. 영향력 상위 100개 심리학 학술지에서 2010~2021년에 나온 논문 84,834편 중 직접 재현 논문은 단 0.2%, 169편에 불과했다. 88개 학술지 중 54곳은 그 11년 동안 직접 재현 논문을 단 한 편도 싣지 않았다 (PMID 39418470). 재현이 과학의 주춧돌이라는 말은 오래도록 '립서비스'에 가까웠던 셈이다.
위기의 폭은 사회심리학에서 특히 두드러졌다. 여러 연구실이 동시에 같은 효과를 다시 검증한 다기관 재현 프로젝트 36건을 검토한 결과, 명확히 재현에 성공한 것은 4건(11%)뿐이었고, 혼재된 결과 5건을 빼면 27건(75%)이 실패했다 (PMID 36442681).
가장 상징적인 붕괴는 자아고갈(ego depletion)이었다. "자기통제는 한정된 정신 자원에 의존하므로, 한 번 자제력을 쓰면 다음 과제에서 자제력이 떨어진다"는 이론이다. 수백 편의 연구가 이를 뒷받침하는 듯했다.
그런데 2016년, 23개 연구실이 사전등록된 동일 프로토콜로 자아고갈을 검증한 등록형 재현 보고(Registered Replication Report)의 결과는 효과 크기가 거의 0에 가까웠다(d=0.04, 신뢰구간이 0을 포함) (PMID 27474142). 36개 연구실, 3,531명이 참여한 또 다른 대규모 검증도 유의하지 않았고(d=0.06), 베이즈 분석은 데이터가 '효과 없음' 가설을 4배 더 지지한다고 봤다 (PMID 34520296). "자제력을 오래 쓸수록 더 고갈된다"는 핵심 예측조차 검증되지 않았다 (PMID 40452478).
흥미롭게도 결과가 완전히 한 방향만은 아니다. 12개 연구실이 참여한 한 다기관 연구는 작지만 유의한 효과(d=0.10)를 보고했고 (PMID 34113424), 자아고갈을 완전히 폐기하기보다 '일시적 인지 피로'로 재해석하자는 제안도 나왔다 (DOI: 10.31234/osf.io/sy2mw). 더 주목할 점은, 자아고갈 효과의 크기가 재현 프로젝트가 나오기 약 10년 전부터 이미 꾸준히 작아지고 있었다는 분석이다. 연구가 더 엄밀하고 덜 편향될수록 효과가 줄어든 것이다 (DOI: 10.31234/osf.io/esjhp). 자아고갈 연구자들을 직접 조사한 연구에서는 응답자의 37.7%가 의심스러운 연구관행을 인정했다 (PMID 29940020).
"당당한 자세 2분이 테스토스테론을 올리고 코르티솔을 낮추며 위험 감수 성향을 높인다"는 파워포징은 2010년 한 연구에서 출발해 세계적 화제가 됐다 (DOI: 10.1177/0956797610383437). 그러나 이후 재현 시도는 호르몬 효과와 '힘이 솟는 느낌' 효과를 재현하지 못했다 (DOI: 10.21203/rs.3.rs-3970076/v1).
사회적 점화도 비슷한 길을 걸었다. "돈을 떠올리게 하는 미묘한 단서가 사람의 정치적 견해를 바꾼다"는 주장을 고검정력으로 재검증한 연구는 점화 효과의 증거를 찾지 못했고(d=0.03), 36개 연구실 중 단 한 곳만 원래 효과를 발견했다 (PMID 26214168). 한 논문은 사회적 점화나 체화된 인지처럼 "자아는 비어 있는 그릇"이라는 전제 위에 세워진 연구들이 재현될 가능성이 특히 낮다고 분석했다 (PMID 41493875).
개별 연구자의 부정직 때문만이 아니었다. 위기는 과학의 인센티브 구조에서 비롯됐다.
낮은 검정력. 표본이 작으면 진짜 효과를 안정적으로 잡아낼 수 없다. 200개 연구 영역의 12,065개 효과 크기를 묶은 분석에서 심리학 연구의 검정력 중앙값은 약 36%에 불과했고, 충분한 검정력(80%)을 갖춘 연구는 약 8%뿐이었다 (PMID 30321017). 1975~2017년 심리학 논문 35,515편을 분석한 연구도 검정력이 권장선에 못 미친다고 보고했다 (PMID 37847689).
출판편향. 학술지는 '유의한' 결과를 선호한다. 효과 없음(null) 결과는 서랍 속에 묻히고, 우연히 유의하게 나온 결과만 세상에 나온다. 이 편향이 누적되면 문헌 전체가 부풀려지고, 효과 없는 발견이 마치 실재하는 것처럼 보인다. 한 합의 보고는 이 오랜 문제를 풀려면 음성·null 결과를 출판할 길을 만들어야 한다고 강조했다 (PMID 40991668).
p-해킹과 연구자 자유도. 분석 방법, 변수 처리, 표본 수집 중단 시점 같은 임의의 선택들 — 이른바 '연구자 자유도' — 은 하나의 데이터에서 수많은 결과를 만들어낸다. 이 중 유의하게 나온 것만 골라 보고하는 것이 p-해킹이다. 한 연구는 등록형 재현 보고 데이터로, 같은 데이터에서도 분석 선택에 따라 효과 크기가 크게 출렁이며, 수많은 분석 경로 중 유의한 결과가 가설 방향으로 나온 경우는 약 30%에 불과함을 보였다 (PMID 37166859). 연속변수를 임의의 기준으로 둘로 가르는 것만으로도 가짜 양성을 만들어낼 수 있고 (PMID 41233729), p-해킹 전략은 한둘이 아니라 카탈로그로 정리될 만큼 다양하다 (PMID 36778954).
의심스러운 연구관행(QRP)의 만연. 노골적 데이터 조작은 아니지만 책임 있는 연구에서 벗어난 '회색지대' 관행들이다. 2,000명 넘는 심리학자를 조사한 고전적 연구는 일부 QRP가 "지배적 연구 규범"일 수 있다고 봤다 (PMID 22508865). 여러 나라를 묶은 최근 조사에서는 응답자 10명 중 9명이 적어도 한 가지 QRP를 인정했다 (PMID 39133711). 한 시각에서는 이런 관행이 단순히 '의심스러운' 수준이 아니라 미국심리학회 윤리강령 위반에 해당한다고까지 주장한다 (PMID 39964511).
위기는 절망으로 끝나지 않았다. 오히려 심리학은 지난 10년 동안 가장 빠르게 자정 도구를 발전시킨 분야가 됐다.
사전등록(preregistration). 데이터를 보기 전에 가설과 분석 계획을 미리 공개해 못 박는 것이다. '예측'과 '사후 끼워맞추기'를 분리해 연구자 자유도를 제약한다 (DOI: 10.31234/osf.io/ud67s). 다만 만능은 아니어서, 구조화된 사전등록이 자유도를 줄이긴 해도 완전히 없애지는 못하고 (PMID 33296358), 사전등록 연구가 비등록 연구보다 양성 결과를 덜 보고하지도 않았다는 정직한 보고도 나왔다 (PMID 37950113).
등록형 보고(Registered Reports). 결과가 나오기 전에 연구 설계 단계에서 심사·게재를 확정하는 출판 형식이다. 결과가 유의하든 아니든 실리므로 출판편향을 원천 차단한다. 그 효과는 숫자로 드러난다 — 등록형 보고는 효과 없음 결과를 54% 비율로 게재하는데, 기존 방식에서는 그 비율이 21%에 그친다 (DOI: 10.2139/ssrn.6436338).
다중연구실 협업. 한 연구실의 우연을 여러 연구실이 함께 검증한다. 사전등록·대형 표본 같은 엄밀성 강화 관행을 적용한 네 연구실의 협업에서는 새로 발견한 사회행동 효과의 86%가 재현됐다 — 과거 약 50%와 대비된다 (PMID 37945809). 엄밀하게 하면 높은 재현성이 실제로 가능하다는 증거다.
투명성과 공개. 데이터·분석코드 공개, 통계 보고 표준화도 자리잡고 있다 (PMID 41238797). 다만 공개 자체가 만능은 아니다. 공개 데이터를 받아 실제로 다시 분석해 보면 상당수에서 수치 불일치가 나타났다는 보고들이, 공개와 재현은 다른 문제임을 일깨운다 (DOI: 10.31222/osf.io/h35wt).
그래서 위기는 끝났는가. 아직 단정하기 이르다. 직접 재현 논문이 여전히 드물다는 사실 자체가 "위기가 끝났다고 선언하기엔 이르다"는 근거다 (PMID 39418470). 게다가 과학의 자정에는 한계도 보인다 — 재현에 실패한 원 연구의 인용수는 실패 이후에도 5~9%밖에 줄지 않았고, 인용하는 논문의 3% 미만만이 그 재현 실패를 언급했다 (PMID 35713980).
두 가지를 더 정직하게 덧붙여야 한다.
첫째, 이것은 심리학만의 문제가 아니다. 의심스러운 연구관행은 생태·진화학(응답자의 64%가 선택적 보고, 42%가 p-해킹, 51%가 HARKing 인정) (DOI: 10.31219/osf.io/ajyqg), 범죄학 (DOI: 10.31235/osf.io/bwm7s), 커뮤니케이션학 (DOI: 10.31234/osf.io/7uyn5), 교육학 (DOI: 10.35542/osf.io/f7srb)에서도 심리학과 비슷한 비율로 나타났다. 출판편향을 여러 분야에 걸쳐 비교한 분석에서는 경제학이 가장 심했다 (PMID 38327122). 위기 서사 자체가 심리학과 생의학에서 거의 동시에 등장했다는 분석도 있다 (DOI: 10.1177/10892680211046508).
둘째, 위기는 결함의 신호인 동시에 자정의 신호다. 한 분석은 재현 위기가 결국 긍정적인 구조적·절차적·공동체적 변화를 이끌었다며 이를 '신뢰성 혁명'으로 부른다 (PMID 39242883). 반론도 진지하게 살아 있다 — 일부 연구는 p-해킹·HARKing·출판편향이 흔히 생각하는 만큼 위기의 주범이 아닐 수 있다고 보고 (DOI: 10.31222/osf.io/6xzaw_v5), 한 시뮬레이션 연구는 재현율을 좌우하는 진짜 변수가 QRP가 아니라 '애초에 참인 효과가 얼마나 드문가'라는 기저율이라고 주장한다 (DOI: 10.7554/elife.58237). 또 어떤 이들은 재현 위기가 방법의 문제만이 아니라 인간 마음을 숫자로 환원하려는 시도 자체의 인식론적 한계를 드러낸다고 본다 (PMID 39775616).
틀린 주장이 빠르게 드러나고 정정되는 것은 과학의 결함이 아니라, 시스템이 작동한다는 증거다. 자아고갈도, 파워포징도, 사회적 점화도 — 누구의 권위가 아니라 더 큰 표본과 더 투명한 절차, 즉 데이터가 결론을 정정했다. 심리학이 잃은 것은 몇몇 매력적인 이야기였고, 얻은 것은 자기를 의심할 줄 아는 더 단단한 과학이었다.
우리가 믿었던 발견들이 무너진 자리에서, 더 믿을 만한 방법이 자라났다. 그것이 이 위기의 가장 정직한 결론이다.
이 글은 과학 정보 제공을 위한 것이며, 인용한 근거에는 동료심사 전 프리프린트가 일부 포함됩니다. 후속 연구로 세부 내용이 갱신될 수 있습니다.
위기의 발발 · 대규모 재현 프로젝트
무너진 대표 효과 — 자아고갈
무너진 대표 효과 — 파워포징 · 사회적 점화
구조적 원인
개혁
정직한 현주소 · 자정 · 분야 횡단