바넘 효과란? 심리테스트가 소름 돋게 정확한 이유

"당신은 겉으로는 밝아 보이지만 속으로는 예민한 면이 있습니다. 남들에게 인정받고 싶어 하면서도, 때로는 혼자만의 시간이 절실해집니다."

이 문장을 읽고 "맞다"고 느꼈다면 자연스러운 반응입니다. 문제는 이 문장이 거의 모든 사람에게 맞는다는 점입니다. 이런 서술이 개인화된 통찰처럼 느껴지는 현상을 바넘 효과(또는 포러 효과)라고 부릅니다.

왜 맞는다고 느끼는가

바넘 효과가 작동하는 데는 몇 가지 장치가 있습니다.

• 양면성 — "~하면서도 ~하다"는 구조는 어느 쪽에 해당하든 맞는 말이 된다.
• 보편적 경험 — 인정받고 싶은 마음, 가끔 느끼는 외로움처럼 거의 모두가 겪는 것을 서술한다.
• 긍정 편향 — 대체로 호의적인 서술이 섞여 있으면 수용도가 올라간다.
• 해석의 여지 — 모호한 표현일수록 읽는 사람이 자기 경험을 끼워 맞출 공간이 넓어진다.

여기에 사람의 인지 습관이 더해집니다. 맞는 부분은 눈에 띄고 기억에 남지만, 맞지 않는 부분은 "이건 좀 아니네" 하고 그냥 넘어갑니다. 결과적으로 전체가 정확했다는 인상이 남습니다.

이 현상은 오래전부터 심리학 실험의 소재였습니다. 참가자 전원에게 동일한 성격 서술문을 나눠 주고 자기 결과라고 믿게 한 뒤 정확도를 평가하게 하면, 대체로 높은 점수가 나온다는 것이 반복적으로 보고돼 왔습니다.

정확하게 느껴지는 것과 정확한 것

여기서 중요한 구분이 생깁니다. 결과에 대한 만족감과 결과의 정확성은 다른 것이며, 때로는 서로 반대 방향으로 움직입니다.

두루뭉술한 서술은 만족도가 높습니다. 누구에게나 맞으니까요. 반면 구체적인 서술은 틀릴 위험을 감수합니다. "당신은 계획을 세우는 것보다 상황에 맞춰 움직이는 편이며, 마감이 가까워질수록 집중력이 올라갑니다"라는 문장은 어떤 사람에게는 정확하지만 어떤 사람에게는 명백히 틀립니다.

역설적으로, 틀릴 수 있는 서술이 맞았을 때만 그것은 정보가 됩니다. 절대 틀릴 수 없는 문장은 아무것도 말하지 않은 것과 같기 때문입니다.

구별하는 방법

결과지를 읽을 때 바넘 문장을 가려내는 몇 가지 방법이 있습니다.

• 반대로 뒤집어 본다 — "당신은 신중한 편입니다"를 "당신은 과감한 편입니다"로 바꿔도 그럴듯하게 들린다면, 그 문장은 나에 대해 말한 것이 아닐 수 있다.
• 점수와 연결되는지 본다 — 어떤 항목의 어떤 값 때문에 이 서술이 나왔는지 추적할 수 있는가.
• 다른 결과와 비교해 본다 — 다른 점수를 받은 사람에게는 다른 문장이 나오는가, 아니면 대동소이한가.
• 틀릴 여지가 있는지 본다 — 모든 사람이 고개를 끄덕일 문장이라면 정보량이 0에 가깝다.

첫 번째 방법이 특히 유용합니다. 뒤집어도 말이 되는 문장은 측정 결과가 아니라 수사입니다.

정확도를 자랑하는 검사

주의할 만한 또 하나의 신호는 정확도를 수치로 자랑하는 경우입니다. 어떤 서비스는 이용자가 매긴 만족도를 근거로 정확도가 90%를 넘는다는 식의 수치를 전면에 내겁니다.

이런 수치는 측정의 타당도와 무관합니다. 앞서 본 것처럼 두루뭉술한 서술일수록 만족도는 높게 나오기 때문입니다. 이용자 만족도는 마케팅 지표이지 검사의 품질 지표가 아닙니다.

검사의 품질을 말해 주는 것은 다른 종류의 수치입니다 — 내적 일관성 같은 신뢰도 지표, 규준 표본의 크기와 구성, 다시 검사했을 때의 안정성 같은 것들입니다. 이런 값은 자랑하기에 재미없지만 확인 가능한 정보입니다.

검사가 바넘을 피하는 방법

만드는 쪽에서 바넘 문장을 피하려면 서술이 점수에서 나오도록 설계해야 합니다. 몇 가지 구체적인 방식이 있습니다.

• 구간마다 다른 문장을 쓴다 — 상위·중간·하위 구간에서 실제로 다른 내용이 나와야 한다. 어느 구간에나 붙일 수 있는 문장은 바넘 문장이다.
• 조합을 반영한다 — 한 축의 점수만 보는 대신, 두 축의 조합에서만 성립하는 서술을 쓴다. 그만큼 해당하는 사람이 좁아진다.
• 근거를 노출한다 — "성실성 하위 항목 중 자기절제가 낮게 나왔기 때문에"처럼 어떤 값에서 나온 문장인지 밝힌다.
• 틀릴 수 있음을 인정한다 — 자기보고에 근거한 추론이며 맞지 않을 수 있다고 적는다.

네 번째가 특히 중요합니다. 확신에 찬 문장이 신뢰를 준다는 통념과 반대로, 조건을 밝힌 서술이 실제로는 더 검증 가능한 정보를 담습니다.

한계를 밝히는 쪽이 낫다

미국심리학회의 윤리 기준은 타당도가 완전히 확립되지 않은 도구를 사용할 때 결과의 강점과 한계를 함께 기술하도록 하고 있습니다. 이 원칙은 바넘 효과에 대한 실질적인 대응책이기도 합니다.

"이 검사가 당신의 전부를 말해 준다"고 단언하는 결과지보다, "이 결과는 자기보고에 근거하며 응답 시점의 상태에 영향을 받습니다"라고 적힌 결과지가 신뢰할 만합니다. 자기가 못 보는 것을 밝히는 검사는 적어도 무엇을 보고 있는지는 아는 검사이기 때문입니다.

재미가 나쁜 것은 아니다

마지막으로 균형을 위해 덧붙이면, 바넘 문장으로 이루어진 테스트가 곧 해로운 것은 아닙니다. 재미로 소비하는 콘텐츠에는 그 나름의 자리가 있고, 그것이 자기 이야기를 꺼내는 계기가 되기도 합니다.

실제로 신뢰받는 검사와 그렇지 않은 검사를 가르는 요소들을 비교해 보면 패턴이 뚜렷합니다. 측정 근거를 공개하는가, 문항 수가 충분한가, 비교 기준이 있는가, 연속 점수를 함께 보여주는가, 신뢰도 수치를 밝히는가, 그리고 한계를 병기하는가. 정확함을 단정하는 쪽과 근거를 밝히는 쪽은 대체로 다른 집단입니다.

문제는 그것이 근거 있는 측정인 것처럼 제시될 때입니다. 진로나 관계 같은 실제 결정에 쓰이거나, 타인을 판단하는 근거가 될 때 비용이 발생합니다. 그러니 구별의 기준은 재미있느냐가 아니라, 그 결과가 무엇을 근거로 나왔는지 확인할 수 있느냐입니다.