여러분은 평소 가지고 있는 신념이나 지식과 반대되는 결과를 접할 때 어떤 반응을 보일까요? 그 반하는 결과가 그냥 제시된 것이 아니라 엄정한 과학적인 방법을 통해 나온 것이라면, 여러분은 자신의 신념을 버리거나 의심하게 될까요, 아니면 여전히 믿음을 고수할까요? 우리는 보통 '나는 객관적인 사람이야'라고 스스로를 평가합니다. 그래서 철저한 조건과 방법을 통해 산출된 객관적인 결과는 선입견이나 고정관념 없이 수용할 수 있다는 생각을 하곤 합니다. 무엇이든 포용할 수 있는, 너그러운 사람이라고 자신을 평가하죠. 하지만 과연 그럴까요?

마이클 마호니(Michael J. Mahoney)라는 학자는 교묘한 실험을 실시함으로써 '나는 객관적인 사람이야'라고 자평하는 사람들의 믿음이 얼마나 취약한지, 자신이 평소 가지고 있는 신념이 사물을 객관적으로 바라보는 데 얼마나 영향을 미치는지 알아보기로 했습니다.



마호니가 실험 대상으로 삼은 자들은 75명의 행동주의 심리학자들이었습니다. 행동주의 심리학이란 간단히 말해서 어떤 외부 자극(보상과 처벌 등)을 지속적으로 가하면 원하는 행동을 이끌어낼 수 있고 원하는 행동 패턴을 강화하고 유지할 수 있다고 믿는 심리학의 분파입니다. 쥐로 하여금 지렛대를 눌러 먹이를 먹도록 훈련시킨 B. F. 스키너가 행동주의 심리학을 대표하는 학자였죠.

마호니는 75명의 행동주의 심리학자에게 학술지에 게재될 예정인 논문 하나를 읽고 그 논문의 질과 학술잡지 게재 여부를 평가하도록 했습니다. 그 논문에는 아이들에게 나무 퍼즐 놀이와 책 읽기를 할 때 보상을 하느냐에 따라 그 두 가지 활동에 아이들이 계속 흥미를 느끼는지의 여부를 실험한 내용이 담겨 있었습니다.

만약 그 논문이 보상을 통해 두 가지 활동에 대한 흥미가 계속 유지됐다는 결과를 담고 있다면, 행동주의 심리학자들에게는 '마음에 쏙 드는' 논문일 겁니다. 반대로 보상이 오히려 놀이에 대한 아이들의 흥미를 떨어뜨린다는 논문이라면 행동주의 심리학자들의 심기는 꽤 불편하겠죠? 허나 그 논문은 엄밀한 데이터를 담고 있기에 실험 대상자인 행동주의 심리학자들은 아무리 마음에 안 드는 내용이더라도 그 논문을 객관적으로 평가해야 합니다. 과학자로서 지성과 양심이 있다면 말입니다.

마호니는 동일한 주제와 동일한 실험 방법을 담았지만 실험 결과가 다르게 조작된 5가지 버전의 논문을 만들었고, 심리학자들을 5개의 그룹으로 나누었습니다. 그런 다음, 각 그룹에게 5가지 버전 중 하나를 읽고 논문의 질과 잡지 게재 여부를 평가하여 45일 안에 보내 달라고 요청했습니다. 예를 들어, 1그룹에게는 행동주의 심리학을 뒷받침하는 논문을 보냈고, 2그룹에게는 데이터만 살짝 바꿔 상반되는 내용의 논문을 보냈던 것이죠(나머지 3개 그룹은 비교 목적으로 설정. 자세한 사항은 이 글 맨 아래의 참고논문 참조). 

수거된 행동주의 심리학자들의 평가 결과는 전문가들도 '믿고 싶은 것만 믿는다'는 보통 사람들의 편향에서 자유롭지 못하다는 점을 뚜렷하게 나타냈습니다. 동일한 실험 방법론을 적용한 논문이기에 객관적인 눈을 가진 학자라면 편견 없이 두 가지 논문을 거의 비슷한 점수로 평가해야 옳습니다. 하지만 현실은 그렇지 않았습니다.행동주의 심리학자들은 자신들의 견해와 일치하는 논문은 높게 평가하고 학술지에 게재해도 무난한 수준이라 평했습니다. 하지만 자신들의 믿음과 상반되는 논문은 질이 낮고 실험 방법에도 문제가 있으며 학술지에 게재하면 안 된다는 의견을 나타냈습니다.

마호니의 실험으로부터 우리는 전문가들이 무언가를 평가할 때 자신이 가지고 있는 주관적 편향이 강하게 개입한다는 결론을 이끌어낼 수 있습니다. 믿는 것만 보이고 믿는 것만 믿는다는 '확증 편향'은 보통 사람들보다 한 분야의 지식과 경험의 수준이 높은 전문가들에게도 만연된 현상이라는 점을 느끼게 합니다. 객관적인 판단이라는 것이 얼마나 달성 불가능한 목표인지 실감케 합니다.

알게 모르게 확증편향에 좌우된다면 우리가 내리는 판단이나 평가가 얼마나 취약한지 반성할 필요가 있습니다. 그리고 한번 내려진 평가를 고수할 것이 아니라 '내 판단에 무슨 문제는 없는가? 나의 주관성이 개입되지 않았나?'라는 질문을 통해 수정해 가야 합니다. 또한 '나는 객관적인 사람이다'라며 자신감을 보이는 사람의 말을 한번 정도는 걸러서 들어야겠죠. 오히려 '나는 결코 객관적이지 못하다'는 인식을 가져야 합니다. 자신의 판단을 되돌아볼 때 비로소 주관적 편향에서 벗어나 객관적 판단으로 한걸음 더 나아갈 수 있죠.

상사가 부하직원의 성과와 역량을 평가할 때, 신사업의 타당성을 평가할 때, 새로운 제도와 시스템을 도입할 때, 확증편향은 도처에서 우리의 객관적 판단에 검은 안대를 씌웁니다. 그 검은 안대는 벗기려 해도 절대 벗겨지지 않습니다. 앞이 보이지 않는 이런 상황에서 어떻게 행동하는 것이 현명할까요? '이쪽으로 가는 게 맞으니' 한 방향을 정해서 뚜벅뚜벅 걸어 가야할까요, 아니면 조금씩 앞을 더듬으며 나아가야 할까요? 후자의 행동이 확증 편향이라는 검은 안대의 방해로부터 우리의 판단을 보호할 수 있는 최선의 방법일 겁니다.

(*참고논문 : Publication Prejudices: An Experimental Study of Confirmatory Bias in the Peer Review System )



  
,

지난 포스트에서 논증의 구조와 문제해결의 구조에 대해 논했습니다. 기억할지 모르겠지만, 논증의 절차에서 가장 먼저 오는 단계가 '관찰'입니다. 오늘은 문제해결 과정의 첫단추이자 핵심이기도 한 '관찰'에 대해 알아보겠습니다.

언급했듯이, 관찰(observation)이란 현상(situation)을 파악하기 위한 활동입니다. 대부분의 문제해결사들은 의뢰인의 제시한 문제를 둘러싼 상황과 정황(context)를 되도록 빠르고 정확하게 파악하는 것이 효과적인 문제 해결의 열쇠임을 압니다. 당연한 말이지만 현 상황을 모르고 어떻게 바람직한 해결책을 낼 수 있겠습니까?

그러나 능숙한 문제해결사라면 문제가 야기하는 상황을 단순히 스케치하는 것에서 관찰을 멈추지 않습니다. 눈으로 보고 귀로 듣는 활동만을 관찰이라고 생각하지 않죠. 문제해결 과정의 초기일지라도 그들은 문제해결을 염두에 두고 관찰을 행합니다. 문제가 벌어지는 상황을 기록하고, 그것으로부터 문제의 원인을 가늠하며, 나아가 문제에 대한 잠정적인 해결책을 미리 구상해보면서 문제의 해답에 다가가려 합니다. 나중에 다시 언급하겠지만, 그래야 문제해결이 신속하게 이뤄지기 때문입니다. 

다음과 같이 관찰은 상당히 적극적이고 주관적인 과정입니다. 

1) 문제가 벌어지는 상황을 기록하기 위한 관찰
2) 문제의 원인을 가늠하기 위한 관찰
3) 문제 속에 내재된 잠정적인 해결책을 미리 구상하기 위한 관찰

위에서 관찰은 현상을 파악하기 위한 활동이라고 말했습니다. 따라서 '현상'을 보다 자세히 정의 내리면 '문제가 벌어지는 상황', '문제의 원인', '문제 속에 내재된 해결책의 실마리' 모두를 일컫습니다. 눈에 보이는 것과 귀로 들리는 것만이 현상이 아닙니다. 이를 주의하십시오.

현상이란, 
1) 문제가 벌어지고 야기하는 상황
2) 문제 발생의 잠정적 원인
3) 문제 속에 내재된 해결책의 실마리


"저기 좀 보세요!"


이 3가지 종류의 현상 중에서 첫번째(문제가 벌어지고 야기하는 상황)에 대해 설명하겠습니다.

어떤 회사의 직원들이 매우 태만하고 불평불만도 심하다고 가정해 봅시다. 의뢰인(아마도 CEO)이 여러분에게 이런 문제를 해결해 달라고 요청을 내렸다면, 어떻게 하시겠습니까? 먼저 '누구의 문제인지' 문제의 주인을 명확히 해야 한다고 지난 포스트에서 말씀 드린 바 있습니다. 이 경우엔 CEO의 문제라고 가정하겠습니다. 그렇다면 CEO의 입장에서 '직원들이 매우 태만하고 불평불만이 심하다'라는 문장이 이 회사의 문제로 정의되겠죠.

이제 문제해결사인 여러분은 CEO의 요청에 따라 관찰을 진행합니다. 직원들이 진짜 태만하고 불만이 많은지 옆에서 지켜보거나, 문서로 된 데이터와 자료를 검색하거나, 설문지를 돌리는 등 여러 가지 방법을 관찰에 동원합니다. 그 중에서 인터뷰는 가장 널리 쓰이면서 문제해결 때마다 필수적으로 적용되는 방법입니다. 의뢰인의 이야기를 좀더 자세히 듣는 것부터 시작하여 직원들의 일부 혹은 전부를 만나 CEO가 제시한 문제를 어떻게 인식하고 원인이 무엇이며 어떻게 해결해야 하는지에 관해 심층적으로 묻습니다. 인터뷰는 문제해결사가 갖춰야 할 매우 중요한 스킬이므로 나중에 따로 정리해 보겠습니다.

직접 관찰이든, 인터뷰든 여러분이 관찰을 행할 때는 항상 '측정(measurement)'의 문제에 직면합니다. 직원들이 CEO의 생각처럼 진짜 태만하고 불만이 많은지 측정할 수 있는 방법이 있어야 합니다. 또한, 측정 방법이 정해진 후에는 어느 정도를 태만하다고 볼지, 어느 수준을 불평불만이 많다고 여길지를 정해 놓아야 합니다. 

이는 결코 녹록한 일이 아닙니다. '태만하다'를 측정하는 방법은 무엇이 있을까요? 직원들이 잦은 지각을 일삼는다면 태만하다고 봐야 할까요? 아니면 지시한 일을 마감시간이 넘도록 완료짓지 않는 걸 태만하다고 측정해야 할까요? 또한 지각을 1주일에 몇 회 범한 걸 태만하다 봐야할지, 마감시간을 몇 시간 넘긴 걸 태만하다고 봐야할지 어렵습니다. 짧은 단어지만 '근무태만'이라는 문제를 측정하는 방법은 무수히 많고 측정의 척도(scale)도 다양하기 때문에 관찰은 단순히 지켜보기만 해서 끝날 일은 아닙니다.

우리는 보통 '관찰은 객관적이어야 한다'고 말합니다. 관찰의 행위에 주관이 개입되면 결과가 왜곡된다고 생각하면서 '주관적인 관찰'에 곱지 않은 시선을 보냅니다. 그러나, 관찰과 측정은 필연적으로 매우 주관적인 활동입니다. 흔히 드는 예로서, 물이 1/2이 든 컵을 생각해 보십시오. 눈에 비치는 컵의 모습은 하나이지만, '컵에 물이 반이나 차 있다', '컵에 물이 반 밖에 남지 않았다' 등처럼 다르게 해석됩니다. 이처럼 단순한 문제는 객관적인 측정이 가능할지 모르겠지만, 조직의 정성적인 문제로 들어가면 순수히 객관적인 관찰과 측정이란 존재하지 않습니다.

우선 측정방법을 택할 때부터 주관이 개입될 수밖에 없습니다. 근무태만을 측정하는 수많은 방법들을 모두 채용하지 못하므로 문제해결사 자신의 논리와 신념에 따라 그 중 몇 개를 선택하기 때문입니다. 측정의 척도를 정할 때도 마찬가지입니다. '이 정도의 지각 횟수는 근무태만이라 보기 어려워'라고 판단을 내리는 것도 주관이 강하게 개입된 결과입니다.

따라서 문제해결사들은 '근무태만'이란 상황은 '이런이런' 관점으로 '이런 정도'의 척도로 측정하겠노라고 미리 선언해야 합니다. 자신의 주관을 공개함으로써 객관성을 확보해야 합니다. 그렇지 않고 순수한 객관성에 목을 맨다면 측정 방법과 척도를 정하지 못해서 결국 문제해결에 한 발자국도 다가서지 못합니다. 객관적 학문의 총아라고 여겨지는 과학에서도 얼마나 많은 주관적 관점이 개입돼 있는지 아십니까? 관찰의 주관성은 학문의 발달 뿐만 아니라 문제해결에도 필수적인 요소입니다.

관찰 결과를 청취하는 입장에서도 문제해결사가 어떤 관점으로 관찰을 행했는지 인식할 의무가 있습니다. 계량적이지 않다, 주관적인 판단 이다, 라며 무조건 '객관성'을 외치고 문제해결사를 비판하는 사람이 있는데, 그런 사람은 문제해결의 본질을 모르는 헛똑똑이입니다. 비판을 위한 비판만을 일삼는 문제해결의 적입니다.

'관찰은 객관적이어야 한다'는 말의 정확한 의미는 '관찰에 사용되는 주관을 최대한 객관화해야 한다'는 말로 이해해야 합니다. 관찰은 주관적으로 결정되는 객관적 사실입니다. 그러므로 문제해결사는 자신이 어떤 관점으로 문제를 바라보는가, 어떤 색안경을 끼고 문제에 접근하는가를 먼저 깨닫고 이를 다른 사람에게 알려야 합니다. 이것이 관찰하는 자가 준수해야 할 제1의 덕목입니다.

다음에는 관찰의 나머지 목적인 두번째와 세번째에 대해 논의해 보겠습니다.

【한RSS로 편하게 제 블로그를 구독하세요】  


  
,