증거의 오류 (데이터, 증거, 이론의 구조를 파헤친 사회학 거장의 탐구 보고서)

하워드S.베커

사회학분야의최고권위자.1928년시카고에서태어난그는23세의나이에시카고대학에서박사학위를받았으며,그곳에서사회학과사회과학강사로활동했다.이후25년간노스웨스턴대학교사회학과교수로재직했고,워싱턴대학교로적을옮겨사회학과교수겸음악학부교수로활동하다가은퇴했다.
그의학문적성과는주로일탈,예술,음악의사회학에서나타난다.특히1963년에출판된?아웃사이더(Outsiders)?를통해유명한낙인이론(labellingtheory)의기초를제공했고,1982년출판된?예술세계(ArtWorlds)?에서는예술이집단행동의산물이라는아이디어를전개했다.그외에도?학자의글쓰기(WritingforSocialScientists)??사회에대해말하기(TalkingAboutSociety)??학계의술책(TricksofTrade)??모차르트와살인은일탈일까?(WhatAboutMozart?WhatAboutMurder?)?등십여권이넘는저작을집필했다.그는사회과학방법론,학생문화,조직문화,상징적상호작용론의발전에크게기여했으며,이런공로를인정받아학계의대표적인상들을수상했다.현재는샌프란시스코에살면서다양한사회학적관심사를활발히연구중이다.

1부데이터,증거,이론의모든것
1장연구모형의몇가지역사적배경
2장데이터가증거가되기까지
3장자연과학자들은어떻게연구하는가

2부누가어떤방법으로데이터를수집하는가
4장모든데이터수집의표본,인구조사
5장공무원들이증거로수집하는데이터
6장‘고용인’과비과학자가수집하는데이터
7장수석연구자와보조연구원의데이터
8장정성연구에나타날수있는부정확성

맺음말-마지막으로덧붙이는생각
감사의말

우리의모든행위는데이터로연결된다

우리는수많은통계와설문조사,여론조사,시장조사등을경험하고이를토대로한다양한보고서와뉴스를접하며산다.때로는업무나연구등의목적으로그런데이터를생산하기도하고,때론그런데이터를활용해서제안서나보고서를작성하기도한다.또그렇게작성된제안서나보고서를검토한후,앞으로의정책이나사업방향을결정해야할수도있다.
증거의오류저자인하워드베커는70년이넘게세계적인사회학자로활동해온자신의경험을토대로,바로이지점에서문제를제기한다.어떤이론이나주장,아이디어를펼치려면증거가필요하다.그래서우리는관찰가능하고기록가능한데이터를찾아나선다.데이터는수많은물리적객체의집합이다.경찰이업무상기록하는현장보고서,제품구매리뷰를인터뷰한음성파일,연봉과직장생활만족도를묻는설문지,주민센터전입신고기록,유치원아이의일기장등실상우리의삶은이러한데이터에둘러싸여있다.다만어떤아이디어를주장하는가에따라필요한데이터가다를뿐이다.
하지만과연특정‘데이터’가그‘아이디어’를확실히뒷받침하는제대로된‘증거’인지는또다른문제다.우리는누구나‘왜’그일이일어났는지를알고싶어하며우리를둘러싼사회현상의원인과해결책을찾고자한다.그러나이과정에서‘증거’로활용되는‘데이터’에오류가있다면,이를기반으로펼쳐지는이론이나아이디어가타당한추론이되기힘들것이다.하워드베커는노련한사회학자의시각에서이같은문제를제기하며,데이터,증거,이론의상호의존적순환구조를깊이있게설명한다.

오류는어떻게생겨나는가?
각종통계와설문조사,보고서등에숨겨진오류의근원

이야기하나.2010년대초반,당시미국에서는사회적고립이국가적인담론으로떠오르고있었다.이때한연구팀이명망높은‘종합사회조사’의데이터를이용해서논문을발표했다.종합사회조사는1985년과2004년두차례에걸쳐중요한일을상의하는주변사람들의이름을대고그사람과어떤관계인지묻는설문을실시했는데,2004년에는그숫자가크게감소한데다가아예없다고대답한이들의숫자가세배가까이증가했다고한다.이러한결과는휴대전화와인터넷이심각한변화를일으켰다는논의와우려표출로이어졌고,전세계적으로도확산되어연일뉴스의소재가되었다.하지만과연어디까지진실이었을까?
이야기둘.1960년대초스탠퍼드대학의사회학교수인폴월린과레슬리C.월도는사회계층이어린이의학교성적에어떠한영향을주는지알아보고자했다.두학자는학생들의사회계층을측정하기위해8학년학생2,002명에게그당시에유행하던오거스트홀링스헤드의‘사회적지위척도’에나오는질문들을던졌다.그중에는아버지의직업을묻는질문이포함되어있었는데,한아이가‘목사’라고답했다.과연여기에는어떤함정이있을까?
겉으로보기에는특별한모순이없어보이지만,실상이속에는심각한오류들이있다.하워드베커는다양한사례및연구보고서를제시하며,데이터수집과정에서발생할수있는오류들을하나씩짚어낸다.대표적으로‘고용인’에의한오류,개념변화나혼용으로인한오류,허위보고의오류,과감한일반화의오류,직업적이해관계로인한오류,방법론적도구때문에발생하는오류등을들수있는데,이같은과정을함께추적하다보면탈진실의시대에팩트를구별하는일이얼마나중요한지를다시한번실감하게된다.

어떻게오류없는데이터를수집해서아이디어를뒷받침할것인가?
사회학연구방법론과데이터수집과정에대한따끔한고찰

하워드베커는사회학자들의주요연구방법과누가데이터수집담당자인지를중심으로,어디에서어떤오류가발생하는지를설명한다.사회학의양갈래라말할수있는정성연구와정량연구는각연구방법에따라특징적인오류를반복하는경우가많고,데이터수집자의사회적상황과데이터수집의동기는데이터의신뢰도에영향을끼쳐증거역할을할수있는지여부를결정지기때문이다.
이에증거의오류1부에서는데이터,증거,이론의상관관계를설명한뒤,오래된논쟁의대상이되어온정량연구와정성연구의차이와특징을밝힌다.각연구방법에따라연구자들이목표로하는것이무엇인지,그리고그때문에어떤점을간과하고어떤오류를일상화시키는지를파헤친다.동시에자연과학자들의연구모형을자세히소개하면서,적어도그들처럼치열하게수치검증을하고변수통제를해야하지않은지날카롭게되묻는다.
2부에서는데이터수집의주체가되는사람이누군인지에따라세분화한한다음,그처럼다양한사람들이수집한데이터를견해와이론의증거로활용할때예상하고경계해야할오류,실수,고충에대한논의를체계적으로소개한다.심지어그스스로범했던오류를고백하며,더이상이런실수를반복하지않기를당부하고있다.세계적인석학의이러한울림은사회학종사자뿐만아니라데이터를만들고사용하는우리모두에게깊은혜안을제공할것이다.