데이터 과학자의 일 (금융, 게임에서 스포츠까지 현장에서 찾아낸 데이터 과학의 오늘)

손승우

(2장)
마이크로소프트데이터·응용과학자.머신러닝을활용한각종자연어처리및추천시스템을개발하여Windows,Bing.com등의제품에출시하는업무를담당한다.

들어가며

1장통계학,가장오래된데이터과학
2장인공지능,머신러닝,딥러닝의차이는무엇일까?
3장핀테크와테크핀이경쟁하는시대의금융
4장게임,가장풍부한데이터가뛰노는세상
5장야구에서출루율이중요해진데이터과학적이유
6장데이터과학으로서비스를보호하는방법
7장병원,의학정보를다루는데이터센터가되다
8장사람을더똑똑하게만드는인공지능교육
9장예비데이터과학자를위한취업분투기
10장머신러닝서비스에엔지니어가필요한이유
11장공백속에숨은놀라운이야기,결측데이터

주

1.데이터과학자의일은어떻게우리의현실이되는가?
-현장에서써내려간데이터과학현장보고서
데이터를‘21세기의원유’에비유하고,데이터과학자를‘21세기의가장섹시한직업’이라고말하는시대다.인공지능,빅데이터,머신러닝,딥러닝등데이터과학관련용어는IT·경제뉴스에서쉽게접할수있는일반용어가되었다.무엇보다데이터과학은온라인쇼핑몰이나유튜브·넷플릭스등미디어콘텐츠플랫폼의추천시스템에활용되어어느새우리의선택마저좌우하는막대한힘을발휘하고있다.그런데이같은큰관심과영향력에도불구하고데이터과학이어떤분야에서활용되는지,데이터과학자들은각분야에서구체적으로어떤일을하는지소개해주는책은찾아보기어렵다.
이책《데이터과학자의일》은금융,게임,스포츠,보안,의학,교육등다양한분야에서활약하는데이터과학자들의생생한목소리로데이터과학을소개한다.이들이업계의환경과목표에따라좋은데이터를수집하고,수집한데이터의의미를분석하고,이를바탕으로‘데이터기반의사결정’을하는일련의과정은데이터과학이우리삶을어떻게변화시키고있는지를여실히보여준다.다양한데이터과학자가현장에서겪은실제사례를통해보여주는지금여기의데이터과학은어떤모습일까?

금융산업에서데이터과학이적용되는분야는무궁무진하다.세계최고의투자은행이라는골드만삭스의경우,명문대학교MBA출신의트레이딩전문가가600명에서2명으로줄어들었고,이제그일을데이터를학습한컴퓨터가담당하고있다.회장스스로골드만삭스는IT회사라고부른다.인공지능과딥러닝의등장으로금융산업자체가커다란변화의시기를맞이한것이다.인류의역사가시작된이래로존재했던금융산업은1차,2차,3차산업혁명시대에도흔들림없이그자리를지켜왔다.하지만인공지능의등장으로시작된4차산업혁명시대에는커다란변신을요청받고있다.변화하지않으면도태되기때문이다.
-〈3장핀테크와테크핀이경쟁하는시대의금융〉중에서(67~68쪽)

비교적단순한구조의퍼즐게임에서는보통서로게임플레이기록을공유함으로써자신의기록을자랑하거나,다른사람의추천을통해자신에게필요한아이템을얻는방식으로신규유저를확보하는등의기능을제공한다.(중략)플레이어간의상호작용이더적극적인게임이라면더세밀한데이터가기록될수있다.이를테면1인칭슈팅(FPS)게임의경우누구와대결했는지,전적이어떻게되는지,어떤방식으로승리혹은패배했는지,대결결과가나오기까지시간이얼마나걸렸는지,대결과정에서어떤기술을이용했는지등이기록될수있다.심지어자유도가높은대규모다중사용자온라인롤플레잉게임(MMORPG)의경우,조금과장하자면현실세계에거의근접한수준의활동들이기록된다.이처럼세밀하고풍부한데이터가있기때문에데이터분석가에게게임은참으로매력적인분야가아닐수없다.비유하자면세상에존재하는온갖재료가가득담긴초대형냉장고앞에선요리사가된기분이다.
-〈4장게임,가장풍부한데이터가뛰노는세상〉중에서(77~78쪽)

만약여러분이보안도메인의데이터과학자라면다른영역의데이터과학자에게는일반적으로없는특별한것이하나있다.그것은바로구체적인악의를가진적이다.여러분이상대해야하는적은다양할수있다.악성행위를반복하는사용자부터악성코드를심으려는해커,규약을지키지않고서비스로부터데이터를수집하려는크롤러제작자에이르기까지다양하다.여러분의업무는그적을분석하고탐지하고예측하여더는위협적이지않은상태를가능한한길게유지하는것이다.이글에서는데이터과학자이기전에서비스를보호한다는분명한목적을가진사람으로서이같은적들을상대하려면무엇을공부해야하고,어떤준비가필요한지이야기하고자한다.물론데이터과학과보안의연관성에대해서도다룰것이다.마지막으로악의적인크롤러방어와관련된구체적인사례를소개하며앞에서설명한준비와실무가어떻게적용되는지함께살펴보겠다.
-〈6장데이터과학으로서비스를보호하는방법〉중에서(125~126쪽)

선진국의경우대개인구구조가어느정도고령화되어대부분고령층이인구의10~20%에달한다.선진국의경우코로나-19발생초기부터고령감염자들의사망률이높다는데이터가축적되어있었다.그리고이러한국가에서는방역을위한거리두기가가능하며마스크를구입하고보급할수있는경제적여유가있는경우가많다.그래서우리나라를포함한선진국의경우고령층부터먼저백신접종을하였으며,감염후사망률이상대적으로낮은연령층은백신접종순위를늦추었다.하지만캐나다의노스웨스트준주와같이인구밀도가매우낮고의료자원이부족한곳에서는,고령층과함께교통이매우불편한곳에거주하는사람들을백신접종의우선순위로지정했다.코로나-19가확산될때이들이충분한진단및치료를받지못할가능성이높다고보았기때문이다.
-〈7장병원,의학정보를다루는데이터센터가되다〉중에서(156~157쪽)

2.예비데이터과학자를위한커리어가이드
-프로그래밍언어와수식없이탐색하는데이터과학의길
이책을집필한데이터과학자11명은모두현재데이터과학을활용·연구하는전문가들이다.그런데‘데이터과학자’라는하나의직업으로묶이는저자들이일하는현장은아마존,마이크로소프트,네이버,카카오,엔씨소프트등글로벌IT기업부터신한은행,서울대병원,미시간대학교등에이르기까지다양하다.이들이데이터과학에관심을갖고데이터과학을공부한계기또한천차만별이다.이렇듯데이터과학자가되는길은단일하지않다.
이책은다양한경로로데이터과학자가되었으며,다양한분야에서일하고있는저자들의다채로운이야기를담았다.각분야에서성공적인커리어를쌓고있는이들의이력과현장기록은데이터과학자가되길꿈꾸는취업준비생과청소년에게훌륭한가이드가된다.특히데이터과학을탐색해보고싶지만프로그래밍언어와수식의벽에부딪쳐갈피를잡지못하는사람이라면이책에담긴저자들의업무경험이좋은참고가될것이다.

‘21세기가장섹시한직업’이라불리는데이터과학자들은정작어디에서무엇을하고있을까요?짐작이가시나요?그동안시중에데이터과학을소개해주는책이많이출간되었습니다.그런데이책들은대개기술입문서에가깝습니다.실제로데이터과학이다양한분야에서어떻게응용되는지,구체적으로우리삶을어떻게편하게만드는지,어떤가치를창출하는지에대해서는별로이야기해주지않았습니다.데이터과학에대해잘모르는사람이처음입문할때는물론이론공부가꼭필요합니다.하지만다른한편으로큰그림을보고,다양한실제사례를접하며흥미를갖는것도큰도움이될수있습니다.그런동기부여가이론공부로이어지는선순환구조를갖추면더할나위없이좋을겁니다.
-〈들어가며〉중에서(6쪽)

“세상에,네가은행에서일을한다고?”오랜만에만난대학동창과의술자리에서친구들이토끼눈을뜨고물었다.비단친구들만이아니다.아내에게처음회사를옮기겠다는말을전했을때도,누구보다나를잘알고내편이었던아내마저도의아하게생각했으니그리놀랄일은아니었다.전자공학을전공했고,전자공학의다양한분야중로봇이사물을어떻게바라보는지를연구하는컴퓨터비전이라는학문을공부한필자에게금융권,그것도은행은단한번도생각해본적없는선택지였다.게다가남들이부러워하는글로벌기업의중앙연구소를떠나선택한곳이은행이었으니말이다.
-〈3장핀테크와테크핀이경쟁하는시대의금융〉중에서(53~54쪽)

필자는데이터과학자로서취업을희망하는요즘사람들과는달리,엔지니어링을깊이공부한이력이없다는점에서약간특이하다.구체적으로말하자면석사과정에서데이터시각화분야를연구했고,환자의의학검사데이터를기반으로만성도를분류할수있는프로그램개발과정에관여하며데이터의실질적인활용방안을제안하는데참여했다.하지만이렇게여러분야를연구했다고해서컴퓨터과학및통계학모두에능통하다고는볼수없는상태였다.(중략)이렇듯필자는사람들이흔히상상하는‘데이터과학자’의이미지와는상당한거리가있었음에도,언젠가데이터과학자가되어일하고싶다는꿈을가지고있었고,언젠가그런자리에서대단한일을해내고싶었다.
-〈9장예비데이터과학자를위한취업분투기〉중에서(190~191쪽)

3.당신의데이터문해력을업그레이드하라
-데이터시대의기본소양을키우는최고의지침서
데이터과학이아무리중요하더라도모두가데이터과학자처럼프로그래밍언어를다루고데이터를분석할필요는없다.하지만수많은기업과공공기관에서데이터를기반으로의사를결정하고정책을도입하는현실에서데이터의정보와숨은의미를파악하는능력은무척중요해졌다.바로‘데이터문해력’이데이터시대를살아가는현대인이라면꼭갖춰야하는기본소양이된것이다.이책은데이터과학자가문제를설정하고데이터를분석하는과정,시행착오를거치며의미를찾아내는과정을오롯이보여줌으로써‘데이터에서유용한통찰을얻는법’을이해하도록돕는다.데이터에서비즈니스인사이트를찾고자하는독자,데이터문해력을기르고자하는독자에게꼭필요한데이터해석훈련법이다.