임종수,유승현
저자:임종수
세종대학교미디어커뮤니케이션학과교수이자,세종대글로벌미디어소프트웨어(GMSW)융합연계전공센터장이다.한양대학교신문방송학과에서학사,석사,박사학위를취득했다.주요관심분야로텔레비전과일상성으로시작해최근에는OTT형식과수용,제도화등을연구하고있다.주요논문으로「AI미디어와의인화」,「오토마타미디어」,「영상드론의운동성과보기양식에관한소고」등이있고,지은책으로『저널리즘모포시스』(공저),옮긴책으로『넷플릭스의시대』,『디지털시대의뉴딜:망중립성이후의인터넷』(공역)이있다.
저자:유승현
한양대학교영어영문학과학사,신문방송학과석사,박사.(前)tbs교통방송연구위원.(前)한국언론학회사무국장.(現)한양대학교언론정보대학원초빙교수.디지털미디어와매체론전공.최근에는인공지능(AI)등디지털미디어진화와빅데이터분석분야에서작업중.최근발표한논문으로는“AI로봇의인화연구”,“드라마에대한주목의생애와SNS유력자에관한연구”,“방송심의시스템에서의시청자참여심의제도입가능성에대한법적·행정적검토”,“드라마와SNS유력자들”등이있음.
서론
추상기계AI와‘시뮬라시옹서사’라는문제들
1.생성AI의원형:호모사피엔스의추상화능력
2.데이터질서:계산가능성과결정가능성
3.시뮬라시옹서사의탄생
4.이책의구성
1장시뮬라시옹서사를알리는네가지풍경:기회와위기
01하지않은일이일어나다:AI콘텐츠의실재감
02기술의재매개성:영화〈중간계〉와불쾌한골짜기
03AI영상의전략적창작:방송사의적용사례
04유튜브,AI영상규칙을위한안간힘
05‘시뮬라시옹서사’라는문제영역:새로운시각화의지평
2장인공지능기술오디세이1:자동계산에서생성기술까지
01컴퓨터,인터넷,인공지능의계보
1.컴퓨터:자동계산의열망
2.인터넷:연결성과확장성을위한열정
3.인공지능:모방과학습
02AI,딥러닝의여정
1.인공신경망:연결주의AI의실현
2.다층퍼셉트론:선형에서순환으로
3.역전파알고리즘:학습의동력
4.CNN과RNN:시각공간과시간흐름의이해
03LLM과생성하는AI
1.자연어처리와트랜스포머
2.LLM의탄생과혁신
3.생성AI:게임체인저
3장인공지능기술오디세이2:챗GPT이후
01챗GPT이후의AI풍경
1.AI의기능과범주:LLM-LMM-LRM-LAM
2.AI의지능수준:ANI-AGI-ASI
3.AI의발전단계:지각-에이전트-피지컬
4.AI활용의전략
02지각하고사유하고행동하는AI
1.지각하는(perceptive)AI:멀티모달AI
2.생각하는(reasoning)AI:추론AI
3.행동하는(acting)AI:에이전틱AI
4.AI의구조적전환:LLM이쏘아올린거대한공
4장동영상시뮬레이터
01소라(Sora)의충격:동영상시뮬레이터의장
02동영상시뮬레이터의기술
1.동영상시뮬레이터의기술적진화:CNN에서월드모델까지
2.동영상생성의원리:토큰과그메커니즘
3.동영상생성에서인간의몫:프롬프트엔지니어링
03동영상시뮬레이터와시뮬라시옹서사
1.동영상시뮬레이터의현재와미래
2.시뮬라시옹서사와창작패러다임의변화
5장시뮬라시옹서사의인공미학
01시뮬라시옹서사:기계가생성하는콘텐츠의세계
1.예술분야에서의AI활용
2.시뮬라시옹서사의등장
02시뮬라시옹서사의감각
1.시뮬라시옹서사의구조,장르,프롬프팅
2.깨끗한환각:살균처리된감각
03기계연산의창의성,인공미학의계보
1.인공미학론:재현과합성
2.인공미학의계보:아날로그트릭에서디지털가상성까지
3.디지털원본을넘어:기계연산의창의성
6장시뮬라시옹서사의예술적위치
01시뮬라시옹서사의위상
1.크리스탈-이미지의기계장치
2.순수시청각적상황의정치경제
02아우라의새터:상사성,원본없는예술
1.유사와상사
2.아우라의진화:커뮤니케이션가능성
03제4의모방과데이터테크네
1.온갖재현물의모방:제4의모방
2.데이터테크네와보는방법
7장시뮬라시옹서사의효과
01초현실적·물리적세계로의도취
1.숭고한대상의스펙터클
2.시뮬라시옹서사의보상:도취와잉여향유
02IBR과진지한장난:그로테스크
1.의미없음의힘:IBR과그로테스크가상성
2.진지한장난:메타모더니즘과아이러니한진정성
03AI는뉘앙스를생산하는가?:‘마음없는지능’을대하는우리의자세
1.시뮬라시옹서사의뉘앙스:패러디와패스티쉬사이
2.시뮬라시옹서사와저작권
3.시뮬라시옹서사생성의3주체
결론
기호생성시대의미디어와예술
01완성형시뮬라시옹서사의등장
02연산산업과인지혁명
03밥-기계아저씨(UncleBob-machine)
04합성의기계복제
05나는의심한다,고로존재한다
참고문헌
AI영상콘텐츠와시뮬라시옹
지금영상을생성하는AI는유튜브,방송,영화,OTT등모든미디어분야를자신들의종족이번성하는생태장으로삼고있다.‘원본없는’피사체와‘촬영없는’이야기를생산하고소비하는것이어느덧평범한일상이되었다.이제우리는‘AI영상’이라는소박한단어로는다담을수없는‘시뮬라시옹서사(simulationnarrative)’의지평앞에서있다.시뮬라시옹서사는어쩌다발생한해프닝이아니라‘이야기하는’인류가도달한새로운경로다.
AI영상콘텐츠는현실의재현이아니다.수많은재현물을학습하지만,정확히그것이무엇을지시하는지알지못하는파생된실재이다.상사적그럴듯함(similitude)을추출하여엮어낸‘합성의이미지’다.현실의사물과사태로부터기록한기호들이AI를거쳐임의의시뮬라크르로재탄생한것이다.이것은‘제4의모방’이다.‘흐릿한이미지’의서사다
생성AI의원형:호모사피엔스의추상화능력
〈호모사피엔스〉의저자유발하라리는사피엔스종족이다른영장류를물리치고지구의지배종이된데는추상화할줄아는인지혁명이있었기때문이라고말한다.그예시로다른영장류와달리유독사피엔스종족만이허구를말할수있는능력을가졌다고본다.허구를말할수있는능력은누가누구를좋아하는지좋아하지않는지,신뢰하는지적대하는지등우리가뒷담화라부르는사회적관계의커뮤니케이션을할줄아는능력을말한다.
훗날우리는이를‘추상화능력’이라고칭한다.사피엔스는이능력에힘입어눈앞에없는산너머의어떤동물또는적에대한사냥이나전투에서시작해,종교,인권,도덕,평판등실체없는상상속의질서를구축해내었다.오늘날정보가조직되는출발점이다.하라리의주장은과학적증명이힘든먼과거의일이지만,설득력있는합리적추론으로받아들여진다.그렇다면우리는산너머의동물과종교,인권,도덕,평판의추상수준이같지않다는것도받아들일수있다.
전자에비해후자의추상수준이훨씬높기때문이다.산너머의사냥감이보이지않는실재를믿게하는추상성이라면,종교등은실재가없는상상만으로어떤질서를확립하는추상성이다.사피엔스종족은셀수없는뒷담화과정을통해인간사회가믿고따르는공유된의미체계를벼려내었다.그리고급기야인류는동굴벽화에서오늘날의컴퓨터에이르기까지,공유된의미체계를효율적으로담아내는추상화의기계장치를개발해내었다.
데이터질서:계산가능성과결정가능성
생성AI는어떤원본과똑같은것을복제하는것이아니라축적된데이터가함의하는바를유기적으로조합하고변형한복제물을생성해낸다.마치영화〈쥬라기공원〉에서호박에갖힌모기의피를이용하여공룡을복제해내는것과같다.유전자조합의매개변수(parameter)에따라원본의성격을벗어나지않는한도내에서변형된복제물을만들어내는것이다.따라서AI생성의논리는원본을그대로복제한유사성(resemblance)이아니라데이터가허용하는구조적닮음으로서상사성(similitude)을따른다.
그렇기때문에AI에게있어잠재적공간이란데이터와학습모델이가진가능성의범주안에서프롬프트를통해그가능성의하나를길어올리는데이터-추상화의작업매커니즘이다.그결과,생성AI는데이터가허용하는질서를도출하지만,그데이터질서는거의무한대에가까운생성의가능성을내포한다.생성AI의결과물이인간의상상적질서와비슷해보이는이유이다.
이시대의AI는이같은추상수학의기계적계산가능성과결정가능성이적용된커뮤니케이션장치이다.1990년대초반만하더라도그장치는가능성의수준이었지만,오늘날은기계가생각할수있는가의문제를넘어기계가직접커뮤니케이션을행하는행위자가되었다.이는인간과인간사이는물론인간과기계간의커뮤니케이션이사회적의제,유행,취향,관심을조율한다는것을의미한다.초기사피엔스가스스로의두뇌와말로써했던커뮤니케이션이인간바깥의외부기계장치를통해실현되는것이다.
시뮬라시옹서사의탄생과의미
동영상생성AI의쓰임새가널리알려진것은2024년2월소라가공개되면서이다.2024년처음으로AI영화제가개최되었고,대학의강의실과일부중고등학교에서도그활용성을모색하기시작했다.그러나그때까지만하더라도기계가동영상을출력해낸다는것에환호했을뿐실용성면에서는아직실험실수준이었다.무엇보다오류가많았다.2025년,불과1년만에이같은한계가개선이라는말로표현할수없을정도로진화했다.미디어현장에서사용할수있는기술진보가이루어진것이다.
이제미디어분야는‘AI영상’이라는소박한용어로는담지못하는‘시뮬라시옹영상(simulationvideo)’,더나아가‘시뮬라시옹서사(simulationnarrative)’의지평을말해야하는단계에이르렀다.그렇다.시뮬라시옹은우리가아는장보드리야르의언어이다.우리는AI가만드는영상과그서사의고유성을보드리야르의통찰에서영감을얻고자한다.그러면서그것을뛰어넘고자한다.보드리야르의아이디어에기대볼때,AI에있어시뮬라시옹영상또는시뮬라시옹서사란AI가현실을재현한콘텐츠를학습하여만들어낸인공적인콘텐츠또는그런콘텐츠가보여주는이야기를말한다.그것은간단히말해모사의모사다.엄밀히말하면,‘촬영없는’또는‘원본없는’이야기이다.모사물자체로서시뮬라크르(simulacres)의서사이다.
이책의독자라면“어때요,참쉽죠?”라면서쓱쓱그림을그리는‘밥아저씨’(RobertNormanRoss)를떠올릴수있을것이다.쉽다고말했지만,그의‘그림그리기의즐거움’(thejoyofpainting)은경탄의대상이지일반인의재능이아니었다.하지만AI는밥아저씨가말한즐거움을민주화시켰다.애잔하다못해비극적이기까지했던현실의밥아저씨가이시대에소라와같은‘밥-기계아저씨’(UncleBob-machine)로부활했기때문이다.현실의밥아저씨는자신의미술적재능으로그림그리기의즐거움을말했지만,밥-기계아저씨는특정한양식이나숙련된기술의권위에얽매이지않고우리모두의상상력을즉각적인감각의장으로초대한다.밥아저씨가던졌던따뜻한말은소수의재능있는자가대중에게건네는위로가아니라,기술이라는평등의날개를단우리모두가서로의미완성서사를공유하며내뱉는즐거운확언이된다.-〉추가함
이책의구성
이책은AI가생성한동영상이유튜브는물론TV,영화에까지진출하는것에대한기술적,문화적이해를필요로하는사람들을위해저술되었다.따라서새로운문명전환에관심이있거나해당분야를공부하고사람,미디어산업분야에종사하는사람들에게유용할것으로보인다.
1장은시뮬라시옹서사라는개념을이해하기위한사례를검토한다.사례는총4개이다.여기에서는지난2년여사이폭증하는생성AI영상물이초래한기회와위기의긴장을다룬다.이를위해2024년10대청소년사이에서AI기술을사용한성착취물의생산과유포에서확인된‘하지않은일이한일’이되어버리는시뮬라시옹서사의전례없는역설적지위의문제,상업영화에서생성AI를활용함에따라벌어진불쾌한골짜기의현주소,생성AI기술을받아들인방송사에서확인되는경비절감과기존제작시스템의재정비,넘쳐나는AI생성물에질서를부여하고자하는유튜브의안간힘등을살펴본다.
2장은컴퓨터,인터넷,그리고초기AI의여정을다룬다.컴퓨터와인터넷은물론AI자체도공학적이고수학적이어서일반인의접근이쉽지않은것이현실이다.하지만몇몇핵심개념만이해하면인공지능기술과그역사를충분히파악할수있다.본문은1)‘생각하는기계’에대한아이디어를풀어낸초기선구자들의통찰,2)자동계산기계를만들고자하는열망,3)세계를연결하고확장하려는열정,그러한토양위에서4)AI를암중모색했던결정적순간들,5)이른바‘기호주의AI’에서‘연결주의AI’로의극적인전환,6)공개되자마자순식간에일상으로파고든챗GPT와그밖의LLM모델등을탐험한다.
3장은챗GPT등장이후2026년현재폭발적으로성장하는인공지능의현주소를현미경으로들여다본다.먼저AI를바라보는방식을기능과범주,지능수준,발전단계,활용전략등으로나누어고찰한다.이는AI를막연한대상이아닌실체적대상으로조망할수있게해준다.이러한분류법은LLM에서멀티모달,월드모델로이르는AI진화의궤적을한눈에볼수있게한다.독자는지각하는인공지능으로서멀티모달AI,생각하는인공지능으로서추론AI,행동하는인공지능으로서에이전틱AI로의진화과정을흥미롭게따라갈수있을것이다.사실이러한진화는언어중심의챗GPT를공개한지불과2년여만의일이다.
4장은현재혁신적으로발전한동영상생성AI,달리말해‘동영상시뮬레이터’를집중해부한다.앞에서살펴본AI기술사가자동계산에서생성기술로나아가는여정이었다면,동영상생성기술은‘시뮬라시옹서사’를여는서막이라할수있다.2024년세상을뒤흔든오픈AI의소라를기점으로AI는평면적인픽셀을넘어3차원공간의일관성과객체의물리적영속성을이해하며가상세계를정교하게직조하기시작했다.이는현실과가상의경계를허물고,인간의상상력을물리적제약없이시각화하는새로운‘창작패러다임’을연것이다.
5장은시뮬라시옹서사를인공미학의관점에서해명하는인식론적시도이다.이장은다양한예술분야에서생성AI가활용되는것을시작으로시뮬라시옹서사라는새로운영역이어떻게
작동되는지그원리를다룬다.따라서시뮬라시옹서사의영역을발견하고정의하는것이이장의목적이다.시뮬라시옹서사는보드리야르가말한‘깨끗한환각’이일러주는인공미학의프레임으로관찰·경험되는세계이다.인공미학의예술은인간의창의성이실현해온‘재현(representation)’이아니라기계연산의창의성의실행요소인‘합성(synthesis)’의세계로우리를안내한다.
6장은시뮬라시옹서사의예술적위치에관한장이다.다소거창하게말하면,시뮬라시옹서사의존재론을고찰하는것이이장의목적이다.이장에서는시뮬라시옹서사의위상을철학자들뢰즈의‘운동-이미지’와‘시간-이미지’,그리고‘크리스탈-이미지’개념을가져와설명한다.여기에서우리는시뮬라시옹서사가어떤의도된메시지의수단으로만아니라존재자체가의미를가진순수시청각적상황에얼마나잘들어맞는지확인할수있다.이같은시뮬라시옹서사는유사가아닌상사,아우라의삭제가아닌진화덕분이다.이는생성AI의활용이‘한계비용제로’에가까운생산성을지녔기때문이다.‘데이터테크네’덕분이다.이장의후반부는플라톤의이미지비판으로부터추론해낸‘제4의모방’과‘데이터테크네’개념을통해시뮬라시옹서사가정확히어디에위치하는지명쾌하게설명한다.
7장은시뮬라시옹서사의수용에관한부문이다.시뮬라시옹서사가불러일으키는효과는무엇인가?초현실의물리적세계를실현하는시뮬라시옹서사는특유의도취(transportation)로말미암아숭고한대상의‘스펙터클’세계를구현한다.스펙터클로서시뮬라시옹서사는인간내면의욕망을밀도있게/직관적으로/저렴하게충족시켜준다.스펙터클만큼이나‘그로테스크’또한시뮬라시옹서사의효과중하나이다.이탈리안브레인롯IBR으로이름붙여진의미없음의서사는‘진지한장난’이라는무척이나아이러니한메타모더니즘의문화와맞닿아있다.이장의마지막에서는‘마음없는지능(mindlessintelligence)’인생성AI의창의성의현실적가능성과한계를법적,규범적차원에서검토한다.시뮬라시옹서사에서발견되는독특한뉘앙스는저작권의범주로포용가능한가?생성AI기술혁신이결정적다수(criticalmass)를형성하는지금원작자-AI플랫폼-창작자간의분쟁사례와이해관계를정리한다