존재하지 않는 영화(양장본 Hardcover)

★★★★★ 대한민국 AI국제영화제(KAIFF) 강력 추천도서 ★★★★★

ㆍ STORY: 인간이 쓰고 챗GPT가 다양하게 변환, 최상의 스토리를 빠르게 완성한다
영화의 스토리는 여주인공의 직업을 '남극의 동물학자'로 하는 원안으로 출발한다. 이 원안을 두고 챗GPT와의 협업을 통해 다양한 인물, 설정, 플롯을 시도해 확장했다. 1차 각색에서는 챗GPT로 '북한의 아나운서', '인도의 영화배우', '한국의 무용수', '화성의 우주인', '미국의 변호사', '독일의 물리학자' 각각의 버전을 시도했고, 그에 따라 독특한 매력을 지닌 스토리가 만들어졌다.
앞선 결과물 중 '한국의 무용수'로 최종 선택하여 2차 각색에 들어갔다. 2차 각색에서는 프롬프트를 통해 무용수로서 감정, 표현, 생각, 상황에 대한 설정을 좀 더 구체적으로 하고, 여주인공이 본인의 정체성을 알게 되었을 때 가질 수 있는 혼란 등을 좀 더 사실적으로 표현할 수 있도록 입력하였고, 이를 바탕으로 스토리를 계속해서 디벨롭했다.
이 과정에서 만들어진 새로운 세계와 인물 중, '남극의 동물학자'였던 여주인공을 '파리의 무용수'로 바꾼 스토리를 최종적으로 선택했다. 이 챕터에서는 원안부터 최종 확정된 스토리까지의 각색 과정을 모두 담았다.

ㆍ CASTING: 오직 이 영화만을 위한 얼굴, 세상에 없는 배우를 만들어내다
완성된 스토리가 영화가 되기 위해서는 등장인물의 비주얼이 필요하다. 이 영화에 등장할 배우들은 어떻게 생성되었을까? 사실, 영화 속 배우들의 얼굴을 생성형 AI를 통해 일관성 있게 만드는 것은 상당히 까다로운 작업이다. 대부분의 생성형 AI로 만들어진 인물들은 동일한 프롬프트를 입력해도 매번 다른 얼굴이 만들어지는 본질적인 문제를 가지고 있기 때문이다.
우선 최근 소개된 Artflow AI에서 결정된 인물의 얼굴을 저장했다. 추후 새로운 프롬프트를 입력할 때마다 미리 저장된 인물과의 일관성을 극대화하는 알고리즘을 사용해, 장면마다 동일한 인물의 얼굴을 생성해낼 수 있도록 했다. 물론 여전히 완벽하지는 않지만, 적어도 주인공들의 얼굴 생김새와 분위기가 전체적으로 일정하게 유지하는 것이 가능했다.

ㆍ INTERVIEW: 배우들과의 대화를 통해 캐릭터를 더 깊이 이해하는 과정
각색된 스토리 버전을 챗GPT에 업로드하고, 등장하는 캐릭터들을 이해한 대로 설명해달라고 요청했다. 결과는 놀라웠다. 챗GPT는 작가의 의도를 뛰어넘는 깊이 있는 캐릭터 분석을 내놓았다. 그 답변 또한 무척 흥미로워 다시 한 번 질문을 던졌다. "당신이 남다주, 강현수, 엔지니어, 정미를 연기한 배우라면 우리의 질문에 어떻게 대답하겠습니까?" 자연스럽게 배우 인터뷰가 진행되었고, 마치 실제 존재하는 배우들의 이야기를 듣는 것처럼 결과물이 도출되었다.

ㆍ STORYBOARD: 이미지 생성 - 선택 - 수정. 진정한 의미의 협업이 이루어지다
영화에서 스토리보드는 중요한 역할을 한다. 아직 촬영이 시작되지 않은 시점에서 비주얼과 장면들을 구상하고, 대본을 수정할 수 있기 때문이다. 그렇다면 '존재하지 않는 영화'의 스토리보드는 어떻게 그릴 수 있을까? Lore Machine이라는 생성형 AI 서비스, 말 그대로 '이야기 기계'인 이 생성형 인공지능은 입력된 대본을 기반으로 스토리보드를 그린다. 물론 아직 완벽하지는 않다. 대본에 있는 중요한 장면을 그리지 않기도 하고, 반대로 대본에 없는 그림을 그리기도 한다.
책에는 Lore Machine으로 생성한 4가지 스타일의 스토리보드가 모두 수록되었다. 두꺼운 연필로 그린 듯한 Robowolf, 뚜렷한 선과 색 그리고 깊은 그림자로 그려진 Pulp, 1990년도 일본 전통 만화 스타일로 그려진 Kanji. 각 스타일로 Lore Machine이 3~5번 스토리보드를 생성하고, 입력된 대본과 가장 잘 어울리는 이미지를 필자들이 선택했다.
마지막 Leonardo AI 스토리보드는 앞선 스토리보드와 다른 방식으로 만들어졌다. Lore Machine은 대본을 기반하여 자동으로 이미지를 만들었지만, Leonardo AI는 Leonardo라는 생성형 이미지 AI를 사용해 조금 더 전통적인 방법으로 스토리보드를 만들었다. 또한 대본에 나오는 핵심 장면들을 프롬프트화해서 이미지를 하나하나 개별적으로 생성했다.

ㆍ STILL CUT & SKETCH & CRANK UP: 실제 영화의 과정들을 최대한 리얼하게 제작
실제 영화처럼 촬영의 배경이 되는 파리의 풍경과 여주인공의 아름다운 모습 등을 스틸 컷으로, 영화 촬영장 모습과 배우들이 연기하는 모습을 담은 장면들을 스케치로, 촬영이 끝난 후 배우들의 여가 활동하는 모습등 을 크랭크업으로 제작해 담아보았다. 이는 생성형 AI인 Artflow AI와 Leonardo AI로 작업하였다.

PROLOGUE
STORY
CASTING
INTERVIEW
STORYBOARD
STILL CUT
SKETCH
CRANK UP
EPILOGUE

김대식 뇌과학자
카이스트 전기 및 전자공학부 교수. 독일 막스플랑크 뇌과학 연구소에서 박사학위를 받았다. 미국 M.I.T에서 박사 후 연구원, 일본 이화학연구소에서 연구원으로 일했다. 미국 미네소타 대학교 조교수와 미국 보스턴대학교 부교수로 근무했다. 저서로는《위대한 인도》,《챗GPT에게 묻는 인류의 미래》,《김대식의 빅퀘스천》등이 있다.