AI가 學習하는 건 ‘實在世界’일까[사진기자의 社談진談/신원건]

東亞日報
入力 2024年 4月 24日 23時 39分

신원건 記者

코멘트: 個

좋아요: 個

코멘트: 個

오픈AI의 ‘소라’ 홈페이지에 있는 맛보기 동영상. — 오픈AI의 ‘소라’ 홈페이지에 있는 맛보기 動映像.

生成型 AI 技術이 소리와 그림을 넘어 動映像으로 進化하고 있다. 챗GPT 開發社 오픈AI는 “텍스트(문장)로 비디오를 만든다”며 올 初 ‘소라(Sora)’를 선보였다. 맛보기 映像을 보면 언뜻 봐서는 實査(實寫·實物撮影)와 區別하기 힘들다. ‘포토샵’ 運營社 어도비度自社動映像編輯 프로그램에 生成型 AI 機能을 追加했고 구글도 ‘비즈’라고 이름 붙인 앱을 6月 선보인다. 主로 1分以內의 映像을 만들어준다니 유튜브 쇼츠나 인스타그램 릴스에서도 生成型映像을 쉽게 볼 수 있을 것이다.

카메라는 光源이나 反射된 빛을 電氣信號로 바꿔 ‘撮影’한다. 實存하는 被寫體를 빛을 利用해 이미지 파일로 貯藏하는 것이다. 反面 위 技術은 ‘生成’ 方式이니 그림 애니메이션에 가깝다. 다만 實査 같아 보일 뿐이다. 眞짜 같은 假짜다. 소라 홈페이지에는 이런 弘報文句가 있다.

“AI가 움직이는 實在物理世界를 理解하고 再現하도록 학습시키고 있습니다.”

“많은 視角藝術家, 디자이너와 映像製作者에게서 實力向上을 위한 피드백을 얻습니다.”

技術業體들의 仔細한 開發過程은 企業祕密이라 公開하지 않는다. 弘報文句等을 통해 開發方向을 가늠해 볼 수밖에 없다. 位文句中 곱씹을 만한 單語는 ‘實在物理世界(physical world)’, ‘再現(simulate)’과 ‘視覺藝術家’ 等이다. 實在를 撮影한 映像專門家의 作品을 학습시키고 있음을 推測할 수 있다.

그런데 ‘實在世界’는 映像專門家의 손을 거쳐 撮影되고 編輯되면, 科鋪裝되기 十常이다. 映畫나 드라마 속 撮影地에 막상 가보면 바로 안다. 드라마 映像은 매우 고급스럽게 演出된 것임을. 實在 모습은 밋밋할 뿐이라는 것을.

知人이 交通事故目擊談을 들려준 적이 있다. 閑寂한 地方國道에서 自身의 車輛을 追越한 오토바이가 미끄러지면서 큰 事故를 當했다는 것이다. 運轉者가 “3∼4m 높이로 몸이 붕 뜬 채로 10m를 넘게 날아가 밭으로 떨어졌다”고 했다. 헬멧과 脊椎保護臺等安全 장구를 잘 着用하고 있어 多幸히 크게 다치지는 않았다. 事故瞬間이 궁금해 知人車輛의 블랙박스 映像을 스마트폰으로 옮겨 함께 봤다. 目擊談과는 사뭇 다르게 運轉者는 地上 1m 남짓 몸이 水平으로 떠올랐고 2m假量 밭에서 뒹굴었다. 0.3秒 만에 狀況은 끝났다. 知人이 誇張해 說明한 것일까. 아니다. 블랙박스 카메라는 벌어진 狀況을 렌즈를 통해 機械的으로 貯藏裝置에 記錄할 뿐이지만, 사람의 눈은 다르기 때문이다. 事故瞬間의 화들짝 놀란 感情까지 뒤섞여 腦에 貯藏되는 것이다. 知人에게 事故瞬間은 3秒以上으로 記憶돼 있었다.

映像專門家의 演出도 이와 비슷하다. 萬若 이 事故를 액션映畫監督이 演出했다면 어땠을까. ‘끼익’ 轟音을 效果音으로 넣고 俳優를 와이어에 매달아 10m假量 날아가게 했을 것이다. 코미디 演出者라면 俳優가 空中으로 뜨는 瞬間부터 슬로 모션으로 處理하고, 낮은 角度에서 올려보는 視角으로 카메라를 設置해 運轉者가 하늘을 背景으로 날아가는 모습을 만들었을 것이다. 莊嚴한 클래식 音樂을 깔고 하늘을 헤엄치듯 팔다리를 空中에서 휘젓는 모습까지.

블랙박스 映像과 目擊者의 記憶中 어느 것이 實在에 가까울까. 블랙박스다. 感情의 介入 없이 狀況만을 機械的으로 담았으니까. 그러나 ‘實在를 再現하겠다’는 AI가 정작 學習하는 映像은 專門家가 演出한 이른바 ‘웰 메이드’ 作品일 可能性이 크다. 게다가 컴퓨터그래픽(CG) 映像도 들어가 있다. 萬若知人이 目擊한 思考談을 文章으로 入力해 動映像을 만든다면 生成型 AI는 블랙박스 映像보다 想像으로 演出한 드라마에 가깝게 만들 것이다.

다큐멘터리도 映像美가 要求되는 요즘이다. 無味乾燥한 映像은 觀覽客의 눈길을 끌지 못한다. 스토리뿐 아니라 映像도 판타지에 가까워야 인정받는 것이 現實이다. 이미지 消費者들은 實在世界를 願하지 않는 것일까. 유튜브 등에 올라오는 아마추어 映像들은 모두 實在에 가깝다. 映像撮影技術과 編輯力은 不足해도 情報(텍스트)를 願하기 때문이다. 利用者들도 映像美를 期待하고 유튜브를 보지는 않는다. 하지만 生成型 AI는 非專門家의 映像은 學習하지 않는다.

想像과 感情을 뒤섞어 演出하는 技法을 배운 AI 動映像이 低廉하게 商用化된다면? 이 動映像이 大量流通되고, 다시 그 映像을 AI가 學習하면? 假想現實世界의 無限反復이다. 眞짜가 假짜처럼 여겨지고 實在보다 ‘再現된 實在’가 더 익숙해질지도 모르겠다.

신원건 寫眞部記者 laputa@donga.com

#生成型 ai #소라 #生成型映像 #카메라