CWN(CHANGE WITH NEWS) - 메타의 영상 생성 AI 시스템, 아직 넘어야 할 산 있다

텍스트에서 이미지를 생성하는 인공지능(AI)을 뛰어넘어 영상을 생성하는 AI가 등장했다. 최근 메타(Meta, 구 페이스북)는 텍스트 명령어를 입력하면 짧은 영상을 생성하는 AI 시스템 ‘메이크 어 비디오(Make-A-Video)’를 공개했다.

‘메이크 어 비디오’는 ‘빨간 망토가 달린 슈퍼히어로 복장을 하고 하늘을 날고 있는 강아지’와 같은 텍스트를 입력하면, 5초짜리 짧은 클립을 생성한다. 영상은 텍스트를 꽤 충실하게 재현하지만, 화질이 선명하지 않아 옛날 홈비디오 같은 느낌을 준다.

메타는 메이크 어 비디오를 대중적으로 공개할 계획을 구체적으로 밝히지 않았다. 그러나 AI 연구소들의 자체적인 ‘영상 생성’ AI 개발도 속도를 높일 전망이다.

지난달 AI 연구소 오픈AI(OpenAI)는 텍스트 기반 이미지 생성을 지원하는 AI 시스템 DALL-E를 대중적으로 공개했다. 또, AI 스타트업 스태빌리티AI(Stability.AI)는 오픈소스 이미지 생성 시스템 ‘스테이블 디퓨전(Stable Diffusion)’을 출시했다.

이러한 AI 시스템은 기대가 큰 만큼 과제 또한 안고 있다. 우선 영상 생성 AI는 엄청난 컴퓨터 성능을 필요로 한다. 짧은 영상 하나를 제작하려 해도 이미지 수백 가지가 필요하다. 영상 생성 AI는 이미지 생성 AI 모델보다 훈련에 필요한 데이터 규모가 훨씬 더 크다.

영상 생성 AI 모델은 훈련 과정도 까다롭다. 텍스트와 짝지을 수 있는 고화질 영상으로 구성된 대규모 데이터 세트가 없기 때문이다. 이에, 메타는 세 종류의 오픈소스 이미지 및 영상 데이터 세트를 결합하여 훈련 과정을 거쳤다.

메타는 설명이 포함된 스틸 이미지로 구성된 텍스트-이미지 데이터 세트를 이용해, AI가 사물의 명칭과 생김새를 학습하게 했다. 이어 영상 데이터베이스를 바탕으로 사물들이 실제 세상에서 어떻게 움직여야 하는지 학습시켰다. 이 두 가지 접근 방식을 결합해, 메이크 어 비디오는 텍스트 입력을 기반으로 영상을 생성한다.

앨런 인공지능 연구소(Allen Institute for Artificial Intelligence)의 컴퓨터 비전 연구 과학자 탄마이 굽타(Tanmay Gupta)는 메타의 연구 결과가 유망하다며 기대감을 드러냈다. 굽타는 “메타가 공유한 영상은 AI 모델이 카메라 회전에 따라 삼차원 형태를 포착할 수 있음을 보여준다”며, “깊이 개념과 조명도 이해하는 듯하며, 일부 세부 사항과 움직임이 꽤 적절하고 설득력 있게 표현됐다”라고 말했다.

이어 그는 “하지만 영상 편집과 전문적인 콘텐츠 제작에 사용되려면 아직 개선해야 할 부분이 상당히 많다”며, “특히 아직 사물 간의 복잡한 상호작용을 모델링하는 것은 어려운 일”이라고 설명했다.

메타는 이번 기술이 창작자와 예술가들에게 새로운 기회를 열어줄 수 것이라고 말한다.

하지만 기술이 발전함에 따라 거짓 정보 및 ‘딥페이크(deepfake)’ 콘텐츠 생성 및 유포 수단으로 악용돼, 온라인에서 실제와 가짜 콘텐츠를 구별하는 것이 훨씬 더 어려워질 우려가 있다.

메이크 어 비디오 개발팀은 불쾌한 이미지와 단어를 필터링한다고 설명했으나 셀 수 없이 많은 단어와 이미지로 구성된 데이터 세트에서 편향과 유해한 콘텐츠를 완전히 제거하려면 갈 길이 멀다.

한편, 메타의 대변인은 이번 모델을 대중에게 아직 공개할 계획이 없으며 연구를 통해 잠재적인 위험성을 개선하고 완화핢 방법을 계속해서 모색할 것이라고 밝혔다.

[ⓒ CWN(CHANGE WITH NEWS). 무단전재-재배포 금지]