메타는 금요일에 사용자의 요청에 따라 사실적으로 보이는 비디오와 오디오 클립을 생성할 수 있는 새로운 인공지능 모델인 Movie Gen을 개발했다고 발표함. 이 모델은 OpenAI와 ElevenLabs와 같은 선도적인 미디어 생성 스타트업의 도구와 경쟁할 수 있다고 주장함.
메타가 제공한 Movie Gen의 창작물 샘플에는 동물이 수영하고 서핑하는 비디오와 사람들의 실제 사진을 사용하여 캔버스에 그림을 그리는 등의 행동을 묘사한 클립이 포함됨.
Movie Gen은 또한 비디오의 내용에 맞춰 배경 음악과 음향 효과를 생성할 수 있다고 메타는 블로그 게시물에서 언급함. 사용자는 기존 비디오를 모델로 편집할 수도 있음.
메타는 한 비디오에서 도구가 사막에서 혼자 달리는 남자의 손에 폼폼이를 삽입하는 장면을 보여주었고, 또 다른 비디오에서는 스케이트보드를 타는 남자가 있는 주차장을 마른 땅에서 물이 튀는 곳으로 바꾸는 장면을 보여줌.
Movie Gen으로 생성된 비디오는 최대 16초 길이이며, 오디오는 최대 45초 길이임. 메타는 블라인드 테스트에서 이 모델이 Runway, OpenAI, ElevenLabs 및 Kling과 같은 스타트업의 제품과 비교해 유리한 성과를 보였다고 발표함.
이번 발표는 할리우드가 올해 생성적 AI 비디오 기술을 활용하는 방법에 대해 고심하고 있는 가운데 이루어짐. Microsoft가 지원하는 OpenAI가 2월에 텍스트 프롬프트에 응답하여 영화 같은 비디오를 생성할 수 있는 제품 Sora를 처음으로 선보였음.
엔터테인먼트 산업의 기술자들은 이러한 도구를 사용하여 영화 제작을 향상하고 가속화하기를 열망하고 있지만, 다른 이들은 저작권 작품을 무단으로 학습한 시스템을 수용하는 것에 대해 우려하고 있음.
법률가들은 또한 AI 생성 가짜, 즉 딥페이크가 미국, 파키스탄, 인도 및 인도네시아를 포함한 전 세계의 선거에서 어떻게 사용되고 있는지에 대한 우려를 강조함.
메타 대변인은 회사가 Llama 시리즈의 대형 언어 모델과 같이 개발자들이 자유롭게 사용할 수 있도록 Movie Gen을 출시할 가능성이 낮다고 언급하며, 각 모델의 위험을 개별적으로 고려한다고 설명함. 그들은 Movie Gen에 대한 메타의 평가에 대해 언급하지 않음.
대신 메타는 엔터테인먼트 커뮤니티 및 기타 콘텐츠 제작자와 Movie Gen의 사용에 대해 직접 협력하고 있으며, 내년 중 메타의 자체 제품에 통합할 것이라고 말함.
블로그 게시물과 이 도구에 대한 연구 논문에 따르면, 메타는 Movie Gen을 구축하기 위해 라이센스가 있는 데이터셋과 공개적으로 이용 가능한 데이터셋을 혼합하여 사용함.
OpenAI는 올해 할리우드 경영진 및 에이전트와 Sora와 관련된 파트너십에 대해 논의하기 위해 만났지만, 그로 인해 성사된 거래는 아직 보고되지 않음. 5월에는 배우 스칼렛 요한슨이 ChatGPT 제작자가 자신의 목소리를 무단으로 모방했다고 비난하면서 회사의 접근 방식에 대한 우려가 커짐.
헐리우드와 트와일라잇의 제작사인 라이온스 게이트 엔터테인먼트는 9월에 AI 스타트업 Runway에 자사의 영화 및 TV 라이브러리에 대한 접근을 허용하여 AI 모델을 훈련시키기로 발표함. 그 대가로 스튜디오와 영화 제작자들은 이 모델을 사용하여 작업을 보강할 수 있다고 함.