메타가 최근 몇 달 동안 업계를 지배하고 있는 AI 비디오 경쟁의 또 다른 참가자를 공개함. 이 기술 대기업은 Movie Gen이라는 새로운 모델을 출시했으며, 이름에서 알 수 있듯이 영화를 생성함. 초기 롤아웃에서 많은 다른 모델보다 기능 목록이 더 포괄적이며, OpenAI의 Sora 모델과 비교할 수 있음. 하지만 Movie Gen은 메타와 파트너십을 맺은 특정 영화 제작자에게만 접근할 수 있는 제한이 있음.
Movie Gen은 텍스트 프롬프트에서 영화를 생성하는 능력을 보여주는 시연을 기반으로 인상적임. 이 모델은 16초 길이의 비디오를 만들고 1080p 해상도로 업스케일할 수 있음. 단점은 비디오가 초당 16프레임으로 나와서 어떤 촬영 표준보다 느림. 더 일반적인 24fps의 경우, 영화 클립은 10초를 넘을 수 없음.
하지만 적절한 프롬프트가 있다면 10초도 충분할 수 있음. 메타는 Movie Gen에 재미있는 개인화 기능을 추가했으며, 이는 당신이 포함된 이미지를 생성하는 Imagine 도구와 유사함. Movie Gen은 참조 이미지를 사용하여 실제 인물을 클립에 넣을 수 있음. 만약 모델이 시연을 정기적으로 일치시킬 수 있다면, 많은 영화 제작자들이 이를 시도하고 싶어할 것임.
비디오는 단순히 프롬프트를 작성한 후 다른 비디오를 만들기 위해 다시 작성해야 하는 것에 국한되지 않음. Movie Gen은 텍스트 기반 편집 기능을 제공하여 프롬프트를 통해 영화의 특정 부분을 조정하거나 전체적인 측면을 변경할 수 있음. 예를 들어, 캐릭터의 의상을 다르게 하거나 배경을 다른 장소로 설정할 수 있음. 이러한 유연성은 인상적임. 카메라 움직임에 대한 조정도 가능하며, 팬닝 및 트래킹 요청이 AI에 의해 이해되고 비디오 또는 후속 편집에 통합됨. 객체와 그 움직임에 대한 인식은 메타가 최근 출시한 SAM 2 모델에서 비롯된 것으로 보임.
좋은 비주얼은 이제 AI 비디오 제작자들 사이에서 너무 흔함. 하지만 메타는 영화 제작의 오디오 측면도 고려하고 있음. Movie Gen은 비디오에 대한 텍스트 프롬프트를 사용하여 시각과 어우러지는 사운드트랙을 생성함. 비 오는 장면에는 비 소리를, 교통 체증에 설정된 영화에는 자동차 엔진 소리를 넣음. 배경에서 재생할 새로운 음악도 생성하고, 프롬프트된 비디오의 분위기에 맞추려고 함. 현재 인간의 음성은 Movie Gen의 레퍼토리에 포함되지 않음.
메타는 과거에 대중에게 인상적인 AI 엔진을 공개하지 않았으며, 특히 남용 우려로 인해 너무 좋다고 주장한 AI 노래 생성기가 그 예임. 회사는 Movie Gen을 대부분의 사람들에게 공개하지 않은 이유로 이를 주장하지 않았지만, 이는 기여 요인일 수 있음.
여전히 OpenAI Sora 경로를 따르는 것은 메타가 더 개방적인 경쟁자가 시장 점유율을 빼앗길 가능성을 무시해야 함을 의미함. 현재 또는 곧 출시될 많은 AI 비디오 생성기가 있음. 여기에는 Runway, Pika, Stability AI, Hotshot, Luma Labs의 Dream Machine 등에서 새로 출시되거나 최근에 업그레이드된 모델이 포함됨.
