Runway의 AI 비디오 제작 및 편집 서비스가 Gen-3 Alpha 모델 플랫폼에 약속된 비디오-투-비디오 리모델링 기능을 추가함. 비디오-투-비디오 도구는 사용자가 비디오와 텍스트 프롬프트를 제출하여 이를 변경할 수 있게 해줌. 변경 사항은 설정, 출연자 또는 비디오의 다른 요소를 텍스트 프롬프트나 몇 가지 미리 설정된 스타일 제안에 맞게 조정할 수 있음.
비디오-투-비디오는 Runway의 비디오 제작 옵션에 추가된 마지막 주요 기능임. Runway는 이미 사용자가 비디오의 모양과 움직임을 정의하기 위해 텍스트나 이미지를 시작할 수 있도록 허용함. 이제 실제 비디오로 시작함으로써 사용자는 미리 모션을 정의하고 AI를 사용하여 디자인과 미학을 변경할 수 있음. Runway는 이 기능을 대규모 비디오 및 이미지 세트에 대한 캡션을 통해 훈련시켜 AI 모델이 업로드된 영화와 이를 변경하기 위한 프롬프트를 이해하도록 함. 마치 전혀 다른 우주에서 온 새로운 비디오를 보는 것과 같음. 아래에서 작동 방식을 볼 수 있음.
"비디오-투-비디오는 생성 내에서 정밀한 움직임, 표현력 및 의도를 위한 새로운 제어 메커니즘을 나타냄"이라고 Runway는 소셜 미디어에서 설명함. "비디오-투-비디오를 사용하려면 입력 비디오를 업로드하고 원하는 미적 방향으로 프롬프트를 입력하거나 미리 설정된 스타일 컬렉션 중에서 선택하면 됨."
영화 멀티버스
Gen-3 Alpha의 복잡한 전환 및 표현적인 인간 얼굴과 감정을 처리하는 기존 기능과 결합하면 결과는 꽤 장관일 수 있음. Runway는 Gen-3 Alpha에 새로운 옵션을 신속하게 추가함. 최근에는 속도를 위해 일부 기능을 희생한 Gen-3 Alpha Turbo 버전을 선보임. 비디오-투-비디오 변환 옵션과 함께 이 도구는 모션 브러시, 고급 카메라 제어, 감독 모드 및 기타 더 세분화된 비디오 편집 기능과 함께 작동함.
Gen-3 Alpha는 Gen-2 모델보다 훨씬 더 다재다능하고 사용자 친화적으로 보임. 그럼에도 불구하고 인상적인 출력에도 불구하고 한계가 있음. 현재 최대 10초 길이의 비디오 클립을 생성할 수 있으며, 이는 영화 길이에는 미치지 못함. 속도와 품질이 이를 보완할 수 있지만, 더 긴 비디오를 생성할 수 있을 때까지는 한계가 있음. Runway는 더 많은 경쟁에 직면해야 함.
가장 잘 알려진 경쟁자는 OpenAI의 Sora 모델이지만, 그 외에도 Stability AI, Pika, Luma Labs의 Dream Machine 등 여러 모델이 대중에게 AI 비디오 모델을 제공하기 위해 경쟁하고 있음. 심지어 TikTok의 모회사인 Bytedance도 Jimeng이라는 AI 비디오 제작기를 보유하고 있음.
Runway의 비디오-투-비디오 도구를 사용해보고 싶다면 Gen-3 Alpha는 월 $12부터 시작하는 유료 플랜 사용자에게 접근 가능함.