Sora의 런웨이 버전 출시: 높은 충실도, 뛰어난 일관성, Gen-3 Alpha는 네티즌들에게 충격을 주었습니다.

생성된 영상은 10초 정도에 불과하지만 명확성, 디테일, 캐릭터 일관성 등의 측면에서 기존의 모든 영상 생성 모델과 비교할 수 없을 것 같습니다.

방금 AI 영상세대 스타트업 런웨이가 새로운 영상세대 기본모델 Gen-3 알파를 출시했습니다. 이 모델은 복잡한 장면 변화, 다양한 영화 스타일, 세부적인 아트 디렉션을 통해 매우 상세한 비디오를 제작할 수 있습니다.

런웨이에서는 Gen-3 알파가 곧 출시될 일련의 모델 중 첫 번째 제품이라고 말합니다. 시리즈 모델은 대규모 다중 모드 훈련을 위해 구축된 새로운 인프라에서 훈련됩니다.

Gen-3 Alpha는 Gen-2에 비해 충실도, 일관성 및 움직임이 크게 향상되었으며 보편적인 세계 모델을 구축하는 데 중요한 단계를 밟습니다.

런웨이는 블로그에서 데모의 모든 영상은 어떠한 수정도 없이 Gen-3 알파를 사용하여 제작되었음을 강조했습니다.

많은 네티즌들은 런웨이가 또 우리를 놀라게 했다고 말했습니다: 런웨이가 돌아왔습니다!

Pytorch 리드 Soumith Chintala는 일부 빌드 품질이 Sora 수준에 도달한다고 믿습니다.

다음으로 런웨이 영상이 만들어내는 효과를 감상해보겠습니다.

프롬프트: 일본 도시에서 초고속으로 이동하는 기차 창에 비친 여성의 미묘한 반사 (프런트: 일본 도시에서 초고속으로 이동하는 기차 창에 비친 여성의 미묘한 반사) 팁: 우주비행사가 리우데자네이루의 골목을 달리고 있습니다. (안내: 리우데자네이루의 골목을 달리는 우주 비행사.)

데모에서 볼 수 있듯이 Runway에서 생성된 10초 영상은 선명도, 디테일, 캐릭터 일관성 및 충실도가 뛰어납니다. 매우 잘했습니다. . 사람들이 질문하게 하세요: 언제 사용할 수 있나요?

세밀한 타이밍 제어

Gen-3 Alpha는 매우 설명적이고 시간 집약적인 자막을 위해 훈련되어 상상력이 풍부한 장면 전환이 가능합니다.

팁: 둥지에서 기어 나오는 개미의 클로즈업. 카메라가 축소되어 언덕 뒤의 동네가 드러납니다. (안내: 개미가 둥지에서 나오는 극단적인 클로즈업 샷. 카메라가 뒤로 물러나 언덕 너머 동네가 드러납니다.) 안내: FPV 드론이 절벽 위의 성 위로 날아갑니다. (안내: FPV 드론이 절벽 위의 성을 통과했습니다.)

더 사실적인 인간 캐릭터 생성

Gen-3 Alpha는 다양한 동작, 몸짓, 감정으로 표현력이 풍부한 인간 캐릭터를 만드는 데 탁월합니다.

팁: 이것은 빛으로 얼굴이 비춰지는 남자의 영화 같은 광각 초상화입니다. (안내: TV 빛으로 얼굴을 비춘 남자의 영화 와이드 초상화.) 안내: 중년의 슬픈 대머리 남자는 갑자기 곱슬머리의 왕관과 선글라스가 떨어져서 갑자기 행복해집니다. 그의 머리에. (안내: 갑자기 머리에 가발과 선글라스가 떨어지자 슬픈 중년의 대머리 남자가 행복해집니다.)

Art Creation

Gen-3 Alpha는 연구 과학자들에 의해 훈련을 받고, 엔지니어와 아티스트 팀은 Gen-3 Alpha가 다양한 아트 스타일과 영화 용어를 이해하고 해석할 수 있도록 협력했습니다.

Tips: 밤에는 창밖의 거대한 이상한 생물이 황폐한 도시를 걷고 있고, 가로등은 희미하게 켜져 있습니다. (프롬프트: 밤에 황폐한 도시를 걷는 거대하고 이상한 생물의 창밖을 내다보세요. 가로등 하나가 그 지역을 어둡게 비춥니다.)프롬프트: 타임랩스 촬영, 깜박이는 조명과 함께 복도를 걷는 은색 천 복도 전체를 비행합니다. (안내: 번쩍이는 조명이 있는 복도를 통해 하이퍼랩스 촬영. 복도 전체에 은색 패브릭이 날아갑니다.)

산업별 맞춤화

런웨이는 Gen-3 시리즈 모델의 맞춤화가 더욱 스타일리시한 효과를 얻을 수 있다고 말했습니다. 특정 예술적 및 내러티브 요구 사항 등에 최적화된 제어 및 보다 일관된 캐릭터.

팁: 멀리서 로켓을 바라보며 달리는 여성의 어깨 너머로 촬영한 사진입니다. (안내: 멀리서 로켓을 바라보며 달리는 여성의 어깨 너머로 촬영.) 안내: 멀리서 불꽃놀이가 피어오르는 여성의 프로필 사진. (안내: 멀리서 불꽃이 터지는 여성의 옆모습 사진.) Sora 출시 이후 지난 몇 달 동안 최근 출시된 Kuaishou Keling과 같은 비디오 세대 모델이 점점 더 많이 등장했습니다. , Luma 및 오늘날의 Gen-3. 하지만 아쉽게도 많은 제품을 직접 경험할 수는 없습니다.

텍스트 대형 모델처럼 영상형 모델도 점점 더 많아지고, 이런 제품들도 자유롭게 사용해 볼 수 있을 거라 믿습니다.

^{블로그 링크: https://runwayml.com/blog/introducing-gen-3-alpha/}

위 내용은 Sora의 런웨이 버전 출시: 높은 충실도, 뛰어난 일관성, Gen-3 Alpha는 네티즌들에게 충격을 주었습니다.의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!