Morph Studio: 무료, 1080P, 7초의 강력한 다크호스 비디오 편집 소프트웨어 출시 예정

"빛나는 해파리가 바다에서 천천히 떠오릅니다." Morph Studio에서 보고 싶은 것을 계속 입력하세요. "밤하늘에 반짝이는 별자리로 변합니다."

몇 분 후에 Morph Studio는 짧은 비디오를 생성합니다. 해파리는 완전히 투명하고 반짝이며 회전하고 솟아오릅니다. 그 흔들리는 모습은 밤하늘의 별과 대조를 이룹니다.

빛나는 해파리가 매혹적인 바다에서 솟아올라 어두운 하늘에서 빛나는 별로 변신합니다.

"조커 시네마틱"에 들어가면 한때 세상을 휩쓴 얼굴이 돌아옵니다.

호아킨 피닉스는 뉴욕의 네온 불빛 거리를 배경으로 한 영화 속 조커 역을 맡아 초현실적인 연기를 선보이며 그의 주변에 연기가 피어오르며 혼돈과 어둠의 분위기를 더합니다.

최근 스타트업 Morph Studio는 텍스트-비디오 생성 기술 및 커뮤니티를 대대적으로 업데이트했습니다. 해당 모델은 대대적인 업데이트를 거쳤으며, 이러한 비디오 제작물에서는 선명한 이미지와 생생한 디테일로 업데이트된 모델을 선보입니다.

Morph Studio는 Runway가 Gen2 공개 베타를 출시하기 전에 대중이 마음대로 테스트할 수 있도록 텍스트-비디오 제품을 공개적으로 출시한 세계 최초의 팀입니다.

다른 인기 있는 텍스트-비디오 제품과 비교했을 때 Morph Studio는 무료 서비스 측면에서 다릅니다. 기본 1080P 해상도와 시작부터 최대 7초의 빌드 시간을 제공합니다. 텍스트-비디오 제품의 경우 더 높은 해상도, 더 긴 생성 시간, 더 나은 의도 표현이 세 가지 핵심 지표입니다. Morph는 이 세 가지 지표에서 업계 최신 수준에 도달했습니다.

할리우드 영화 한 장면의 평균 길이는 6초입니다. 생성 시간을 7초로 연장하면 더 많은 사용자의 창의적인 요구 사항을 충족할 수 있습니다.

Morph Studio의 모델을 경험하는 것은 쉽습니다. Discord에 등록하면 무료로 사용할 수 있습니다.

화면의 빨간색 박스 안에 'pro'라는 단어가 표시된 모델이 업데이트된 모델이며 이 글의 체험 대상입니다.

카메라 움직임은 영상 제작의 기본 언어이자 강력한 서사 장치입니다. Morph는 확대/축소, 팬(위, 아래, 왼쪽, 오른쪽), 회전(시계 방향 또는 시계 반대 방향) 및 스틸 샷을 포함한 여러 가지 일반 카메라 언어를 제공합니다.

Morph는 또한 비디오 움직임을 제어하기 위한 MOTION 기능(1-10)을 제공합니다. 값이 클수록 액션이 더 격렬하고 과장되며, 값이 작을수록 액션이 더 미묘하고 부드러워집니다.

프레임 속도(FPS)는 8~30의 조정 범위를 제공합니다. 값이 높을수록 비디오가 더 부드러워지고 크기가 커집니다. 예를 들어 -FPS 30은 가장 부드럽지만 가장 큰 비디오를 생성합니다. 기본적으로 모든 비디오는 초당 24프레임으로 생성됩니다.

기본 동영상 길이는 3초입니다. 7초 동영상을 생성하려면 명령에 -s 7을 입력하면 됩니다. 또한 이 모델은 선택할 수 있는 5가지 비디오 비율을 제공합니다.

렌즈, 프레임 속도, 비디오 길이 등 세부 사항에 대한 요구 사항이 있는 경우 콘텐츠 프롬프트를 입력한 후 해당 매개변수를 계속 입력하세요. (현재 영어 입력만 지원됩니다.)

업데이트된 모델 서비스를 경험하고 1080P가 가져다주는 시각적 충격을 강하게 느꼈습니다.

최근까지 인류는 별빛 아래를 걷는 눈표범의 첫 번째 사진을 가졌습니다.

별빛 아래를 걷는 눈표범의 첫 번째 사진.

Morph Studio의 모델이 상대적으로 희귀한 이 동물의 비디오를 생성할 수 있는지 알고 싶습니다.

동일한 프롬프트로 영상 상단에는 Morph Studio의 작품을, 영상 하단에는 Pika로 생성한 작품을 넣었습니다.

별이 빛나는 밤 아래를 걷는 눈표범, 영화처럼 사실적, 매우 디테일, -motion 10, -ar 16:9, -zoom in, -pan up, -fps 30, -s 7. 네거티브: 추가 사지, 팔과 다리가 없음, 손가락과 다리가 융합됨, 손가락이 추가됨, 변형

Morph Studio의 답안지는 정확한 텍스트 이해를 갖추고 있습니다. 1080P 사진에서 눈표범의 털은 디테일이 풍부하고 생생합니다. 은하수와 별들이 배경에서 보입니다. 그러나 눈표범의 움직임은 분명하지 않습니다.

피카의 숙제에는 눈표범이 실제로 걷고 있지만 밤하늘은 눈이 많이 내리는 밤으로 이해되는 것 같습니다. Snow Leopard 스타일, 디테일, 영상 선명도 측면에서는 여전히 격차가 있습니다.

캐릭터 생성 효과를 다시 살펴보겠습니다.

걸작 최고 품질의 매우 상세한 RAW 비디오 1소녀 솔로 댄스 디지털 페인팅 아름다운 사이보그 소녀 21세 긴 웨이브 빨간 머리 파란 눈 섬세하고 창백한 하얀 피부 완벽한 몸 포스트 아포칼립스의 으스스한 새벽 빛 속에서 노래

Morph Studio에서 생성된 작품에서는 고해상도로 인해 매우 섬세한 얼굴 윤곽과 미세한 표현이 가능하며 새벽 빛 아래에서는 머리카락의 디테일이 선명하게 보입니다.

해상도, 색상, 조명 수준이 부족하여 피카에서 생성된 이미지가 전체적으로 푸르스름하고 캐릭터의 얼굴 디테일이 만족스럽지 않습니다.

사람과 동물 모두 경험해 본 적이 있을 텐데요, 건물(인공물)의 생성 효과를 살펴보겠습니다.

La torre eifel 별이 빛나는 밤 반 고흐의 서사적 스타일리시한 순수 미술 복합적 깊은 색상이 흐르는 하늘색 움직이는 구름

좀 더 그림 같은 피카의 작품에 비해, Morph Studio의 작품은 반 고흐의 요소와 사실적인 요소의 균형을 더 잘 이루고 있습니다. 조명 수준이 매우 풍부하고 특히 운해의 흐르는 디테일이 뛰어나며 Pika 작품의 하늘은 거의 정적입니다.

마지막으로 자연경관 창조를 경험해보세요.

어느 이른 아침 해가 천천히 해수면에서 솟아오르고 파도가 해변에 부드럽게 닿았습니다.

Morph Studio의 작품이 자연 조건에서 인간 사진작가가 찍은 실제 사진인지 궁금하실 것입니다.

섬세한 빛과 그림자 레벨이 부족하여 피카에서 생성한 영상은 파도와 해변이 밋밋하게 나타나고, 해변에 부딪히는 파도의 움직임이 상대적으로 둔탁합니다.

고해상도가 제공하는 충격적인 경험 외에도 비디오(예: 동물, 건물, 사람 및 자연 풍경 테마)를 생성하는 동일한 프롬프트로 상대방은 특정 ​​세대 작업에서 다소 "놓칠" 것입니다. Morph Studio는 비교적 잘 수행됩니다. 더 안정적이고 상대적으로 코너 케이스가 적으며 사용자 의도를 더 정확하게 예측할 수 있습니다.

처음부터 이 스타트업이 Vincent Video에 대해 이해한 것은 동영상이 사용자 입력을 매우 정확하게 설명할 수 있어야 하며 모든 최적화 작업도 이 방향으로 진행되고 있습니다. Morph Studio의 모델 구조는 텍스트 의도에 대한 더 깊은 이해를 제공합니다. 이번 업데이트에서는 일부 구조가 변경되었으며 특히 일부 데이터에 대해 더 자세한 주석이 추가되었습니다.

상대적으로 좋은 텍스트 이해 능력에 더해, 고해상도 출력으로 인해 사진의 세세한 처리가 방해받지 않습니다. 실제로 모델이 업데이트된 후 화면의 모션 콘텐츠가 더욱 풍부해졌으며 이는 Morph Studio를 사용하여 생성한 작품에도 반영되었습니다.

"진주 귀걸이를 한 소녀"가 머리를 움직일 때 귀걸이도 약간 흔들리며 승마와 같은 보다 복잡한 동작이 포함된 사진도 더 부드럽고 일관되며 논리적이며 손 움직임의 출력은 또한 좋다.

1080P는 모델이 더 많은 픽셀을 처리해야 한다는 것을 의미하므로 디테일 생성에 더 큰 어려움이 따릅니다. 그러나 결과로 판단하면 그림이 무너지지 않을 뿐만 아니라 풍부한 디테일 수준으로 인해 표현력이 더 높아집니다. .

이것은 우리가 모델을 사용하여 생성한 자연 풍경 세트입니다. 장엄한 거대한 파도와 화산 폭발은 물론 꽃의 섬세한 클로즈업까지 포함됩니다.

고해상도 출력은 사용자에게 더 나은 시각적 즐거움을 제공하지만 모델 출력 시간을 연장하고 경험에 영향을 미칩니다.

Morph Studio는 이제 3분 30초 만에 1080p 비디오를 생성합니다. 이는 Pika의 720P 비디오와 동일한 속도입니다. 스타트업 기업은 컴퓨팅 리소스가 제한되어 있어 Morph Studio가 SOTA를 유지하는 것이 쉽지 않습니다.

또한 비디오 스타일 측면에서 Morph Studio 모델은 영화 사실성 외에도 만화 및 3D 애니메이션과 같은 일반적인 스타일도 지원합니다.

Morph Studio는 텍스트-비디오 기술에 중점을 두고 있으며 AI 산업 경쟁의 다음 단계로 간주됩니다.

New York Times는 기술 보고서 ​​헤드라인에서 “인스턴트 비디오는 AI 기술의 차세대 도약을 나타낼 수 있다”며 웹 브라우저와 iPhone만큼 중요할 것이라고 주장했습니다.

2022년 9월 Meta의 머신러닝 엔지니어 팀은 Make-A-Video라는 새로운 시스템을 출시했습니다. 사용자가 장면에 대한 대략적인 설명을 입력하면 시스템이 이에 상응하는 짧은 동영상을 생성합니다.

2022년 11월 칭화대학교와 베이징 인공지능 아카데미(BAAI)의 연구원들도 CogVideo를 출시했습니다.

당시 이들 모델에서 생성된 영상은 흐릿할 뿐만 아니라(예를 들어 CogVideo에서 생성한 영상 해상도가 480x480에 불과), 사진도 상대적으로 왜곡되어 기술적 한계가 많았습니다. 그러나 이는 여전히 AI 콘텐츠 생성에서 중요한 발전을 나타냅니다.

표면적으로 비디오는 움직이는 듯한 착각을 주는 방식으로 조합된 일련의 프레임(정지 이미지)일 뿐입니다. 그러나 시간과 공간에서 일련의 이미지의 일관성을 보장하는 것은 훨씬 더 어렵습니다.

확산 모델의 출현으로 기술의 진화가 가속화되었습니다. 연구자들은 확산 모델을 오디오, 3D, 비디오 등 다른 영역으로 일반화하려고 시도했으며 비디오 합성 기술은 상당한 발전을 이루었습니다.

확산 모델을 기반으로 한 기술은 주로 신경망이 대용량 이미지, 비디오 및 텍스트 설명을 분류하여 일부 패턴을 자동으로 학습할 수 있도록 합니다. 콘텐츠 요구사항을 입력하면 신경망은 이미지를 생성하는 데 사용될 수 있다고 생각되는 모든 기능(고양이 귀의 윤곽선, 전화기 가장자리 등)의 목록을 생성합니다.

그런 다음 두 번째 신경망(확산 모델이라고도 함)은 이미지를 생성하고 이러한 기능에 필요한 픽셀을 생성하며 픽셀을 일관된 이미지로 변환하는 역할을 담당합니다.

AI는 수천 개의 비디오를 분석하여 유사한 방식으로 많은 스틸 이미지를 연결하는 방법을 학습할 수 있습니다. 핵심은 각 프레임 간의 관계와 일관성을 진정으로 이해하는 모델을 교육하는 것입니다.

Runway CEO Cristóbal Valenzuela는 "이것은 우리가 지난 100년 동안 구축한 가장 인상적인 기술 중 하나입니다. 사람들이 실제로 사용하도록 해야 합니다."라고 말했습니다.

2023 업계 일부에서는 2012년을 비디오 합성의 획기적인 해로 간주합니다. 1월에는 공개된 텍스트-비디오 모델이 없었고, 연말에는 수십 개의 유사한 제품과 수백만 명의 사용자가 생겼습니다.

a16z 파트너인 Justine Moore가 소셜 플랫폼에서 Vincent의 동영상 모델 타임라인을 공유한 것을 보면 대형 제조업체 외에도 많은 스타트업이 있다는 것을 알 수 있습니다. 또한 기술 반복 속도가 매우 빠릅니다. 빠른.

현재 AI 생성 동영상은 LLM과 유사한 통일되고 명확한 기술 패러다임을 형성하지 못했습니다. 업계는 아직 안정적인 동영상을 생성하는 방법에 대한 탐색 단계에 있습니다. 그러나 연구원들은 시스템이 점점 더 많은 데이터로 훈련됨에 따라 이러한 결함이 제거될 수 있다고 믿습니다. 결국 이 기술을 사용하면 문장을 쓰는 것만큼 쉽게 동영상을 만들 수 있게 될 것입니다.

국내 AI 업계의 한 고위 투자자는 빈센트 비디오 기술에 관한 가장 중요한 여러 논문이 2022년 7~8월에 출판되었다고 말했습니다. 빈센트 비디오의 산업화 과정과 유사하게 이 기술은 업계에 가깝습니다. 노드는 1년 후, 즉 2023년 7~8월에 나타날 것입니다.

전체 비디오 기술은 매우 빠르게 발전하고 있으며 기술이 점점 더 성숙해지고 있습니다. 이 투자자는 GAN 분야의 이전 투자 경험을 바탕으로 텍스트-비디오 기술이 다음 제품이 될 것이라고 예측했습니다. 앞으로 6개월에서 1년 정도.

Morph 팀은 지난 1년 동안 밤낮으로 집중적인 연구 개발을 거쳐 공동 창립자인 Li Feng, Yin Zixin, Zhao Shihao와 함께 모였습니다. , Liu Shaoteng 및 기타 핵심 기술 백본은 AI 비디오 생성 퍼즐을 극복했습니다.

Morph Studio는 기술팀 외에도 최근 Maoyan Films의 계약 프로듀서이자 상하이 국제 영화제 심사위원이자 Silicon의 전 AIGC 회사의 핵심 멤버인 제품 팀을 강화했습니다. Valley도 최근 Morph Studio에 합류했습니다.

Haising은 Morph Studio가 기술 연구 측면에서 업계 전체에서 선도적인 위치를 차지하고 있다고 말했습니다. 팀은 평평하고 의사소통 효율성과 실행력은 특히 높습니다. 모든 구성원은 업계에 열정적입니다. 그녀의 가장 큰 꿈은 애니메이션 회사에 입사하는 것이었다. AI 시대가 도래한 후, 그녀는 앞으로 애니메이션 산업이 변할 것이라는 사실을 빠르게 깨달았습니다. 지난 수십 년 동안 애니메이션 기반은 3D 엔진이었고 곧 AI 엔진의 새로운 시대가 도래할 것입니다. 미래의 픽사는 AI 기업에서 탄생할 것이다. 그리고 Morph가 그녀의 선택이었습니다.

Morph 창립자 Xu Huaizhe는 AI 비디오 트랙을 적극적으로 전개하고 있다고 말했습니다. 우리는 AI 비디오 시대의 슈퍼 앱이 되어 사용자의 꿈을 실현하겠다고 다짐했습니다.

2024년에는 이 트랙에 Midjourney 순간이 있을 것이라고 그는 덧붙였습니다.

PS: 무료 1080P 비디오 생성의 원래 재미를 경험하려면 다음으로 이동하세요.

https://discord.com/invite/VVqS8QnBkA

위 내용은 Morph Studio: 무료, 1080P, 7초의 강력한 다크호스 비디오 편집 소프트웨어 출시 예정의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!