소라의 두 작가, 빌 피블스와 팀 브룩스가 새로운 이미지를 공개했습니다. (그리고 호모적인 사랑을 과시하기도 했죠?)
"붉은 팬더와 큰부리새는 가장 친한 친구로, 푸른 시간에 산토리니를 산책합니다."라고 피블스는 말하며 이 장면은 두 사람이 OpenAI 사무실로 걸어가는 것과 똑같다고 덧붙였습니다.
이 동영상의 일관성은 놀랍습니다. 모든 프레임에서 붉은 팬더와 큰부리새의 이미지가 의 이미지가 일관되게 유지됩니다.
물론 자세히 살펴보면 여전히 몇 가지 결함이 있습니다. 예를 들어 아기 팬더의 다리가 서로 얽혀 있는 경우가 있고, 이미지가 실제보다 만화 이미지처럼 보이기도 합니다.
그러나 전반적으로 이 화질은 AI 동영상의 미래에 대한 상상을 펼치기에 충분합니다.
두 작가의 두 번째 영상은 훨씬 더 사실적이고 폭발적인 영상입니다.
네티즌들은 연이어 감탄을 금치 못했습니다. 소라는 어떻게 반복할 때마다 더 나아질 수 있을까요?
동영상은 "한 다이버가 사이버네틱 해양 생물과 첨단 외계 기술이 담긴 숨겨진 미래 난파선을 발견합니다.
한 스쿠버 다이버가 사이버네틱 해양 생물과 첨단 외계 기술을 갖춘 숨겨진 미래형 난파선을 발견합니다
> 블록쿼트>다이버, 해저 풍경, 난파선의 껍질, 난파선 내부의 외계 기술 등이 모두 매우 사실적으로 구현되어 있습니다.
물론 이 장면이 100% 완벽하지는 않습니다. 예를 들어 잠수부가 오리발을 흔들며 헤엄치지 않고 기포를 뱉어내지 않는 등의 결함을 발견한 사람이 즉시 지적했습니다.
한 할리우드 영화 제작자는 사람들의 행동이 영혼이 없고 액션이 영혼이 없고 좀비처럼 보인다고 말했습니다.
하지만 안목이 낮은 시청자라면 이 20초짜리 동영상도 충분한 품질입니다.
일부 사람들은 딥 씨 트렉의 고해상도 버전처럼 보인다고 만족스러워했습니다
일부는 딥 씨 트렉의 고화질 버전처럼 보인다고 말했습니다.
과거에는 이 장면을 촬영하려면 엄청난 비용이 들었을 것입니다. 이제 할리우드 블록버스터에서 금을 태우는 어려운 장면을 소라 비디오로 대체할 수 있게 되었으니, AI가 영화와 TV 산업을 없애고 있다고 해도 과언이 아닙니다!
진주빛 은빛 비늘, 얼음처럼 푸른 눈과 상아색 뿔, 하얀 가스를 뱉어내는 이 작은 하얀 용은 네티즌들에게도 너무 충격적이라고 외치게 만들었습니다!
진주빛 은빛 비늘, 얼음처럼 푸른 눈, 우아한 상아색 뿔, 안개 낀 숨결을 가진 장엄한 백룡의 클로즈업. 부드럽게 흐린 배경을 배경으로 세부적인 얼굴 특징과 질감이 있는 비늘에 초점을 맞춥니다
입니다. 의인화가 잘 이루어졌으며, 마치 사람의 말을 이해하는 것처럼 매우 감동적인 감정을 전달하는 물기 어린 눈빛이 인상적입니다.
왕좌의 게임에 나오는 가고일은 이렇게 생겼습니다. 이에 비하면 작은 백룡은 그리 멀지 않습니다.
일부 네티즌들은 작은 백룡을 보고 너무 반했다고 말했습니다. 일부 네티즌들은 백룡이 너무 사랑스럽다며 직접 더빙을 하겠다고 나서서
더빙 콘테스트가 시작되었습니다.
사실적인 시나리오는 소라에게 가장 힘든 시험이었습니다.
하와이 열대 바다 상공에서 스카이다이빙을 하는 한 남자와 그 옆을 날아다니는 애완 잉꼬의 모습에서 소라는 다시 한 번 인상적인 연기를 펼쳤습니다.
하와이 열대 바다를 뛰어넘는 남자 기지. 그의 애완 잉꼬가 함께 날아
이 장면이 너무 실감나서 누군가 직접 "이게 진짜 영상인가요, 아니면 AI가 만든 건가요?"라고 물었을 정도였습니다.
사운드트랙이 이런 식으로 나오면 얼마나 많은 사람들이 이게 진짜 장면이 아니라는 걸 깨닫게 될까요?
결점을 굳이 찾자면, 앵무새의 조명이 적절하지 않고 따로 애니메이션을 적용한 것처럼 보이며 자연스러운 조건에서 조명을 비춘 것처럼 보이지 않는다는 것입니다.
스팟 점프가 충분히 정확하게 생성되지 않습니다. 낙하산이 너무 작습니다.
아래는 금이 간 유리 거북이, 금을 수리하고 해질녘에 걷는 모습입니다. 해질녘 검은 모래 해변을 걷고 있는 유리 거북이.
이미지의 일관성이 완벽하고 모래의 물성 또한 완벽하게 복원되었습니다. 속성도 완전히 복원되었습니다.
그러나 단점이 있다면 거북이의 다리가 세 개뿐인 것 같다는 점입니다.
일부 사람들은 또한 '와-와 포인트'를 발견했습니다: 모래 언덕이 마치 거북이들이 모래언덕을 기어오른 후 흔적을 남기지 않기 위한 것일까요?
반면, 미드저니가 만든 유리 거북이 에서 생성한 유리 거북이는 반전이 있습니다.
아름다운 종이로 만든 세계 속 배에 바다와 해양 동물이 뛰어나오는 아름다운 종이배.
아름답게 렌더링된 종이 공예 세계에서 증기선이 하늘에 뭉게구름이 떠 있는 광활한 바다를 가로지르고 있습니다. 먼 배경에는 드넓은 풀밭 언덕이 있고, 일부는 바다 한가운데에 있습니다. 먼 배경에 놓여 있고, 종이배의 바다 표면 근처에서 일부 바다 생물들이 보입니다
어두운 네온 불빛. 열대우림은 환상적인 동식물로 빛납니다.
환상적인 동식물로 빛나는 어두운 네온 열대 우림
하지만 영상에 대해 일부 사람들은 또한 "지금까지 본 소라 데모 중 최악의 데모이며, 왠지 벡터 애니메이션 스타일이 연상된다"고 혹평했습니다.
1960년대 스파이 영화에 등장했던 안경을 쓴 고양이.
1960년대 스파이 영화에 등장하는 안경을 쓴 고양이
35mm 필름으로 촬영된 황혼의 황량한 도시에 거대한 반투명 해파리가 우아하게 떠다니고 있습니다. 초현실적인 장면입니다.
황혼의 황량한 도시 풍경에 거대한 반투명 해파리가 우아하게 떠다니는 초현실적인 장면이 펼쳐집니다. 이 장면은 35mm 필름으로
에도 시대의 목조 건물 앞 작은 마을을 천천히 걸어가는 고독한 사무라이의 정교한 디오라마입니다.
에도시대 일본의 고요한 풍경을 묘사한 정교하게 제작된 디오라마. 전통 목조 건축물. 정교한 갑옷을 입은 고독한 사무라이가 칼 그림자 속을 걷고 있습니다. 복잡한 갑옷을 입은 고독한 사무라이가 마을을 천천히 걷고 있습니다
고글을 쓴 작고 뚱뚱한 퍼그가 오래된 오토바이 옆 의자에 앉아 있습니다.
더 자세히 보면 강아지의 배가 숨을 내쉬고 들이마실 때 매우 실제처럼 보입니다.
고글을 쓴 작고 통통한 퍼그 개가 낡은 오토바이 옆 의자에 앉아 있다
a 선글라스를 쓰고 스케이트보드를 타는 갈색 보더콜리.
선글라스를 낀 채 스케이트보드 위에 서 있는 갈색과 흰색 보더콜리
두렵습니다. 이 동영상 아래에 누군가 갈색 보더콜리가 자신의 개이며 이 동영상을 직접 촬영했다고 주장하는 댓글을 남겼습니다.
그리고 우리는 잠시 동안 그가 진실을 말하고 있는 걸까?
전체적으로 네티즌들은 베타를 기다릴 수 없습니다.
소라에게 '휴대폰이 블랙홀로 들어가는 여정을 생중계하고 있다'는 신의 질문도 있었습니다.
네티즌들은 언리얼 엔진으로 일부 데이터 세트?
이 영상이 공개되면서 네티즌들의 궁금증은 점점 더 커졌습니다.
소라 모델은 실제로 어떤 데이터로 학습을 진행했을까요?
또한 상당수의 네티즌들은 소라가 생성한 이미지에 대해 이미지, 약간 데자뷰 같지 않나요? 마치 언리얼 엔진으로 직접 만든 것 같다는 반응도 있었습니다.
그 후 점점 더 많은 사람들이 소라가 훈련하던 데이터 세트가 언리얼 엔진을 만드는 데 사용된 데이터 세트와 동일하다는 사실을 알아차렸습니다. 데이터 세트는 언리얼 엔진으로 생성된 데이터 세트여야 합니다.
사실, 소라가 시작될 당시에는 대기업들이 게임 엔진으로 구동되는 소라를 예측했습니다.
피토치의 공동 창업자 수미스 친탈라는 그렇게 생각했습니다.
데이터 과학자 겸 머신 러닝 엔지니어 랄프 브룩스도 자신의 분석을 내놓았습니다.
다양한 각도에서 많은 HD 동영상을 제작하려면 시뮬레이션을 해야 합니다. 무엇보다도 훈련 데이터를 생성하는 데 UE5가 부분적으로 사용된다고 생각하게 하는 여러 단서가 있습니다.
예를 들어, 벚꽃길을 걷는 이 인기 동영상에서 캐릭터는 UE5에서와 매우 유사한 방식으로 움직입니다. 실제 사람들은 일정한 속도로 걷지 않습니다.
NVIDIA의 선임 과학자 짐 팬(Jim Fan)도 마찬가지로 다음과 같이 말했습니다. "소라가 수많은 UE5 합성 데이터로 훈련받았다고 해도 놀랍지 않을 것입니다!"라고 말했습니다.
물론 명시적으로 UE5라고 부르지는 않았지만 UE5에서 생성된 텍스트와 비디오 쌍이 합성 데이터로 사용되어 훈련 세트에 추가되었을 가능성이 매우 높습니다.
초기에 한 예후 분석가는 Sora의 추론 파이프라인이 클립 기반, 텍스트-3D 오브젝트, 게임 엔진 에뮬레이션을 사용하고 있다고 추측했습니다.
수동 훈련 데이터의 부족은 당연한 결과입니다. LLM 개발, 합성 데이터는 AI의 미래입니다!
'라이트' 경험은 기술 보고서에 숨겨져 있습니다!
네티즌들은 이 세대를 뛰어넘는 데모를 보고 싶어합니다.
좋은 소식은 아직 Sora의 기능이 공식적으로 공개되지는 않았지만, 기술 보고서에서 앞으로 선보일 기능을 살짝 엿볼 수 있다는 점입니다!
리포트는 https:// 에서 확인하세요. openai.com/research/video-generation-models-as-world-simulators
캐릭터, 의상, 기상 조건, 지리적 위치 및 기타 옵션과 같은 다양한 키워드를 선택하면 다음과 같이 할 수 있습니다. 소라가 생성한 다양한 동영상을 경험해보세요.
이렇게 하면 A가 B와 비슷한 옷을 입고 C 지역의 D 날씨에 아늑한 산책을 하는 모습을 볼 수 있습니다.
할리우드 거물들이 노골적으로 두려워한다고... 영화와 TV 산업은 정말 끝났을까?
할리우드를 대표하는 감독이자 제작자, 배우인 타일러 페리가 소라 때문에 자신의 애틀랜타 스튜디오의 8억 달러 규모 확장 계획을 보류하기로 한 것은 놀라운 일이 아닙니다.
원래 페리 감독은 지난 4년간. 330에이커 부지에 12개의 스튜디오를 추가하는 8억 달러 규모의 스튜디오 확장을 계획하고 있었습니다.
그러나 2월 16일에 소라가 제작한 동영상을 본 후, 그는 블록버스터 영화를 위한 장소를 찾거나 세트를 지을 필요가 없을지도 모른다는 생각에 8억 달러 계획을 중단하기로 결심했습니다.
"이전에는 AI가 이런 일을 할 수 있다는 말만 들었는데 실제로 AI가 만든 장면을 보니 너무 충격적이었어요!"
페리 감독은 소라가 너무 큰 충격을 받았기 때문에 너무 큰 충격을 받았기 때문에 8억 달러 규모의 확장팩은 무기한 연기되었습니다.
이제 영화 촬영을 위해 현지에 갈 필요가 없습니다.
콜로라도의 설경, 달에서의 장면, 산속 거실에서 두 사람이 있는 장면 등 더 이상 실제 세트를 만들지 않고도 사무실 컴퓨터에서 모든 것을 할 수 있습니다!
그리고 이는 배우, 조명, 운송, 음향, 편집 등 업계의 모든 분야에 영향을 미치는 거대한 변화를 의미합니다.
현재 페리 감독은 두 편의 영화 촬영 현장과 후반 작업에서 AI를 사용하여 배우에게 노인 분장을 하는 데 몇 시간을 소비하지 않아도 됩니다.
소라는 판도를 바꿨습니다.
과거에는 HBO 파일럿 제작비가 1500만 달러, 2000만 달러, 심지어 3500만 달러에 달했지만 지금은 그 비용이 상상할 수 없을 정도로 낮아졌습니다. 회사는 당연히 더 저렴한 옵션을 선택할 것입니다.
많은 일자리가 가까운 미래에 사라질 것입니다.
영화 및 TV 업계는 모든 사람의 일자리를 유지하기 위해 어떤 보안 대책을 마련해야 할까요?
참조:
https://www.hollywoodreporter.com/business/business-news/tyler- perry-ai-alarm-1235833276/
https://twitter.com/JMT3/status/1761443473218240558
https://twitter.com/_tim_brooks/status/1761236971186438178
https://twitter.com/model_ mechanic/status/1761198301482021084