IT/AI

[AI] OpenAI Sora Text to Video 생성 모델, 게임 랜더링 기능 포함 (feat. 마인크래프트)

액트 2024. 2. 20. 10:26

OpenAI가 최근 발표한 동영상 생성 도구, Sora는 단순한 영상 제작을 넘어선 기능을 제공합니다. 이번에 공개된 Sora는 영화 품질의 동영상뿐만 아니라, 비디오 게임에도 활용될 수 있는 기능을 탑재하고 있습니다. 마인크래프트와 같은 게임의 영상을 구현하는 데 사용 가능하다는 점에서 큰 주목을 받고 있습니다. 이제 Sora의 주요 기능과 사용 사례에 대해 살펴보겠습니다.

Sora의 영상 및 게임 시각화 기능 소개

openai sora를 사용한 마인크래프트 랜더링

Sora는 최대 1080p의 품질로 최대 1분 길이의 동영상을 생성할 수 있습니다.

동영상 편집, 배경 교체, 동영상의 시간을 조정하는 루핑 효과 생성 등 다양한 영상 처리 작업을 지원합니다.

사용자는 이를 통해 복잡한 동영상 작업을 손쉽게 처리할 수 있습니다.

 

[AI] Openai Sora의 Text to video: 이제는 텍스트로 영상까지!

OpenAI가 선보인 SORA는 텍스트 입력을 바탕으로 최대 1분 길이의 영상을 제작할 수 있는 AI 서비스입니다. 사용자가 제공한 텍스트 설명을 기반으로 실제와 유사한 동영상을 만들어내는 이 기술을

yjshin.tistory.com

게임 영상 랜더링

Sora의 눈에 띄는 기능 중 하나는 비디오 게임의 시뮬레이션 능력입니다.

OpenAI 연구팀은 마인크래프트의 환경과 게임 플레이를 포함한 다양한 게임 내 요소를 ChatGPT 프롬프트에 입력하여 구현하였습니다.

사용자는 마인크래프트를 비롯한 게임의 영상 Sora를 통해 실감나게 구현할 수 있습니다.

https://twitter.com/i/status/1758347012909474137

 

X의 Andrew White님(@andrewwhite01)

OpenAI Sora can simulate Minecraft I guess. Maybe next generation game console will be "Sora box" and games are distributed as 2-3 paragraphs of text.

twitter.com

데이터 기반 물리 엔진의 가능성

Nvidia의 Jim Fan 선임 연구원에 따르면, Sora는 단순한 창의적 도구를 넘어서 데이터 기반의 물리 엔진 역할을 할 수 있습니다. 이는 환경 내 객체의 물리적 속성을 정확하게 모델링하고, 이를 기반으로 한 사진이나 동영상, 심지어 3D 상호작용 환경을 구현할 수 있습니다.

Sora는 텍스트 설명만으로도 현실적이거나 사진처럼 보이는 게임 환경을 생성할 수 있습니다.

현재 Sora는 제한적으로 접근할 수 있는 프로그램을 통해 제공되며, OpenAI는 향후 이 도구에 대한 더 많은 정보를 공개할 예정입니다.