O Stable Video 4D é capaz de gerar cinco quadros em oito ângulos diferentes em aproximadamente 40 segundos, permitindo aos usuários especificar os ângulos da câmera para atender às suas necessidades criativas. Este avanço é uma evolução do modelo Stable Video Diffusion, que convertia imagens em vídeos, agora possibilitando a síntese dinâmica de vídeos 3D completos.

O modelo funciona a partir do upload de um único vídeo e da especificação das poses de câmera desejadas. Em seguida, o Stable Video 4D gera vídeos de novos ângulos, proporcionando uma perspectiva multiângulo abrangente do objeto. A otimização completa em 4D leva de 20 a 25 minutos, sendo uma ferramenta valiosa para profissionais de várias indústrias.

Além de sua eficiência, o Stable Video 4D se destaca por garantir consistência espacial e temporal, evitando a necessidade de amostragem de múltiplos modelos de difusão. A tecnologia já está disponível na plataforma Hugging Face, e a Stability AI está empenhada em aprimorá-la para lidar com uma gama mais ampla de vídeos do mundo real, além dos datasets sintéticos atuais.

- Transforma um vídeo único em múltiplos vídeos de novos ângulos. - Gera cinco quadros em oito ângulos diferentes em cerca de 40 segundos. - Aplicações futuras incluem desenvolvimento de jogos, edição de vídeos e realidade virtual. - Disponível na plataforma Hugging Face. - Consistência espacial e temporal melhorada sem necessidade de múltiplos modelos de difusão.

O Stable Video 4D representa um avanço significativo na geração de vídeos multiângulo, com potencial para transformar diversas indústrias. A Stability AI continua a trabalhar na otimização do modelo, esperando que ele seja adotado e aprimorado por empresas para atender a necessidades específicas. A evolução contínua dessa tecnologia promete abrir novas possibilidades criativas e inovadoras.

FONTES:

1. Stability AI

2. Hugging Face

3. Stable Video Diffusion