O que é o Google Veo e como você pode experimentá-lo

O lançamento do Sora da OpenAI abriu as portas para aplicativos de geração de vídeo com tecnologia de IA que podem criar clipes curtos a partir de prompts de texto. Agora, o Google também entrou na briga ao anunciar seu próprio aplicativo de IA de geração de vídeo, o Veo, em sua conferência anual de desenvolvedores de I/O esta semana.

No entanto, assim como muitas outras ferramentas de IA anunciadas recentemente, o novo gerador de vídeo ainda não está disponível para uso público. O Google planeja permitir que artistas e criadores experimentem a ferramenta por meio de exercícios de crowdsourcing, o que pode ajudar a melhorá-la. Aqui está o que mais aprendemos sobre o Google Veo.

Vídeo de elefante de crochê arco-íris gerado usando Veo. Fonte: Google

O que o Veo pode fazer?

O Google Veo pode gerar vídeos em 1080p que duram mais de um minuto e você também pode editá-los por meio de instruções escritas. Ele pode garantir que os quadros sejam visualmente consistentes e os usuários possam usar um único prompt ou uma série de prompts que criam uma narrativa. A ferramenta pode incluir efeitos cinematográficos como fotos aéreas e criar cenas altamente detalhadas.

Você pode optar pelo realismo, surrealismo e até animação ao criar vídeos usando o Veo. Além disso, permite utilizar comandos de filmagem e entende termos como ‘foto aérea’ e ‘timelapse’. Comparado aos geradores de vídeo de IA anteriores anunciados pelo Google, o Veo oferece maior controle ao mesmo tempo em que fornece vídeos de melhor qualidade.

Veo também suporta edição mascarada, que permite fazer ajustes em seções específicas do vídeo. Você pode fazer isso incluindo uma área de máscara no prompt, e imagens também podem ser usadas junto com prompts de texto para gerar vídeos.

Nesse caso, utilizará a imagem fornecida como referência e gerará um vídeo no mesmo estilo, como o vídeo a seguir que foi gerado a partir de uma imagem de alpacas vestindo suéteres de tricô e o prompt Alpacas dancing to the beat.

Fonte: Google

Como funciona o Veo?

Os modelos de IA de vídeo precisam entender corretamente o prompt fornecido e combinar essas informações com as referências disponíveis. O Veo foi projetado para ser excepcionalmente bom na compreensão da linguagem natural e dos recursos visuais, o que permite gerar vídeos com precisão, inclusive aqueles com diversos detalhes.

Por causa disso, um prompt como Timelapse of a common sunflower opening, dark backgroundpode fornecer um vídeo de altíssima qualidade.

Fonte: Google

De acordo com o Google, o Veo aprimora outras ferramentas de geração de vídeo anunciadas anteriormente pela empresa, como Lumiere, VideoPoet, WALT, etc., usando utilizações de vídeo latente compactado. Ao contrário dessas ferramentas, o Veo é treinado em legendas detalhadas de vídeo, o que ajuda a IA a entender melhor as instruções.

O Google afirma que o gerador de vídeo depende de transformadores de difusão latente, o que garante consistência e evita que personagens e objetos pisquem e saltem entre as cenas. Ele também usa latentes, que são representações compactadas de vídeo que o tornam mais eficiente e ajudam a melhorar o desempenho. Graças a isso, o Veo pode gerar vídeos de alta qualidade em menos tempo.

Os vídeos que você gera usando Veo terão marca d’água usando o SynthID do Google, que ele usa para identificar conteúdo gerado por IA, semelhante ao que Sora da OpenAI faz por meio do padrão Coalition for Content Provenance and Authenticity (C2PA).

Além disso, existem processos de verificação de memorização e filtros de segurança para ajudar a reduzir preconceitos, direitos autorais e riscos de privacidade. Apesar dessas tecnologias e processos, o Veo ainda precisa de algumas melhorias, já que os planos de fundo ainda tendem a mudar e as áreas altamente detalhadas não parecem muito bem organizadas. É por isso que o Google só permite que alguns criadores o testem.

Como você pode usar o Veo?

Conforme mencionado acima, o Veo não está atualmente disponível para uso público e o Google só permite que alguns criadores selecionados experimentem a ferramenta. Eles podem experimentar usando o VideoFX, outra ferramenta experimental disponível no Google Labs, onde estão presentes todos os produtos do Google que estão em teste.

Se você é um criador e quer experimentar o Veo,

Visite o site do Google Labs para entrar na lista de espera.
Insira seus dados e envie-os.
Aguarde o Google verificar seu envio. Se achar adequado, você poderá experimentar o Veo.

O Google Veo é o mais recente de uma longa linha de geradores de vídeo com tecnologia de IA anunciada pelo Google e parece ser o mais poderoso até agora. Ele não apenas permite criar vídeos usando diferentes estilos e efeitos, mas também editar vídeos criados facilmente.

Explicamos como os criadores podem entrar na lista de espera e experimentar a ferramenta por si próprios, mas não há informações se o Veo será lançado publicamente. O Google apenas sugeriu que alguns dos recursos da ferramenta podem aparecer em curtas do YouTube, então há isso pelo qual esperar.