• Lumiere do Google redefiniu a geração de vídeo por IA graças à tecnologia STUNet, que está mais próxima da realidade do que os métodos tradicionais.
  • Lumieredemonstra desempenho e potencial excepcionais, desafiando os geradores de vídeo IA existentes, e o Google também dá importância à prevenção de abusos tecnológicos.

O Google revelou seu mais recente avanço em geração de vídeo por IA com seu novo modelo chamado Lumiere. Esta tecnologia de ponta utiliza um modelo de difusão conhecido como Space-Time-U-Net (STUNet) para criar vídeos mais próximos da realidade do que nunca.

Decifrando a tecnologia

Ao contrário dos métodos tradicionais que montam quadros-chave gerados, o Lumiere adota uma abordagem diferente, criando uma imagem base e depois usando o STUNet para aproximar o movimento dos objetos na imagem. Esse processo gera de forma transparente mais quadros que se encadeiam, resultando em um movimento realista. Para comparação, o Lumiere gera impressionantes 80 quadros, enquanto outros modelos como o Stable Video Diffusion produzem apenas 25.

Desafiando a concorrência

Comparado aos seus concorrentes, como Runway e Emu da Meta, o Lumiere apresenta desempenho superior, posicionando o Google como um player formidável no campo da geração de vídeo por IA. Uma comparação com a plataforma popular Runway usando os mesmos prompts destacou a capacidade do Lumiere de animar perfeitamente cenários reais, superando as expectativas e ampliando os limites do realismo na geração de vídeo por IA.

Leia também:O que são os tribunais da Internet na China? Juízes IA e provas blockchain

Possibilidades ampliadas

O compromisso do Google em avançar a IA vai além da geração texto-vídeo. O Lumiere oferecerá recursos adicionais, incluindo geração imagem-vídeo, geração estilizada, cinematografias e inpainting. Essas melhorias permitirão que os usuários criem vídeos em estilos específicos, animem partes selecionadas de uma filmagem e modifiquem cores ou padrões em um vídeo.

Preocupações e responsabilidade

No entanto, o Google reconhece o potencial de uso indevido dessa tecnologia poderosa. Em seu artigo publicado, a empresa destaca a importância de desenvolver ferramentas para detectar vieses e evitar casos de uso malicioso. Garantir um ambiente de uso seguro e justo continua sendo uma prioridade máxima para o Google, embora os métodos específicos para alcançá-lo não tenham sido explicitamente descritos.

À medida que o Lumiere continua a se desenvolver e amadurecer, ele testemunha o compromisso do Google em impulsionar a inovação no campo da geração de vídeo por IA. Com seu desempenho superior e potencial promissor, o Lumiere está prestes a desafiar os geradores de vídeo IA existentes e abrir caminho para uma nova era de criação de vídeo realista. O caminho para a geração de vídeo IA realista deu um salto significativo com o Lumiere.