Adobe está trabalhando na manipulação generativa de vídeo com IA

Verge, 15/10/2023 

Por Umar Shakir 

A empresa revelou o Project Fast Fill, uma nova maneira de remover pessoas, adicionar objetos e substituir cores em vídeos usando IA generativa e interações de prompt de texto.

A Adobe está exibindo um novo recurso de preenchimento generativo, Project Fast Fill, que pode facilmente adicionar ou remover objetos em vídeos com o poder da IA. É um dos vários novos recursos experimentais de IA anunciados hoje na conferência MAX da empresa. O Projeto Fast Fill tem a capacidade de trocar acessórios de roupa em pessoas em movimento ou remover turistas do fundo de uma paisagem.

O Fast Fill funciona de forma semelhante ao Magic Editor do Google, onde você pode mover pessoas ou objetos – mas com vídeo em vez de apenas fotos. O Fast Fill promete fazer coisas que o Projeto Stardust da empresa faz para fotos estáticas, como alterar as cores apenas digitando um prompt de texto. A Adobe afirma que esses recursos generativos de IA são possíveis graças aos modelos Firefly AI atualizados da empresa.

Como a maioria dos novos recursos apresentados na conferência da Adobe, o Project Fast Fill é um experimento no qual os engenheiros da empresa estão trabalhando no momento. Mas, como os recursos de preenchimento generativo do Photoshop revelados em anos anteriores, eles muitas vezes chegam aos clientes da Creative Cloud. A Adobe está de olho no novo recurso para uso no Premiere Pro e no After Effects, mas não forneceu um cronograma.

A Adobe também está trabalhando em sua tecnologia de edição de IA para vídeo, áudio e design 3D de outras maneiras. O Projeto Dub Dub Dub da empresa pode traduzir vozes para diferentes idiomas. A mudança de cena pode mover os assuntos para um novo local em outro clipe. Res Up usa difusão para aumentar a resolução de vídeo em baixa resolução. E o Project Poseable pode representar objetos 3D com base em fotos de pessoas reais e gerar renderizações 3D usando entrada de texto.

À medida que mais ferramentas geradoras de IA para fotos se tornam mais acessíveis aos usuários, como o Magic Editor do Google Pixel 8, já estávamos nos perguntando: o que é uma foto? Agora, o Fast Fill de manipulação de vídeo por IA da Adobe poderá trazer essa mesma capacidade para mais pessoas em breve, e teremos que perguntar: O que é um vídeo?

Artigos recomendados: AIG e 2025

Fonte:https://www.theverge.com/2023/10/12/23914278/adobe-max-project-fast-fill-ai-video-generative-fill