Ano passado Adobe lançou Fireflyseu mais recente modelo de IA generativo baseado em seu SenseiAI anterior, e agora a empresa está mostrando como será usado seu aplicativo de edição de vídeo, Premiere Pro. Em uma prévia, ele demonstrou alguns recursos importantes que chegarão no final deste ano, incluindo adição e remoção de objetos, extensão generativa e texto para vídeo.
Os novos recursos provavelmente serão populares, já que a limpeza de vídeo é uma tarefa comum (e dolorosa). O primeiro recurso, Generative Extend, aborda um problema que os editores enfrentam em quase todas as edições: clipes muito curtos. “Adicione quadros perfeitamente para tornar os clipes mais longos, para que seja mais fácil cronometrar perfeitamente as edições e adicionar transições suaves”, afirma a Adobe. Isso é feito usando a IA para criar mídia extra, ajudando a cobrir uma edição ou transição.
Outro problema comum é o lixo que você não quer em uma cena e que pode ser difícil de remover, ou adicionar coisas que você fazer querer. A adição e remoção de objetos do Premiere Pro aborda isso, novamente usando a IA generativa do Firefly. “Basta selecionar e rastrear objetos e, em seguida, substituí-los. Remova itens indesejados, mude o guarda-roupa de um ator ou adicione rapidamente enfeites de cenário, como uma pintura ou flores fotorrealistas em uma mesa”, escreve Adobe.
A Adobe mostra alguns exemplos, adicionando uma pilha de diamantes a uma pasta por meio de um prompt de texto (gerado pela Firefly). Ele também remove uma caixa de utilidades feia, muda o mostrador do relógio e adiciona uma gravata ao traje do personagem.
A empresa também mostrou uma maneira de importar modelos personalizados de IA. Um, chamado Pika, é o que alimenta o Generative Extend, enquanto outro (Sora da OpenAI) pode gerar B-Roll automaticamente (gravações de vídeo). Este último será controverso, pois pode potencialmente eliminar milhares de empregos, mas ainda está “atualmente em pesquisa inicial”, disse a Adobe no vídeo. A empresa observa que adicionará “credenciais de conteúdo” a essas fotos, para que você possa ver o que foi gerado pela IA, incluindo a empresa por trás do modelo.
Um recurso semelhante também está disponível em “Text to Video”, permitindo gerar imagens totalmente novas diretamente no aplicativo. “Basta digitar texto em um prompt ou fazer upload de imagens de referência. Esses clipes podem ser usados para idealizar e criar storyboards ou para criar B-roll para aumentar as filmagens de ação ao vivo”, disse a Adobe. A empresa parece estar comercializando esse recurso muito rapidamente, considerando que o vídeo generativo de IA apareceu pela primeira vez apenas alguns meses atrás.
Esses recursos chegarão ainda este ano, mas a Adobe também apresentará atualizações para todos os usuários em maio. Isso inclui alças de fade interativas para facilitar as transições, emblema Essential Sound com marcação de categoria de áudio (“AI marca automaticamente clipes de áudio como diálogo, música, efeitos sonoros ou ambiente e adiciona um novo ícone para que os editores obtenham acesso instantâneo e com um clique ao controles corretos para o trabalho”), emblemas de efeitos e formas de onda redesenhadas na linha do tempo.
