Imagem de um vídeo da Adobe mostrando um prompt de texto criando uma foto melancólica de um homem em uma rua chuvosa.

Na quarta-feira, Adobe revelado Ferramentas de geração de vídeo Firefly AI que chegarão em versão beta ainda este ano. Como muitas coisas relacionadas à IA, os exemplos são igualmente fascinantes e aterrorizantes, à medida que a empresa integra lentamente ferramentas criadas para automatizar grande parte do trabalho criativo pelo qual sua valiosa base de usuários é paga hoje. Ecoando a habilidade de vendas de IA encontrado em outras partes da indústria de tecnologiaA Adobe enquadra tudo isso como uma tecnologia complementar que “ajuda a eliminar o tédio da pós-produção”.

A Adobe descreve suas novas ferramentas de texto para vídeo com tecnologia Firefly, Generative Extend (que estará disponível no Premiere Pro) e ferramentas de IA de imagem para vídeo como ajudando os editores em tarefas como “navegar por lacunas na filmagem, remover objetos indesejados de uma cena , suavizando transições de jump cut e procurando o b-roll perfeito.” A empresa afirma que as ferramentas darão aos editores de vídeo “mais tempo para explorar novas ideias criativas, a parte do trabalho que eles adoram”. (Para considerar a Adobe pelo valor nominal, você teria que acreditar que os empregadores não simplesmente aumentariam suas demandas de produção dos editores depois que a indústria adotasse totalmente essas ferramentas de IA. Ou pagariam menos. Ou empregariam menos pessoas. Mas estou divagando.)

Firefly Text-to-Video permite que você – você adivinhou – crie vídeos gerados por IA a partir de prompts de texto. Mas também inclui ferramentas para controlar o ângulo, movimento e zoom da câmera. Ele pode tirar uma foto com lacunas na linha do tempo e preencher os espaços em branco. Ele pode até usar uma imagem estática de referência e transformá-la em um vídeo de IA convincente. A Adobe afirma que seus modelos de vídeo se destacam com “vídeos do mundo natural”, ajudando a criar tomadas de estabelecimento ou b-rolls em tempo real, sem muito orçamento.

Para ver um exemplo de como a tecnologia parece convincente, confira os exemplos da Adobe no vídeo promocional:

Embora sejam amostras com curadoria de uma empresa que tenta vender seus produtos, sua qualidade é inegável. O texto detalhado solicita uma cena inicial de um vulcão em chamas, um cachorro relaxando em um campo de flores silvestres ou (demonstrando que também pode lidar com o fantástico) monstros de lã em miniatura em uma festa dançante produzem exatamente isso. Se estes resultados forem emblemáticos do resultado típico das ferramentas (dificilmente uma garantia), então a produção televisiva, cinematográfica e comercial terá em breve alguns atalhos poderosos à sua disposição – para melhor ou para pior.

Enquanto isso, o exemplo de imagem para vídeo da Adobe começa com uma imagem de galáxia carregada. Um prompt de texto o estimula a transformá-lo em um vídeo que se afasta do sistema estelar para revelar o interior do olho humano. A demonstração do Generative Extend da empresa mostra duas pessoas caminhando por um riacho na floresta; um segmento gerado por IA preenche uma lacuna na filmagem. (Foi convincente o suficiente para que eu não conseguisse dizer qual parte da saída foi gerada por IA.)

Imagem de um vídeo da Adobe mostrando um prompt de texto criando uma foto melancólica de um homem em uma rua chuvosa.

Adobe

Reuters relatórios que a ferramenta irá gerar apenas clipes de cinco segundos, pelo menos no início. Para crédito da Adobe, ela afirma que seu modelo de vídeo Firefly foi projetado para ser comercialmente seguro e treina apenas conteúdo que a empresa tem permissão para usar. “Nós apenas os treinamos no banco de dados de conteúdo do Adobe Stock que contém 400 milhões de imagens, ilustrações e vídeos selecionados para não conter propriedade intelectual, marcas registradas ou personagens reconhecíveis”, disse o vice-presidente de IA generativa da Adobe, Alexandru Costin. Reuters. A empresa ressaltou ainda que nunca treina o trabalho dos usuários. No entanto, se isso deixa ou não seus usuários desempregados é outra questão.

A Adobe afirma que seus novos modelos de vídeo estarão disponíveis em versão beta ainda este ano. Você pode inscreva-se em uma lista de espera para experimentá-los.

Fuente