Especialistas de Pesquisa do Google e dell 'Universidade Hebraica de Jerusalém eles desenvolveram Dreamix, software que pode usar qualquer material para criar vídeos que correspondam a instruções de texto. Outro passo em frente para a inteligência artificial generativa na salvaguarda de todas as formas de expressão (após textos, imagens e auditivo). O que Dreamix tem de especial é que não se limita a instruções de texto, mas também aceita fotos ou vídeos de referência para melhor adaptabilidade às ideias dos usuários.
Três modos de operação a partir de instruções de texto, imagens, clipes
Começando com imagens, clipes ou instruções de texto, o Dreamix oferece três recursos principais: edição de vídeo, geração de vídeo de imagens e geração baseado no assunto.
Com l 'edição de vídeo, o Dreamix pode reproduzir facilmente vídeos de entrada e substituir elementos por seus objetos favoritos. Por exemplo, você pode enviar um clipe de uma pessoa cortando uma fruta e pedir à IA para substituir a fruta por uma fatia de bolo. Você pode fornecer algumas fotos de um campo de milho e criar uma cena mais dramática. Como sempre, mostrarei primeiro os clipes dos dois exemplos.
Dreamix é capaz de produzir vídeos começando com imagens (e/ou instruções de texto). Neste exemplo, a inteligência artificial transformou uma imagem estática em uma obra dinâmica ao inserir um tubarão nadando e fazer a tartaruga se mover. A posição e o fundo foram mantidos fiéis à imagem original, enquanto a direção da tartaruga foi alterada.
O último dos três recursos permite ao Dreamix criar vídeos animados a partir de uma pequena coleção de imagens mostrando o mesmo assunto. Por exemplo, se você alimentar esta IA com algumas imagens de um bombeiro de brinquedo, ela extrai as características visuais do sujeito e as anima para que o sujeito possa realizar ações definidas em instruções de texto.
Em resumo
Esta tecnologia pode ser um divisor de águas para os criativos que não dependem apenas da linguagem verbal, mas que também são inspirados pelas artes visuais. No momento, os resultados ainda parecem muito incertos, mas mesmo assim demonstram a capacidade da IA de compreender instruções de texto e o contexto das imagens de entrada.
Dreamix pode ser uma ajuda válida para agilizar a criação de storyboards ou gerar ilustrações de referência. Atualmente não está acessível ao público (e nos perguntamos se o Google o tornará um dos “porta-estandartes” para responder ao ChatGPT), no entanto, não demorará muito para ver esta ou outras ferramentas semelhantes desenvolvidas por diferentes empresas.
A inteligência artificial generativa está destinada a ter uma palavra a dizer também na TV e no cinema. Quer mais exemplos? Aqui está toda a apresentação.
