A Adobe reeducou sua IA generativa, e estou impressionado com a atualização

Adobe reeducou sua IA generativa e estou impressionado com a nova versão

Se você está esperando que a inteligência artificial acelere sua criatividade, a Adobe revelou três grandes mudanças em sua família de ferramentas de IA generativa, Firefly, na terça-feira. O motor que alimenta a geração de imagens no Photoshop está recebendo uma grande atualização, e a IA generativa está chegando aos designs do Adobe Illustrator e às layouts Adobe Express.

O Firefly já permitia transformar prompts de texto em imagens no site Firefly e no software de edição de imagens Photoshop da Adobe, mas um modelo de IA de segunda geração oferece mais detalhes e melhor qualidade de imagem, segundo Alexandru Costin, líder de IA generativa da Adobe. O modelo ainda não está disponível no Photoshop, mas você pode esperar que ele chegue depois de alguns testes online.

Em meus testes, de fato, os resultados e a interface do usuário estão muito melhores. A Adobe treinou o novo modelo de IA em o dobro de imagens, e ele oferece uma resolução maior, detalhes melhores como poros da pele e a capacidade de direcionar a geração com parâmetros fotográficos como distância focal da lente e profundidade de campo.

A IA generativa começa com os mesmos métodos básicos de IA que vêm sendo utilizados há anos: treinar um sistema para reconhecer padrões em dados do mundo real. Mas a IA generativa vai além ao criar novo material como texto, imagens, fala ou vídeo com base em sua própria compreensão desses padrões. Isso revolucionou os computadores, tirando-os de seus caminhos lentos e literais e nos dando uma ideia do que uma máquina verdadeiramente inteligente pode ser.

Experimentando a IA generativa do Firefly aprimorado da Adobe

Embora os resultados do Firefly às vezes sejam pouco convincentes, é simplesmente divertido criar imagens fantasiosas e cativantes, especialmente ao usar estilos de arte mais flexíveis, como pinturas, desenhos animados e aquarelas. Eu gostei de digitar prompts, ver o que a IA produzia e ajustar os prompts para resultados mais úteis ou extravagantes.

A interface também foi melhorada. Uma opção de alto nível para escolher entre realismo fotográfico e um estilo de ilustração mais artístico é útil, assim como as opções de proporção quadrada, paisagem e retrato. Controles deslizantes para intensidade visual e força do estilo oferecem a escolha de imagens dramáticas, discretas ou algo intermediário. Você pode fazer upload de uma foto de referência para direcionar o estilo da saída.

Imagem gerada pelo Firefly da Adobe de um espírito usando uma roupa de heavy metal andando de bicicleta em um cenário pós-apocalíptico

O Firefly da Adobe gerou esta imagem de um espírito usando uma roupa de heavy metal andando de bicicleta em um cenário pós-apocalíptico. Mas não olhe muito de perto para os pedais.

Stephen Shankland/CNET

Um dos meus prompts de teste padrão para a IA, um elefante saltando de paraquedas, produziu resultados melhores do que a primeira geração do Firefly, embora a tecnologia ainda tenha dificuldade com as cordas do paraquedas. Em uma imagem, ela conseguiu construir uma estrutura de madeira para segurar o elefante, o que me surpreendeu.

A criação de “um médico amigável em uma sala de hospital para um anúncio farmacêutico” produziu retratos geralmente aceitáveis. O Firefly gerou uma variedade de raças e gêneros, mas todos eles com as tradicionais roupas de hospital e estetoscópios.

As imagens do Firefly criadas de uma guitarra elétrica pontuda tinham um aspecto perigoso satisfatório, embora nem sempre estivessem equipadas com o número correto de trastes, captadores e cordas.

Meus testes também mostraram que ainda há muito trabalho a ser feito. Em imagens do estereótipo de um hacker curvado sobre um teclado, às vezes eles usavam seus moletons ao contrário. Minha busca por um caranguejo vermelho fotorrealista agitando suas garras no ar ficou sem resposta, com garras distorcidas, olhos extras e outros problemas. O Firefly fez um trabalho aceitável gerando uma marmota, mas os dados de treinamento da Adobe evidentemente não incluem picas suficientes – um roedor mais incomum encontrado nas grandes montanhas.

Um quarteto de imagens de médicos gerados pela IA da Adobe

O Firefly da Adobe apresenta um quarteto de opções, neste caso solicitado com “um médico amigável em uma sala de hospital para um anúncio farmacêutico”. Ele oferece uma variedade de gêneros e raças, mas talvez devido às imagens de estoque em que é treinado, nunca vi um médico mais velho nas dezenas de imagens que criei. O site do Firefly permite que você avalie as imagens e envie comentários.

Stephen Shankland

E outro teste que gosto de fazer, uma imagem de um crocodilo furioso saltando de um oceano tempestuoso com raios caindo ao redor, ainda tem problemas para criar uma disposição plausível de dentes. Meu prompt “um espírito vestido com uma roupa de heavy metal anda de bicicleta em um cenário pós-apocalíptico” mostrou que é realmente difícil ajustar a geometria de um personagem humanoide aos mecanismos de uma bicicleta. “Uma rede de comunicações de alta tecnologia que abrange o globo com dados fluindo pelos fios” produziu uma bagunça emaranhada.

Mas você pode refinar as sugestões para obter melhores resultados e o estilo de arte frequentemente produz assuntos mais convincentes do que o estilo fotográfico. Alguns estilos de arte, como desenho de doodle, são mais flexíveis do que outros. Eu particularmente gostei da opção de aquarela. Mas não é perfeito.

Firefly chega ao Adobe Illustrator

O Adobe Illustrator, usado por designers para criar gráficos vetoriais como logotipos e diagramas, agora possui a capacidade de usar sugestões de texto do Firefly pela primeira vez. Assim como no Photoshop, o software transformará uma sugestão de texto em um quarteto de ilustrações candidatas para você escolher e aprimorar ainda mais com a edição. As ilustrações são totalmente editáveis.

E o aplicativo Adobe Express para criar materiais como panfletos e vídeos para mídias sociais agora possui seu próprio campo de sugestão de texto para a criação de templates. Por exemplo, se você digitar “anúncio de festa de aniversário temática de piratas para crianças”, ele fornecerá algumas opções de layout com arte personalizada e fontes. Por enquanto, está em fase de testes beta.

Leia mais: Aqui está o que aprendi ao testar a nova ferramenta de IA gerativa do Photoshop

A criatividade da IA gerativa pode ser um problema se você está procurando informações factualmente precisas para um processo judicial, itinerário de viagem ou trabalho escolar. Mas pode ser uma vantagem para usos criativos, e a Adobe está contando com o Firefly para transformar o que é possível com suas ferramentas e ajudar aqueles que podem não ter experiência a expandirem seus horizontes.

Firefly já gerou 3 bilhões de imagens até agora

Em poucos meses de testes, os clientes da Adobe adotaram rapidamente a IA, gerando até agora mais de 3 bilhões de criações, disse Costin.

“Normalmente, os recursos do Photoshop são utilizados em apenas 1% das vezes. O Preenchimento Generativo [habilidade do Firefly no Photoshop] atingiu 10 vezes essa porcentagem no primeiro mês”, disse Costin. “Os clientes adoram essa tecnologia.”

Provavelmente, os contadores de dinheiro da Adobe também adoram. Os planos de assinatura da Adobe permitem que você use o Firefly várias vezes por mês, mas em novembro, a Adobe está aumentando os preços do Creative Cloud em cerca de 9% a 10%.

Uma versão AI gerativa do Firefly da Adobe de uma guitarra desconfortavelmente pontiaguda

A ferramenta AI gerativa Firefly da Adobe criou essa guitarra desconfortavelmente pontiaguda.

Stephen Shankland/CNET

A geração ocorre na infraestrutura de computação em nuvem da Adobe e custa dinheiro real, especialmente considerando o alto preço dos processadores Nvidia que lidam com a maioria do trabalho de IA generativa atualmente. Esses grandes modelos de IA geralmente não cabem na memória de um laptop comum, mas a indústria está trabalhando nesse problema, ao mesmo tempo em que empresas como AMD, Intel e Apple estão adicionando novas habilidades de aceleração aos seus processadores.

Outras habilidades de IA surgindo na Adobe Max:

  • A Adobe também está usando a IA para ajudá-lo a usar a IA. No Photoshop, ele sugerirá completamentos para suas sugestões de texto para tentar produzir melhores resultados. Isso pode ajudar pessoas que têm pouca experiência na área mais recente da ciência da computação, engenharia de sugestões. “Se você não sabe o que escrever, estamos gerando automaticamente sugestões não apenas para escrever uma frase estatisticamente, mas para tentar… gerar imagens bonitas”, disse Costin.
  • No Lightroom, um novo efeito de desfoque de lente baseado em IA artificialmente desfocará os fundos, simulando o bokeh que lentes de alta qualidade podem produzir naturalmente para isolar objetos do resto da cena.
  • Empresas podem personalizar como o Firefly funciona, fazendo upload de seus próprios ativos para orientar o processo de geração do Firefly na direção certa.

Nota dos editores: O ENBLE está usando um mecanismo de IA para ajudar a criar algumas histórias. Para saber mais, veja este post.