Jogue “Hovering Art Director” com “Artificial Interns”

Mar 11 2023
Experimentando ferramentas de imagem baseadas em IA, Lexica e Runway ML's Custom Generator
Ultimamente, tem havido muita conversa sobre ferramentas de IA¹, que produzem resultados alucinantes, muitas controvérsias e conversas inquietantes². Depois de brincar com algumas das ferramentas de criação de IA disponíveis, algumas observações vieram à mente: obter uma boa saída depende de fornecer ao modelo um prompt bem elaborado e imagens de exemplo, semelhante a como você pode precisar criar um modelo muito bem resumo criativo definido para um estagiário ou designer júnior.
Gerado com o prompt “ilustrações isométricas de papel cortado de cores pastel da rede de inteligência artificial da Internet”.

Ultimamente, tem havido muita conversa sobre ferramentas de IA¹, que produzem resultados alucinantes, muitas controvérsias e conversas inquietantes². Depois de brincar com algumas das ferramentas de criação de IA existentes, algumas observações vieram à mente:

  1. Usar “Inteligência Artificial” é mais como ter seus próprios “Estagiários Artificiais”.
  2. As ferramentas de IA geralmente geram coisas que, na superfície, “parecem boas” inicialmente, mas ainda parecem errar detalhes importantes.
  3. As modelos ainda não entendem muito bem o meu estilo, mas talvez eu ainda não tenha aprendido como “mentorá-las” efetivamente.

Obter um bom resultado depende de fornecer ao modelo um prompt bem elaborado e imagens de exemplo, semelhante a como você pode precisar criar um resumo criativo muito bem definido para um estagiário ou designer júnior.

E a IA é boa no tipo de trabalho que pode ter sido delegado a um estagiário no passado: revisão, resumo de documentos, transcrição de uma gravação, remoção do fundo de um vídeo, limpeza de dados, geração de muitas iterações etc.

Mas exige que você seja um diretor de arte flutuante e ainda precisa de muitos ajustes e orientações para obter o que está procurando.

Estilo é o que você entende errado.

Mas, às vezes, o modelo produz aleatoriamente acidentes felizes - ou pelo menos alguns engraçados.

Talvez, como ferramenta, a força da IA ​​seja oferecer um enorme “espaço de acidente”: uma dimensão de variações possíveis e plausíveis de uma intenção. — David OReilly

À primeira vista, as imagens que gerei abaixo usando Lexica são bastante impressionantes, mas quando você as olha mais de perto, há detalhes estranhos. Por exemplo, o rosto parece muito bom, mas o modelo não entende muito bem as mãos e teclados ou quanto espaço físico as coisas devem ocupar.

Gerado com o prompt “garota anime no computador ouvindo música cores pastel estéticas fofas”. Percebi que muitas das imagens que ele gera têm essa estética brilhante e brilhante.

E como estou sempre curioso sobre como as ferramentas podem ser usadas no planejamento, aqui estão alguns exemplos do que o modelo pensa que um “corredor central orientado para pedestres com ciclovias, calçadas largas, sombra de árvores e uma variedade de vitrines” pode parece.

Mais uma vez, parece muito bom à primeira vista, mas após uma inspeção mais detalhada, claramente não entende como as pessoas andam de bicicleta, como funcionam as faixas de pedestres ou a diferença entre árvores e postes de iluminação.

Gerado com o prompt “corredor central orientado para pedestres com ciclovias, calçadas largas, sombra de árvores e uma variedade de vitrines”.

Achei interessante esta pequena explicação sobre o que o chatGPT está fazendo e como funciona :

se sempre escolhermos a palavra com classificação mais alta, normalmente obteremos uma redação muito “plana”, que nunca parece “mostrar qualquer criatividade” (e às vezes até repete palavra por palavra). Mas se às vezes (ao acaso) escolhermos palavras de classificação inferior, obteremos um ensaio “mais interessante”.

Essencialmente, para tornar a produção do modelo mais criativa, ela precisa ser um pouco menos perfeita. Portanto, a parte complicada é criar as imperfeições. Isso me lembrou esta citação de Neil Gaiman :

Estilo é o que você erra, que faz o que você faz soar como você. Estilo é o que você não pode deixar de fazer. Estilo é o que resta.

No estilo dos Quadrinhos de Jayne

O Runway ML tem um recurso onde você pode treinar seus próprios modelos personalizados por US$ 10, então usei meus quadrinhos como material de treinamento. Carreguei 50 dos meus quadrinhos e apertei um botão para treinar. Após cerca de 30 minutos, estava pronto para ir. Em seguida, digitei um prompt com a palavra-chave personalizada e recuperei as imagens:

Meio que funcionou?

Não é coerente, mas quase faz sentido. E, para ser justo, não acho que esse seja o caso de uso para o qual foi projetado. Parece funcionar melhor para coisas como fotos, objetos, retratos, estilos de pintura digital, etc. Acho que uma “orientação” melhor poderia tornar a saída mais legível.

Mas, de certa forma, é reconfortante saber que não sou completamente substituível por um modelo simples de geração de imagens…. ainda.

Como lembrete, você não pode ser mercantilizado por uma máquina, porque você é um ser físico que respira e tem uma complexidade inimaginável. Você existe em uma circunstância que nunca ocorreu antes, da qual você pode fazer qualquer coisa e está mudando de todas as maneiras - e o mundo também. E você vai morrer, e isso também.

As marcas que você faz durante sua vida estão lá para ajudar os outros antes que isso aconteça. A beleza negligenciada e os horrores indescritíveis da vida sempre precisarão ser descritos por meio da arte, e isso terá de ser feito por pessoas como você. — David OReilly

Notas

  1. Eu ia incluir uma lista de excelentes ferramentas de IA para criadores, mas o Descript já montou uma ótima lista, então dê uma olhada em: A lista definitiva de ferramentas de IA para criadores .
  2. Esta transcrição do Bing chatbot desequilibrado do NYT é incrível e um pouco perturbadora: Bing's AI Chat: 'I Want to Be Alive.