"Crimes de guerre littéraux"

Partie 2 de Arts & IA

Plusieurs personnes m'ont demandé si je partagerais davantage comment j'ai intégré l'IA à mon processus d'illustration existant. La vérité est que je ne suis pas entièrement convaincu que quiconque lit réellement les messages de processus, alors j'ai pensé que je n'y arriverais jamais. J'ai beaucoup d'autres choses que je devrais probablement faire, et pas beaucoup de ressources ces derniers temps.

Mais ensuite, le bon mélange d'irritation mesquine et d'amusement a frappé, et j'ai toujours dit « utilisez ce que vous avez ». J'espère que tu apprécies.

L'art est un acte. Cela a deux sens contradictoires, mais dans ce cas, ils sont unifiés. « Une action, dans le monde, réelle » et « une performance ». Du vrai et une performance, surtout quand on est sous son charme. ( MASQUES )

En raison du spectacle d'incendie de benne à ordures qu'est Twitter en ce moment, je cherchais récemment une nouvelle "maison" en ligne pour me concentrer plus spécifiquement sur parler boutique, partager des travaux en cours, des vignettes et essayer de revenir un peu sur les "réseaux sociaux". vers 2009 ».

A première vue, Mastodon.art semblait correspondre à ce que je recherchais.

Pas 48 heures plus tard, je me suis retrouvé dans une position quelque peu inextricable, à la suite de leurs nouvelles politiques sur l'IA. Comme le mod me l'a demandé, leurs règles exigeraient que presque tout ce que je poste et que je suis susceptible de publier à l'avenir soit mis derrière un avertissement de contenu. Ils ont également mis tout mon compte derrière une interdiction qui l'a retiré de la chronologie publique. Ce n'est tout simplement pas tenable pour un compte que je comptais utiliser pour partager ma démarche et échanger avec d'autres artistes. Cela ne vaut pas mon temps.

Si ce message concernait une politique de modération avec laquelle je suis fondamentalement en désaccord, il serait assez court. J'ai arrosé le compte et l'ai considéré dans le rétroviseur. Je vais peut-être recommencer à utiliser Tumblr ou trouver un autre serveur Mastodon avec de l'espace.

Mais ce n'est pas qu'un sous Mastodon. Il y a un nombre croissant de Cons interdisant catégoriquement l'IA (ou tentant de le faire, en tout cas), et la réponse instinctive semble se répandre dans les quelques endroits où les artistes indépendants ont déjà pour voir leur travail. J'ai vu des affirmations vraiment extrêmes, franchement manifestement absurdes dans cet espace ces derniers temps, comme quelqu'un qui semblait convaincu que quiconque utilise l'IA à des fins d'illustration est "un criminel de guerre littéral".

C'était surtout bon pour rire. Laissez Twitter livrer un tel bijou à ma porte numérique le jour même où je cherchais un endroit pour parler boutique sans être chassé du magasin. C'est pourquoi il est si difficile d'abandonner : c'est comme une nouvelle épave de logique et de sens à observer chaque jour. Merveilleux trucs.

Évidemment, tout le monde n'a pas une perspective aussi idiote, et on comprend pourquoi certaines personnes se sentent menacées en ce moment. Encore une fois, c'est des couteaux sortis, dirigés dans toutes les mauvaises directions. C'est le contexte plus large que j'aimerais aborder, car il y aura toujours de mauvaises prises sur Twitter. C'est apparemment une fonctionnalité, pas un bug.

Confrontation à la réalité : les autres artistes indépendants qui utilisent Photoshop, l'IA et un stylet ne sont pas The Enemy.

J'ai co-illustré des romans graphiques et des bandes dessinées sans outils d'intelligence artificielle pendant de nombreuses années, et je suis maintenant assez vieux pour me souvenir trop bien des nombreuses années où «les artistes de Photoshop ne sont pas de vrais artistes » faisaient fureur. Aussi nouveau que puisse paraître l'utilisation de l'apprentissage automatique pour la génération procédurale, cela semble très familier.

D'une intelligence artificielle à l'autre, "Tout cela s'est déjà produit, tout cela se reproduira." Mais faut-il vraiment recommencer ?

(Le techno-ludditisme que la première guerre avec les Cylons a créé est peut-être un récit plus intéressant pour considérer la réaction du public à la soi-disant IA que la destruction guindée et dévorante de Skynet, même si les motivations des Cylons sont finalement restées tout aussi obscures. Mais je digression).

Si vous faites du mauvais art avec un algorithme d'apprentissage automatique, c'est toujours du mauvais art. Mais ce n'est pas du mauvais art parce que vous avez utilisé cet outil. Vous pouvez faire un tableau avec du sang menstruel, vous pouvez très bien le faire avec des algorithmes et un stylet. Il a probablement toujours été facile de faire du mauvais art et difficile de le faire bien, cela ne change pas non plus – pas plus que le fait que personne ne peut s'entendre sur l'une ou l'autre de ces choses.

Ce dernier morceau est le vrai kicker.

J'ai déjà donné quelques réflexions générales sur l'art procédural et sur la manière dont la soi-disant IA s'intègre parfaitement dans un débat existant et de longue date au sein des arts, ainsi que sur des méthodes éprouvées, même si à d'autres égards, cela sera certainement prouver qu'il change la donne. Je veux essayer d'éviter de me répéter.

Ensuite, il y a l'affirmation selon laquelle ces outils sont une forme de vol qui contourne la loi sur le droit d'auteur. Bien que je ne pense pas que cela soit vrai, la question plus large est de savoir si nous voulons vraiment retenir l'eau pour ce cadre juridique en premier lieu.

Je ne préférerai pas. Le droit de la propriété intellectuelle est déjà construit sur un terrain marécageux, donc je ressens peu de désir d'essayer de le consolider, car il se prononce principalement en faveur des entreprises dans leurs efforts pour extraire de la valeur des travailleurs, plutôt que de protéger les intérêts des artistes individuels - cela être presque certainement la direction d'où vient la véritable « menace ». J'ai publié de nombreux projets sous Creative Commons à un moment donné après leur publication initiale, du moins dans les cas où j'ai conservé les droits de le faire. En ce qui concerne la propriété intellectuelle, cet essai de Linus Torvalds en fait les mêmes points en 2001 que nous pourrions tout aussi bien faire maintenant.

De plus, même si le modèle Diffusion était, comme certains semblent le croire, copier et assembler littéralement un monstre de Frankenstein parmi des milliers d'œuvres d'autres personnes à partir d'une archive géante de "travail volé", ce n'est en fait pas loin du photo-bashing. cela est fait chaque jour par des concepteurs de production et des artistes à travers la planète. Le photo-bashing est généralement la première étape d'un processus de conception, qui se conclut par un travail « original », basé sur des hybridations du passé. Tout cela est une sorte de palimpseste.

Et, bien sûr, ce n'est pas ce que fait l'IA . Il utilise ce qu'il a « appris », il est génératif.

C'est peut-être une critique plus appropriée que ce n'est pas original, si c'était finalement ce qui compte. « L'originalité » est un autre terrier de lapin qui se termine finalement par un cul-de-sac conceptuel, mais qui revient toujours dans les idées populaires sur ce qu'est l'art. Comme je l'ai écrit dans mon livre MASKS sur ce que le processus créatif de Bowie peut nous dire en tant qu'artistes,

Pourquoi tenons-nous tant à être originaux ? Nous nous affirmons dans ce que nous contribuons à la chanson sans fin, ajoutant notre voix pendant un certain temps, puis disparaissant ; notre voix désormais partie intégrante de l'assemblage, à remixer demain. Simon Critchley résume ainsi la méthode artistique de Bowie : « La sale leçon de l'art est l'inauthenticité jusqu'au bout, une série de répétitions et de reconstitutions : des faux qui dépouillent l'illusion de la réalité dans laquelle nous vivons et nous confrontent à la réalité de illusion'.

La véritable originalité serait une forme de folie.

J'ai toujours été un grand fan de la citation "les bons artistes empruntent, les grands artistes volent", que Picasso l'ait prononcée ou non. Après tout, cela correspondrait plutôt à l'intention s'il ne l'avait pas fait.

Tout ce qui existe est une synthèse d'autres éléments, dans des proportions différentes. Rien de ce que nous créons n'est vraiment ex nihilo , ou unique en ce sens, et courir après l'originalité nous entraîne comme un chien qui court après sa queue. Il est souvent noté que les artistes imitent généralement avant de développer leur propre style ou leur propre voix. Ces choses se développent en relation avec et dans le contexte de ce qui a été imité auparavant. Ce serait une erreur de les considérer comme s'opposant l'une à l'autre, ou de considérer l'une comme authentique et l'autre non.

Notre désir de générer du nouveau à partir de l'ancien ne va nulle part. C'est encore un autre changement d'état massif qui simultanément n'a rien changé. C'est au-delà du domaine des arts, à mesure que la technologie de l'IA mûrit entre les mains des gouvernements et des entreprises, que les risques réels de cette technologie se révéleront probablement.

Pour exprimer directement mon point de vue, "Utiliser l'IA" n'est pas un critère assez clair pour restreindre une communauté artistique ou une convention. L'utiliser pour quoi , et comment ?

Si nous devions être honnêtes à ce sujet, nous "utilisons déjà l'IA" plus que nous ne le pensons, et dans quelques années, à moins d'un effondrement mondial sans précédent, vous aurez du mal à trouver quelqu'un qui ne l'utilise pas. dans un espace numérique. Est-ce que quelqu'un pense sérieusement qu'une règle "Pas d'IA" est peut-être sensée ou applicable à long terme ?

En attendant, je m'attends à voir d'un jour à l'autre des artistes traditionnels appelés à "utiliser l'IA". La soi-disant réalité et la simulation ont une drôle de façon de s'opposer, et même parfois, d'échanger leurs places.

Baudrillard a écrit Simulacra et Simulation dans les années 80. Cela s'est déjà produit depuis longtemps, en ce qui concerne le contre-changement du réel et de la simulation. Si vous voulez faire reculer cette marée, il est déjà trop tard. Peut-être que certaines des réponses instinctives que nous avons vues jusqu'à présent ne sont que des exemples de chocs futurs.

J'ai la forte impression que les critiques les plus virulents de cette technologie elle-même ont passé peu de temps à travailler avec elle. Il leur incomberait peut-être d'en savoir un peu plus sur la façon dont certains artistes utilisent cette technologie, commettant nos «crimes de guerre littéraux».

Pour cet exemple, j'utiliserai une idée que je lance pour une bande dessinée Fallen Cycle , Quicknife (le titre provisoire), vaguement basée sur un personnage D&D avec lequel j'ai joué. C'est une idée parfaitement loufoque, j'en suis sûr, sans délai particulier, mais tant que c'est excitant, je continuerai à y piquer.

Je partagerai les étapes que j'ai utilisées pour créer une feuille de conception de personnage v1 finie pour le personnage titulaire.

La première étape de presque tous les projets que j'entreprends est une opportunité de dévorer autant de médias et d'informations que je peux qui sont déjà là et qui semblent chevaucher le "Idea Web" du projet.

C'est vrai pour moi, que je travaille sur un album, un livre de non-fiction ou une bande dessinée, bien que ce à quoi cela ressemblera diffère d'un projet à l'autre.

Bien que la méthode puisse différer selon le ou les médiums avec lesquels j'ai l'intention de travailler et le contexte général, je l'ai toujours fait à travers des recherches, des moodboards, des collages ou du bricolage complet, des listes d'autres sources de médias qui inspirent ou soutiennent le illustration "problème" que je cherche à résoudre, et bien sûr rêver dans des carnets de croquis.

Midjourney s'est révélé être un outil très utile pour la visualisation précoce, avec les autres méthodes. Le principal risque pour quelqu'un comme moi est que cela peut vous aider à générer tant d'idées et de directions différentes que cela peut conduire à la paralysie plutôt qu'à la facilitation. Pour réduire cela au minimum, à ce stade, j'ai trouvé qu'il valait mieux ne pas trop s'attacher à quoi que ce soit. Poursuivez les tangentes, mais ne vous engagez pas encore trop sur l'une d'entre elles.

J'avais un professeur d'art à l'université qui a passé plusieurs années de sa vie à se concentrer sur sa version des peintures de sable tibétaines - une construction complexe qui était toujours détruite à la fin. L'un des enseignements qu'il m'a transmis est que, dans un sens procédural, votre fonction d'artiste n'est pas dans les techniques que vous développez, ce ne sont que des moyens pour atteindre une fin. L'élément fondamental est les choix que vous faites. Cette direction, et pas celle-là, cette couleur, et pas celle-là.

La fonction itérative de programmes comme MJ semble fonctionner sur ce concept - les choix que vous faites sont une main directrice plus forte que vous ne le pensez. La randomisation et l'itération sont une combinaison puissante dans le bon contexte, comme n'importe quel généticien peut vous le dire.

Je ne dis pas que je n'ai pas établi de lien avec les projets créatifs avec lesquels j'ai vécu et travaillé pendant des années, bien que tout le reste mis à part, c'est un point d'hygiène créative de s'efforcer d'être un peu moins précieux à ce sujet. Notre attachement à un résultat préconçu et spécifique peut être une limitation des choix que nous envisageons de faire dans le présent.

En d'autres termes, dans les premières étapes, permettez la possibilité de l'inattendu.

J'ai conçu le premier numéro avec un ensemble relativement simple et une liste de personnages à l'esprit. J'imagine que trois personnages majeurs apparaîtront dans le premier numéro : le Karlu-chatil ou "gobelin" nommé Quicknife, son compagnon humain Talin et le chef d'une organisation obscure qui ne sera pas entièrement exploré dans le premier numéro que j'ai décrit, bien qu'il apparaîtra probablement brièvement dans la scène finale de l'événement.

(Pour ceux qui ont soutenu mon kickstarter Tales From When I Had A Face l'année dernière et lu l'édition limitée, j'ai l'intention de mettre en scène cette bande dessinée principalement à Alterran, à l'époque des révolutions "Silverhand" à Chernaya. L'identité de ce "chef d'une organisation obscure" ne devrait pas être difficile à deviner.)

J'ai passé plusieurs années sur cette première étape seul pour Tales , donc je me sentais assez à l'aise de sauter directement dans la vignette avec Midjourney. Mes premières expériences d'itération à l'aide d'invites de texte pur étaient intéressantes, mais avaient tendance à virer soit trop elfiques, soit trop gobelins. En tant que personnage, il est en partie une synthèse d'Arya Stark, Gollum et Ed de Cowboy Bebop. Tous ont fini par prendre en compte la création de sa ressemblance également.

…Etc…

J'ai l'intention que Quicknife ait une apparence quelque peu mercurielle, à la fois littéralement, et dans le sens où il peut aussi parfois apparaître un peu féerique et même mignon, et à d'autres moments, comme un gobelin qui sort du placard d'un enfant la nuit. Mais je veux qu'il soit reconnaissable comme le même personnage.

Pour aider à diriger l'algo dans la bonne direction, j'ai fait plusieurs croquis au crayon à la main pour lui donner la forme de son visage, et finalement fixé sur un à inclure dans les invites que j'avais décidées pour lui par essais et erreurs, y compris un certain nombre de balises de description de style et de caractère. ("Manic androgyne Fey goblin :: rogue, warlock, street gamin, Arya Stark, Gollum, Ed from Cowboy Bebop :: in the style of…" et ainsi de suite).

Alors maintenant, j'avais une série de vignettes itératives basées sur mes croquis qui allaient dans la bonne direction. Après avoir hybridé tous ces éléments - croquis au crayon, photographie / source de référence, guides d'invite de texte modifiés tout au long du processus d'itération à l'aide de la fonction Remix - j'ai fait un rapide croquis de «peinture» avec le stylet à utiliser comme guide pour les invites d'image suivantes.

À partir de là, j'ai généré une nouvelle série de vignettes, j'ai senti que j'en avais assez pour faire une première peinture conceptuelle. J'avais l'impression qu'il manquait encore quelque chose.

Notre chat Talin, dont la cattitude extrême est aussi l'une des nombreuses inspirations du personnage, m'a donné la pièce finale. J'ai pris quelques photos de lui en train d'être lui-même - un monstre total, en d'autres termes - et j'ai lancé quelques invites qui intégraient ces rendus hybrides à son image.

(Ce serait un spoiler de dire pourquoi le chat porte le nom de l'ami de Quicknife).

Sans faire ressembler Quicknife à un chat, j'ai pu apporter une partie de son comportement et en particulier de ses yeux grâce à l'incitation multi-images.

Après une session de 8 heures avec le stylet dans Photoshop :

Maintenant, nous avions quelque chose qui ressemble plus à notre petit anti-héros sournois et légèrement maniaque, bien que ce soit lui un peu plus loin dans la chronologie. (Longtemps après qu'il soit devenu un initié de Sendiir, alias "la société de minuit", et après qu'il ait fait germer des cornes).

L'étape suivante consistait à élaborer une feuille de conception montrant Quicknife tel qu'il apparaîtrait dans ce premier numéro, alors qu'il était encore un gamin des rues, un porte-monnaie et un vaurien polyvalent. J'ai commencé avec un gros plan de tête recadrée de cette peinture comme invite d'image, ainsi que de nouveaux croquis au crayon rapides et désordonnés pour dire à Midjourney quelle perspective et quelle expression utiliser.

Cela a conduit à la génération de plusieurs séries complètes d'images qui se rapprochaient beaucoup plus de ma vision de Quicknife dans ce premier opus.

La dernière étape consistait à prendre du recul, à choisir quelques favoris, à parcourir toutes les vignettes et croquis, et à photographier une feuille avec plusieurs images de Quicknife dans une gamme de styles et d'ambiances pertinents. J'ai fait un peu de peinture et de croquis pendant le processus de montage, mais l'accent initial était mis sur le placement et sur les cent et une décisions que vous devez prendre dans le processus de construction d'une image composite.

Une fois la mise en page du composite plus ou moins terminée, avec quelques passes et corrections rapides d'illustrations à la main, j'ai suivi mon processus normal, qui consiste à régler le composite sur une opacité d'environ 50 % au-dessus d'un ton de base et/ou d'un dégradé une fois J'en suis relativement content, et puis je fais beaucoup de dessin à la main avec le stylet + cintiq.

Normalement, cette étape peut durer de quelques heures à plus de trente heures pour quelque chose comme une peinture de couverture. Parce qu'une feuille de conception est principalement destinée à ma propre référence future, je n'ai passé que quelques heures sur celle-ci et je n'ai pas pris la peine de régler chaque détail. Mon objectif était de capturer le personnage dans quelques poses, styles et expressions différents.

Je serai honnête. J'ai envisagé d'essayer de partager un processus plus étape par étape ici, mais je me suis rapidement rappelé pourquoi ce serait une course idiote. Bien que mon processus global soit devenu assez cohérent, l'illustration elle-même est souvent une série de trous de mémoire hyperfocus TDAH. Chaque fois que je commence une nouvelle image avec l'intention de mieux étiqueter les choses, et à chaque fois, c'est soudainement 8 heures plus tard et l'image a parcouru un long chemin, mais l'organisation des couches est un cauchemar absolu.

Alors ça va.

Je suis un peu meilleur dans les bandes dessinées, parce que vous devez en quelque sorte l'être, bien que le travail de bande dessinée exige généralement que je passe une session à plusieurs moments du processus sur une page axée sur la dénomination et l'organisation des calques autant que possible, sans visser remonter la hiérarchie de la fusion des calques, car l'ordre est important pour cela. (Par exemple, une couche de multiplication au-dessus d'une couche de lumière d'épingle peut fonctionner différemment de l'inverse).

Maintenant que j'ai quelque chose dont je suis le plus satisfait, je vais l'apporter dans Lightroom pour le publier. Et alto, assez pour commencer.

J'ai été tellement inspiré par le processus de feuille de conception que j'ai fini par me lancer dans la maquette d'une page de la bande dessinée, avant d'avoir écrit un script approprié. Ce n'est pas mon MO normal, mais parfois il faut marteler quand le fer est chaud. Que ce soit dans une version finale sous une forme ou une autre, tout le monde peut le deviner. Au moins, c'est une autre référence pour plus tard.

Être une caisse de résonance et un générateur de vignettes pour les feuilles de conception de personnages n'est que la pointe de l'iceberg, en ce qui concerne cette technologie. Jouez avec, avec l'idée que c'est le début d'un processus, plutôt qu'une fin en soi.

Une note sur la nomenclature : je suis très mécontent de "l'IA" utilisé dans ce contexte, cependant, "MLA" ou algorithme d'apprentissage automatique fait inévitablement penser aux gens que je parle des guides de style de la Modern Language Association, et quand j'ai utilisé Ai, certaines personnes ont pensé Je parlais d'Adobe Illustrator, donc je suppose que je suis coincé avec ça.

Comprenez simplement quand je dis IA, qu'elle n'est pas réellement "intelligente" dans le sens où la plupart utiliseraient ce mot, et ce n'est pas un "ça" dans le sens où c'est comme quelque chose d' être un algorithme d'apprentissage automatique. En outre, il existe également un certain nombre d'approches et d'applications différentes de/pour l'IA, et les confondre ensemble n'est guère fait au service de la clarté. Mais vous savez, peu importe, c'est fiiine.