Imaginaire augmenté

Mar 27 2023
Finis les collectionneurs de ponts à péage sur le Golden Gate Bridge. Finis les caissiers de votre épicerie préférée.
Buckhouse s'exprimant lors de la conférence Sequoia AI Ascend

Finis les collectionneurs de ponts à péage sur le Golden Gate Bridge. Finis les caissiers de votre épicerie préférée. Mais qu'en est-il de nous les artistes ? Écrivains? Et les penseurs de tous bords ? Sommes-nous sur le point de partir aussi ?

L'IA ne signifiera pas la mort d'artistes, d'intellectuels ou de qui que ce soit d'autre. Au lieu de cela, cela signifiera notre renaissance, mais seulement si nous le faisons ainsi. Voici comment : nous devons cesser de considérer l'IA comme une Intelligence Artificielle, et plutôt la considérer comme une Imagination Augmentée.

Si nous augmentons notre imagination avec l'IA - même si notre imagination était puissante au départ - nous créerons ce dont la culture a besoin mais qu'elle n'a pas encore vu. L'IA donnera aux artistes et aux designers plus de pouvoir et de capacité que jamais auparavant.

Alors que nous augmentons notre imagination avec l'IA - les artistes, écrivains, designers et cinéastes (traditionnels et nouveaux) auront de nouvelles façons de créer leur meilleur travail et de remixer à travers le plan adjacent possible pour nous montrer ce dont nous avons besoin maintenant (mais ont pas encore vu).

J'ai commencé à faire des films pour des franchises cinématographiques qui sont devenues des noms familiers : Shrek, Madagascar, Matrix, et plus encore. J'ai une formation de peintre traditionnel et j'ai eu des expositions dans des galeries et des musées dans le monde entier. Je dirige un laboratoire de conception. J'ai conçu des produits sur votre téléphone en ce moment. J'ai écrit des blagues que vous avez entendues. Je suis designer, écrivain et artiste. Ne me croyez pas sur parole… voici ce que ChatGTP-4 a dit en réponse à Who is Artist, James Buckhouse … vous savez tellement que cela doit être vrai…

J'ai toujours un pied à Hollywood, travaillant avec des scénaristes et des réalisateurs alors qu'ils réfléchissent à des arcs d'histoire et au développement de personnages pour essayer de créer des histoires qui nous émeuvent, qui nous transforment. J'écris en tant que personne qui se soucie profondément de la création d'un nouvel art et qui espère que la technologie enrichira, et non opprimera l'humanité, et en tant que personne qui se soucie profondément des personnes derrière l'art et les histoires que nous aimons tous.

Et en ce moment, je suis extrêmement plein d'espoir, excité et optimiste.

Pourquoi maintenant?

Ce matin — aujourd'hui, aujourd'hui même ! - est le plus grand moment d'être en vie dans l'histoire de la planète Terre. Oui, il y a toujours la guerre, oui, il y a toujours la maladie — la tragédie abonde. La douleur personnelle persiste… Les gouvernements luttent, les gens restent opprimés… des atrocités horribles existent… et pourtant…

Et encore.

Et pourtant, il n'y a jamais eu de moment où nous étions plus parfaitement placés pour répondre à notre vocation d'embrasser les problèmes difficiles de l'existence et de les résoudre - et de bien les résoudre - qu'aujourd'hui.

Pensez à l'innovation de l'année écoulée. Le mois passé. La semaine dernière. Dans les dernières 48 heures. Ce matin est le meilleur matin pour se réveiller vivant qui soit jamais arrivé. Celui qui a le plus d'opportunités. Mais pourquoi? Pourquoi maintenant? Pourquoi pas une autre fois au cours des derniers 100 000 ou millions d'années ?

Notre première adaptation

Aujourd'hui est merveilleux parce que les humains ont une adaptation qui nous aide et nous a amenés à ce moment. Nous ne sommes pas les plus forts. Le plus féroce. Le plus rapide. Ou le mieux blindé.

Il nous manque les dents du tigre. Les serres du rapace, la carapace dure de la tortue. Nous ne sommes même pas le primate le plus fort. Nous sommes essentiellement des sacs d'eau et de viande. Personne ne craint nos griffes ou nos dents. Et pourtant nous avons une chose. Une chose que les autres ne font pas. Nous avons une capacité spéciale. Et avec cela, nous pouvons échapper au terrible destin d'une vie de progrès linéaires dans notre apprentissage - cette terrible lutte où vous devez apprendre la plupart du temps par vous-même et résoudre chaque problème à nouveau.

Les humains le font différemment, nous pouvons à la fois écouter et parler - nous pouvons à la fois entendre parler des expériences des autres et partager les nôtres afin que nous n'apprenions pas seulement ce que nous avons découvert nous-mêmes, mais nous pouvons aussi apprendre ce que chaque être humain vivant devant nous a compris comment faire passer notre courbe de connaissances de la croissance linéaire à l'arc exponentiel de la compréhension cumulative totale - et puis... et ensuite... Nous pouvons utiliser ce que nous avons appris en essayant d'ajouter notre propre chapitre à la grand livre de vie.

L'explosion de potentiel qui s'est produite ce matin est la plus grande qui ait jamais eu lieu. Et demain, étonnamment, ce sera encore plus grand.

Et pourtant, ce que nous faisons, aujourd'hui et chaque jour, est plus qu'un simple apprentissage. Nous apprenons tous les deux des autres et nous enseignons ce que nous avons appris. Il s'avère que notre adaptation n'est pas simplement l'apprentissage - de nombreux animaux le font - c'est la combinaison de l'apprentissage, de l'enseignement et du remix qui nous rend spéciaux. Et en tant qu'êtres humains, nous avons un processus merveilleux, portable, mémorable et étendu pour cette combinaison rare. Ça s'appelle une histoire. L'histoire est un cadre à travers lequel nous apprenons, enseignons et remixons.

L'histoire est notre adaptation principale. Story est notre méthode compacte et encapsulée de diffusion et de création de connaissances. L'histoire est la façon dont nous infléchissons l'arc du progrès de l'humanité. C'est à travers l'histoire que nous bifurquons mutuellement et accélérons le potentiel humain.

L'histoire est le processus qui nous a maintenus en vie et nous fait prospérer. Et c'est aussi à la base de l'IA. Nous écoutons et nous apprenons et nous partageons ce que nous savons et nous remixons pour élargir le plan du possible adjacent avec chaque nouvel élément ajouté au trésor de la connaissance humaine.

L'IA le fait aussi - et le fait à une échelle qui tient enfin la promesse d'utiliser toutes les connaissances humaines antérieures. Les possibilités émergentes sont potentiellement stupéfiantes.

Mais revenons à l'IA générative pour l'art et le design pendant une seconde… et un bref voyage dans l'histoire de l'art… et comme pour toute l'histoire de l'art, pour vraiment en parler, nous devons aussi parler d'argent.

L'art engendre l'art

Autrefois, en tant qu'artistes, nous voyions des œuvres que nous aimions et cela influençait la façon dont nous créions les nôtres. Un exemple célèbre de 1511 est venu d'un moment où Raphaël et Michel-Ange travaillaient tous les deux à la rénovation du Vatican. Mike faisait le plafond de la chapelle Sixtine et Raf travaillait sur les appartements papaux à environ 950 pieds dans le couloir. Pendant la journée, ils se croisaient dans les couloirs comme des gangs rivaux de cool-kids au lycée se moquant les uns des autres - Mike était trop débraillé; Raf, trop axé sur la mode - et se moque du travail de l'autre. Mais la nuit, ils admiraient secrètement la production de l'autre. Une nuit, Raphaël s'est faufilé dans la chapelle Sixtine et a jeté un coup d'œil sous le rideau et a vu les magnifiques figures de Michel-Ange. Éberlué, il a sprinté et a fait deux choses :L'École d'Athènes , comme une célébration de l'œuvre spectaculaire de son ennemi. Incorporer les influences d'un autre artiste signifiait faire le travail pour intégrer son style dans le vôtre et faire face à l'examen, à la reconnaissance et à la discussion du public lorsque vous l'avez fait.

Aujourd'hui, 512 ans plus tard, nous vivons notre propre renaissance de l'art. Les nouvelles possibilités ouvrent l'esprit comme la première aube du printemps. Et pourtant, cela s'accompagne de questions difficiles de propriété, de crédit et de paiement. Les outils d'IA générative sont formés sur des informations visuelles, et chaque image vient de quelque part, donc si nous creusons assez profondément, il y a un ADN d'influence compliqué, mais réel, pour chaque travail généré. Dans cette optique, serait-il possible de trouver un moyen de rémunérer les artistes dont le travail a contribué à la formation du modèle ? Cela semble difficile et difficile, mais mérite probablement une enquête.

YouTube a résolu un ensemble de problèmes tout aussi délicats, apparemment insolubles, concernant les personnes qui téléchargent des informations protégées par le droit d'auteur sur la plate-forme. Ils ont trouvé une nouvelle voie à suivre et, par conséquent, l'économie des créateurs a prospéré (et les titulaires de droits d'auteur ont été payés). Voici une conférence TED sur la façon dont YouTube l'a abordé. Leur réponse n'est pas parfaite dans tous les cas et ne s'applique pas vraiment à l'IA, mais elle était ingénieuse pour le problème qu'elle résolvait. Pourrait-on développer quelque chose d'unique, mais tout aussi ingénieux pour l'IA générative ?

Mais qu'en est-il du travail maintenant ?

Alors que les questions de propriété et de paiement sont étudiées et explorées par les tribunaux , il existe actuellement deux approches générales que les gens peuvent utiliser pour tenter de résoudre les problèmes de propriété des modèles : la première consiste à utiliser des modèles étroits, privés ou semi-privés. des modèles entraînés sur votre propre travail ; la seconde consiste à utiliser l'art sous licence ou du domaine public pour former un modèle.

Par exemple, Adobe déclare qu'il n'a utilisé que des sources sous licence et du domaine public dans la formation de son Firefly AI . De plus, pour citer l' article de Fast Company sur le lancement du produit, "Adobe dit qu'il travaille sur les moyens de payer les créateurs dont les images sont exploitées par Firefly, y compris les contributeurs à Adobe Stock."

Une autre option consiste pour les artistes à se retirer, au moins de certains ensembles de données. Je respecte beaucoup ce choix, mais cela m'a également amené à me demander, est-ce que la meilleure décision est de ne pas participer ? Pour certains, ça pourrait l'être.

Peut-il y avoir un moyen pour l'IA de fonctionner qui soit équitable pour les artistes, nous propulse vers l'avant et ouvre la magie de cette technologie pour élargir davantage le plan du possible adjacent ?

Influence immortelle

Être artiste est à la fois une quête d'excellence tout au long de la vie et une chance d'influencer l'évolution de la culture à travers votre pratique… et faire en sorte que votre travail soit tissé dans l'ADN de la culture est à peu près aussi proche que possible de l'immortalité.

Jean-Luc Godard, l'un des chefs de file de la Nouvelle Vague de cinéastes français, avait une phrase dans son chef-d'œuvre, A bout de souffle, qui illustre cette idée : dans la scène, Patricia (Jean Seberg), interviewe un auteur (joué par Jean -Pierre Melville) et demande « quelle est votre grande ambition ? et l'auteur répond "devenir immortel, puis de mourir". Quand j'ai entendu cette ligne pour la première fois, je l'ai adorée. Cela ressemblait à une contradiction volontaire - comment pouvez-vous être immortel et aussi mourir ? Mais alors que la glace fond dans votre propre esprit, vous réalisez que c'est un appel à créer un art exceptionnel. Art transcendantal. L'art qui survit bien au-delà de votre propre vie. Un art qui influence la culture et l'humanité depuis des générations. L'art est la voie vers ce type d'influence quasi immortelle.

Extrait de À bout de souffle de Godard

De cette façon, l'IA générative pourrait fournir une porte dérobée à l'immortalité. Dans cette optique, être inclus dans le modèle d'IA générative passe d'une sensation d'escroquerie à un honneur, car c'est un moyen d'avoir votre influence bien au-delà de votre travail initial. Lorsque votre propre art devient une partie du génome culturel, vous vous êtes assuré une place hors de votre portée, mais seulement si vous pouvez encore manger. J'ai bon espoir qu'une solution juste et merveilleuse finira par être trouvée, peut-être par l'une des approches actuelles, ou peut-être par quelque chose de nouveau.

En attendant, les studios professionnels envisagent de plus en plus d'utiliser l'art et les actifs qu'ils possèdent déjà (ou ont payé des artistes pour créer) pour former ou régler leurs modèles. Cette idée est apparue lors du récent festival AI Film à New York.

Écoutez un panel (Paul Trillo, Souki Mehdaoui, Cleo Abram et Darren Aronofsky) discuter de l'utilisation de l'IA dans le cinéma .

Récemment, j'ai testé cette approche "plus privée": j'ai formé une IA sur mes propres peintures , puis je lui ai demandé d'en créer quelques autres pour moi dans mon propre style. Les résultats sont à la fois familiers et étranges. Certains d'entre eux ressemblent beaucoup à mon style et à ma touche. D'autres, enfin, moins. Et pourtant, quel étrange et merveilleux miroir que de me voir restitué à moi sous la forme de mon propre vocabulaire. Le familier rendu étrange. Le même que l'autre. J'ai adoré le faire. Je ne me suis pas sentie volée, je me suis sentie merveilleusement bien.

C'était aussi puissant.

Échelle d'ambition

Grâce à l'IA générative, les artistes pouvaient passer de la création d'une seule œuvre à la fois à la possibilité de créer tout un univers de livres, de peintures, de films, de vidéos, de jeux, etc., tous basés sur leurs idées et leur point de vue. Lorsque je travaillais sur Shrek, nous avions 400 personnes travaillant 11 à 14 heures par jour pendant 1 à 4 ans (selon le département dans lequel vous étiez). C'était une quantité de travail abrutissante. Nous sommes devenus plus rapides au moment où Shrek 3 a roulé, mais seulement un peu. Cela a quand même pris 18 mois même sur le projet le plus rapide.

Aujourd'hui, avec l'IA générative, nous pouvons commencer à imaginer pouvoir faire un film entier avec seulement quelques collaborateurs de confiance (ou même seuls ?) et le faire en quelques jours ou semaines, pas en années. L'IA générative tient la promesse de transformer les artistes solo en studios. Un jour, peut-être, les histoires que nous regardons se dérouleront devant nous : se déroulant en temps réel sur la base des conseils et de la direction que nous chuchotons à l'oreille du modèle au fur et à mesure qu'il génère.

Les outils d'IA générative vont changer la façon dont nous créons des films, des émissions de télévision, des jeux, des œuvres d'art et plus encore. Tout comme la camera obscura, la caméra argentique et la peinture numérique ont changé la création d'images... tout comme l'animation 3D et les effets numériques ont changé la façon dont les films sont créés... tout comme l'ordinateur portable a changé notre façon d'écrire et le synthétiseur, le séquenceur et l'échantillonneur ont changé comment nous composons… tout comme tout cela, l'IA générative changera notre façon de créer.

L'IA changera l'art, mais elle ne tuera pas l'art , car l'art ne peut pas être tué. L'art est aussi éternel que l'espoir. L'art n'est pas une technique ou un outil, mais un besoin urgent de chercher du sens dans un moment en constante évolution. L'art est le maintenant . Et comme le MAINTENANT ne cesse de s'étendre mais ne cesse de reculer, l'art ne peut pas mourir, même si les machines deviennent les miroirs qui reflètent notre nouveau maintenant d'une manière qui devient parfois inconfortable.

L'IA nous changera, mais elle nous apprendra aussi ce que nous savons déjà. Cela nous rappellera quelle est réellement la source de l'art. Cela nous fera plonger dans l'abîme de nos propres idées essentielles sur ce qui compte. La vérité inconfortable est que l'art est et a toujours été une idée - la perspicacité - l'emphase - le λόγος - et pas simplement l'exécution de cette idée, même si (paradoxalement) nous ne faisons l'expérience de l'art qu'à travers son exécution. Le problème est (et a toujours été) que nous avons besoin des deux. Il y avait même un terme pour cela à la Renaissance. Il s'appelait Ars et Invenio. Ars était le métier. Invenio l'innovation. Vous avez besoin à la fois d'une excellente idée et d'une excellente exécution. Une exécution faible, banale ou médiocre rendra une grande idée inerte. Et une mauvaise idée avec une bonne exécution est toujours mauvaise. Nous avons tous vu un mauvais film bien fait. Vous devez avoir les deux. Toujours. Même les exceptions à cette règle en sont secrètement des instanciations.

Où l'IA nous emmènera-t-elle ?

Il y a dix ans, il aurait été ridicule d'imaginer que les concepteurs collaboreraient sur les mêmes conceptions aux mêmes moments avec une collaboration sans règles, tout le monde dans le même document, en même temps. Mais Figma a changé tout cela, et maintenant nous ne pouvons pas imaginer concevoir autrement. La collaboration nous rend tous bien meilleurs, car grâce à elle, nous pouvons échapper à l'acquisition de connaissances linéaires d'une vie d'acquisition de compétences par un seul être humain. Au lieu de cela, nous grandissons et apprenons à la vitesse de chacun, pas seulement la nôtre. Le changement qui nous attend avec l'IA générative est encore plus important.

L'IA générative a la chance de transformer tout le monde en créateur d'images et chaque artiste professionnel en studio. Il a une chance pour nous tous d'apprendre à la vitesse des idées de chacun pour arriver à la vérité de la condition humaine d'une manière qui n'a pas encore été vue ou expérimentée. Cela nous donne une chance de chasser notre curiosité jusqu'à la révélation et de saisir la grandeur sur le chemin de la semi-immortalité culturelle. C'est une chance de nous insérer dans l'ADN culturel mondial tout en bénéficiant et en contribuant aux forces des efforts de chacun. C'est une chance de transformer à nouveau le monde à travers un nouveau type d' ars et d'inventio . C'est une chance de faire la différence.