Arles 17-21 mars 2025

Tags: Intelligence artificielle Art ENSP Lionel bayol-Thémines Oualid Lazrak Recherche Création Écologie Éthique

Workshop "Art & IA" (ESADHaR site de Rouen)

Organisé à l'École supérieure d'art et design Le Havre-Rouen (ESADHaR) sur le site de Rouen.

À propos du doc

Ce document contributif documente le Workshop de recherche "Art & IA" initié par l'École supérieure d'art et design Le Havre-Rouen (ESADHaR) (site de Rouen) avec l'École nationale supérieure de la photographie d'Arles (Yannick Vernet et Oualid Lazrak) dans le cadre de son post Master sur l'Intelligence artificielle.

1 - Le groupe de chercheurs.euses

• Oualid Lazrak (artiste, ENSP Arles ),
• Lionel Bayol-Thémines (artiste, enseignant à l'ESADHAR),
• Yannick Vernet (resp des projets numériques et du laboratoire de recherche La Cellule),
• Juan Millois (étudiant à l'ESAD Orléans)
• Lucas Millois (étudiant à l'ESAD Orléans)
• Oscar Dujarrier (étudiant en 4ème année à l'ESADHaR),
• Hyunseok YOON (étudiant en 4ème année à l'ESADHaR),
• Tom lacointre (étudiant en 4ème année à l'ESADHaR),
• Axelle Chamaille (étudiante en 3ème année à l'ESADHaR),
• Thimothée Presles (étudiant en 1ère année à l'ESADHaR),
• Eliot Buard-Roig (étudiant en 1ère année à l'ESADHaR),
• Amandine Zajakala (étudiante en 1ère année à l'ESADHaR),
• Kalden Pichou (étudiant en 1ère année à l'ESADHaR),
• Jules Chanut (étudiant en 4ème année à l'ESADHaR),
• Melvil Tomassin (étudiant en 1ère année à l'ESADHaR),
• Amelie Martel (étudiant en 1ère année à l'ESADHaR),
• Manon Chanu (étudiante en 2ème année à l'ESADHaR),
• zhihan wang (étudiante en 1ère année à l'ESADHaR site Le Havre),

3 - Déroulé du Workshop

Pendant une semaine, du 17 au 21 mars 2025, des artistes et étudiant.e.s en art se sont emparé de l'Intelligence artificielle pour en explorer les effets sur l’image. Elles et ils ont tenté d’en capter les effets déjà tangibles sur l'image en explorant les arcanes de cette "intelligence" algorithmiques.

Ce workshop fait suite au colloque "Intelligence artificielle et images. Enjeux esthétiques, éthiques et technologiques" organisé le 5 novembre 2024 à Arles et au workshop inter-écoles "Art & I.A" organisé à l'École supérieure d'art et de design d'Orléans du 20 au 24 janvier 2025

3.1 - Lundi 17 mars

Objectifs de la journée : présentation générale du workshop ; présentation de chacun.e et chacun des participant.e.s.

- Présentation du workshop

Objectifs : bien expliquer aux participant.e.s que pour ce workshop rien n'est défini au départ. Nous partons d'un simple thème "l'intelligence artificielle" et nous réfléchissons, en tant qu'artistes, chercheurs, etc aux différentes problématiques qu'il fait naître.

- Discussions sur l'imaginaire collectif de l'IA

Objectifs : demander à chacun.e d'expliquer en deux mots son travail artistique, de préciser ce qui l'intéresse dans l'intelligence artificielle et d'expliciter ce sur quoi il ou elle aimerait travailler dans le cadre de ce workshop.

Une série de questions est posée à chacun.e pour cerner un peu mieux :

Qui est cet.te étudiant.e ?

• Peux-tu te présenter en quelques mots (parcours, pratiques artistiques, centres d’intérêt) ?
• Quel est ton rapport aux technologies dans ton travail artistique ou dans ta vie quotidienne ?
• As-tu déjà utilisé des outils liés à l’IA ? Si oui, lesquels et dans quel contexte ?

Son regard sur l’IA ?

• Que t’inspire l’intelligence artificielle aujourd’hui, personnellement ou artistiquement ?
• Quels enjeux liés à l’IA t’interpellent le plus (ex : créativité, surveillance, écologie, automatisation, biais sociaux, etc.) ?
• As-tu des craintes ou des espoirs particuliers vis-à-vis de l’IA ?

Ses attentes vis-à-vis du workshop

• Qu’attends-tu de ce workshop ? (acquérir des compétences techniques, nourrir un projet personnel, questionner l’IA d’un point de vue critique, etc.)
• Préfères-tu travailler de manière expérimentale, théorique ou orientée production concrète ?
• Quel type de production t’intéresse ici (installation, image, son, performance, écriture spéculative, autre) ?

Les imaginaires et problématiques dans lesquels il ou elle s'inscrit

• Si tu devais formuler une question ou une problématique personnelle sur l’IA (même très ouverte ou floue), ce serait quoi ?
• Est-ce qu’il y a un mot-clé, un thème ou une situation qui te vient spontanément en pensant au lien entre art et IA ?

Les réponses des étudiant.e.s

Thimothée
audiovisuel à Paris
Découvrir autres médiums (allier à la matière pas que seulement au digital)
S'interesse à la vidéo, la photo
linogravure et sérigraphie explorées ici à Rouen
S'interesse aux engrenages au sens propre comme au sens figuré (société ; animation ; etc)
Approche sociétale et politique.
Audio + mécanisme qui fonctionne
SF ;
I.A incroyable et horrible (data worker)

Jules
I.A chatgpt Krayon stable diffusion
S’intéresse mais pas envie de travailler avec les I.A
vient du design (objet textile)
Peinture sculpture dessin et à présent installation, et métal.

Sculptures métalliques dans marais et activées la nuit (capteur gps pour tracer)
Biomécanique et évolution avec le temps
Le but est de placer un objet et de les voir évoluer dans le milieu
idée du Biomécanique
IA comme unité (calcul rapide ; outil ; pas peur ; )

Zhihan
1 ère année au Havre
Je veux utiliser IA et peinture
Travaille surtout en photo aujourd'hui
IA est une encyclopédie

Les Babo (Oscar Dujarrier, Hyunseok YOON, Tom lacointre)
IA Connaissent le fonctionnement techniques
Expérimenté quelques programmes (avec IA)
La place des techno en général et IA dans environnement humain (et non humain) et les ressources.
Ds le workshop = Système capteur turbidité (eau claire ou non ; particules) travail dans parc régional dans eau)
transformer data en génération images
data des capteurs et autres infos d'autre part qui viennent modifier les data
Souhaite créer chatbot qui parlent entre eux (en mettant en avant la personnalité des chatbot).

Lukas
travail photographique (mais avant dessin)
Assisté par machine.
Avec IA il y a une assistance machine favorable.
Comment l'IA Craiyon ; Midjourney ; Dall-e ; logiciel vidéo ; minimax ; face Swap IA ;
En tant qu'artiste aime dépasser le classique (le portrait fait différemment par exemple).
IA machine à penser comme nous et qui pourrait nous dépasser (dépasser notre imagination)
Continuer sur les deepfake (archéologie des médias : questionner technique).

Juan
fait des jeux vidéo lui-même.
Dessin, peinture, etc
Fait de l'animation
Onirisme ; surréalisme ; Gustave Doré ;
Attenter expérimenter.
N'utilise pas d'IA dans son travail
Relate cauchemars et souvenirs d'enfance. Expérimente texture.

Melvil
pratique la Photo
mais touche à tout (viédo ; photo ; etc)
IA peut nous aider à mettre idée en place.
Pratique Urbex
Pour ce workshop, epxlorer l'IA (sortir photo ou vidéo)

Kalden
musique rap
vidéo et photo ici
Veut devenir prof (arts plastiques)
Qu'est ce que l'IA
Innovation vont nous aider
Tout découvrir (nouvelles connaissances)
travail en expérimentation ;
Gore ou second degrès

Amélie
dessin, sculpture installation , éditions
Compose avec aléatoire.
IA stocke les données
évolue si on lui en donne les moyens
On a légué à l'IA les créations et l'humain va devoir faire les basses tâches.
questions écologiques
Dans le monde de l'art
retire le côté humain
Art comme médium d'écriture (nous souvenir de civilisations, etc)
Travaille avec l'IA en faisant une édition
Comment on se désaproprie un médium d'expression qui nous appartient. Côté inhumain de l'IA.

Amandine
politique environnementale et dev durable.
IA est une encyclopédie
IA Complexe mais dans les évolutions
Ouverture de portes infinies
attentes du workshop.
Comment souhaite travailler sociétale et philosophique
medium peinture, écriture, musique, installation.

Manon
Peinture (figuratif, etc)
Installation, performance (avec Volume) manger bougies allumées.
Corps enfance → tissu , enfance, Gore
Sujets en ce moment = Violence sexiste ;
Fait de la musique.
S'intéresse aux Relations sociale avec IA (qu'est ce que les personnes en détresse vont pouvoir apprendre dans leur vie)

Elliott
sort du lycée
aime travailler à une autre échelle (avec medium ; bois ; linogravure ; peinture ; etc).
IA omniprésent qu'on voit de plus en plus
IA au quotidien (IA au frontière sur champ de bataille ; aux frontière ; surveillance ; etc)
Quelle sont les limites actuelles de l'IA
aime le Dessin mais ne le pratique pas vraiment.
S’intéresse à la transformation
Pour le workshop souhaite découvrir
veut travailler sur édition.

- Présentation de ce qu'est l'I.A

Objectifs : désacraliser l'IA en montrant ce qu'elle est vraiment : un procédé logique mathématique et automatisé reposant généralement sur un algorithme et en mesure de réaliser des tâches bien définies grâce à des modèles entrainés.
Oualid lazrak a fait une présentaiton détaillée des origines mathématiques de l'IA.

3.2 - Mardi 18 mars

faire germer les idées

Objectifs : cet exercice est un essai grandeur nature pour tester la possibilité de structurer une séance de travail sur le modèle de fonctionnement d'une I.A.
Il s'agit ici de partir des intuitions (et intentions) premières des étudiant.e.s et d'accompagner un processus de transformation pour les amener à poser des problématiques et trouver les formes adéquates qu'ils et elles produiront dans le workshop.

Les étapes sont les suivantes :

• Input = Comme les “données d’entrée” d’un réseau neuronal
  (partir des réponses individuelles de la veille)
  = valeur ; mots clés ; ressentis ; attentes…)
  Ce sont des inputs bruts, variés, parfois contradictoires, riches d’informations personnelles.

• Feature extraction = Comme les premières couches qui détectent des “patterns”
  = Ce sont les “connexions fortes” ou “similarités” que détectent les premières couches d’un réseau.
  • Détecter des motifs récurrents (thèmes communs, sensibilités partagées).
  • Faire remonter des contrastes (opinions divergentes, tensions intéressantes).
  (regroupements thématiques par similarités)
  = thèmes communs ; sensibilités partagées ; mots proches…)

• Hidden layers = affinement collaboratif et clustering
  (on fait du clustering, on cherche à structurer ces données en catégories ou champs problématiques.)
  Ces motifs sont affinés en couches intermédiaires : discussions en sous-groupes ou en plénière, réorganisation des idées, confrontations d’avis.
  • Une fois les regroupements faits, pousse-les à chercher des dynamiques sous-jacentes :
  • Où y a-t-il des points de convergence (ex : “beaucoup parlent de surveillance ou de contrôle”) ?
  • Où y a-t-il des zones de divergence (ex : “certains valorisent l’IA créative, d’autres la critiquent”) ?
  • Où y a-t-il des zones hybrides ou des idées qui peuvent appartenir à plusieurs familles de thèmes ?

• Labelisation (donner des titres ou mots clés à ces regroupements d'idées)
  = C’est comme quand un modèle applique une “étiquette” (label) à des groupes de données après analyse.
  • Pour chaque regroupement, il est demandé de :
  • Donner un titre ou un mot-clé à chaque “grappe” de post-its.
  • Formuler un “proto-thème” ou une question embryonnaire.

• Cross layer influence (Croiser les dynamiques entre elles (interconnexion des clusters = interconnexion des clusters)
  = C’est une étape où certains patterns d’une couche peuvent activer ou moduler d’autres couches.
  = faire ressortir les liens dynamiques entre elles (connexions évidentes ou paradoxales. Une dynamique rencontre ou contredit une autre)

• Output layer (ou Decision layer = formulation des problématiques)
  La “couche finale” traduit ces motifs en questions concrètes, en problématiques formulées.

• Feedback loop = itération et ajustements (rétroaction)
  Comme dans le machine learning supervisé, tu peux ajouter une boucle de rétroaction où chaque groupe ou chaque personne “évalue” les problématiques proposées

- Présentation des programmes

Objectifs : présenter aux étudiant.e.s l'ensemble des programmes installés en local sur les ordinateurs ainsi que les web services en accès sur les postes.

Oualid présente Stable Diffusion et les nombreux checkpoints additionnels permettant d'affiner les travail selon les besoins spécifiques des étudiant.e.s.

Stable Diffusion est un modèle d'apprentissage profond de conversion de texte en image, lancé en 2022 et basé sur des techniques de diffusion . Cette technologie d'intelligence artificielle générative est le produit phare de Stability AI et est considérée comme un élément clé de l' essor actuel de l'intelligence artificielle .

Il est principalement utilisé pour générer des images détaillées conditionnées par des descriptions textuelles, bien qu'il puisse également être appliqué à d'autres tâches telles que l'inpainting , l'outpainting et la génération de traductions d'image à image guidées par une invite textuelle.

Stable Diffusion est un modèle de diffusion latente , une sorte de réseau neuronal artificiel génératif profond . Son code et les pondérations de son modèle ont été rendus publics et il peut fonctionner sur la plupart des matériels grand public équipés d'un GPU modeste avec au moins 4 Go de VRAM . Il marque une rupture avec les précédents modèles propriétaires de conversion de texte en image tels que DALL-E et Midjourney , accessibles uniquement via des services cloud.

Automatic 1111 Stable Diffusion Web UI est l'interface utilisée par les étudiant.e.s pour générer leurs images.
Il s'agit d'un programme d'intelligence artificielle générative open source qui permet aux utilisateurs de générer des images à partir d'une invite de texte . Il utilise Stable Diffusion comme modèle de base pour ses capacités d'image ainsi qu'un large ensemble d'extensions et de fonctionnalités pour personnaliser sa sortie.

Civitai est un des portails permettant de télécharger une multitude de checkpoints.

Huggingface est un autre portail mais ayant une approche moins intuitive.

ComfyUI, une interface de référence pour l'utilisation des IA générative, particulièrement pour l'image et la vidéo a été abordée dans la présentation mais pas en détails dans ce workshop. Cette interface permet de concevoir et d'exécuter des pipelines de diffusion stables et avancés à l'aide d'une interface basée sur des graphes, des nœuds et des organigrammes.

Plusieurs ordinateurs ont aussi été configurés pour permettre un accès à différents web services pour permettre aux étudiant.e.s de les texter.

• mid journey
• invoke
• runway ai 2
• flux

- Expérimentations

Objectifs : permettre aux étudiant.e.s de se familiariser, par tatonnements, aux programmes d'intelligence artificielle mais surtout d'en comprendre les logiques interne.

3.3 - Mercredi 19 mars

- Tour de table pour poser les sur lesquels les étudiant.e.s travaillent projets

Objectifs : Demander aux étudiant.e.s d'expliciter leur projet et la forme qu'ils et elles souhaiteraient proposer en vue de la restitution.

Les réponses des étudiant.e.s

Thimothée
Video to video
(travail avec Jules)
Court metrage bio-meca
eau radiocative et ce qu'il touche devient bio-mécanique radioactif
Pormpts 2 lignes qui ont donnés 7 séquences courtes
outils = Runway
images to audio pour créer la bande son du film
47 secondes
Diffusion sur écran.
(travaille avec l'aide de Lucien, un ami de passage)
Clip metal avec morphing. Donc vidéo avec Morphing. Ambiance biomecanique (comme Allien)
Conseils : aller plus loin ; détourner ; triturer et tordre l'outil.

Zhihan (Djeuhan)
vidéo style surréalislme
même fonds (mais l'objet chnage constamment) le tableau se transforme en liquide pour devenir véritable créatiure. Colmme un rêve. Il n'y a pas trop de logique
ds microcosmes beaucoup de cellules et tantacules.
Elles grandissent et fusionnent pour devenir orgnismes bizzares

Tom
Travail avec Invoke
Expérimentations
générer strcutures monolithiques dans espace. (tests de prompts)
structuration de prompts (photo argentique avec grains dans espace. Photo sur satellite publicitaire…). Interprétation du « silver plate » (vignétage photo) en soucoupe en argent…
Prompts qui sert de cartel
lister le vocabulaire

Oscar
Prmpts simple sur automatic 1111
sur son de l'eau en image (enlever ensuite le mot Water)
Promps et negativ prompt (sound of water) et négativ prompt « water ».
ça donne des images allant du macro au micro
Sur automatic 1111 la réalisation est moins réaliste.

Yoon
génération di'mages avec Stable diffusion et Midjourney
1 même prompt mais différentes images
1 N/B (très grande) et édition possible (en dialogue avec cette image)

Lukas
Pratique sur portrait
a souhaité casser le côté IA très lisse. Faire inetrvenir glitch, pixel et textture dans image (idée de faire composite à la fin). Image avec outil Clip drop
Génération d'images
Sur stable a filtré et souhaité avoir le rendu attendu (chekpoint : pixelisé et analog vidéo)
Une série de portraits a été réalisé.
Ensuite imagetoimage .jeru avec les prompt (dans 1111).
rendu plus pixel de la série (portrtait paysage, etc)
rentré viédo alnalog effet très intéressant
à partir de là il a fait des composition par superposition d'image
Joue avec les codes de l'image (peinture, Richter, wharol, etc photo…)
Dois choisir une sélection d'images

Juan
représentation en 3D
Parallèle de rendu entre prompt
description de l'univers onirique (sur midjourney) production images → squelette
reproduire image en 3D
renvoyer imagetoimage à une IA pour voir ce que ça donne (mettr emodel dans Tripo et voir ce que ça donne). Jusqu'à dénaturation de l'image.
Quel geste tu peux ajouter
référence Flusser (l'art du geste)

Melvil
faire Statues d'anges avec 1111
différents tests
prompts aussi écrit à l'identique dans non prompt
Nous sommes dans images en train de se faire

Kalden
Partir d'une image détourée d'un travail d'un étudiant (accroché dans les couloirs) et générer une multitudes d'images.
IA regroupe œuvres du monde pour les mettre dans l'IA.

Manon
partie des applications de rencontres mais a dévé.
Sur corps de la femme.
Automatic-1111 « uncanny creature sexuelle vulve »
IA en locale non censurée
Créer poupées sexuelles
Part sur des triptiques (femmes et vulves)

- Finalisation des projets

Objectifs : permettre aux étudiant.e.s de finliser leur projet.

3.4 - Jeudi 20 mars

- Production

Objectifs : S'appuyer sur les possibilités techniques offerte par l'ESADHaR pour produire les pièces imaginées par les étudiant.e.s.

En fonction des projets imaginés, les ateliers de l' ESADHaR sont mis à contribution pour permettre aux étudiant.e.s d'imprimer les images, de faire du montage vidéo ou son, de façonner une édition, etc.

3.4 - Vendredi 21 mars

- Accrochage et installation

Objectifs : Accrocher et installer les créations des étudiant.e.s dans les deux espaces mis à notre disposition au sein de l'école.

Des discussions sont engagées pour mettre en œuvre la scénographie la plus adaptée et pertinente par rapport aux pièces produites. Plusieurs essais sont faits et les choix formels, techniques précisés.

- Restitution pédagogique

Objectifs : permettre aux étudiant.e.s de présenter leurs travaux sous la forme d'une exposition mais aussi leurs offrir la possibilité d'en donner quelques clés de compréhension au public présent.

Cette restitution s'est faite devant les représentantes de la direction de l'ESADHaR (directrice et directrice des études), personnel et enseigannt.e.s ainsi que les étudiant.e.s présent.e.s. Le président de l’association des amis du Fonds régional d’art contemporain Normandie, Frac Friends Art Now (FFAN) nous a fait l'honneur de sa présence.


Vernissage

Vidéo de la restitution réalisée et montée par Hyunseok YOON (Atelier BABO)

Kalden :
"Ce qui m’intéressait c’était de voir comment l’intelligence artificielle pouvait être utilisée pour transformer une œuvre.
Cette idée de transformation est mise en avant avec une vidéo qui retranscrit le nombre infinie de possibilités que propose l’ia pour transformer une forme.
Le flipbook que j’ai essayé de réaliser se détache un peu du côté informatique, pour montrer que l’ia peut aider même pour des projets manuels, des idées impensables, une nouvelle base pour créer.