Créez des Images Pixel Art avec des LEGO et l’Intelligence Artificielle (Video)

Les amateurs de Lego peuvent désormais eux aussi profiter de l’intelligence artificielle (IA) grâce au créateur néerlandais, youtubeur et maître constructeur de Lego connu sous le nom de Sten. Ce dernier a mis au point une imprimante capable d’imprimer des images en pixels identiques, entièrement construite avec des briques Lego.

Une imprimante Lego alimentée par l’IA

Le processus de construction ainsi qu’une démonstration de pixel art réalisée avec des pièces Lego sont documentés sur la chaîne YouTube de Sten, Creative Mindstorms. L’appareil est baptisé Pixelbot 3000 et il est, selon Sten, « capable de créer des pixel arts de n’importe quel sujet grâce à l’IA ».

Présentation du Pixelbot 3000

Le Pixelbot 3000 fonctionne avec le langage de programmation Python, aidé par l’interface DALL-E d’OpenAI. Son logiciel permet aux utilisateurs de simplement entrer un sujet, puis de cliquer sur « démarrer » pour que l’impression commence automatiquement.

Dans sa vidéo explicative, Sten indique s’être inspiré initialement d’autres imprimantes Lego telles que Briccasso, mais avoir ensuite été contraint de beaucoup improviser autant du côté du codage personnalisé que de la fonctionnalité mécanique afin de réaliser son projet. Il a commencé par utiliser des plaques de base de taille 16×16, avant de finalement opter pour une grille de 32×32 pour obtenir de meilleurs résultats finaux.

Processus de création et de développement

Le mode de fonctionnement général de la machine Lego de Sten ressemble à celui d’une machine pick-and-place, qui dispose d’un programme précis lui permettant de positionner des pièces Lego de grande taille avec une étonnante précision sur une plaque de base de 32×32. De plus, cette dernière est conçue pour sélectionner des couleurs – conformément à la demande de l’image – et poser chaque brique individuellement afin d’obtenir un pixel art indentique de l’image générée via l’IA. Comme le choix de couleurs proposées par Lego est limité, Creative Mindstorms a restreint son nuancier à 15 teintes de base incluant un fond blanc.

Fonctionnement de la machine Lego

Il est important de souligner que cette machine ne crée ni ne scanne jamais ses propres dessins. Elle se contente uniquement d’utiliser l’IA pour générer des pixel arts (avec des Legos) à partir des images logicielles produites.

Génération d’images et impression

Avant l’impression proprement dite, l’utilisateur peut prévisualiser l’image générée, recadrer ou ajuster sa gamme chromatique, puis sauvegarder ces modifications pour lancer l’impression. Au moment de l’impression, l’image est divisée en carrés de 32×32 et chaque pixel de celle-ci est analysé en termes de couleur et de centre de gravité sur la plaque de base, ce qui permet ensuite de construire le pixel art brique par brique.

Dans sa phase de test, Sten a demandé à l’IA de créer un « petit robot loufoque tenant un tournesol », vous pouvez voir comment cela s’est traduit visuellement dans la vidéo ci-dessus.

Exemple de pixel art généré par l’imprimante Lego