Nouvelles

May 04, 2024

Adobe Firefly offre l'IA wow

La synthèse texte-image basée sur l'IA ne remplacera pas les humains de si tôt. 2023 est l'année où l'IA s'est généralisée, grâce à ChatGPT et à sa capacité apparemment étrange à penser et à communiquer comme un humain à l'image.

La synthèse texte-image basée sur l'IA ne remplacera pas les humains de si tôt

2023 est l'année où l'IA s'est généralisée, de ChatGPT et sa capacité apparemment étrange à penser et à communiquer comme un humain aux générateurs d'images capables de créer des œuvres d'art à partir d'une simple instruction.

Nous avons déjà opposé les meilleurs générateurs d'art IA et expérimenté la nouvelle fonctionnalité de remplissage génératif dans la dernière version bêta de Photoshop, qui permet aux utilisateurs de modifier, d'ajouter et d'agrandir des images avec seulement quelques commandes écrites.

Récemment, j'ai essayé un autre produit Adobe AI, Firefly. Au lieu d'être intégré à Photoshop, Firefly réside sur le Web sur le site Web d'Adobe Firefly et vous pouvez l'utiliser dans votre navigateur. Comme Generative Fill, il est toujours en version bêta et comprend actuellement quatre outils que les utilisateurs peuvent expérimenter, ainsi que huit autres sur lesquels Adobe travaille toujours avant de les rendre publics.

Ceux disponibles incluent désormais Generative Recolor, qui génère des variations de couleurs d'illustrations vectorielles à partir d'une description détaillée du texte, Text Effects, qui applique des styles et des textures au texte à l'aide d'invites écrites, et le remplissage génératif susmentionné. Mais l’outil Firefly le plus intéressant – et le plus impressionnant – est Text To Image. Contrairement aux autres, vous partez ici d'une toile vierge et vous êtes invité à indiquer à l'IA d'Adobe ce que vous souhaitez créer.

Parce qu'une toile vierge peut être intimidante, Adobe remplit votre écran d'exemples d'inspiration, ainsi que des invites textuelles utilisées pour les créer. Je commence par imaginer à quoi pourrait ressembler un bureau avec une plus belle vue que le mur de ma chambre. « Bureau dans une cabane en bois avec vue sur une forêt » est la première chose à laquelle je pense et je clique sur Générer.

Firefly utilise la puissance des serveurs d'Adobe au lieu de votre ordinateur, et quelques secondes plus tard, quatre images de ce à quoi pourrait ressembler le bureau au sommet d'un arbre de mes rêves. C’est l’un de ces moments « wow » pour lesquels l’IA d’aujourd’hui est si douée. J'ai très peu contribué, cela n'a pas pris de temps et les résultats sont remarquablement proches de ce que j'avais imaginé.

Mais il y a des limites. Il existe quatre options de « type de contenu » – Aucun, Photo, Graphique et Art – et par défaut les opérations Firefly pour cette dernière, je suppose parce qu'un dessin artistique de votre commande écrite est plus facile à produire qu'un dessin photo-réaliste. Je clique sur l'option Photo et j'attends que Firefly fasse son travail.

Cette fois, les résultats sont plus réalistes et, en un coup d’œil, ils sont superbes. Mais inspectez de plus près et vous verrez des erreurs flagrantes ; par exemple, sur une image, la chaise de bureau qui semble avoir six pieds ressemblant à des racines d'arbre, et sur une autre, il y a un carré blanc vide à la place d'un écran d'ordinateur.

Cependant, au crédit de Firefly, j'ai seulement demandé un bureau et je n'ai pas mentionné un ordinateur, un bureau ou une chaise – Firefly l'a trouvé par lui-même.

Ensuite, j'ajuste ma commande pour inclure plus de détails : "Bureau dans une cabane en bois avec vue sur une forêt, avec un bureau intelligent, un ordinateur et un poêle à bois dans le coin de la pièce".

Les résultats sont impressionnants. Ils contiennent tous les éléments que j'ai demandés, l'éclairage et les ombres semblent pour la plupart précis, et Firefly a pris l'initiative d'ajouter des étagères, des plantes de bureau et des fixations d'éclairage. Tout ce dont le bureau de mes rêves a besoin maintenant, c'est d'un chien, alors j'en demande un qui dorme sur un tapis.

Les amoureux des chiens devraient probablement détourner le regard maintenant, car les résultats sont étranges.

Firefly a généralement installé un tapis correctement, mais a ensuite fait un véritable gâchis en ajoutant un chien à la scène. Il a également supprimé le graveur de journaux de certaines images et effectué des opérations étranges sur l'ordinateur. Je modifie la commande pour demander un ordinateur moderne et que le chien ne dorme pas. Les choses s’améliorent, mais créer un chien réaliste s’avère encore délicat.

Comme je le soupçonnais plus tôt, Firefly est meilleur dans le dessin artistique que dans la création d'images photoréalistes. Je change le type de contenu en Art et immédiatement les résultats s'améliorent. L'ensemble de la scène semble plus cohérent et les chiens sont légèrement améliorés, même si j'ai été amusé de voir que sur une image, Firefly a mis le feu à l'écran de l'ordinateur au lieu d'installer un poêle à bois.