OpenAI a offert à DALL-E une fonctionnalité d’édition qui montre comment les générateurs d’images IA sont limités

Pour notre première tentative, nous avons essayé de créer « une image d’un enfant soufflant des bougies d’anniversaire avec un panneau indiquant « Joyeux 3e anniversaire ». .'” Le résultat a été une plutôt bonne image — DALL-E est toujours l’un des meilleurs générateurs d’images d’IA. Cependant, le signe en arrière-plan est mal orthographié, un problème courant pour l’IA. Lorsque nous avons essayé de le modifier, DALL-E a révélé ses limites.

« Malheureusement, je ne peux pas directement éditer les images ni modifier des éléments spécifiques qu’elles contiennent. Cependant, je peux créer une nouvelle image basée sur des images révisées. spécifications. Si vous le souhaitez, vous pouvez décrire tout changement supplémentaire ou confirmer que vous souhaitez une nouvelle image similaire à la précédente, », a déclaré ChatGPT en réponse à notre demande de réparation du panneau.

DALL-E ne peut pas vraiment éditer, il ne peut que produire de nouvelles images similaires à votre dernière image. Nous avons abandonné cette tentative et sommes passés à autre chose. à un autre.

Ici, nous avons demandé « une image d’un robot reporter interrogeant des dirigeants de grandes technologies devant le pont du golden gate à San Francisco. ” Encore une fois, DALL-E a produit une première image assez forte. Cependant, nous avons pensé que le robot était un peu trop gros, alors voyez comment fonctionne la fonction d’édition.

DALL-E a réussi à rendre le robot plus petit, mais il lui a enlevé la tête et a rendu les bras vraiment courts. Alors réessayons. a demandé à DALL-E de remettre sa tête en arrière et de donner au robot des bras plus longs. Nous avons également demandé des écouteurs sur le robot.

D’accord, nous avons des bras plus longs et une tête, mais pas d’écouteurs et nous avons toujours perdu notre microphone. Le robot semble être moins intelligent. un journaliste maintenant et plus un maestro, mais peu importe, c’est bien. Ensuite, nous avons demandé à DALL-E de mettre des podiums devant nos responsables techniques, mais cela n’a pas été fait. Nous avons donc demandé à la place une grande table avec des papiers et des microphones.

Donc DALL-E n’a pas réussi à nous donner des podiums, et je dirais que cette table ne fonctionne pas vraiment non plus. Oui, c’est une table, mais ce n’est pas celui qui fonctionne avec le réglage. De plus, il n’y a pas de papier ni de microphone dessus. DALL-E en est également devenu un. des mains du cadre en métal et des papiers dans sa main. Enfin, nous avons demandé à DALL-E de transformer les gens de l’arrière-plan en canards. et faites-en une journée enneigée.

Comme vous pouvez le constater, trop de modifications peuvent briser l’image entière. Nous avons mis en évidence les personnes en arrière-plan et leur avons demandé de les transformer en images. canards. Cependant, DALL-E ne peut pas différencier le premier plan et l’arrière-plan, même lorsque vous n’avez sélectionné que l’arrière-plan. Et lorsque nous avons sélectionné le tout l’écran pour ajouter de la neige, cela a complètement changé l’image et a cassé notre travail. Nous nous sommes arrêtés ici, réalisant que cette image était désormais inutilisable. .

Pour notre test dernier, nous avons demandé à DALL-E de créer « un grimpeur qui escalade la statue de la liberté », et honnêtement ce est le résultat génial. Pour notre première édition, nous avons demandé à DALL-E de changer l’expression de la statue en un sourire et d’ajouter un chapeau d’anniversaire à notre grimpeur.

Lady Liberty sourit à sa ville, et nous avons avec succès ajouté une couronne d’anniversaire à notre grimpeur. Ensuite, nous avons demandé de tourner le scène dans un décor nocturne, ajoutez des feux d’artifice en arrière-plan et lancez un deuxième grimpeur dans la scène.

Le ciel nocturne et les feux d’artifice ont été brillamment ajoutés à notre image. Cependant, nous avons continuellement demandé à DALL-E d’ajouter un deuxième grimpeur à l’image, mais cela s’est avéré trop important pour l’outil d’édition.

Bien qu’il s’agisse de notre test le plus réussi avec l’éditeur d’images, chaque test que nous avons effectué avec DALL-E a connu de nombreux revers. S’améliorer au fil du temps ? Probablement, mais qui sait si cela changera véritablement la donne en tant qu’éditeur d’images.

Une version de cet article paru à l’origine sur Gizmodo.