Agrandir / Un exemple d’une photo de fichier de 1983 de l’ordinateur Apple Lisa qui a été considérablement améliorée par le nouvel outil AI “Generative Fill” dans la version bêta d’Adobe Photoshop.
Pomme / Benj Edwards / Adobe
Mardi, Adobe a ajouté un nouvel outil à sa version bêta de Photoshop appelé “Generative Fill”, qui utilise la synthèse d’images basée sur le cloud pour remplir des zones sélectionnées d’une image avec un nouveau contenu généré par l’IA basé sur une description textuelle. Propulsé par Adobe Firefly, Generative Fill fonctionne de manière similaire à une technique appelée “inpainting” utilisée dans les versions DALL-E et Stable Diffusion depuis l’année dernière.
Au cœur de Generative Fill se trouve Adobe Firefly, qui est le modèle de synthèse d’image personnalisé d’Adobe. En tant que modèle d’IA d’apprentissage en profondeur, Firefly a été formé sur des millions d’images dans la bibliothèque de stock d’Adobe pour associer certaines images à des descriptions textuelles. Faisant maintenant partie de Photoshop, les gens peuvent taper ce qu’ils veulent voir (c’est-à-dire “un clown sur un écran d’ordinateur”), et Firefly synthétisera plusieurs options parmi lesquelles l’utilisateur pourra choisir. Generative Fill utilise une technique d’IA bien connue appelée “inpainting” pour créer une génération sensible au contexte qui peut mélanger de manière transparente des images synthétisées dans une image existante.
Pour utiliser le remplissage génératif, les utilisateurs sélectionnent une zone d’une image existante qu’ils souhaitent modifier. Après l’avoir sélectionné, une “Barre des tâches contextuelle” apparaît qui permet aux utilisateurs de saisir une description de ce qu’ils veulent voir généré dans la zone sélectionnée. Photoshop envoie ces données aux serveurs d’Adobe pour traitement, puis renvoie les résultats dans l’application. Après la génération, l’utilisateur a la possibilité de choisir entre plusieurs options de générations ou de créer plus d’options à parcourir.
-
Pour utiliser le remplissage génératif dans Photoshop, sélectionnez d’abord une zone dans une image, puis tapez une description de ce que vous voulez voir, comme “un petit clown”.
Benj Edwards
-
Ensuite, Generative Fill transfère le traitement vers le cloud avant de fournir un résultat.
Benj Edwards
-
Après le traitement, vous serez présenté avec plusieurs options de clowns photoréalistes qui ont l’air bien assis dans une pelouse herbeuse.
Benj Edwards
-
Après avoir choisi le bon clown, vous pouvez ajouter d’autres objets à votre image, comme un robot jouet ou un ballon de basket.
Benj Edwards
Lorsqu’il est utilisé, l’outil Remplissage génératif crée un nouveau “calque génératif”, permettant des modifications non destructives du contenu de l’image, telles que des ajouts, des extensions ou des suppressions, pilotées par ces invites de texte. Il s’adapte automatiquement à la perspective, à l’éclairage et au style de l’image sélectionnée.
Publicité
Le remplissage génératif n’est pas la seule fonctionnalité alimentée par l’IA ajoutée à la version bêta de Photoshop. Firefly a également permis à Photoshop de supprimer entièrement des parties d’une image, d’effacer des objets d’une scène ou d’étendre les dimensions d’une image en générant un nouveau contenu qui entoure l’image existante, une technique d’IA connue sous le nom de “peinture”.
Ces fonctionnalités sont disponibles dans le générateur et l’éditeur d’images DALL-E 2 d’OpenAI depuis août de l’année dernière (et dans diverses versions homebrew de Stable Diffusion depuis à peu près à la même époque), donc Adobe est en train de rattraper son retard pour les ajouter à son image phare. éditeur. Certes, il s’agit d’un revirement rapide pour une entreprise qui pourrait avoir un énorme objectif de responsabilité peint sur le dos en ce qui concerne les problèmes de génération de contenu nuisible ou socialement stigmatisé, l’utilisation d’images d’artistes pour les données de formation et la propagande ou la désinformation.
Agrandir / Un exemple de l’interface complète de remplissage génératif dans la version bêta d’Adobe Photoshop.
Benj Edwards
Dans ce sens, Adobe bloque non seulement la génération de certains mots-clés protégés par le droit d’auteur, violents et sexuels, mais s’appuie également sur des conditions d’utilisation qui empêchent les personnes de générer du contenu “abusif, illégal ou confidentiel”.
De plus, avec la capacité de Generative Fill à déformer facilement la réalité médiatique apparente d’une photo (certes, ce que Photoshop fait depuis sa création), Adobe double son initiative d’authenticité du contenu, qui utilise les informations d’identification du contenu pour ajouter des métadonnées aux fichiers générés qui aider à suivre leur provenance.
L’application Generative Fill dans la version bêta de Photoshop est actuellement disponible pour tous les membres Creative Cloud disposant d’un abonnement ou d’un essai Photoshop via la section « Applications bêta » de l’application Creative Cloud. Il n’est pas encore disponible pour un usage commercial, n’est pas accessible aux personnes de moins de 18 ans, n’est pas disponible en Chine et prend actuellement en charge les invites de texte en anglais uniquement. Adobe prévoit de mettre Generative Fill à la disposition de tous les clients de Photoshop d’ici la fin de l’année afin que tout le monde puisse facilement créer des clowns de jardin.
Si vous n’êtes pas abonné à Creative Cloud, vous pouvez également essayer gratuitement Generative Fill sur le site Web d’Adobe Firefly avec une connexion Adobe via un outil Web. Adobe a récemment supprimé la liste d’attente de sa version bêta de Firefly.
