Le générateur de carte du fou fait exploser le terrain et le stickman devient Sherlock Holmes en quelques secondes ! Le dernier artefact de dessin de Stability AI fait du graffiti un blockbuster en quelques secondes

Source : Xinzhiyuan

Guide : Vous pouvez être promu illustrateur avec un seuil zéro, et vous pouvez obtenir un blockbuster de niveau film avec un simple croquis. Le tout nouvel artefact de dessin de Stability AI va mettre les peintres et les designers au chômage !

Tuez les fous, tuez les fous, l’outil de peinture IA qui met les peintres et les designers au chômage sur place, est de nouveau nouveau !

Le nouveau Stable Doodle de Stability AI est presque une aubaine !

Il peut transformer votre graffiti en un chef-d’œuvre en une seconde, renversant complètement la méthode du texte brut dans le processus traditionnel de peinture par IA.

Beaucoup de mes amis sont “morts dans le langage”, et utiliser un langage précis pour décrire l’image qu’ils veulent est tout simplement fatal.

Maintenant, avec quelques gribouillis, une image devient instantanément une image colorée et entièrement rendue.

Tant que vous donnez un aperçu approximatif, l’IA peut compléter le reste des détails pour vous !

Ce mème n’est plus un mème, il peut devenir réalité avec Stable Doodle

Alors, un novice en peinture peut-il devenir un maître de l’art en quelques secondes ?

Quelques brouillons se transforment en blockbuster

La démonstration donnée sur le site officiel est tout simplement cool.

Dessinez quelques bâtiments au hasard et tracez un cercle en haut à droite.

Entrez “Cityspace with full moon (street view under the full moon)”, et puis, c’est le moment d’assister au miracle——

Choisissez aucun style (pas de style), photographie (photographique), film analogique (film analogique), art fantastique (art fantastique), style comique (style manga), origami (origami), pixel art (pixel art), néon punk (néon punk), isométrique (isométrique)

Dessinez un croquis d’un robot, complété par des indices : “photo, rendu CG photoréaliste d’une tête de robot, prédateur, bokeh du centre-ville la nuit, éclairage dramatique effet de lumière dramatique)”, vous obtenez 3 robots combattants dans la scène nocturne de la ville.

En quelques coups de pinceau, vous obtenez le portrait d’une femme mech cyberpunk. (: Portrait de femme Mecha)

Dessinez simplement le contour d’un château, ajoutez “Château sur une colline, hiver, style ‘Anime’ (château sur une colline, hiver, style ‘Anime’)”, et générez immédiatement des illustrations pouvant être utilisées sur des couvertures de livres.

Dessinez un chat portant des vêtements, c’est “Chat avec une veste en jean, style ‘Digital Art’ (un chat portant une veste en jean, style art numérique)”, et vous obtenez trois Mr. Cats pleins de styles artistiques.

Pour les amis qui sont bons en peinture, cela peut vous aider à générer des croquis plus détaillés. Par exemple, donnez-lui un “croquis de salon”, qui est “salon, style bande dessinée (salon, style bande dessinée)”, et il dessinera automatiquement une bande dessinée avec une composition et une coloration parfaites.

** Netizen Whole Work **

Inutile de dire que les internautes sont déjà ravis de jouer les fous.

Un simple croquis d’une Méduse, Stable Doodle vous donne une Rose Queen of Thorns métallique.

Dessinez un contour d’un corps humain à volonté, sans dessiner les traits du visage, sans dessiner une figure et sans comprendre l’anatomie humaine, avec une simple phrase, vous pouvez dessiner une belle femme tenant ses cheveux.

：photo, belle femme avec ses mains dans ses cheveux

Vous voulez une belle femme en bikini avec une silhouette parfaite au soleil ? Il suffit de tracer grossièrement le contour, tant qu’il est en place, le Stable Doodle vous surprendra certainement.

：photo, belle femme, bikini, face à la caméra, debout entre deux grandes fenêtres ouvertes, bras levés, lumière du soleil

Pour une dame chic avec un chapeau blanc et des lèvres rouges, laissez le Stable Doodle laisser libre cours à son imagination.

：beau visage, mode, couleurs blanches, lèvres rouges

Lors de l’apprentissage des figures de bâton dans la classe d’art de l’école primaire, dessiner une petite maison est le plus basique. Avec Stable Doodle, vous pouvez passer directement de la version de l’école primaire à la version maître de la peinture.

Cet internaute a des compétences en peinture à première vue et veut quelques versions musclées de Pikachu.

Tant que vous faites un échantillon de Stable Doodle, toutes sortes d’hommes musclés Pikachu sont à portée de main.

Donnez-lui un croquis abstrait, tant qu’il est assorti, il peut vous donner une réponse satisfaisante.

Dessinez un croquis à main levée, dites-lui un “gentleman marchant dans la rue sous la pluie”, et il remplira automatiquement la scène de rue appropriée pour vous, et en une seconde, vous voyagerez dans les rues d’Angleterre avec Big Ben en le 19ème siècle.

Avec seulement quelques croquis, Stable Doodle a dessiné un temple mystérieux dans la jungle avec une pleine lune dans le ciel et de l’eau qui coule devant la porte.

：temple secret dans la jungle, rivière devant le temple, pleine lune dans le ciel nocturne

Donc, s’il n’y a pas de graffiti, quel sera l’effet si vous l’utilisez directement ?

On peut voir qu’avec l’aide de croquis de graffitis, l’outil de dessin AI obtiendra très facilement le sens que nous voulons. Si vous ne faites que saisir, vous devrez peut-être faire beaucoup de détours et générer beaucoup d’images, de sorte que vous puissiez simplement “atteindre” le résultat souhaité.

De plus, il est également très pratique à utiliser sur l’application mobile.

Vous savez, la version actuelle n’est que la première version ! Dans quelques mois, le Stable Doodle pourrait être terriblement puissant.

Cependant, Stable Doodle a également “parfaitement” hérité des divers problèmes de Stable Diffusion dans la génération de personnages.

Par exemple, utilisez le graffiti ci-dessous pour correspondre à “homme debout femme assise sur une chaise tenant un bébé”, et les images générées peuvent être considérées comme plus d’une.

Le tutoriel étape par étape a été publié

Avec un outil aussi puissant, il est normal de ne pas savoir l’utiliser.

Non, le Stable Doodle n’est pas sorti depuis quelques jours, et il existe même des tutoriels.

Après être entré dans le Stable Doodle, l’utilisateur voit un canevas normal.

Ensuite, générez un graphique en trois étapes :

1. Sélectionnez le stylo et utilisez la souris pour dessiner un croquis simple. Gribouillez simplement librement, pas besoin de mettre l’accent sur les détails ou l’esthétique.

2. Entrez la description textuelle

3. Sélectionnez un style artistique (bien entendu, si vous n’avez pas besoin de style, vous pouvez également ne choisir aucun style), puis cliquez sur Générer.

Par exemple:

Regardez, c’est le genre de figurines pour les enfants de la maternelle, et cela ne nécessite aucune compétence artistique ni aucune base.

Bien sûr, Stable Doodle proposera aux utilisateurs 3 options, et vous pourrez choisir celle qui répond le mieux à vos attentes en matière de sauvegarde et d’utilisation.

Il y a un total de 14 styles en bas, couvrant essentiellement tous les styles artistiques traditionnels.

Ce sont: style de photographie, style d’art imaginatif, style origami, style isométrique, style numérique, style comique, style anime, style film, style film analogique, style néon punk, style pixel, style low poly, style modèle 3D, lignes Vent ( photos de gauche à droite)

Jetez un œil à la différence entre les images générées du navire ci-dessus dans différentes conditions de style.

vent isométrique

De gauche à droite : style néon punk, style pixel, style bande dessinée

En plus de générer largement des images, si vous avez des besoins particuliers, Stable Doodle peut également vous aider à les atteindre.

Par exemple, générez un logo.

Je pense que si j’utilise l’une de ces images, je peux ouvrir un restaurant de ramen populaire.

De plus, même la décoration intérieure, Stable Doodle peut vous aider. Il vous suffit de dessiner grossièrement la structure de disposition des objets de la maison dans le croquis, et Stable Doodle peut vous aider pour le reste.

L’auteur n’a dessiné qu’un comptoir de bar et quelques tables dans le croquis, et Stable Doodle a créé un bar calme et rafraîchissant où vous pourrez vous attarder tous les soirs.

Vous pouvez même personnaliser les icônes des entreprises——

Les icônes générées peuvent être utilisées pour l’image de marque, le marketing, les présentations ou pour créer des illustrations pour les interfaces utilisateur.

Le vent équidistant, isométrique, est sélectionné ici.

Générer une scène de jeu de style pixel——

Remarque, n’oubliez pas de choisir le pixel art pour le style, et n’oubliez pas d’écrire clairement qu’il s’agit d’une scène de jeu pour le texte.

Vous pouvez même choisir un style de bande dessinée pour générer une variété de bandes dessinées.

Le Spider-Man ci-dessus est un exemple, nous pouvons également générer Thor-

(Regardez le petit marteau sur le croquis, je ne l’ai pas vu)

Enfin, nous pouvons également décrire certaines scènes de notre fantasme——

C’est là que Fantasy Art devient utile !

Technologie sous-jacente : SDXL+T2I-Adapter

Selon l’introduction officielle, la capacité la plus forte de Stable Doodle est le croquis à l’image et un contrôle plus parfait et plus précis.

C’est-à-dire, des croquis aux œuvres exquises en une seule étape, et même générer des animations.

Actuellement, Stable Doodle peut être essayé gratuitement sur Clipdrop, et bien sûr le dernier SDXL0.9.

: Chouette mignonne, style ‘Origami’ (chouette mignonne, style origami)

Que vous soyez un novice ou un leader de l’industrie, peu importe si vous avez déjà utilisé un logiciel de génération d’images AI, tant que vous passez quelques minutes pour démarrer avec Stable Doodle, n’importe qui peut générer des images de haute qualité en quelques secondes.

Qu’il s’agisse de concevoir un logo pour un client, de créer du matériel d’affichage ou diverses illustrations, Stable Doodle peut le gérer en un seul clic, maximisant ainsi l’efficacité.

La raison pour laquelle il est si puissant est qu’il utilise la technologie de génération d’images SDXL la plus avancée de Stability AI et l’adaptateur T2I.

Ce dernier est une solution de contrôle conditionnel développée par Tencent ARC, qui permet aux utilisateurs d’avoir un contrôle plus précis sur les graphiques IA.

Pendant le processus de génération, T2I-Adapter fournira à SDXL une fonction de guidage auxiliaire, afin que SDXL puisse comprendre le contour de l’esquisse d’entrée et générer une image basée sur celle-ci.

adresse du projet :

Plus précisément, T2I-Adapter est un réseau simple et petit composé d’environ 7,7 millions de paramètres, qui peut fournir des conseils supplémentaires pour les modèles texte-image pré-formés tout en gelant les modèles texte-image originaux à grande échelle, et cela fournit contrôle accru sur le processus de génération.

Parmi eux, l’adaptateur T2I aligne les connaissances internes du modèle T2I avec les signaux de contrôle externes. Les utilisateurs peuvent former divers adaptateurs en fonction de différentes conditions et réaliser des effets de contrôle et d’édition riches.

Voici quelques implémentations de T2I-Adapter sur Hugging Face.

T2I-Adapter peut guider les résultats de la diffusion stable. La figure ci-dessous montre les principaux résultats de posture prédits par MMPose.

Guidé par keypose, l’adaptateur T2I peut générer des animaux avec la même pose, tels que des pandas et des tigres.

L’adaptateur Sketch T2I peut être plug and play, sans formation supplémentaire, peut produire n’importe quel résultat.

Il en va de même pour l’adaptateur Keypose T2I.

Dans l’ensemble, dans Stable Doodle, le même croquis peut générer une variété de belles images dans différents styles.

Pourquoi ne pas essayer rapidement ?

Les références: