Fooocus(Stable DiffusionXL)で アニメ画像生成の仕方

画像生成AIの入門として、Stable DiffusionXLベースのFooocusを使って、画像生成をしてみるハンズオンの資料です。

学べること
１）ポイントになる事項のみに絞って解説してあります。
２）アニメ画像の生成の軸ができると思います。
３）noteやQiitaなどを参照して、知識をつけ足してください。

Transcript

1. Fooocus(Stable DiffusionXL)で アニメ画像生成の仕方 2024年2月12日 太田博三
2. ・「【東京AI祭2024】Stable Diffusionワークショップ 　　祭」に参画しました。 ・無料で高品質なアニメ画像が生成できます。 ・3種類の方法をお伝えします。 背景 ▪プロンプト 1girl, pointing her finger, anime
3. 翻訳： 1人の女子女子高生が横を向いて指をさしている ↓ A high school girl looks to the side and points her finger. ↓ 1girl, pointing her finger, anime ◎今回は、下記のイラストに似た画像を生成してみようと思います。 ▪プロンプト 1girl, pointing her finger, anime
4. 1.Clipdrop - SDXL Turbo →5回か6回まで無料 2. Stable Diffusion XL on TPUv5e 3. Fooocus 日本語アニメ特化版 ※上記のURLにアクセスして、下記のプロンプトで試してみよう！ プロンプト：「 1girl, anime, skiing」をコピペしてください。 アニメ画像生成の3種類の方法
5. 1.Clipdrop - SDXL Turbo →5回か6回まで無料 1.Clipdrop - SDXL Turbo ▪特徴：有料サービス：5回か6回まで無料で使えます。 　初期の画像生成の有料サービスとしての位置づけです。 プロンプト：「 1girl, pointing her finger, anime」をコピペしてくださ い。
6. 2. Stable Diffusion XL on TPUv5e ▪特徴：Google Cloud TPUが使われていることもあり、画像生成 が早いことで有名です。オンラインで無料で使えるのでお得感が あるとされています。 プロンプト：「 1girl, pointing her finger, anime」をコピペしてくださ い。
7. 2. Stable Diffusion XL on TPUv5e プロンプト：「 1girl, pointing her finger, anime」
8. 2. Stable Diffusion XL on TPUv5e プロンプトの使い方：呪文を追加して微調整 して、自分の思い描くアニメ画像にします。 ▪クオリティプロンプト（画像の品質を規定す る） 「＋masterpiece（傑作）」 「 1girl, pointing her finger, anime」 ↓ 「 1girl, pointing her finger, anime, masterpiece」
9. 2. Stable Diffusion XL on TPUv5e ▪▪ネガティブプロンプト（描いてほしくないもの を指定する） 「＋text,signature」 「1girl, pointing her finger, anime」 ↓ 「1girl, pointing her finger, anime, masterpiece」 ↓ 「1girl, pointing her finger, anime, masterpiece, text,signature」
10. 2. Stable Diffusion XL on TPUv5e ▪▪姿勢(ポーズ)を指定する ＋sitting, raise hands, jumping 「1girl, pointing her finger, anime」 ↓ 「1girl, pointing her finger, anime, masterpiece」 ↓ 「1girl, pointing her finger, anime, masterpiece, text,signature」 ↓ 「1girl, pointing her finger, anime, sitting, masterpiece, text,signature」
11. 2. Stable Diffusion XL on TPUv5e 上記のように、プロンプトを実行してから、２－3分ぐらい？、間をいかないとエラーが出 てしまいます。 そこで、3. Fooocus 日本語アニメ特化版が登場しました。
12. 3. Fooocus 日本語アニメ特化版 ▪特徴：白井博士が開発した無料で6－7秒程度でアニメ画像が生 成できて、自分自身のPCにフロントエンドの画像生成UIを作り、 GoogleDriveに保存しやすく工夫したものです。 使い方： １）一度、Google Colaboratoyのリンク先を開いて、WebUIを立 ち上げて使います。 ２）プロンプトに入力してアニメ画像を生成します！ プロンプト：「 1girl, pointing her finger, anime」をコピペしてくださ い。
13. 3. Fooocus 日本語アニメ特化版 使い方： １）一度、Google Colaboratoyのリ ンク先を開いて、WebUIを立ち上げ て使います。 https://colab.research.google.co m/github/aicuai/Artist-Guide-for-S DXL/blob/main/Fooocus_onCola b.ipynb#scrollTo=xwciD8nyDILt
14. 3. Fooocus 日本語アニメ特化版 使い方： ２）Colabのコードを実行します。 左の矢印のアイコン をクリックして実行し てください。 4～5分かかります。
15. 3. Fooocus 日本語アニメ特化版 使い方： ３）WebUIを立ち上げて、使います。 https://34902d16d0556dda24.gradio.liveをクリックして、別のタブ で開きます。
16. 3. Fooocus 日本語アニメ特化版 使い方： ３）WebUIを立ち上げて、使います。 1girl, pointing her finger, anime, jumping, masterpiece, text,signature ※拡散モデルで画像生成します。
17. 3. Fooocus 日本語アニメ特化版 使い方： ４）高度な設定にチェックして、さらに微調整できます。
18. ・アニメ画像の生成は無料で高品質なものが作れます。 2. Stable Diffusion XL on TPUv5e →オンラインでお手軽に作れますが、一度、実行したら、間をおく 必要があります。 3. Fooocus 日本語アニメ特化版 →GoogleColaboratoryとGoogleDriveとを用いて、安定して作れ ます。 まとめ
19. ・少し似たものが作れました！ まとめ
20. 太田 博三 2008 年上智大学大学院　地球環境学研究科後期博士課程 単位修得修了. インターネットの会社勤務を経て，サント リーコンシェルジュサービス（株）にて，データマーケティング業務に従事. 『Julia データサイエンス（2017 年翻訳）』などがある．最近は，生成AIでは 「マルチモーダル基盤の解釈可能性」や汎用人工知能に、ビジネスは「ザ・ ゴール」や業務効率化のプロセスマイニング×生成AIに興味があります。 X: usagisan2020 です。フォローしてくださーい！ 自己紹介