20240120_画像生成AI_NovelAI入門・情報収集

https://omoshiroai.connpass.com/event/306212/

Transcript

1. 画像⽣成AI NovelAI⼊⾨&情報収集 2024/1/20 @doradora09
2. モチベーション • さくっと画像⽣成をしたい • 趣味でゲーム⽤の絵とかを⽣成できるようになりたい 今回はNovelAIを少しご紹介
3. NovelAIとは • 以下、Wikipedia 先⽣より
4. 補⾜：ライセンス関係 • 以下、Wikipedia 先⽣より 著作権関係は議論の真っ最中なので 今後影響を受ける可能性はあり(他の画像⽣成AIも)
5. NovelAIのここがgood • サイズが⼩さければさくっと画像⽣成できる • 600x600で5秒かからないくらい • アニメよりの画⾵が得意 • 学習しているデータが海外の⼆次創作同⼈系のDanbooruベース • ChatGPT経由のDALLEより融通が聞く • (グレーゾーンだが) まだ「〇〇⾵」のような形の模写が可能 • Seedの固定や、img2imgなどの機能が使える • 他の画像⽣成の表記がある程度使える • Stable Diffusionベースのカスタム版 • 強調表現に{}をつかう、弱める時に[]を使うなどの⽅⾔はあり • 勉強会とかあって楽しそう • NovelAIだけでなくnijijornyなども開催している模様。探せばStable Diffusionもあるかも？
6. NovelAIのここがbad • 気をつけないとエロ絵が⽣成される • 元ネタが同⼈系ベースなので、注意 • 古いモデルだと安全なものもあるが、デフォルトから外された • LoRA系が多分使えない • この辺は本家のStable Diffusionが⼀番？ • LoRAはまたの機会に深掘りできればと • DALLE-3の⽅が得意な領域も • 現時点のNovelAIは⽇本語⼊⼒のプロンプトには対応していません(基本は英語⼊⼒) • 画質で⾔うと他の画像⽣成AIの⽅が得意なケースも • 初⼼者はChatGPT Plus経由のDALLEやBing Image Creatorからで良いかも • 本格的に使おうとすると課⾦が発⽣ • 上のプランだと25ドル/⽉ (まぁでも⾃前で作るより全然安いですが)
7. 基本操作 & デモ
8. 左下にある 「画像を⽣ 成」をクリッ ク
9. 基本画⾯ • 英語でプロンプトを⼊れます • 書いてほしいものをプロンプト欄に • 除外したいもの(ネガティブプロンプ ト)を「除外したい要素」の欄に • 後画像サイズの調整。⼩さいと早い＆ Anlasというトークンの消費が０になり ます(⼤きいと１０くらい消費。０にな ると⽣成できなくなります）
10. とりあえず何か⼊れてみる • 「dog」とした場合
11. とりあえず何か⼊れてみる • 「dog, realistic」と した場合
12. とりあえず何か⼊れてみる • 「dog, realistic, beach」とした場合
13. 画⾵を固定するには • Seedを固定する、指⽰⽂を 明確にする、が基本戦略 • 後グレーゾーンなものの、 「キャラクター名」もいける ( 今後の法整備は要注意 ) • (ランダム) Seedを固定する とプロンプトに対して同じ画 像が出るようになる ( ただ、dogだけだと弱いか もしれない ) Seed値を⽣成時に 流⽤すると同じ感じになる
14. Seed値を固定ver • ２枚⽬のワンちゃ んのseedを使っ て、beachのプロ ンプトを追加 • ⽝種とか特徴を追 加していけばもっ と再現性は上がる はず (今回は割愛)
15. 撮影条件の指定 • 「あなたがカメラ マン」だとした時 にどういうセッ ティングで臨むか • 横からの撮影なら 「from side」な ど
16. 画⾵の変換 • 「あなたが絵描 き」だとした時に どういう画⾵で臨 むか • 「by Alfons Mucha」(ミュシャ ⾵で)、とかは便利 です • なぜかV3ではうま くいかなかったの でV2モデルにて
17. カード形式に • 「in card frame」を追加 • カードゲームの素 材とかにも使えそ うですね • (V3に戻してます)
18. Tips
19. とりあえず、ランダム⽣成 • 「ランダム化」のボタン をおすと⾊々⽣成してく れます • プロンプトの発⾒にも繋 がります
20. 公式マ ニュアル • キャラクター⽣成⽅法(⼥性 編)の⽇本語訳が載ってます • https://docs.novelai.n et/image-jp/tutorial- charactercreation- jp.html • ちょっとまだこのレベルま では説明できないので、ご 紹介のみ
21. NovelAIのベースのタグ⼀覧 • Danbooruのタグ⼀覧が wiki化されてます • 画⾵などは参考になりま す • 1980s、各アニメ作品な ども。 • (たまにエロ系もあるの で注意) https://danbooru.donmai.us/wiki_pages/tag_groups
22. Civitaiを参考にする • Civitaiというイラスト掲 ⽰板では他の⼈のプロン プトを参考にできます • https://civitai.com/ • 主にStable Diffusion系の 記法でLoRAタグに対応し ていないなど違いはあり ますが、プロンプト、ネ ガティブプロンプトの書 き⽅は結構参考になりま す https://civitai.com/images/667938
23. 参考：civitaiからコピペして再現(ff7r) • LoRAタグ使わなくて も、作品名はやはり 強⼒ (キャラ名⼊れるとな おさら。今回は⼊っ ていないはず) • でも、将来的に著作 権の問題になりうる ので、(趣味以外で は)なるべく固有名詞 は避けましょう
24. 参考：1980s指定を追加 • なんかテイルズっ ぽくもなってる ( 1980sは本来もう 少しベタな感じに なると思いつつ、 多分ff7rが混ざって いるのでこの感じ かも )
25. 参考：ff7r styleプロンプトを除外 • ⾔語だけでは、ニュアン スの再現がむずい・・ (特に髪型や顔の輪郭な ど) • この辺はスケッチを書い て読ませる⽅法などもあ るが・・ • 別作品をオマージュした 新キャラとしてはあり (抽象化->具体化のバリ エーション)
26. Chat先⽣に解説して もらう • プロンプトの解説よろ しく、というとそれっ ぽく答えてくれます • ただ、バランスなどは やはり試⾏錯誤かなと (プロンプトは最初の ものが優先気味になり、 多すぎると逆効果の場 合も)
27. NovelAI運営参加イ ベントもあるよう です・・！ • 今回は参加できませんでしたが、いつか⾏きたい • ひとまず公式twitterをフォローしましょう • https://twitter.com/novelaiofficial
28. Enjoy .. !!