Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
20240120_画像生成AI_NovelAI入門・情報収集
Search
NobuakiOshiro
January 19, 2024
Design
0
120
20240120_画像生成AI_NovelAI入門・情報収集
https://omoshiroai.connpass.com/event/306212/
NobuakiOshiro
January 19, 2024
Tweet
Share
More Decks by NobuakiOshiro
See All by NobuakiOshiro
LT : ChatGPT-4でキャラクターのステータスを設定して対戦するロールプレイの実験メモ
doradora09
0
27
20240418_Google ColabにLLMが搭載されたようなのでPython x データ分析の勉強方法を考えてみる
doradora09
0
160
20240413_生成AI関連書籍_流し読みの所感
doradora09
0
25
20240330_img2imgで昔のゲーム画像をいい感じにする
doradora09
1
51
20240309_LT_ChatGPT-4対応のCursorエディタで R言語が動かないかちょっと触ってみた話
doradora09
0
96
20240302_ChatGPTで交通事故分析_ハンズオン_公開用
doradora09
0
150
20240229_20分で速習するChatGPT-4でできること
doradora09
0
230
20240217_CIVITAIの話をしようと思ったらOpenAI Soraが出てきたのでそちらの情報共有.pdf
doradora09
0
54
20240209_丸善博多_データで話す組織_出版記念ミニトーク.pdf
doradora09
0
120
Other Decks in Design
See All in Design
あらゆる場面でデザインを駆使するための技術 / Techniques for Applying Design in Any Situation
akiramotomura
4
2.2k
顧客体験を作るデザイナーが 意思決定速度を上げるために使うAI
cremacrema
2
550
デザインテクノロジストが先導する プロダクト開発の世界
degudegu2510
1
360
B/43プラスカードができるまで
putchomsmartbank
0
480
良いアプリケーションをデザインするための感覚の持ち方 / Cultivating a Sense for Designing Great Applications
usagimaru
23
7.9k
ゲームクリエイター、事業会社のデザイナーになる
satomium1
0
190
ユーザーのためなら 『デザイン』 以外にも手を伸ばせる
navitimejapan
PRO
2
780
デザイナー採用 3社目で学び中のこと / Learnings of Designer Recruitment | Yasuhiro Yokota
yasuhiroyokota
1
250
社内管理画面のデザインもプロダクトデザイン
takanorip
4
740
「これをゲームにしたい!」と言われた時ゲームデザイナーが考えること
kinakobooster
5
5.2k
プロダクトデザイン部 組織紹介(デザイナー向け)
chatwork_hr
1
250
デザインに関わる全ての人たちでエベレスト登頂を目指すために取り組んでいること
amishiratori
0
610
Featured
See All Featured
Building a Scalable Design System with Sketch
lauravandoore
457
32k
How to Ace a Technical Interview
jacobian
273
22k
For a Future-Friendly Web
brad_frost
172
9k
Optimizing for Happiness
mojombo
370
69k
Fontdeck: Realign not Redesign
paulrobertlloyd
76
4.9k
Keith and Marios Guide to Fast Websites
keithpitt
408
22k
Raft: Consensus for Rubyists
vanstee
133
6.3k
Rails Girls Zürich Keynote
gr2m
91
13k
How GitHub (no longer) Works
holman
305
140k
Product Roadmaps are Hard
iamctodd
45
9.7k
Infographics Made Easy
chrislema
238
18k
Creating an realtime collaboration tool: Agile Flush - .NET Oxford
marcduiker
14
1.5k
Transcript
画像⽣成AI NovelAI⼊⾨&情報収集 2024/1/20 @doradora09
モチベーション • さくっと画像⽣成をしたい • 趣味でゲーム⽤の絵とかを⽣成できるようになりたい 今回はNovelAIを少しご紹介
NovelAIとは • 以下、Wikipedia 先⽣より
補⾜:ライセンス関係 • 以下、Wikipedia 先⽣より 著作権関係は議論の真っ最中なので 今後影響を受ける可能性はあり(他の画像⽣成AIも)
NovelAIのここがgood • サイズが⼩さければさくっと画像⽣成できる • 600x600で5秒かからないくらい • アニメよりの画⾵が得意 • 学習しているデータが海外の⼆次創作同⼈系のDanbooruベース •
ChatGPT経由のDALLEより融通が聞く • (グレーゾーンだが) まだ「〇〇⾵」のような形の模写が可能 • Seedの固定や、img2imgなどの機能が使える • 他の画像⽣成の表記がある程度使える • Stable Diffusionベースのカスタム版 • 強調表現に{}をつかう、弱める時に[]を使うなどの⽅⾔はあり • 勉強会とかあって楽しそう • NovelAIだけでなくnijijornyなども開催している模様。探せばStable Diffusionもあるかも?
NovelAIのここがbad • 気をつけないとエロ絵が⽣成される • 元ネタが同⼈系ベースなので、注意 • 古いモデルだと安全なものもあるが、デフォルトから外された • LoRA系が多分使えない •
この辺は本家のStable Diffusionが⼀番? • LoRAはまたの機会に深掘りできればと • DALLE-3の⽅が得意な領域も • 現時点のNovelAIは⽇本語⼊⼒のプロンプトには対応していません(基本は英語⼊⼒) • 画質で⾔うと他の画像⽣成AIの⽅が得意なケースも • 初⼼者はChatGPT Plus経由のDALLEやBing Image Creatorからで良いかも • 本格的に使おうとすると課⾦が発⽣ • 上のプランだと25ドル/⽉ (まぁでも⾃前で作るより全然安いですが)
基本操作 & デモ
左下にある 「画像を⽣ 成」をクリッ ク
基本画⾯ • 英語でプロンプトを⼊れます • 書いてほしいものをプロンプト欄に • 除外したいもの(ネガティブプロンプ ト)を「除外したい要素」の欄に • 後画像サイズの調整。⼩さいと早い&
Anlasというトークンの消費が0になり ます(⼤きいと10くらい消費。0にな ると⽣成できなくなります)
とりあえず何か⼊れてみる • 「dog」とした場合
とりあえず何か⼊れてみる • 「dog, realistic」と した場合
とりあえず何か⼊れてみる • 「dog, realistic, beach」とした場合
画⾵を固定するには • Seedを固定する、指⽰⽂を 明確にする、が基本戦略 • 後グレーゾーンなものの、 「キャラクター名」もいける ( 今後の法整備は要注意 )
• (ランダム) Seedを固定する とプロンプトに対して同じ画 像が出るようになる ( ただ、dogだけだと弱いか もしれない ) Seed値を⽣成時に 流⽤すると同じ感じになる
Seed値を固定ver • 2枚⽬のワンちゃ んのseedを使っ て、beachのプロ ンプトを追加 • ⽝種とか特徴を追 加していけばもっ と再現性は上がる
はず (今回は割愛)
撮影条件の指定 • 「あなたがカメラ マン」だとした時 にどういうセッ ティングで臨むか • 横からの撮影なら 「from side」な
ど
画⾵の変換 • 「あなたが絵描 き」だとした時に どういう画⾵で臨 むか • 「by Alfons Mucha」(ミュシャ
⾵で)、とかは便利 です • なぜかV3ではうま くいかなかったの でV2モデルにて
カード形式に • 「in card frame」を追加 • カードゲームの素 材とかにも使えそ うですね •
(V3に戻してます)
Tips
とりあえず、ランダム⽣成 • 「ランダム化」のボタン をおすと⾊々⽣成してく れます • プロンプトの発⾒にも繋 がります
公式マ ニュアル • キャラクター⽣成⽅法(⼥性 編)の⽇本語訳が載ってます • https://docs.novelai.n et/image-jp/tutorial- charactercreation- jp.html
• ちょっとまだこのレベルま では説明できないので、ご 紹介のみ
NovelAIのベースのタグ⼀覧 • Danbooruのタグ⼀覧が wiki化されてます • 画⾵などは参考になりま す • 1980s、各アニメ作品な ども。
• (たまにエロ系もあるの で注意) https://danbooru.donmai.us/wiki_pages/tag_groups
Civitaiを参考にする • Civitaiというイラスト掲 ⽰板では他の⼈のプロン プトを参考にできます • https://civitai.com/ • 主にStable Diffusion系の
記法でLoRAタグに対応し ていないなど違いはあり ますが、プロンプト、ネ ガティブプロンプトの書 き⽅は結構参考になりま す https://civitai.com/images/667938
参考:civitaiからコピペして再現(ff7r) • LoRAタグ使わなくて も、作品名はやはり 強⼒ (キャラ名⼊れるとな おさら。今回は⼊っ ていないはず) • でも、将来的に著作
権の問題になりうる ので、(趣味以外で は)なるべく固有名詞 は避けましょう
参考:1980s指定を追加 • なんかテイルズっ ぽくもなってる ( 1980sは本来もう 少しベタな感じに なると思いつつ、 多分ff7rが混ざって いるのでこの感じ
かも )
参考:ff7r styleプロンプトを除外 • ⾔語だけでは、ニュアン スの再現がむずい・・ (特に髪型や顔の輪郭な ど) • この辺はスケッチを書い て読ませる⽅法などもあ
るが・・ • 別作品をオマージュした 新キャラとしてはあり (抽象化->具体化のバリ エーション)
Chat先⽣に解説して もらう • プロンプトの解説よろ しく、というとそれっ ぽく答えてくれます • ただ、バランスなどは やはり試⾏錯誤かなと (プロンプトは最初の
ものが優先気味になり、 多すぎると逆効果の場 合も)
NovelAI運営参加イ ベントもあるよう です・・! • 今回は参加できませんでしたが、いつか⾏きたい • ひとまず公式twitterをフォローしましょう • https://twitter.com/novelaiofficial
Enjoy .. !!