Slide 1

Slide 1 text

img2imgで昔の ゲーム画像をい い感じにする (NovelAI利⽤) 2024/3/30 @DORADORA09

Slide 2

Slide 2 text

⾃⼰紹介 · ⼤城と申します (tw: @doradora09) · オモシロAIごった煮会の主催者(のひとり) · ゲームが好きでプログラミングの勉強を始 めたものの本業はデータ分析でちょっと固 めなので、こちらの会では⾊々と実験的な 事をやりたいなと思ってます · 余談ですが、最近はドラゴンズドグマ2の ⾁が美味しそうで⾃分でも⾁を焼いて⾷っ たりしてます

Slide 3

Slide 3 text

img2imgというものがありまして · 画像を元に新しい画像を⽣成する技術 (イメージ to イメージの略) · また最近(2024/2/22)NovelAIが独⾃に「バイブストランスファー」と いう「画像のテイストを真似する機能」の実装したので、今回は実験的 にこれを使ってみました 参考: https://blog.novelai.net/ バイブストランスファー- 6d4280325d77 (左の画像が参考の画像。 右の絵に⽂字のプロンプト と共に反映される)

Slide 4

Slide 4 text

今回の対象画像 · (ちょっと怒られそうなものもありますが) 実験的にこれらを元にimg2img をしてみます。(しかしシヴィザード、リメイクしてくれないですかねー)

Slide 5

Slide 5 text

結果①: バーチャ ファイタ ちょっとアニメ⾵になるのが NovelAI。 realisticを {} で強調すると もう少しリアル⾵になります

Slide 6

Slide 6 text

結果①: バーチャ ファイタ リアル成分多め。 ちょっと表情が違うかも?

Slide 7

Slide 7 text

結果①: バーチャ ファイタ バイブストランスファーのみ 利⽤。表情は似てるが、 構図は異なる。 (先ほどはimg2imgを主に利⽤)

Slide 8

Slide 8 text

結果②:某 配管⼯さん Img2imgだけだと結構苦戦。 ドット絵のノリを引き継いでしまう

Slide 9

Slide 9 text

結果②:某 配管⼯さん バイブストランスファーを メインに使うといい感じに

Slide 10

Slide 10 text

結果②:某 配管⼯さん 1枚で複数の絵を描くと、 服装などが破綻しにくい

Slide 11

Slide 11 text

結果③: マーリンさ ん シヴィザード、プレステ1 の作品ですね (PC版がオリジナル?そっ ちは未プレイ)

Slide 12

Slide 12 text

結果③: マーリンさ ん なおdot絵に引っ張られてか、 解像度が粗めになることが 多かったです。 この辺はまだ研究の余地あり。

Slide 13

Slide 13 text

おまけ①: ゲームタイト ル画⾯ · ⽂字は微妙ですが、頑張 ればそれなりにいけそう。

Slide 14

Slide 14 text

おまけ②: マップ画⾯ · これは正直、ドット絵の ⽅が味があって好きかも · デフォルメ表現も⼤切だ なと改めて。

Slide 15

Slide 15 text

所感:趣味としてはそれなりにいけそう · Img2imgだけだと構図が固定されますが、バイブストランスファーの画⾵ のコピーはめっちゃ便利だなと思いました ( 今まで頑張って、元画像を⼀度テキストに変換してプロンプトに⼊れる、 というのが不要になった ) · ただ、失敗作がこれの10倍くらいは発⽣しているので、あくまでガラガラ ポンで1枚のみ作る、という場合に有効かなと思います ( 本格的に再現させるにはやはり別の⼿法が必要か ) · 趣味で旧作ゲームの部分的リメイク、くらいだったら使えるかもですね

Slide 16

Slide 16 text

今回参考にした先⼈たち · ελδΦਅḆʲ"*Πϥετज़ղઆʳ IUUQTTUVEJPNBTBLBLJGBOC PYDD · TwitterやFanboxでも⾊々と 情報提供されていました (1000円だけお捻り投⼊) · 実験の量が半端ないので、す ごいなと

Slide 17

Slide 17 text

今後やりたい事 · 「キャラクターの顔を似せたま ま他の動きを作る」にトライし たいなと思ってます · 今の所Midjourneyの画像参照で やる⽅法、が⼀つ有⼒候補です · 将来的にはSoraで動画化とかも できるとちょっとしたゲーム ムービーも作れるかもですね 参考(Midjourney部さん): https://lala.idea4u.net/archives/108457652

Slide 18

Slide 18 text

Enjoy..!!