20240330_img2imgで昔のゲーム画像をいい感じにする

https://omoshiroai.connpass.com/event/311809/

Transcript

1. img2imgで昔の ゲーム画像をい い感じにする (NovelAI利⽤) 2024/3/30 @DORADORA09
2. ⾃⼰紹介 · ⼤城と申します (tw: @doradora09) · オモシロAIごった煮会の主催者(のひとり) · ゲームが好きでプログラミングの勉強を始 めたものの本業はデータ分析でちょっと固 めなので、こちらの会では⾊々と実験的な 事をやりたいなと思ってます · 余談ですが、最近はドラゴンズドグマ２の ⾁が美味しそうで⾃分でも⾁を焼いて⾷っ たりしてます
3. img2imgというものがありまして · 画像を元に新しい画像を⽣成する技術 (イメージ to イメージの略) · また最近(2024/2/22)NovelAIが独⾃に「バイブストランスファー」と いう「画像のテイストを真似する機能」の実装したので、今回は実験的 にこれを使ってみました 参考： https://blog.novelai.net/ バイブストランスファー- 6d4280325d77 (左の画像が参考の画像。 右の絵に⽂字のプロンプト と共に反映される)
4. 今回の対象画像 · (ちょっと怒られそうなものもありますが) 実験的にこれらを元にimg2img をしてみます。(しかしシヴィザード、リメイクしてくれないですかねー)
5. 結果①： バーチャ ファイタ ちょっとアニメ⾵になるのが NovelAI。 realisticを {} で強調すると もう少しリアル⾵になります
6. 結果①： バーチャ ファイタ リアル成分多め。 ちょっと表情が違うかも？
7. 結果①： バーチャ ファイタ バイブストランスファーのみ 利⽤。表情は似てるが、 構図は異なる。 (先ほどはimg2imgを主に利⽤)
8. 結果②：某 配管⼯さん Img2imgだけだと結構苦戦。 ドット絵のノリを引き継いでしまう
9. 結果②：某 配管⼯さん バイブストランスファーを メインに使うといい感じに
10. 結果②：某 配管⼯さん １枚で複数の絵を描くと、 服装などが破綻しにくい
11. 結果③： マーリンさ ん シヴィザード、プレステ１ の作品ですね (PC版がオリジナル？そっ ちは未プレイ)
12. 結果③： マーリンさ ん なおdot絵に引っ張られてか、 解像度が粗めになることが 多かったです。 この辺はまだ研究の余地あり。
13. おまけ①： ゲームタイト ル画⾯ · ⽂字は微妙ですが、頑張 ればそれなりにいけそう。
14. おまけ②： マップ画⾯ · これは正直、ドット絵の ⽅が味があって好きかも · デフォルメ表現も⼤切だ なと改めて。
15. 所感：趣味としてはそれなりにいけそう · Img2imgだけだと構図が固定されますが、バイブストランスファーの画⾵ のコピーはめっちゃ便利だなと思いました ( 今まで頑張って、元画像を⼀度テキストに変換してプロンプトに⼊れる、 というのが不要になった ) · ただ、失敗作がこれの10倍くらいは発⽣しているので、あくまでガラガラ ポンで１枚のみ作る、という場合に有効かなと思います ( 本格的に再現させるにはやはり別の⼿法が必要か ) · 趣味で旧作ゲームの部分的リメイク、くらいだったら使えるかもですね
16. 今回参考にした先⼈たち · ελδΦਅḆʲ"*Πϥετज़ղઆʳ IUUQTTUVEJPNBTBLBLJGBOC PYDD · TwitterやFanboxでも⾊々と 情報提供されていました (1000円だけお捻り投⼊) · 実験の量が半端ないので、す ごいなと
17. 今後やりたい事 · 「キャラクターの顔を似せたま ま他の動きを作る」にトライし たいなと思ってます · 今の所Midjourneyの画像参照で やる⽅法、が⼀つ有⼒候補です · 将来的にはSoraで動画化とかも できるとちょっとしたゲーム ムービーも作れるかもですね 参考(Midjourney部さん)： https://lala.idea4u.net/archives/108457652
18. Enjoy..!!