RuccaをLuccaに変える技術

bye bye lucca

Transcript

1. ルッカを変える技術 進捗ゼミ / 足利聡太
2. 進捗ゼミです 京都大学情報学研究科 まあまあ真面目に研究してます（伏線） pre-マネフォ。なんか入れ違ったんだが！ Luccafort歴 3年（2023年9月～） 趣味：徒歩でパン屋巡り（伏線）、映画
3. 9月上旬のこと 北九州で学会に行ってきました 最終日後、帰りの新幹線までに時間があった 下関で観光！ 散歩コース
4. ベーカリーの 検索結果
5. パンのルッカあるやん！？
7. 下関駅から2.9km 往復！
8. 徒歩！！40分ほどで到着 「よっしゃ！店あいてる！」 と思ったものの…
10. やらかした！！
11. RuccaをLuccaに変える技術 進捗ゼミ / 足利聡太
12. 要件：ここを誤魔化したい！！
13. 画像生成モデルの基本 画像x0にノイズをランダムにεだけ足す ノイズ画像＋元画像＋加えたノイズ、が教師データ ノイズ画像から「どんなノイズだったか」を学習する
14. 学ばせ方
15. 出来上がるもの ε(t, xt)だと「画像として自然な方向」にしかいかない 当然「壁」が生成される
16. テキストで条件付けをしよう
17. これで生成されるもの 「なんか文字が書かれた看板」になった
18. 当然ながら、Luccaという文字が学習されてない ε(t, xt)だと「hello」に近いのは「welcome」とか そもそも文字の形で学習してない（トークン単位）
19. 文字の「形」を入れて戻す
20. 出来た！！捏造成功！！ お土産は焼き菓子です
21. 余談：レジ袋