生成AIでできること

Slide 1

Slide 1 text

2024.1.31 【HiBiS】最新Techセミナー武村達也⽣成AIでできること Midjourney DALL-E3 Stable Diffusion ※これらの画像は「生成AIでできること」というプロンプトで画像生成AIで作成したもの

Slide 2

Slide 2 text

⾃⼰紹介武村達也 Twitter ︓tatsuya1970 HiBiS DX研究部会副部会⻑職業︓普通のサラリーマン・趣味で電⼦⼯作、クソゲー、メタバースのワールドなど作成・ハッカソンに約15回参加⼊賞多数・国内外のメイカーイベントに約10回出展・講演実績︓ ⼀般社団法⼈⽣成AI協会早稲⽥⼤学ビジネススクール広島⼯業⼤学電⼦情報通信学会

Slide 3

Slide 3 text

SNOWのAIアバター本物

Slide 4

Slide 4 text

第1部画像⽣成AI 第2部 ChatGPT 第3部その他ここ１年半で私が⼿を動かしたことをザーっと紹介

Slide 5

Slide 5 text

第１部画像⽣成AI ※これらの画像は「画像生成AI」というプロンプトで画像生成AI「Midjourney」で作成したもの

Slide 6

Slide 6 text

2022.8.22 世界変⾰前夜 https://note.com/fladdict/n/n13c1413c40de ※THE GUILDの深津貴之氏のnoteより引用

Slide 7

Slide 7 text

2022.8.23 Stable Diffusion ⼀般公開

Slide 8

Slide 8 text

Prompt: Hiroshima carp, baseball park, family enjoy peaceful 2022.8 Stable Diﬀusion 1.0 2023.11 Stable Diffusion XL Stable Diffusion

Slide 9

Slide 9 text

Prompt: Hatsune miku wearing red baseball uniform of Hiroshima carp in Mazda Studiam 2022.8 2024.1 Midjourney

Slide 10

Slide 10 text

Hatsune miku is ea?ng Hiroshima okonomiyaki 2022.8 2024.1 Midjourney

Slide 11

Slide 11 text

Midjourney

Slide 12

Slide 12 text

Midjourney アウディがタイヤホイールのデザインを⽣成AIを活⽤してるというニュースをきいて、試してみた

Slide 13

Slide 13 text

年賀状（Midjourney、2023年1⽉）⽂字が苦⼿

Slide 14

Slide 14 text

年賀状（Niji journey、2024年1⽉）⽂字を克服

Slide 15

Slide 15 text

img2img(Stable Diffusion)

Slide 16

Slide 16 text

Stable Diffusionのimg2imgを使ったパラパラ動画【作り⽅】（Pythonのプログラムで処理） 1. 左の動画をフレーム毎にJPEG⼀括変換（200枚） 2. その画像をローカルの Stable Diffusion のimg2imgを使ってイラストに⼀括変換（プロンプト︓"realistic, man"） 3. イラストを全部結合して完成 https://youtu.be/VSmfyTFGwOg 登壇では動画を流しました（以下QRコードまたはURL)

Slide 17

Slide 17 text

2023年3⽉ Adobeの⽣成AI 「Adobe Fireﬂy」

Slide 18

Slide 18 text

2023年3⽉ Adobeの⽣成AI 「Adobe Firefly」 https://youtu.be/e03jSwrjVak 登壇では動画を流しました（以下QRコードまたはURL) 「スーツ」

Slide 19

Slide 19 text

Adobeの⽣成AI 「Adobe Firefly」

Slide 20

Slide 20 text

Adobeの⽣成AI 「Adobe Firefly」

Slide 21

Slide 21 text

Adobeの⽣成AI 「Adobe Firefly」

Slide 22

Slide 22 text

Midjourney + Adobe Fireﬂy σδλϧ׆༻ηϛφʔ ʙσδλϧͰେ෯ʹۀ຿ޮ཰Λ͋͛ͨ ࣄྫΛ͝঺հ͠·͢

Slide 23

Slide 23 text

作り方１画像⽣成AIで画像⽣成画像編集ソフト「Photoshop」の生成AI機能「生成塗りつぶし」を使い、白い部分をAIに生成してもらう

Slide 24

Slide 24 text

作り方２ σδλϧ׆༻ηϛφʔ ʙσδλϧͰେ෯ʹۀ຿ޮ཰Λ͋͛ͨ ࣄྫΛ͝঺հ͠·͢

Slide 25

Slide 25 text

MagnificAI

Slide 26

Slide 26 text

第２部 ChatGPT ※これらの画像は「ChatGPT」というプロンプトで画像生成AI「Midjourney」で作成したもの

Slide 27

Slide 27 text

No content

Slide 28

Slide 28 text

No content

Slide 29

Slide 29 text

No content

Slide 30

Slide 30 text

No content

Slide 31

Slide 31 text

⾃分と同じ⽂体で広島を説明プロンプト︓ 「以下はたつやさんの旅⾏記の⼀部です。たつやさんと同じ⽂体で、広島の魅⼒を語る記事を500⽂字で作成してください。（旅⾏記）メトロから地上に出ると、そこはインドであった。南国の⽣暖かい空気が僕の五感に触れる。体臭、ゴミ、カレーの臭いを期待していたが、⼈⽣初インドという緊張からか臭いはまったく感じない。早朝だからか、まったく暑さを感じない。⽇本と気候が変わらないかのようだ。・・・・（以下略）」 ※旅行記の文章はこちらから引用

Slide 32

Slide 32 text

プログラミング

Slide 33

Slide 33 text

クソゲー制作「あなたはゲームプログラマーです。JavascriptとHTMLを使ったクソゲー（クソみたいなゲーム）を作ってください。解説は書かず、コードだけを出⼒してください。」 https://x.com/tatsuya1970/status/1636372770547458050?s=20 登壇では動画を流しました（以下QRコードまたはURL) プロンプト

Slide 34

Slide 34 text

ウェブサービス作成 # 命令書: あなたは優秀なフロントエンドエンジニアです。指⽰の通りHTMLのサンプルコードを書いてください。 # 制約条件・HTML , CSS , Javascript は１つのHTMLファイルにしてください・OpenAIのAPIキーは 999999999 としてください・どんなに⻑いコードでも必ず⼀つのhtmlコードブロックに収めてください。 # 指⽰・ChatGPTと同様の機能のあるウェブアプリを作ってください

Slide 35

Slide 35 text

計算機アプリ作成 hAps://x.com/tatsuya1970/status/1715667998336561203?s=20 登壇では動画を流しました（以下QRコードまたはURL)

Slide 36

Slide 36 text

2023年3⽉2⽇ついに ChatGPTのAPI公開

Slide 37

Slide 37 text

API とは︖ アプリケーションプログラミングインタフェース（Application Programming Interface）広義ではソフトウェアコンポーネント同士が互いに情報をやりとりするのに使用するインタフェースの仕様のことである。

Slide 38

Slide 38 text

API とは︖ APIなし APIあり

Slide 39

Slide 39 text

ChatGPT（GPT-3.5-turbo）でチャットボット作成作り⽅ https://qiita.com/tatsuya1970/items/c04cb7b6d07c4cf51007

Slide 40

Slide 40 text

SlackにChatGPT 作り⽅ https://qiita.com/tatsuya1970/items/48665ef9f8d05fe37e20

Slide 41

Slide 41 text

ChatGPT対応スタックチャン https://www.facebook.com/tatsuya.takemura/posts/pfbid02Mnbs5GgfNyLDscB2GV5YujYLsvkEEwE9dXvQwQAnMCsVuaWYrnDWZ7v2n6Dj3vHLl 登壇では動画を流しました（以下QRコードまたはURL)

Slide 42

Slide 42 text

2023年4⽉21⽇ GateboxのCEO 武地実さんをお招きしてトークイベント https://www.facebook.com/tatsuya.takemura/videos/243335088188719 登壇では動画を流しました（以下QRコードまたはURL)

Slide 43

Slide 43 text

（広島そごう 9階催事場）登壇では動画を流しました（以下QRコードまたはURL) https://twitter.com/tatsuya1970/status/1750878845409034485 チョコレート屋さんでバイトしてるGateboxのアバター

Slide 44

Slide 44 text

Cesium + Unity + Google Photorealis5c + ChatGPT 作り⽅ https://youtu.be/WB81ccU8iP0?si=V1JvhgJA-hAGwvQG 登壇では動画を流しました（以下QRコードまたはURL)

Slide 45

Slide 45 text

Live2D + Unity + ChatGPT https://youtu.be/6WbgKR_PspA 作り⽅登壇では動画を流しました（以下QRコードまたはURL) h5ps://qiita.com/tatsuya1970/items/d2d3e460cf310957e2f0

Slide 46

Slide 46 text

※本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。あなたは猫ですが⼈間の⾔葉も理解できます。語尾に「にゃ」をつけるなど猫っぽい話し⽅をしてください。性格︓ https://qiita.com/tatsuya1970/items/628b3f7a3479c7b21698 作り⽅ CatGPT

Slide 47

Slide 47 text

2023年8⽉ Code Interpreter の登場

Slide 48

Slide 48 text

どんどん進化ついていけない・・・・

Slide 49

Slide 49 text

Code Interpreter（現在はAdvanced Data Analysis）

Slide 50

Slide 50 text

Code Interpreter（現在はAdvanced Data Analysis）

Slide 51

Slide 51 text

Advanced Data Analysis (旧Code Interpreter)

Slide 52

Slide 52 text

Advanced Data Analysis (旧Code Interpreter) RPA的なことをやってみた

Slide 53

Slide 53 text

ChatGPT Custum Instruction

Slide 54

Slide 54 text

ChatGPT⾳声⼊⼒Whisper https://youtu.be/B9DORgH04No 登壇では動画を流しました（以下QRコードまたはURL)

Slide 55

Slide 55 text

2023年9⽉ DALL-E3 マルチモーダルへ

Slide 56

Slide 56 text

DALL-E3 コラボカフェ︕

Slide 57

Slide 57 text

DALL-E3

Slide 58

Slide 58 text

DALL-E3

Slide 59

Slide 59 text

DALL-E3のAPIを使った作品「AI Texture Generator」 PLATEAU AWARD 2023 奨励賞受賞︕ https://youtu.be/6eWANH3oFnU 登壇では動画を流しました（以下QRコードまたはURL) 賞についてはこちら︓https://www.mlit.go.jp/plateau-next/award/

Slide 60

Slide 60 text

2023年11⽉7⽇ OpenAI 開発者イベントさらに、進化が加速⼤規模アップデート

Slide 61

Slide 61 text

OpenAI Assistants API

Slide 62

Slide 62 text

OpenAI Vision API 作り⽅ ChatGPTが視覚を獲得︕ https://qiita.com/tatsuya1970/items/18d14a282478b06e2a21

Slide 63

Slide 63 text

GPT Builder でオリジナルGPTの作成が可能に https://chat.openai.com/g/g-jrBF8033a-chuan-liu-gpt 写真から川柳を作るGPT「川柳ボット」

Slide 64

Slide 64 text

写真の顔をぼかすGPT 「写真の顔をぼかすマシーン」 https://chat.openai.com/g/g-oYsxkjdz9-xie-zhen-noyan-wobokasumasin GPT Builder でオリジナルGPTの作成が可能に

Slide 65

Slide 65 text

第３部その他 ※これらの画像は「その他」というプロンプトで画像生成AI「Midjourney」で作成したもの

Slide 66

Slide 66 text

動画⽣成

Slide 67

Slide 67 text

Wonder Studio https://youtu.be/hTqKKnm96AY 登壇では動画を流しました（以下QRコードまたはURL)

Slide 68

Slide 68 text

2023年8⽉7⽇ KaiberAI https://youtube.com/shorts/DXEzVp_nako 登壇では動画を流しました（以下QRコードまたはURL)

Slide 69

Slide 69 text

KaiberAI https://youtu.be/sBut03lzvIM 登壇では動画を流しました（以下QRコードまたはURL)

Slide 70

Slide 70 text

Midjourney + Runway Prompt: A girl in a red baseball uniform, Hiroshima, Cyberpunk, realistic, unreal engine –ar 16:9 https://youtu.be/Tkrdc0lMOhQ 登壇では動画を流しました（以下QRコードまたはURL) Midjourney Runway

Slide 71

Slide 71 text

プロモーションビデオができそう⾳楽に合わせて、動画を繋げればそれっぽくできる

Slide 72

Slide 72 text

テーマ︓ 近未来の広島

Slide 73

Slide 73 text

「Midjourney」で画像を⽣成

Slide 74

Slide 74 text

「Runway」で動画を⽣成 ※当⽇は右のURLおよびQRコードのリンク先の動画を流しました。 https://youtu.be/rYnezkkNqko

Slide 75

Slide 75 text

完成︕ 「近未来の広島〜HIROSHIMA in the near future」作り⽅ https://youtu.be/GlKDpsrgylo 当⽇は動画を流しました（以下QRコードまたはURL)

Slide 76

Slide 76 text

MagniﬁcAI + RunwayGen2 当⽇は動画を流しました（以下QRコードまたはURL) https://www.tiktok.com/@usersh8wc6tays/video/7329139112231865608

Slide 77

Slide 77 text

NeRF Neural Radiance Fields

Slide 78

Slide 78 text

https://youtu.be/lR7XpLLbm0s 当⽇は動画を流しました（以下QRコードまたはURL)

Slide 79

Slide 79 text

LumaAI hKps://youtu.be/11T1mKAOM3o 登壇では動画を流しました（以下QRコードまたはURL)

Slide 80

Slide 80 text

アバター系

Slide 81

Slide 81 text

Creative Reality STUDIO https://www.youtube.com/watch?v=OFR4fYU3ePY 2023.2 登壇では動画を流しました（以下QRコードまたはURL)

Slide 82

Slide 82 text

アバター︓ HeyGen 声 ︓ ElevenLabs セリフ ︓ ChatGPT 2024.1 https://youtu.be/xMBCQc7uxvQ ※当⽇は以下のURLおよび QRコードのリンク先の動画を流しました。

Slide 83

Slide 83 text

アバター︓midjourney セリフ︓ChatGPT “150⽂字程度でAIにちなんだ⽇本⼈的な名前の20代の⼀般的な⽇本⼈⼥性の⾃⼰紹介⽂を作成してください” 動画・声︓HeyGen https://youtu.be/SFxexSDAjGI ※当⽇は以下のURLおよび右のQRコードのリンク先の動画を流しました。

Slide 84

Slide 84 text

彼⼥の歌が聴きたい

Slide 85

Slide 85 text

・⾳楽⽣成AI「sunoAI」で作曲・HeyGenにアップロードするだけ

Slide 86

Slide 86 text

作詞作曲・歌：sunoAI アバター：Midjourney アバター動画：HeyGen 背景動画：RunwayGen2 Adobe Stock SunoAI Prompt: emotional ballad j-pop https://youtu.be/AbvVeNNQ5tY ※当⽇は以下のURLおよび QRコードのリンク先の動画を流しました。

Slide 87

Slide 87 text

せっかくなので、私も

Slide 88

Slide 88 text

作曲・歌：sunoAI 作詞：宮沢賢治アバター：SNOW AIアバターアバター動画：HeyGen 背景動画：RunwayGen2 AdobeStock SunoAI Prompt : J-POP , emotional https://youtu.be/jGYwEgBbhio ※当⽇は右記のURLおよび QRコードのリンク先の動画を流しました。

Slide 89

Slide 89 text

作曲・歌：sunoAI 作詞：宮沢賢治アバター：SNOW AIアバターアバター動画：HeyGen 背景動画：RunwayGen2 AdobeStock Emotional rock ballad , male vocal ※当⽇は右記のURLおよび QRコードのリンク先の動画を流しました。 https://youtu.be/YpcaWp5VNzY

Slide 90

Slide 90 text

最後に ※これらの画像は「最後に」というプロンプトで画像生成AI「Midjourney」で作成したもの

Slide 91

Slide 91 text

情報源 ︓ ほとんどTwitter あとは、ググって、⾃分で再現する情報源はTwitterだが、⾃分で触らないと理解できない