Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Sign up for free
Menu
Search
Features
All features
Private URLs
Password Protection
Custom URLS
Scheduled publishing
Remove Branding
Restrict embedding
Deck Collections
Notes
Features
All features
Private URLs
Password Protection
Custom URLS
Scheduled publishing
Remove Branding
Restrict embedding
Deck Collections
Notes
Explore
Featured decks
Featured speakers
Programming
Technology
Storyboards
Explore
Featured decks
Featured speakers
Programming
Technology
Storyboards
Pricing
Search
Sign in
Sign up for free
全肯定する理想の妹をるきぐらで召喚する方法
Search
sirohood
June 11, 2021
Technology
93
0
Share
Embed
Copy iframe code
Copy JS code
Copy link
Start on current slide
全肯定する理想の妹をるきぐらで召喚する方法
How to summon a totally affirming ideal sister in LookingGlass
sirohood
June 11, 2021
Transcript
18 slides
全肯定する理想の妹を るきぐらで召喚する方法
目次 自己紹介 初歩的知見 みくちゅあがーでん ドコモAIエージェントAPI 全肯定する理想の妹 作成方法 まとめ・最後に るきぐらの知見は少な目...
自己紹介 第1回 LookingGlassハッカソン 優勝チーム所属 第2回 LookingGlassハッカソン 優勝チーム所属 JapanVRFest銀座VR3 るきぐらを使用した「#みくちゅあがーでん」展示 保有るきぐら Portrait
x 1 Standard x 2 Large x 1(チーム共有) シロフード @sirohood_exp とある企業のVR事業部に所属
初歩的知見 申し訳程度に初歩的な知見 るきぐらの(展示向け)知見 「LookingGlassコンテンツについて」 https://sirohood.exp.jp/20191111-2959/ 撮影時に映り込みを無くすためには 直径15cmの回転台があると LookingGlassPortraitにちょうどいい ・周りを暗くする ・背景を設定する
LookingGlassで 何を表示したい?
おそらく・・・ なんとかboxの 上位版を作りたい 好きなキャラを表示させたい。 会話したい。 触れたい。
#みくちゅあがーでん LookingGlassに初音ミクを表示 マイク LeapMotion Airbar LookingGlass Large るきぐらをタッチパネル化(Airbar) 音声認識(Microsoftの音声認識サービス) ハンドトラッキングで
頭を撫でたり・髪を触れる(LeapMotion) ライブモードも実装
問題点 ・認識する単語を増やすたびにコード追加。 ・セリフを増やすたびに音声ファイルを作る。
もっと簡単にセリフを追加したい agent craftにログインし会話シナリオを自分で作成 https://agentcraft.sebastien.ai/ 公式のドキュメントがめちゃくちゃ分かりやすい https://docs.sebastien.ai/documents/ 対話型AIサービス ドコモAIエージェントAPI
そんな現代に人類が求めているモノ それは・・・ 全肯定で話を聞いてくれる 理想の妹! とは言えミクさんの声ではない 新しく るきぐらとドコモAIエージェントAPIを使って作れるものを考える 自粛疲れ ソーシャルディスタンス・リモートワークなどで コミュニケーション不足が深刻
https://youtu.be/q1vCXfdgvd8
救われる~~~~!!
ドコモAIエージェントAPIの良いところ すごい! 対話サービスを簡単に実装できる 音声認識 返答するセリフを合成音声で返してくれる 音声種類は50種類以上 単語のマッチング条件を 「部分一致・読み一致・完全一致」など選ぶことができ あいまいな表現でも反応してくれる。 返答セリフはjson形式でメタ情報を追加できる
表情とアニメーションさえプログラム側で準備しておけば セリフ作成だけでキャラが動いてくれるようになる ユーザー名の登録などもできる
反応する単語 返答セリフ 一致パターン
画面上で 返答テストが可能
{ "systemText": { "expression": "よしよしー、がんばったね", "utterance": "よしよしー、がんばったね" }, "talkend": true,
"command": { "version": "sebastien-1.0.0", "type": "nlu_result", "speaker_params": { "speaker_id": "jpn_JP-F-S0105-T001-E01-SR0", "style_id": "jpn_JP-F-S0105-T001-E01", "voice_type": 1.03, "power_rate": 2.5, "intonation": 11, "pitch": 11 }, "option": { "switchAgent": { "agentId": "3913_4001_main", "agentType": "1" } }, "rule_id": "15058", "Face": "よろこび", "VroidAnime": "すごい" }, "dialogStatus": { "commandId": "00000000000", "task": { "taskId": "00000000" }, "loopCount": "0" }, "serverSendTime": "2021-06-11 04:45:23" } 返答時のjsonも 確認が可能 json形式で メタ情報を 追加可能
ドコモAIエージェントAPIは るきぐらで表示したキャラクターに対話機能を持たせるのに便利 まとめ jsonから情報取り出してUnity側で受け取る仕組みも準備されているし その辺までチュートリアルに書かれている。 えらい! 今回は紹介程度ですが 後日制作ログとしてもう少し詳しい内容をブログにまとめる予定 興味あるひとは シロフード
@sirohood_exp をフォローお願いします。
自分だけの 最強るきぐらコンテンツ を作ろう! るきぐらを3Dフォトフレームにするのはもったいない! 最後に 2日で資料つくれて えらいね お兄ちゃん! いろんなツールや デバイスを組み合わせて
Other Decks in Technology
See All in Technology
データから見る AI時代のエンジニア転職と採用
junya_okura
4
1.3k
成長するID管理基盤における運用もコストも犠牲にしないオブザーバビリティ向上の実践 / Improving Observability for a Growing Identity Platform Without Adding Operational Burden or Cost
kaminashi
1
130
個人ASを取得して、自宅Kubernetes上のVMをグローバルIPで公開した話
munenick
0
230
クラウドでも使えるNetApp -現場目線での設計とクラウドバックアップの活用
ryutakondo
1
330
設計手法を「道具」として使いこなすために
a_suenami
7
1.8k
ポケモンバトルのAIエージェント
koji_kawamura
0
230
Web Performance Is a Journey [PerfNow 2026]
tammyeverts
2
150
kubellの最新データ分析環境
kubell_hr
2
260
NutanixへのSSHアクセスの今後について
shadowhat
0
170
市販IoT機器や自作IoT機器とHomeAssistantを駆使して家の電気代をできる限り見える化する方法の考案
harutiro
0
420
サーバーラックは作る時代! 3Dプリンターで作る10インチラックのススメ
jacopen
2
520
メルカリの小規模チーム「Pod」で、 エンジニアがデータアナリストなしで、 AIを使ってデータ分析の自走を目指す取り組み
jackojacko_
1
350
Featured
See All Featured
Facilitating Awesome Meetings
lara
57
7.2k
Navigating Weather and Climate Data
rabernat
0
600
Keith and Marios Guide to Fast Websites
keithpitt
413
23k
Helping Users Find Their Own Way: Creating Modern Search Experiences
danielanewman
31
3.4k
Building Experiences: Design Systems, User Experience, and Full Site Editing
marktimemedia
1
670
Creating an realtime collaboration tool: Agile Flush - .NET Oxford
marcduiker
35
2.6k
How to build a perfect <img>
jonoalderson
1
6.3k
Between Models and Reality
mayunak
4
610
職位にかかわらず全員がリーダーシップを発揮するチーム作り / Building a team where everyone can demonstrate leadership regardless of position
madoxten
70
69k
KATA
mclloyd
PRO
35
16k
ReactJS: Keep Simple. Everything can be a component!
pedronauck
666
130k
The Organizational Zoo: Understanding Human Behavior Agility Through Metaphoric Constructive Conversations (based on the works of Arthur Shelley, Ph.D)
kimpetersen
PRO
0
550