Upgrade to Pro — share decks privately, control downloads, hide ads and more …

AIミーティング 20230510

AIミーティング 20230510

AIミーティング 20230510「ChatGPT + HoloLens 2 連携の試行錯誤したこと」の登壇資料です。

◆スライド内の素材は以下を使用させていただいております。ありがとうございます!

・シルエットデザイン http://kage-design.com/
・human pictogram 2.0 http://pictogram2.com
・ICOOON MONO http://icooon-mono.com/
・Adobe Stock https://stock.adobe.com/jp

1ft-seabass

May 10, 2023
Tweet

More Decks by 1ft-seabass

Other Decks in Technology

Transcript

  1. 音声認識したテキストを ChatGPT API に伝えて IoT へ指示する JSON に変換され IoT が動作します

    日本語 音声認識 (インターネット経由) IoT 指示 JSON 自前 Node-RED ChatGPT API HoloLens2 IoT
  2. ほかの IT の仕組みに馴染ませるために ChatGPT の万能さを JSON 返答するように調整 あえてルールを決め回答しやすく案内+ JSON データに加工して回答してもらう。人間同士の対話っぽい。

    人間の言葉を理解 JSON データに 加工して回答 ルールを決めて 回答しやすく特化 ブラッシュアップ! ブラッシュアップ! 人間の言葉を理解 人間の言葉で回答 回答ジャンルは万能 (得手不得手はある) ▪ChatGPT の基本キャラクター ▪他のシステムに馴染ませる調整(今回)
  3. ChatGPT API で JSON を返してくれるナレッジ LED への RGB 値を JSON

    データで返答する ChatGPT API の仕組みを Node-RED でブラッシュアップしたメモ https://www.1ft-seabass.jp/memo/2023/03/17/chatgpt-http-api-like-json-response-tips-with-node-red/
  4. ➔ 音声認識の揺れもうまく吸収してくれて ChatGPT が VR と IoT の橋渡しをしてくれる素敵 ➔ JSON

    での返答をお願いすることで自然言語を解釈して他 の仕組みに戻す手間が軽減できて面白い ➔ 機能限定はよさそうだけど、機能を拡張するときにどうす るかは引き続き考える必要がありそう ➔ とにもかくにも AI + XR + IoT がイイ感じにつながったの は、すごく勉強になったし、ワクワクした! まとめ