TJBotで学ぶAI ／ IoTの世界 / TJBot-zero with Node-RED

by Mutsumi Sakaigawa

Slide 1

Slide 1 text

Slide 2

Slide 2 text

Slide 3

Slide 3 text

TJBot を知っていますか・・・? (C)2005-2019 Pumpkin Heads Co.,Ltd. All rights, reserved. 3 • TJBot とは・・・！ • Thomas J Watsonに因んだロボットと言うことでネーミングされました • IBM US Research がWatsonを学習するために開発したレーザーカットされた段ボールで作るAIキットです • Raspberry pi 2B/3Bをベースに Node.js / python / Node-RED で構成されています

Slide 4

Slide 4 text

アメリカでは・・・！ • US student・・・ – IBM Cloud Watson を活用 • Text to Speech • Speech to Text • Assistant を利用して動画が紹介されています (C)2005-2019 Pumpkin Heads Co.,Ltd. All rights, reserved. 4 https://youtu.be/fyXUOFYK_uc?t=180

Slide 5

Slide 5 text

Slide 6

Slide 6 text

Slide 7

Slide 7 text

Slide 8

Slide 8 text

Slide 9

Slide 9 text

どうする・・・！キット • コストパフォーマンスを検討 • Raspberry pi のサイズの見直し – Raspberry pi zero WH をベース基板とし、アンプ基板を別途構成することで音声周りの不安定を克服 – TJBot の約85％のサイズに縮小できる – TJBot のミニサイズに製図し直した – TJBot の各パーツを見直した • Raspberry Pi 3B => Raspberry Pi zero W • Neopixel Full color LED => RGB LED • USB/Bluetooth Audio => Raspberry Pi 用アンプキット（PWM Audio + AMP IC） • 日本IBM からボール紙を提供 (C)2005-2019 Pumpkin Heads Co.,Ltd. All rights, reserved. 9

Slide 10

Slide 10 text

Slide 11

Slide 11 text

どうする・・・！ Node-RED 環境 • イメージ化 – https://github.com/tjbotfan/tjbotzero-raspbian/releases – 収録内容 • Raspberry Pi Raspbian ベース • ハンズオン用の SSID/PW の埋め込み • TJBotzero ハンズオンで使用するフロー • TJBotzero で使用するパーツの基本動作テストフロー • フローに必要なNode・関連ミドルウェアの導入 • 補足 – ハンズオンに参加せず、キットを自作される方も一度このイメージで起動してみてください (C)2005-2019 Pumpkin Heads Co.,Ltd. All rights, reserved. 11

Slide 12

Slide 12 text

完成 TJBotzero ・・・！ • TJBot zero – Raspbian + Node-RED を使用したハンズオン用microSD を作成 – microSDを構成するインストールスクリプトを元に githubでSDカードイメージを配布 • 2018 BMXUGイベント IBM Cloud Community Summit 2018でハンズオンを開催 – 先着順20名限定 – 開会と同時に満席 (C)2005-2019 Pumpkin Heads Co.,Ltd. All rights, reserved. 12

Slide 13

Slide 13 text

TJBotzero 何が出来る・・・？ • TJBot が光る – RGB フルカラーLED搭載 • 起動すると点灯します • TJBot が話す – Node-REDのフローまでを含んみます • 起動するとはなします“僕の名前は、TJBotです” – ボタンを短く押すと • WiFiから取得した “IPアドレスは、・・・です” • Node-RED フローエディタへ誘導 – ボタンを長く押すと • “シャットダウンします” • TJBot が見る – 内蔵カメラでOpenCVによる顔判定 • TJBot が手を振る – 顔を認識するとサーボモーターで手を振る (C)2005-2019 Pumpkin Heads Co.,Ltd. All rights, reserved. 13 https://youtu.be/d2wof2XLJUw?t=5

Slide 14

Slide 14 text

TJBotzero と Cloud AI • クラウドのAPIを利用しAIの利用を拡張・拡充できます – IBM cloud • 画像認識：Watson Visual Recognition • 音声合成：Watson Text to Speech • 音声認識：Watson Speech to Text • 翻訳：Watson Translator – IBM MAX • Image caption generator – IBM 以外のクラウドも組合せて使うことができます • Google translator (C)2005-2019 Pumpkin Heads Co.,Ltd. All rights, reserved. 14

Slide 15

Slide 15 text

TJBotzero 現在の活動 • TJBotzeroハンズオン基礎編を毎月定期開催 – 2019/01 ～ – 定員10名/抽選制 • TJBotzero応用編開催を毎月定期開催 – こんな事をやってみた – やってみたいけど方法を教えて欲しい – 2019/06 ～ – 定員10名/抽選制 (C)2005-2019 Pumpkin Heads Co.,Ltd. All rights, reserved. 15

Slide 16

Slide 16 text

TJBotzero 特別講義 • TJBotzero for Edu Tech子グループ始動（education technical） – 大学でのハンズオンを実施 – 2019/06 • 組み立て済みTJBotzeroを使用した Node-RED基礎・クラウド利用ハンズオン – 2019/07 • TJBotzeroの組み立て • Node-RED基礎・クラウド利用ハンズオン – 以降、他大学でも予定されています (C)2005-2019 Pumpkin Heads Co.,Ltd. All rights, reserved. 16

Slide 17

Slide 17 text

今後の活動 1 (C)2005-2019 Pumpkin Heads Co.,Ltd. All rights, reserved. 17 • 2019/07/27 – 【福岡】 – Node-REDでボット(TJBot)とIBMCloudをつなげよう！ • https://bmxug.connpass.com/event/138260/ • 2019/08/19 – 【名古屋】 – ラズパイとNode-REDでロボット(TJBot zero)を作ろう 2019 #08基礎編 • 詳細は後日 https://bmxug.connpass.com よりご案内

Slide 18

Slide 18 text

Slide 19

Slide 19 text

皆様の参加をお待ちしております • TJBotFan ホームページ – イベント情報の告知 – TJBot zeroノウハウをまとめて紹介 – https://tjbotfan.tokyo • Facebook TJBotFanグループ – TJBot / TJBotzeroのディスカッショングループ – https://www.facebook.com/groups/547028405784779/ (C)2005-2019 Pumpkin Heads Co.,Ltd. All rights, reserved. 19