たくさん棲みつかせる話 #NT札幌

Slide 1

Slide 1 text

たくさん棲みつかせる話 2020/12/26 ミクミンP NT札幌2020 @cluster

Slide 2

Slide 2 text

2020/12/26 NT札幌2020 @cluster 2 http://www.ghibli.jp/works/mononoke/

Slide 3

Slide 3 text

人外がわらわら居るのって好きですよね？ 2020/12/26 NT札幌2020 @cluster 3

Slide 4

Slide 4 text

天岩戸の例のシーン 2020/12/26 4 NT札幌2020 @cluster 八百万の神々がみんなで笑っているので、アマテラスオオミカミは気になってちょっとだけ天岩戸を… https://dl.ndl.go.jp/info:ndljp/pid/772088/1 https://ja.wikipedia.org/wiki/天岩戸あまのいわと

Slide 5

Slide 5 text

古事記にもそう書かれている 2020/12/26 NT札幌2020 @cluster 5

Slide 6

Slide 6 text

家にいろいろ棲みついている世界をめざしています 2020/12/26 NT札幌2020 @cluster 6

Slide 7

Slide 7 text

棲みついている？ •家で起こっているさまざまなことを感じて •アクションを起こす何かが常にいる 2020/12/26 7 NT札幌2020 @cluster センシング判断アクション相互につながる役に立つかどうかはどうでもよい

Slide 8

Slide 8 text

センシング 2020/12/26 8 NT札幌2020 @cluster 気温湿度照度電圧電波強度風向風速雨量雷人感各種ガス赤外線 PM2.5 気圧 CO2e

Slide 9

Slide 9 text

センシング 2020/12/26 9 NT札幌2020 @cluster ミリ波開閉重量加速度音声電力映像バーコード NFC

Slide 10

Slide 10 text

約80センサが常時動作 2020/12/26 NT札幌2020 @cluster 10

Slide 11

Slide 11 text

データ収集・監視の仕組みを公開しています MQTT bridge for TWELITE PAL https://github.com/ksasao/TWELITE_PAL_MQTT 2020/12/26 11 NT札幌2020 @cluster

Slide 12

Slide 12 text

収集・蓄積・推論・再送信 2020/12/26 12 NT札幌2020 @cluster ZigBee/WiFi Bluetooth/有線 MQTT HTTP(S) センサ生値ではなくデバイス側である程度加工もサーバ (冗長構成) Pub/Sub型でデバイス間でも自律処理

Slide 13

Slide 13 text

日本語をいい感じに解釈する仕組みを公開しています 2020/12/26 13 NT札幌2020 @cluster pixiv小説の本文データ約7億文字から形態素解析した学習データで入力された語句に近い既知の語彙を返すやつ https://gist.github.com/ksasao/5219c9912120aba9b71cc320a40d3d5d 登録されている “照明オン”と同じ意味かな？電気つけて！

Slide 14

Slide 14 text

アクション 2020/12/26 14 NT札幌2020 @cluster 音声合成サーバ音声出力メッセージ（話者・場所） Bluetooth スマートスピーカー音声

Slide 15

Slide 15 text

声が歩き回る 2020/12/26 15 NT札幌2020 @cluster リビング台所お風呂場寝室玄関

Slide 16

Slide 16 text

声が歩き回る 2020/12/26 16 NT札幌2020 @cluster リビング台所お風呂場寝室玄関お風呂わいたよー

Slide 17

Slide 17 text

声が歩き回る 2020/12/26 17 NT札幌2020 @cluster リビング台所お風呂場寝室玄関お風呂わいたよーはやく止めてよ

Slide 18

Slide 18 text

声が歩き回る 2020/12/26 18 NT札幌2020 @cluster リビング台所お風呂場寝室玄関お風呂わいたよーはやく止めてよやばいよ！

Slide 19

Slide 19 text

しゃべらせる仕組みを公開しています 2020/12/26 19 NT札幌2020 @cluster TTSController https://github.com/ksasao/TTSController VOICEROID+ 各種 VOICEROID2 各種音街ウナTalkEx ガイノイドTALK 各種かんたん！AITalk3 / 関西風 / Lite CeVIO CS6 / CS7 SAPI5 対応音声合成エンジン・URLだけで操作・話者選択・スピーカー選択・音量・速さ・高さ・抑揚を操作・ささやき声化

Slide 20

Slide 20 text

アクション 2020/12/26 20 NT札幌2020 @cluster 照明コントロールメッセージ（場所・状態）プロトコル変換サーバ明るさ WiFi 赤外線

Slide 21

Slide 21 text

アクション 2020/12/26 21 NT札幌2020 @cluster 匂い温湿度 Scentee Machina 物理電子ペーパー

Slide 22

Slide 22 text

アクションは穏やかに •まぶしくしない •騒がしくしない •動作音がするものは人がいなくなった時に •言い方はかわいく •声も内容も 2020/12/26 22 NT札幌2020 @cluster https://cultofthepartyparrot.com/

Slide 23

Slide 23 text

棲んでいるみなさん 2020/12/26 NT札幌2020 @cluster 23

Slide 24

Slide 24 text

冷蔵庫さん •冷蔵庫を一瞬あけると元に戻るのに30分以上かかる •ジュース1本の出し入れは重さの変化でわかる •霜とり動作で重さが常に変動している 2020/12/26 24 NT札幌2020 @cluster

Slide 25

Slide 25 text

台所さん •お皿を洗っているのが洗剤の揮発成分で検出できる •料理の焦げ具合が PM2.5センサでわかる 2020/12/26 25 NT札幌2020 @cluster

Slide 26

Slide 26 text

ベッドさん •そろそろ目を覚ましそうかがガス成分や重量変化でわかる •お布団を干すと軽くなる 2020/12/26 26 NT札幌2020 @cluster

Slide 27

Slide 27 text

ゲームさん •表示されている画像から今日もフィットボクシングをやったことが記録される 2020/12/26 27 NT札幌2020 @cluster 完了です。おつかれさまでした！ https://twitter.com/ksasao/status/ 1273221637177880576

Slide 28

Slide 28 text

QRコードだけで画像認識が使える仕組みを公開しています 2020/12/26 28 NT札幌2020 @cluster Brownie https://github.com/ksasao/brownie/

Slide 29

Slide 29 text

バラバラではなく互いに溶けがち 2020/12/26 NT札幌2020 @cluster 29

Slide 30

Slide 30 text

効果 •なぜか部屋が片付くようになった •監視されてる感？ •電気代が安くなった •やせた •ぐっすり眠れるようになった •なにもわからないことが分かった… •機械学習・電子回路・物理・化学・統計学 •認知科学・宗教・… 2020/12/26 30 NT札幌2020 @cluster

Slide 31

Slide 31 text

関連資料 • おうちセンサでキャラクターと暮らしてみた (2015年/ミクミンP) • https://www.slideshare.net/ksasao/ss-53491169 • AIカメラで簡単に生活を便利にする (2020年/ミクミンP) • https://www.slideshare.net/ksasao/ss-53491169 • おうちにデバイスをたくさん生やす時に気をつけていること (2020年/ミクミンP) • https://qiita.com/ksasao/items/221ae5927d8e210606b3 2020/12/26 31 NT札幌2020 @cluster ミクミンP @ksasao