「Lobe」で手軽に始める機械学習と学習結果を活かす通信内蔵AIカメラ「S+ Camera Basic」/easy-start-for-machine-learning-with-lobe-then-inference-by-ai-camera

「Lobe」は、機械学習(ML)のモデルの作成から評価を容易に行えるアプリケーションです。作成したモデルはTensorFlow等のMLフレームワークで利用できる形式でExport可能であり、例えばラズパイ等で推論ができます。
このセッションでは、Lobeのライブデモを通じで簡単にMLモデルが作れること、そして、TensorFlow Liteの推論が可能なAIカメラ「S+ Camera Basic」との連携方法を紹介しています。
― 2021/6/5 IoT ALGYAN 6周年記念祭 にて、ソラコムの松下享平(Max)の発表資料

資料内のURL一覧

Lobe
https://www.lobe.ai/

「Lobe」を通じて学ぶ、IoT エンジニアが知っておきたい AI/ML
https://zenn.dev/ma2shita/articles/7912f7bac148cbe16526

AIカメラ「S+ Camera Basic」でソラコムサンタを検知する
https://qiita.com/ma2shita/items/42ad9527b37495887449

無ければ作ればいいじゃない！Photoshop と ImageMagickで作る「機械学習用の画像」
https://qiita.com/ma2shita/items/39ca13feeb43348b9f36

ラズパイで使う microSD の選び方
https://blog.soracom.com/ja-jp/2021/01/07/how-to-choise-of-microsd-for-raspberry-pi-in-2021-spring/

SORACOM AI セミナー #2 ― S+ Camera Basicのアルゴリズム開発を学ぶ
※資料や動画は近日公開 (@SORACOM_PR や @ma2shita でアナウンス)

ライブデモ
https://youtu.be/i4dU84L6-Hs

Transcript

1. 「Lobe」で手軽に始める機械学習と 学習結果を活かす通信内蔵AIカメラ 「S+ Camera Basic」 IoT ALGYAN 6周年祭り June 5, 2021 株式会社ソラコム テクノロジー・エバンジェリスト 松下 享平 (Max / @ma2shita)
2. 自己紹介 株式会社ソラコム / テクノロジー・エバンジェリスト 松下 享平 (まつした こうへい) “Max” 静岡県民 🗻 新幹線通勤族 🚅 最近はテレワーク 講演や執筆を中心に活動、登壇回数400以上/累計 経歴: 東証二部ハードウェア・メーカーで情シス部門 EC 事業責任者、IoT 事業開発を経て現職 AWS ヒーロー (IoT 部門 / 2020年授賞) MVP にも 挑戦したい！
3. https://www.nic.ad.jp/timeline/ ありがとうございます！
4. @SORACOM_PR fb.com/soracom.jp イベントの振り返りに使える！ ハッシュタグ #ALGYAN #SORACOM フォローや チャンネル登録を是非！ youtube.com/c/SORACOM_Japan
5. クラウド ネットワーク センサー/デバイス “モノ” 「IoT」とは？ モノやコトをデジタル化 現場のデジタル化 現場とクラウドを つなげる データの活用
6. SORACOM は IoT の「つなぐ」を簡単に IoT デバイス クラウドサービス ✓ 遠隔操作 ✓ メンテナンス ✓ 蓄積・見える化 ✓ アラート通知 通信 デバイス センサ キット IoT 通信 IoT SIM LPWA パートナー デバイス パートナークラウド (AWS / Microsoft / Google)
7. Josef Steppan - 投稿者自身による作品, CC 表示-継承 4.0, https://commons.wikimedia.org/w/index.php?curid=64810040 による 機械学習の “Hello World” ― MNIST データベース TensorFlow モデル 4
8. やってみてわかる、機械学習で面倒な事 学習環境 構築 画像の 準備 学習と 評価 推論環境 準備 アプリ 組み込み ➢ Azure Machine Learning ➢ Amazon SageMaker ➢ Google Cloud Vertex AI • カメラ等ハードウェア • 前処理 (切り出し、サイズ、角度、色合い) • ストレージ • 学習時間 • 評価は「謎のグラフ」 • ラズパイ、Jetson • ML フレームワーク • カメラ制御 • 画像の前処理 • API 化、アプリ作成 • ML 入れ替え環境
9. これだけやって、得られたのは？
10. パソコンで機械学習モデルを作れる・使える 「Lobe」 ✓ Windows・macOS 用 スタンドアロンのアプリ ✓ 画像収集、学習、評価に加えて、 エクスポートが可能 ✓ パソコンのカメラが使える • 画像調整はフォーカス外 ✓ 各ラベル「5枚」の画像で スタート可能 詳しい話は https://qiita.com/ma2shita/items/f5c4ecd79e44ba41065f 苦労なく、お金もかけず 機械学習できる！
11. ライブデモ ― 新しい Azure アイコンを判別 May 7, 2021: Azure アイコンの流麗な新デザイン https://azure.microsoft.com/ja-jp/blog/a-fluent-new-look-for-the-azure-icon/ NEW Azure Classic 手書きロゴ
12. 機械学習モデルを 他のアプリケーションから使う モデル https://www.lobe.ai/docs/export/export
13. 推論結果を Azure Functions に 投げ込むことも LTE 通信内蔵 AI カメラ S+ Camera Basic • Linux / Raspberry Pi OS ベース • Python 3 とライブラリ群 • 機械学習(推論): TensorFlow Lite • 画像処理: OpenCV, Pillow • 数値計算: NumPy, SciPy • 外部連携: requests, boto3, SORACOM サービス ― SORACOM Beam, Funnel, Funk • LTE 通信内蔵、OTA で書き換え可能 ※ PreSetup フックスクリプト(Bash) で追加セットアップも可能 開発ガイド: https://users.soracom.io/ja-jp/docs/mosaic/develop-algorithm/
14. Lobe + S+ Camera Basic で 実践的な機械学習の環境 学習環境 構築 画像の 準備 学習と 評価 推論環境 準備 アプリ 組み込み LTE 通信内蔵 AI カメラ サープラス カメラ ベーシック S+ Camera Basic 次のステップとして Custom Vision Service
15. 資料集 ➢ 「Lobe」を通じて学ぶ、IoT エンジニアが知っておきたい AI/ML https://zenn.dev/ma2shita/articles/7912f7bac148cbe16526 ➢ AIカメラ「S+ Camera Basic」でソラコムサンタを検知する https://qiita.com/ma2shita/items/42ad9527b37495887449 ➢ 無ければ作ればいいじゃない！Photoshop と ImageMagickで でっちあげる作る「機械学習用の画像」 https://qiita.com/ma2shita/items/39ca13feeb43348b9f36 ➢ ラズパイで使う microSD の選び方 https://blog.soracom.com/ja-jp/2021/01/07/how-to-choise-of-microsd-for-raspberry-pi-in-2021-spring/ ➢ SORACOM AI セミナー #2 ― S+ Camera Basicのアルゴリズム開発を学ぶ ※資料や動画は近日公開 (@SORACOM_PR や @ma2shita でアナウンス) よかったら LGTM や Like していってね！
16. ご登録 受付中！ 日本最大級の IoT カンファレンス
17. ご登録 受付中！ 7/6の夜 https://soracom.connpass.com/event/214050/
18. 世界中のヒトとモノをつなげ 共鳴する社会へ