姿勢データを用いたダーツ命中予測.pdf

Sports Analyst Meetup #4で発表した、ダーツ命中予測マシンの検証動画です。
ダーツが的に刺さる前にブルに当たるかどうかを予測してみました！

動画①：https://www.youtube.com/watch?v=jS4sSkPGZpI
動画②：https://www.youtube.com/watch?v=JN6fJY0QUkU
動画③：https://www.youtube.com/watch?v=-_wvRknzCgE

イベントURL：https://spoana.connpass.com/event/138392/
作者Twitter：https://twitter.com/fujitako03

Transcript

1. リアルタイムダーツ命中予測装 置を作ってみた Sports Analyst Meetup #4 @fujitako
2. 自己紹介 • 普段は受託系のデータサイエンティスト ◦ 株式会社ブレインパッド ◦ 新卒3年目（客先常駐３年目） • ダーツ歴 ◦ ４ヶ月 ◦ 普段ダーツやらない人にはほぼ負けないが、たまに負けそうになるレベル • 好きなこと ◦ へんなものを作ること ▪ ダジャレを入力すると、AIが面白さを判定し 面白ければふとんが吹っ飛ぶ装置
3. ３つのキーフレーズ ① ③ ②
4. 3つのキーフレーズ ダーツ Edge TPU 姿勢推定
5. ダーツ • ご存知の通り、的に向かって投げるスポー ツ • 的の中心（ブル）にどれだけ「安定して当 てられるか」が勝利のカギ
6. 姿勢推定 • 画像や動画をインプットとして人間の姿勢 をデータ化する技術 • AIが画像を読み取り、関節の位置を推定 する • オープンソースのライブラリが公開されて おり、商用利用も可能
7. EdgeTPU • 端末の計算能力を大幅に向上することがで きる • サーバーとやりとりする必要がなく動画解析 の遅延を大きく減らせる • 日本で発売されてまもない（今年６月）
8. この3つでつくったもの
9. ダーツを投げたあと、的に到達する 前にブルに当たるかどうかを 音で知らせてくれる装置、
10. なんの役にも 立ちません
11. ダーツを投げたあと、的に到達する前にブルに当たるかどうかを 音で知らせてくれる装置 のイメージ図 撮影 動画 姿勢推定 edge tpu 基本構成
12. ダーツを投げたあと、的に到達する前にブルに当たるかどうかを 音で知らせてくれる装置 のイメージ図 撮影 動画 姿勢推定 edge tpu ①姿勢から投てきを検知 （ルールベース） 投げた
13. ダーツを投げたあと、的に到達する前にブルに当たるかどうかを 音で知らせてくれる装置 のイメージ図 撮影 動画 姿勢推定 edge tpu ②投てき検知から遡って1 秒間のデータをもとに刺さ るかどうか予測 （機械学習） 1秒間
14. ダーツを投げたあと、的に到達する前にブルに当たるかどうかを 音で知らせてくれる装置 のイメージ図 撮影 動画 姿勢推定 edge tpu ③音で知らせてくれる ピンポーン！ ブブー
15. ダーツを投げたあと、的に到達する前にブルに当たるかどうかを 音で知らせてくれる装置 のイメージ図 撮影 動画 姿勢推定 edge tpu ④落ち込む ブブー 腕の振りが 悪かった…
16. ダーツを投げたあと、的に到達する前にブルに当たるかどうかを 音で知らせてくれる装置 のイメージ図 撮影 動画 姿勢推定 edge tpu ⑤少し期待する ブブー AIに負けた くない！
17. ダーツを投げたあと、的に到達する前にブルに当たるかどうかを 音で知らせてくれる装置 のイメージ図 撮影 動画 姿勢推定 edge tpu ⑥結果を知り（ハズレて） さらに落ち込む ブブー くっ...
18. 使っているデータ • 場所 ◦ 手首、肘、肩 • 説明変数 ◦ 投げる前１秒間の各座標の ▪ 最大値、最小値、平均、標 準偏差（テキトーです） • データ数 ◦ ブル：約40 ◦ ハズレ：約200 • 予測 ◦ ランダムフォレスト
19. 結果 ① ② ③ 動画URLは概要欄に記載！
20. 課題 • カメラの性能不足 ◦ 秒間30フレームでは足りない ◦ USB 3.0接続にする • ブルに当たったデータ不足（実力不足）
21. 今後は リアルタイムでなく、 普通に自分のフォーム解析していきたいです
22. ありがとうございました！