AI RCカー Kaigi On Line 2021 ライトニングトーク資料

Dokeycarトレーニングを富岳上で実行する。

Transcript

1. 近況報告 LT for AIでRCカーを走らせよう Kaigi OnLine 2021 Tasuku Hori hori@alumni.tus.ac.jp YOUR EYES ONLY
2. 業務でミニ富岳を使っています • 社内研究テーマのひとつでdonkeycarパッケージを使用 • GW直前にミニ富岳へアクセスする許可をもらった • 富岳で実行する前にテスト実行する同スペック環境 • 現在ミニ富岳上でdonkeycarパッケージの導入作業中 • まだ、成功していません！ ※写真は理化学研究所サイトより引用 YOUR EYES ONLY
3. 富岳 • スーパーコンピュータ京の後継 • 名前は、富嶽百景と京の100倍のダジャレ • 兵庫県神戸市 理化学研究所計算科学研究センタのスパコン • 2020年6,11月 TOP500を含む4部門で1位、2期連続4冠は世界初 • 蓮舫氏「２位じゃだめなんですか」、で一躍有名 • 2020年8月よりミニ富岳のレンタル開始 • 弊社も参加中 YOUR EYES ONLY
4. 富岳と同等の環境 ミニ富岳利用イメージ 《計算ノード》 ARMv8.2 アーキテクチャ RedHat系Linux OS 《ログインノード》 x86_64アーキテクチャ RedHat系Linux OS SSH/WinSCP pjsub 《クライアント》 ポータルサイト経由で 公開鍵を登録済みのPC YOUR EYES ONLY
5. 今、ココ TensorFlow 2.1.0 環境下でdonkeycarパッケージのインストール中 ・pip3 スクリプトが移動元ディレクトリパスになっている →独自pipスクリプトを作成し対応 ・pip3 install が実行できない → --user をつけてホームディレクトリリソース下にインストール ・filelockがない → --user でpip install ・libgeos_c.so がない →コンパイル中 ・kivy ライブラリがない YOUR EYES ONLY
6. おわり YOUR EYES ONLY
7. 富岳一般ユーザができること • ログインノードへのSSHログイン • 要富岳公開鍵・秘密鍵 • 計算ノードへの条件付きSSHログイン • 一般ユーザとしての権限下での使用 • 並列計算用コンパイラ(富士通)、gcc、mpigcc ※x86_64アーキテクチャ • 最長１時間 • １０分何もしないと強制ログアウト • 計算ノードへのpjsubコマンドによるジョブキック • 一般ユーザとしての権限下でのコマンド（シェル）実行 • 並列計算用コンパイラ(富士通)、gcc、mpigcc ※ARMv8.2アーキテクチャ • 最長１０時間 おまけ YOUR EYES ONLY
8. Donkeycarトレーニング処理の実行 • Donkeycar パッケージインストール • Donkeycar(4.2.0)の場合、TensorFlow 2.2.0 が必要 • TensorFlow2.2.0は、Python 3.6～が前提 • Python3.6.2が使用可能 • ほかにOpenBLASやJPEGライブラリも必要 • パッケージ管理コマンドyumの実行権限が必要 • ARMv8.2準拠のTensorFlowがPyPIにない(pipできない) • 関節利用パッケージのいくつかが未インストール おまけ YOUR EYES ONLY
9. 現時点で使用可能な機械学習ライブラリ • 指定ディレクトリにPython含めて配置されている • PyTorch 1.5.0, 1.6.0, 1.7.0 • TensorFlow 2.2.0, 2.1.0 • Chainer 4.5.0 • PATH、LD_LIBRARY_PATHを指定してPython実行環境を変える • pip install は --userモードで実行 • 一般ユーザには、指定ディレクトリの書き込み権限がない おまけ YOUR EYES ONLY