configのすゝめ

Transcript

1. よ う こ そ configの すゝめ より良い実験環境へ #TAIR データサイエンスLT会 2021/03/03
2. 千葉大学教育学部附属中学校3年 来年から木更津高専情報工学科へ Kaggle Expert(competitions, notebooks) 最近は量子深層学習, Among Us 専攻分野　なんでも Twitter: ＠chizu_potato C O N F I G の す ゝ め 01 自己紹介 チズチズ #とは
3. 再現性 IS ALL YOU NEED 実験をして結果を比較したとき、必要なパラメータがわからないと 再現がとれません。seed値含めて再現とれないモデルは危険です。 たくさんの手法を実験するとき、コードの大幅な手直しが求められ ることがあります。抽象的なコードを書き、具体的なものはconfig として与えることでその手直しがより楽に済むことがあります。 実行環境が変わるとき、パスで詰みませんか。また、コードを人と 共有したとき、何を変更したら良いかわかるようにしたいですよ ね。configだけの変更で済めば頭を使う必要がなくなります。 C O N F I G の す ゝ め 02 再 現 性 汎 用 性 読 み や す さ config管理の必要性
4. 選択肢 C O N F I G の す ゝ め 03 “config”としての書き方 - dataclass - OmegaConf(今回紹介する) その都度保存すれば良いので再現性確保 にはもってこい 　　　アリ ベタ書き - hydra - OmegaConf 外部ファイルを操作する必要有り コードとconfigを完全分離させるのはと ても賢い 　　　アリ（紹介するライブラリではこ っちでも書けるので今回は割愛） YAML 01 02 03 引数で - argparse - absl 論文実装とかは大体これ IDE使う人間にとってはやめてほしい 以外の感情がない 　　今回は扱わない
5. Pythonのconfigurationフレームワーク。Hydra の中身はこれ。PEPで推奨されてる書き方を全面的 にサポートしていてとにかく汎用性が高い。 OmegaConfとは C O N F I G の す ゝ め 04 ALL YOU NEED
6. C O N F I G の す ゝ め dataclassのような使い勝手、また色々な入力（引数、文字列、辞書型、リスト）を受け付ける 拡張性が高い YAML形式→簡単アクセス 05
7. わかりやすく 階層を使う 必要であればコメントを書く ある程度テンプレートを決めておく configとして 書けるもの全部書いておこう 変数だけじゃない、関数も 後述します 設定例 C O N F I G の す ゝ め 06
8. 07 C O N F I G の す ゝ め HASATTR / GETATTR 辞書型のGET KEY POINT 実装例　→↑↑↑↑ 関数もconfig
9. G E T A T T R H A S A T T R 割と便利かもしれない 01 02 x.foobarとgetattr(x, "foobar")は同義で、その関数の戻り値が返される。 引数を渡したい場合にはgetattr(x, "foobar")(hoge=True)のようにすればOK！ そもそも関数が存在しなければAttirbuteError getattr(x, "foobar")でAttributeErrorになればFalse、それ以外ならTrue →　存在するか否か 組み込み関数の補足 C O N F I G の す ゝ め 08
10. O m e g a C o n f を 使 お う 抽 象 的 な コ ー ド を 書 く で き る も の は す べ て C O N F I G 管 理 他 人 が 使 う こ と を 考 え て 01 03 02 04 使い勝手が良いです。十分な機能かつ必要最低限。 必然的に良いコードが書けるようになるらしい （らしい） 引数がconfigのみで済むから綺麗に書けるよね感はある 実験が円滑に進みます。再現性も担保されます。 汚いコードが必然的になくなるらしい（らしい） 今日のまとめ C O N F I G の す ゝ め 16
11. カ レ ン ト デ ィ レ ク ト リ が 移 動 さ れ る 無 駄 に 保 存 し た が る 気 付 い た 、 こ れ 中 身 の O m e g a C o n f で 十 分 ？ ？ 01 02 03 パスが通らなくて毎回毎回意識する必要があって頭が疲れる。 実験管理ライブラリでconfigの中身を全てuploadしているので保 存する必要が無いのにたくさんフォルダ作って保存されるのに嫌 気が差した。 上の理由は設定とかで何とかなるはずですが、結局Hydraにだけ ある機能を全く使わないことがわかったので中で動いてる OmegaConfだけで良くない？？？っていう結論に至りました。 hydraを やめた理由 C O N F I G の す ゝ め 10
12. FEATURE FEATURE WORKS WORKS 辞書型のデータを渡すだけなので実験管理ライブラリとの連携も簡単 C O N F I G の す ゝ め
13. C O N F I G の す ゝ め 何か質問があればSLACK, TWITTERで受け付けてます！ 最後に