分析前処理で手軽に並列処理するために守っておくと良いこと

 分析前処理で手軽に並列処理するために守っておくと良いこと

1. 対象者
2. 守ると良いルール
3. 集計処理をapply()で組んでおく
4. アウトプット先は分割しておく
5. 行単位の並列化はdaskを使う
6. 大きな単位の並列化はjoblibを使う
7. デモ(時間があれば)
8. まとめ

Aded196e79aeca328942c8b0c817386c?s=128

NyankoAndMamenoki

June 15, 2019
Tweet