Meta Kaggleを覗いてみた

Transcript

1. Meta Kaggleを覗いてみた Connehito Marché vol.6 機械学習・データ分析市 2019 / 11 / 5 石崎 裕子
2. 初めまして 最近、Kaggleにはまっている人です
3. 概要 Kaggle（データ分析コンペ）が公開している Meta Kaggle を覗いて、以下のこ とを考察してみた LT 5分だから ざっくりね！ 1. Kaggleって本当に流行ってるの？ 2. コンペの傾向って年々変わってるの？
4. Meta Kaggle Kaggle が公開している CSV 形式のデータセットで、ユーザや Competition 、Discussion や Kernel に関する情報が見れる https://www.kaggle.com/kaggle/meta-kaggle
5. 1. Kaggleって本当に流行ってるの？ 毎月の Kaggle の新規ユーザー数を Users.csv から調べた。 新規ユーザー数が右肩上がりであれば、流行っていると言えるはず！ すんごい増えてる!!!
6. 1. Kaggleって本当に流行ってるの？ Users.csvのデータ数、多すぎません？ アカウントを作っただけでコンペに参加していない人がほとんど！
7. 1. Kaggleって本当に流行ってるの？ コンペの開催期間中に一度でもSubmit して成功した人に対象を絞って、 毎月の新規ユーザー数を確認してみた Submission.csvはPrivate Scoreを含むため 開催中のコンペ情報は拾えない 若干、鈍化・・・ （コンペはFeatured, Research が対象）
8. 2.コンペの傾向って変わってるの？ コンペのタグを確認して、どんなタグがついているコンペが年々増えて いるのかを確認 （2014年以降、タグがつけられている） これ
9. 2.コンペの傾向って変わってるの？ • コンペの種類は Featured, Research が対象 • もっとも多く使われているタグ Top10 をまず確認 tabular dataと image dataと text dataに絞るか
10. 2.コンペの傾向って変わってるの？ 半年ごとのテーブルデータ、画像データ、テキストデータのタグがついて いるコンペ数の変化 （複数タグついている場合、それぞれ１カウント） 2016 ~ 2017 年あたりで変化 image data tabular data text data
11. まとめ • Kaggle の注目度は上がっている • コンペに取り組む新規ユーザの伸びは鈍化 • 画像コンペが多くなった • Meta Kaggle の分析も面白い 予想通り！！ って感じでしたかね ソースコードは Kaggle の kernel で公開してます https://www.kaggle.com/pridegoodmusic/meta-kaggle-analysis 沼にはまろう