質問サイトからみる Rubyに関する質問傾向 を調べてみたよ

LegalForce Ruby Meet Up #1で発表した資料です。

Transcript

1. 質問サイトからみる Rubyに関する質問傾向 を調べてみたよ 　 2019.12.11 / 株式会社空 / もりわきかずや
2. 自己紹介 2019/1〜株式会社空のエンジニアで
 ホテル向けに収益改善システムの開発（RoR, React, TypeScript）をしています。
 以前はヤフー/PayPayで決済システムを作っていました。
 2
3. モチベーション teratailでruby界隈の回答をしていると、似たような質問を 結構みる。
 つまずきやすいポイント抑えて記事化してあげたら役立つ のでは？
 あと最近自然言語処理の触りをやりはじめた。
 3
4. 質問をクロールして 傾向を見てみた ということで
 4 よくあるネタだけど、
 ふむふむと聞いてやってください

5. クローリング 5 • tag: rails がついているものを検索し、質問と回答を抽出
 ◦ 初心者マークがついているものを対象 
 • ライブラリ
 ◦ selenium webdriver 
 ▪ ページングがJavaScriptで処理されているため
 ◦ nokogiri
 • 検索結果からページングしつつ質問URLの一覧を取得
 • 個別の質問URLに対してnokogiriでパースしてcsvに落とす
 ◦ タイトル, 投稿日時, 質問, 回答1, …, 回答n
 ruby単体だと97%が railsの質問だった
6. クラスタリング 6 • 質問を形態素解析にかける
 ◦ sudachiを利用
 ▪ 医療品安全管理責任者が1つの形態素として扱える
 ▪ mecabだと 医療/品/安全/管理/責任/者 になる
 • ベクトル化
 ◦ doc2vecを使う
 ◦ TF-IDFを使う # 数十パターン試したけどこっちがよさそう
 • k-meansでクラスタリング
 • ついでにwordcloudで可視化

7. 画像入りスライド
 7 WordCloud
8. 8 表示の不具合 ・JQuery、ajax ・erb、form_tag ・objectを出力したい モデル保存できない （もっとありそう・・） css//JSが読み込まれ ない 画像に関する不具合 ・activestorage ・carrierwave ・cloudinary タグ機能に関するも の ユーザーに関するもの ・登録とか投稿とかフォ ローとか k=8でクラスタリ ング。 正確に分かれて いるわけじゃなく ノイズも混ざって る
9. まとめ • よくあるパターン
 ◦ RailsTutorialのユーザー、ログイン、Rspec
 ◦ Twitterクローン、いいね機能
 • 基本的にはエラーメッセージで検索すればほとんど解 決できる
 • 傾向をみて役立つ情報を伝える
 ◦ トライ＆エラーを積み重ねてほしいということを伝え たい
 9