IBM Bluemixによる、Tweetデータ活用方法やツールのご紹介

2016.09.09 - Twitterデータ分析入門 - Big Data University Tokyo Meetup #8

Transcript

1. IBM Bluemixによる、 Tweetデータ活⽤⽅法やツールのご紹介 @joohounsong
2. ⾃⼰紹介 name: "Joohoun Song" roles:[ "System Architect”, "Developer Community", "Startup" ] worksAt: "IBM Japan EcoD" twitter: "@joohounsong" blog: "http://joohoun.jimdo.com/"
3. 今⽇のアジェンダ ・IBM Bluemixのご紹介 ・IBM BluemixでTweetデータ活⽤⽅法やツールのご紹介  ・IBM Bluemixとtwitter  ・IBM Bluemix Insights for Twitter  ・Watson Tone Analyzer  ・Watson Personality Insights ・twitterのデーターを、Bluemix上のApache Sparkによる感情分析
4. 今⽇のアジェンダ ・IBM Bluemixのご紹介 ・IBM BluemixでTweetデータ活⽤⽅法やツールのご紹介  ・IBM Bluemixとtwitter  ・IBM Bluemix Insights for Twitter  ・Watson Tone Analyzer  ・Watson Personality Insights ・twitterのデーターを、Bluemix上のApache Sparkによる感情分析
5. IBM Bluemix
6. PaaSが変えるこれからのアプリ開発 b O O a SW W ! e WP
7. IBM Bluemix
8. オープンソースがベース：Cloud Foundry C F
9. オープンソースによる、開発の柔軟性 Node-RED Starter swift ίϛϡχςΟʔͷϏϧ υύοΫ Apache Spark
10. IBM Bluemix
11. IBM Bluemixのランタイム 多様な開発環境を対応。
12. コミュニティビルドパック ビルドパックで任意の開発環境が構築できる。
13. IBM Bluemixの開発素材 ・IBM Watson ・IoT ・Mobile ・Analytics ・Runtime ・Storage
14. 様々な開発環境やツールと連携 ・Eclipse Eclipse PluginでBluemixと連携 ・IDS クラウドベースの開発環境 ・CF CLI Cloud Foundryによるコマンド操作 ・GitHub GitHubで管理されているプロジェクトとの連携
15. ɾ4UFQɿϥϯλΠϜ͔ΒʮKBWBʯΛબ୒ ɾ4UFQɿʮ࡞੒ʯΫϦοΫʂ ɾ4UFQɿ63-ΫϦοΫ 3Step、約5分で、”Hello World”
16. メール配信システムの開発
17. CMS「Drupal」との連携 ͜͜·Ͱ
    ໿෼
18. Bluemix事例：kiwi wearable tech
19. Bluemix事例：The North Face, IBM ワトソンと連携 zձ࿩ܕz
    γϣοϐϯάαϙʔτ
20. Bluemix事例：シェフ・ワトソン
21. 今⽇のアジェンダ ・IBM Bluemixのご紹介 ・IBM BluemixでTweetデータ活⽤⽅法やツールのご紹介  ・IBM Bluemixとtwitter  ・IBM Bluemix Insights for Twitter  ・Watson Tone Analyzer  ・Watson Personality Insights ・twitterのデーターを、Bluemix上のApache Sparkによる感情分析
22. IBMとTwitter
23. IBMとTwitter 2014年10⽉31⽇ 企業向けのツイートデータ分析サービスで提携を発表 firehoseと呼ばれる膨⼤な公開ツイートのリアルタイムデータとクラウド上の IBMアナリティクス・サービスとの統合 ೥݄೔
    *#.ɺ5XJUUFSσʔλΛ૊ΈࠐΜͩʮॳͷΫϥ΢υɾσʔλɾαʔϏεʯΛ
    ϏδωεɾϓϩϑΣογϣφϧͱ։ൃऀ޲͚ʹఏڙ ೥݄೔
    *#.
    #MVFNJY্ʹʮ*OTJHIUT
    GPS
    5XJUUFSʯΛ௥Ճɻ
24. SNSデータの活⽤ Per Day. 25,000,000,000 by GNIP
25. BigData 5IF
    %JHJUBM
    *OOPWBUJPO
    1MBUGPSN Apache Spark BigInsights for Apache Hadoop Cloudant NoSQL DB dashDB
26. 今⽇は、こちらをご紹介いたします。
27. IBM Bluemix Insights for Twitter ・IBM ソーシャル・メディア分析の⾼度な⾃然⾔語処理アルゴリズム ・Twitter データ・ストリームのリアルタイムでの処理をサポート ・検索のカスタマイズ、ツイートおよび拡張情報を「JSON形式」で  返すことが可能（RESTful API）
28. IBM Bluemix Insights for Twitter
29. IBM Bluemix Insights for Twitter
30. Tone Analyzer ・テキストをベースに感情を分析し、その結果をJSONで返します。 ・認知⾔語分析に基づいて、⽂章レベルと⽂書レベルの両⽅において  さまざまなトーンを検出 ・感情 (怒り、嫌悪、不安、喜び、悲しみ)、  社交性 (開放性、誠実性、外向性、協調性、情緒不安定性)、  ⽂体 (分析的、確信的、あいまい) の 3 種類が検出可能
31. Tone Analyzer
32. Personality Insights ・テキストをベースに⼈の性格を推定 ・⾔語学的分析とパーソナリティ理論を応⽤し、  テキストデータから、その筆者の特徴を推測します。 ・社会的⾏動、ビッグファイブ、価値、欲求などを判定
33. Personality Insights αϯόʔετνϟʔτ
34. 今⽇のアジェンダ ・IBM Bluemixのご紹介 ・IBM BluemixでTweetデータ活⽤⽅法やツールのご紹介  ・IBM Bluemixとtwitter  ・IBM Bluemix Insights for Twitter  ・Watson Tone Analyzer  ・Watson Personality Insights ・twitterのデーターを、Bluemix上のApache Sparkによる感情分析
35. こちらで試すことができます。 IUUQCJUMZ06*47
36. Materials
37. Materials ⾼速なデーター分析ツール テキスト感情分析サービス ストレージ内のデーターをオブジェクト化 Twitter APIを使って、現在のデーターを取得 ウェブベースのPython実⾏環境 作成したプログラムを実⾏し、実⾏結果を記録しながら、データの分析 作業を進めるためのツール
38. jupyter notebook
39. jupyter notebook ΫΤϦΛ࣮ߦ ݁Ռه࿥ ෼ੳՄࢹԽ
40. どうやって作るのか。 IBM Bluemix上で Sparkを⽣成 Twitter APIを⽣成 キーの取得 ※ Sparkやjupyterの環境構築不要
41. どうやって作るのか。 IBM Bluemix上で Sparkを⽣成 Twitter APIを⽣成 キーの取得
42. どうやって作るのか。 Notebook ⽣成。
43. IBM Bluemixの開発素材 Input Stream Emotion Tone Score Select OutPut OutPut Insert
44. IBM Bluemix エンジニアに最強の 開発環境を提供
45. Facebook Group https://facebook.com/groups/bmxug twitter @ibm_ecod_japan http://ja.stackoverflow.com/questions/ tagged/bluemix stackoverflow（コミュニティQ&A） Qiita http://qiita.com/tags/Bluemix ・タグフォロー ・Advant Calendar 購読