Upgrade to Pro — share decks privately, control downloads, hide ads and more …

#前処理R ダウンロード

Avatar for ironwest ironwest
July 27, 2021
Programming
1
760

#前処理R ダウンロード

Avatar for ironwest

ironwest

July 27, 2021
Tweet

Other Decks in Programming

See All in Programming
レトロゲームから学ぶ通信技術の歴史
Avatar for kimkim0106 kimkim0106
0
140
状態遷移図を書こう / Sequence Chart vs State Diagram
Avatar for Kuniwak orgachem
PRO
3
290
抽象化という思考のツール - 理解と活用 - / Abstraction-as-a-Tool-for-Thinking
Avatar for shin1x1 shin1x1
1
860
DMMを支える決済基盤の技術的負債にどう立ち向かうか / Addressing Technical Debt in Payment Infrastructure
Avatar for yoshiyoshifujii yoshiyoshifujii
4
640
Gemini CLIの"強み"を知る！ Gemini CLIとClaude Codeを比較してみた！
Avatar for Kota Hisafuru kotahisafuru
2
190
Prompt Engineeringの再定義「Context Engineering」とは
Avatar for ツルオカ htsuruo
0
110
TypeScriptでDXを上げろ！ Hono編
Avatar for Yusuke Wada yusukebe
3
870
CDK引数設計道場100本ノック
Avatar for kazuho cryer-shinozuka badmintoncryer
2
580
AIともっと楽するE2Eテスト
Avatar for Yohei Maeda myohei
9
3.2k
リバースエンジニアリング新時代へ！
GhidraとClaude DesktopをMCPで繋ぐ/findy202507
Avatar for @tkmru tkmru
4
1.3k
はじめてのWeb API体験 ー 飲食店検索アプリを作ろうー
Avatar for Aki Nakahara akinko_0915
0
170
知って得する@cloudflare_vite-pluginのあれこれ
Avatar for chimame chimame
1
120

Featured

See All Featured
4 Signs Your Business is Dying
Avatar for Josh Pigford shpigford
184
22k
Designing for humans not robots
Avatar for Tammie Lister tammielis
253
25k
Scaling GitHub
Avatar for Zach Holman holman
461
140k
Evolution of real-time – Irina Nazarova, EuRuKo, 2024
Avatar for Irina Nazarova irinanazarova
8
850
Practical Tips for Bootstrapping Information Extraction Pipelines
Avatar for Matthew Honnibal honnibal
PRO
21
1.4k
Measuring & Analyzing Core Web Vitals
Avatar for Philip Tellis bluesmoon
7
530
Faster Mobile Websites
Avatar for Dean Hume deanohume
308
31k
Distributed Sagas: A Protocol for Coordinating Microservices
Avatar for Caitie McCaffrey caitiem20
331
22k
Let's Do A Bunch of Simple Stuff to Make Websites Faster
Avatar for Chris Coyier chriscoyier
507
140k
Why Our Code Smells
Avatar for Brandon Keepers bkeepers
PRO
337
57k
The Psychology of Web Performance [Beyond Tellerrand 2023]
Avatar for Tammy Everts tammyeverts
48
2.9k
Navigating Team Friction
Avatar for Lara Hogan lara
187
15k

Transcript

  1. Rによるオープンデータ前処 理勉強会（医療データ） NDBオープンデータのファイルを大量ダウンロードする 西田典充

  2. 今回お話させていただく内容 →NDBオープンデータアプリの「データ取得」の話です！

  3. NDBオープンデータアプリの作成手順 厚生労働省 NDBオープンデータ HP R URL情報 エクセルファイル Tidyデータ アプリ用データ ダウンロード

    データクリーニング データ加工 Shinyアプリケーション

  4. NDBオープンデータアプリの作成手順 厚生労働省 NDBオープンデータ HP R Tidyデータ アプリ用データ データクリーニング データ加工 Shinyアプリケーション

    URL情報 エクセルファイル ダウンロード

  5. スクリプトファイルの置き場所 https://github.com/ironwest/ndb_open_data

  6. URL情報 エクセルファイル ダウンロード 52行！

  7. read_html(<URL>)で、「xml_node」というオブジェクトが取得できます。

  8. xml_node のイメージ

  9. xml_nodeのイメージ

  10. <HTML> <body> <div>内容</div> <div>内容</div> <div>内容</div> <div> <div> ・・・ <li>・・・ <a

    href="....../00423234.xlsx">初再診料_性年齢別算定回数</a> </div> </div> </body> </HTML>

  11. <a href="....../00423234.xlsx">初再診料_性年齢別算定回数</a> <a href="リンク先のアドレス">表示したいリンクの文字</a>

  12. None
  13. None
  14. None

  15. html_nodes(<xml_node>, "<目的のタグ>")

  16. html_nodes(<xml_node>, "<目的のタグ>") html_text(<対象とするノードセット>) 対象とするノードセット

  17. html_nodes(<xml_node>, "<目的のタグ>") html_attr(<対象とするノードセット> , "href") 対象とするノードセット

  18. None
  19. None
  20. None
  21. None
  22. None
  23. None

  24. a b 1 A 2 B 3 C map2(a,b,func_example) func_example(1,A)

    func_example(2,B) func_example(3,C) fe_res suji moji 1 A suji moji 1 B 2 B suji moji 1 C 2 C 3 C
  25. None
  26. None
  27. None
  28. None
  29. None
  30. None

  31. 保存したファイル 手作業で直したファイル

  32. URL情報 エクセルファイル ダウンロード 62行！

  33. None
  34. None
  35. None
  36. None

  37. エクセルファイルの保存先ディレクトリのパスを kaiとh3タグから作成 作成したパスが存在するなら何もせず、 存在しないならそのディレクトリを作成する 次にdata変数にあるh4タグの内容を一意な値で取り出す data/ndb/<kai>/<h3>/<h4>という名前のディレクトリが あったら何もしない。なければ作成 dl_to列をdata tibbleに追加。（内容は保存す るエクセルファイルのパス）

  38. ありがとうございました！