Upgrade to Pro — share decks privately, control downloads, hide ads and more …

#前処理R ダウンロード

Avatar for ironwest ironwest
July 27, 2021
Programming
1
760

#前処理R ダウンロード

Avatar for ironwest

ironwest

July 27, 2021
Tweet

Other Decks in Programming

See All in Programming
AIと人間の共創開発！OSSで試行錯誤した開発スタイル
Avatar for mae616 mae616
2
820
他言語経験者が Golangci-lint を最初のコーディングメンターにした話 / How Golangci-lint Became My First Coding Mentor: A Story from a Polyglot Programmer
Avatar for uMa uma31
0
450
Devoxx BE - Local Development in the AI Era
Avatar for Kevin Dubois kdubois
0
150
テーブル定義書の構造化抽出して、生成AIでDWH分析を試してみた / devio2025tokyo
Avatar for kasacchiful kasacchiful
0
320
Goで実践するドメイン駆動開発 AIと歩み始めた新規プロダクト開発の現在地
Avatar for imkaoru imkaoru
4
920
AkarengaLT vol.38
Avatar for hashimoto-kei hashimoto_kei
1
130
The Past, Present, and Future of Enterprise Java
Avatar for ivargrimstad ivargrimstad
0
690
SwiftDataを使って10万件のデータを読み書きする
Avatar for akidon0000 akidon0000
0
240
Go言語はstack overflowの夢を見るか？
Avatar for Takuto Nagami logica0419
0
640
Reactive Thinking with Signals and the Resource API
Avatar for Manfred Steyer manfredsteyer
PRO
0
120
Foundation Modelsを実装日本語学習アプリを作ってみた！
Avatar for 蛋白（たんぱく・TANPACT） hypebeans
0
130
Claude Agent SDK を使ってみよう
Avatar for Hayami Shuhei hyshu
0
1.4k

Featured

See All Featured
KATA
Avatar for Megan Lloyd mclloyd
PRO
32
15k
Build your cross-platform service in a week with App Engine
Avatar for Jose L jlugia
234
18k
Mobile First: as difficult as doing things right
Avatar for Swwweet swwweet
225
10k
Become a Pro
Avatar for Speaker Deck speakerdeck
PRO
29
5.6k
Design and Strategy: How to Deal with People Who Don’t "Get" Design
Avatar for Morgane Peng morganepeng
132
19k
Measuring & Analyzing Core Web Vitals
Avatar for Philip Tellis bluesmoon
9
640
Being A Developer After 40
Avatar for Adrian Kosmaczewski akosma
91
590k
Scaling GitHub
Avatar for Zach Holman holman
463
140k
Optimizing for Happiness
Avatar for Tom Preston-Werner mojombo
379
70k
Agile that works and the tools we love
Avatar for Rasmus Luckow-Nielsen rasmusluckow
331
21k
Thoughts on Productivity
Avatar for Jon Yablonski jonyablonski
71
4.9k
Code Reviewing Like a Champion
Avatar for maltzj maltzj
526
40k

Transcript

  1. Rによるオープンデータ前処 理勉強会（医療データ） NDBオープンデータのファイルを大量ダウンロードする 西田典充

  2. 今回お話させていただく内容 →NDBオープンデータアプリの「データ取得」の話です！

  3. NDBオープンデータアプリの作成手順 厚生労働省 NDBオープンデータ HP R URL情報 エクセルファイル Tidyデータ アプリ用データ ダウンロード

    データクリーニング データ加工 Shinyアプリケーション

  4. NDBオープンデータアプリの作成手順 厚生労働省 NDBオープンデータ HP R Tidyデータ アプリ用データ データクリーニング データ加工 Shinyアプリケーション

    URL情報 エクセルファイル ダウンロード

  5. スクリプトファイルの置き場所 https://github.com/ironwest/ndb_open_data

  6. URL情報 エクセルファイル ダウンロード 52行！

  7. read_html(<URL>)で、「xml_node」というオブジェクトが取得できます。

  8. xml_node のイメージ

  9. xml_nodeのイメージ

  10. <HTML> <body> <div>内容</div> <div>内容</div> <div>内容</div> <div> <div> ・・・ <li>・・・ <a

    href="....../00423234.xlsx">初再診料_性年齢別算定回数</a> </div> </div> </body> </HTML>

  11. <a href="....../00423234.xlsx">初再診料_性年齢別算定回数</a> <a href="リンク先のアドレス">表示したいリンクの文字</a>

  12. None
  13. None
  14. None

  15. html_nodes(<xml_node>, "<目的のタグ>")

  16. html_nodes(<xml_node>, "<目的のタグ>") html_text(<対象とするノードセット>) 対象とするノードセット

  17. html_nodes(<xml_node>, "<目的のタグ>") html_attr(<対象とするノードセット> , "href") 対象とするノードセット

  18. None
  19. None
  20. None
  21. None
  22. None
  23. None

  24. a b 1 A 2 B 3 C map2(a,b,func_example) func_example(1,A)

    func_example(2,B) func_example(3,C) fe_res suji moji 1 A suji moji 1 B 2 B suji moji 1 C 2 C 3 C
  25. None
  26. None
  27. None
  28. None
  29. None
  30. None

  31. 保存したファイル 手作業で直したファイル

  32. URL情報 エクセルファイル ダウンロード 62行！

  33. None
  34. None
  35. None
  36. None

  37. エクセルファイルの保存先ディレクトリのパスを kaiとh3タグから作成 作成したパスが存在するなら何もせず、 存在しないならそのディレクトリを作成する 次にdata変数にあるh4タグの内容を一意な値で取り出す data/ndb/<kai>/<h3>/<h4>という名前のディレクトリが あったら何もしない。なければ作成 dl_to列をdata tibbleに追加。（内容は保存す るエクセルファイルのパス）

  38. ありがとうございました！