Upgrade to Pro — share decks privately, control downloads, hide ads and more …

#前処理R ダウンロード

Avatar for ironwest ironwest
July 27, 2021
Programming
780
1

#前処理R ダウンロード

Avatar for ironwest

ironwest

July 27, 2021

Other Decks in Programming

See All in Programming
Foundation Models frameworkで画像分析
Avatar for リョウ ryodeveloper
1
620
変わらないものが、変わるものを決める — 意図駆動開発 × イベントソーシング × イミュータブル | What Doesn't Change Decides What Can — IDD × Event Sourcing × Immutability
Avatar for Tomohisa Takaoka tomohisa
0
1.8k
複数の Claude Code が"放置"されてしまう問題をCLI ダッシュボードを自作して解決した話
Avatar for sumihiro3 sumihiro3
1
700
琵琶湖の水は止められてもNet--HTTPのリトライは止められない / You might be able to stop the water flow of Lake Biwa but you can't stop Net::HTTP retries
Avatar for luccafort luccafort
PRO
0
770
仕様駆動開発の消費期限
Avatar for watany watany
20
8.6k
テーブルをDELETEした
Avatar for yuzneri yuzneri
0
140
Go 1.27 における memory allocation の高速化
Avatar for ANDPAD inc andpad
0
230
「寝てても仕事が進む」Claude Codeで組む第二の脳
Avatar for t-fujita24 tomoyafujita2016
0
340
引き算の組織 ― アウトカムとAIに全振りするために辞めたこと ― / Organization by Subtraction
Avatar for ヤマモトヒロキ hirokiyamamoto14
PRO
0
230
夏だ！祭りだ！祭りとはドメインモデリングでは？
Avatar for ryugen04 ryugen04
0
310
S3 を使うアプリケーションをローカル完結で動かすことに全力を注いでみた / Running S3 Apps Offline
Avatar for Daisuke Garaike contour_gara
0
520
「人を評価する AI」の 設計と実装 
Avatar for 奈良亮耶 ryoyanara
0
210

Featured

See All Featured
[RailsConf 2023 Opening Keynote] The Magic of Rails
Avatar for Eileen M. Uchitelle eileencodes
31
10k
The Organizational Zoo: Understanding Human Behavior Agility Through Metaphoric Constructive Conversations (based on the works of Arthur Shelley, Ph.D)
Avatar for Dr. Kim W Petersen kimpetersen
PRO
0
420
Google's AI Overviews - The New Search
Avatar for Barry Adams badams
0
1.1k
Pawsitive SEO: Lessons from My Dog (and Many Mistakes) on Thriving as a Consultant in the Age of AI
Avatar for David Carrasco davidcarrasco
0
210
Test your architecture with Archunit
Avatar for Yoan thirion
1
2.3k
Optimising Largest Contentful Paint
Avatar for Harry Roberts csswizardry
37
3.9k
AI in Enterprises - Java and Open Source to the Rescue
Avatar for ivargrimstad ivargrimstad
0
1.4k
How To Stay Up To Date on Web Technology
Avatar for Chris Coyier chriscoyier
790
250k
Done Done
Avatar for chrislema chrislema
186
16k
State of Search Keynote: SEO is Dead Long Live SEO
Avatar for Ryan Jones ryanjones
0
240
KATA
Avatar for Megan Lloyd mclloyd
PRO
35
15k
Evolving SEO for Evolving Search Engines
Avatar for Ryan Jones ryanjones
0
260

Transcript

  1. Rによるオープンデータ前処 理勉強会（医療データ） NDBオープンデータのファイルを大量ダウンロードする 西田典充

  2. 今回お話させていただく内容 →NDBオープンデータアプリの「データ取得」の話です！

  3. NDBオープンデータアプリの作成手順 厚生労働省 NDBオープンデータ HP R URL情報 エクセルファイル Tidyデータ アプリ用データ ダウンロード

    データクリーニング データ加工 Shinyアプリケーション

  4. NDBオープンデータアプリの作成手順 厚生労働省 NDBオープンデータ HP R Tidyデータ アプリ用データ データクリーニング データ加工 Shinyアプリケーション

    URL情報 エクセルファイル ダウンロード

  5. スクリプトファイルの置き場所 https://github.com/ironwest/ndb_open_data

  6. URL情報 エクセルファイル ダウンロード 52行！

  7. read_html(<URL>)で、「xml_node」というオブジェクトが取得できます。

  8. xml_node のイメージ

  9. xml_nodeのイメージ

  10. <HTML> <body> <div>内容</div> <div>内容</div> <div>内容</div> <div> <div> ・・・ <li>・・・ <a

    href="....../00423234.xlsx">初再診料_性年齢別算定回数</a> </div> </div> </body> </HTML>

  11. <a href="....../00423234.xlsx">初再診料_性年齢別算定回数</a> <a href="リンク先のアドレス">表示したいリンクの文字</a>

  12. None
  13. None
  14. None

  15. html_nodes(<xml_node>, "<目的のタグ>")

  16. html_nodes(<xml_node>, "<目的のタグ>") html_text(<対象とするノードセット>) 対象とするノードセット

  17. html_nodes(<xml_node>, "<目的のタグ>") html_attr(<対象とするノードセット> , "href") 対象とするノードセット

  18. None
  19. None
  20. None
  21. None
  22. None
  23. None

  24. a b 1 A 2 B 3 C map2(a,b,func_example) func_example(1,A)

    func_example(2,B) func_example(3,C) fe_res suji moji 1 A suji moji 1 B 2 B suji moji 1 C 2 C 3 C
  25. None
  26. None
  27. None
  28. None
  29. None
  30. None

  31. 保存したファイル 手作業で直したファイル

  32. URL情報 エクセルファイル ダウンロード 62行！

  33. None
  34. None
  35. None
  36. None

  37. エクセルファイルの保存先ディレクトリのパスを kaiとh3タグから作成 作成したパスが存在するなら何もせず、 存在しないならそのディレクトリを作成する 次にdata変数にあるh4タグの内容を一意な値で取り出す data/ndb/<kai>/<h3>/<h4>という名前のディレクトリが あったら何もしない。なければ作成 dl_to列をdata tibbleに追加。（内容は保存す るエクセルファイルのパス）

  38. ありがとうございました！