神戸市ウェブサイト動態

World Data Viz Challenge 2017 での発表資料です。
http://kobe-barcelona.net/

Transcript

1. 神戸市ウェブサイト動態 Hiroaki KAWAI World Data Viz Challenge 2017 資料 http://kobe-barcelona.net/
2. Speaker • 川井 浩陽 – 「生活を、もう少しIT nativeに」 • iCal 形式版 小学校 給食 オープンデータ – 通信会社勤務 – Code for Kobe
3. WDVC2016（前回） • 「Me, Kobe and Barcelona」＠BCN – 人口統計オープンデータを分析 • 「私の街の人口問題」＠KOBE – 人口統計データに加えて、 – 待機児童数を分析 Monthly updated
4. 神戸市ウェブサイト利用規約 • CC-BY compatible since 2017-07 • Started archiving – Heritrix (Internet Archive) • WARP by 国立国会図書館 – 1 Crawl cycle ~60 GiB in ~2 weeks – Source for time series data • Visualize the outline
5. 全体像 ページ数
6. ページ数推移 Drill-Down: > 原課表示あり > 神戸市 > 行財政局 > 財政部 > 契約監理課
7. 圧倒的PDF ファイル容量で動きを見る手法も有効 PDF内に情報が詰め込まれがち 1MB 100KB 10KB 10MB 100MB
8. Monthly updated data 月次更新されていることが わかっている小学校給食データの例 *) Current infra is not capable of capturing weekly, daily updates
9. Archive for trend analysis
10. Wrap-up • CC-BY licensed web site is archivable • Archive is good for trend analysis • Tons of PDF – Not ready for data analysis – Rich data inside it