Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
Concept of Data Management
Search
hase-ryo
January 01, 2019
Business
480
1
Share
Embed
Copy iframe code
Copy JS code
Copy link
Start on current slide
Concept of Data Management
2018年1月ごろに考えたデータマネジメントの概念です。
DMBOK本を読む前に考えた内容です。
hase-ryo
January 01, 2019
More Decks by hase-ryo
See All by hase-ryo
デジタル庁のデータ分析基盤におけるdbtの活用
haseryo
1
570
20231212_DataEngineeringStudy#22_デジタル庁のデータ分析基盤「sukuna」の立ち上げと発展
haseryo
2
590
20230725_データエンジニアに求められるソフトスキル
haseryo
5
5.4k
20230126 10X-Data-Management-for-Social-Issues Data Standards Initiatives by the Digital Agency of Japan
haseryo
1
310
20230118 kazaneya TeckTalk3 Data Standards and Open Data Initiatives by the Digital Agency of Japan
haseryo
5
5.4k
DataEngineeringStudy #12 明日から真似できる! ケース別データ可視化のノウハウ
haseryo
6
2.9k
水道の歴史からみる データ品質の過去と未来 - インフラとしてのデータ分析環境を目指して -
haseryo
0
380
メルカリにおけるDashboard Replacementの事例 / 20190906 Looker User Meetup Merpay
haseryo
6
54k
Other Decks in Business
See All in Business
株式会社ナビタイムジャパン 会社紹介資料2026
navitimejapan
PRO
0
1.6k
新規事業立ち上げにPMMが果たすべき役割と責任 −スケールアップ企業における"プロダクトマーケティング"の可能性
yushimad
1
500
事業部でのAI推進とAIネイティブレベルの話
fotoyuma
0
270
医院継承G紹介資料_エムスリー株式会社
m3
0
190
ログラス会社紹介資料 / Loglass Company Deck
loglass2019
18
560k
インキュデータ会社紹介資料
okitsu
3
58k
令和8年度会社パンフレット
wf714201
0
450
47グループ 会社紹介資料 / Company Introduction
47holdings
1
21k
「この数字おかしくない?」対応に追われていたのに、 Claude Codeで設計改善まで着手できた話
matsumotokoki
0
290
Railsガイド協賛プランの概要
yasslab
PRO
2
14k
なぜ勉強会だけでは浸透しないのか ~数百人規模の組織でコーディングエージェントを当たり前にした戦略とその結果~
sigma_sig
0
170
Fable5との実践から生まれた非エンジニア組織のループエンジニアリング
nagatsu
1
830
Featured
See All Featured
Leading Effective Engineering Teams in the AI Era
addyosmani
9
2.2k
The Curious Case for Waylosing
cassininazir
1
450
How to build a perfect <img>
jonoalderson
1
5.8k
The Art of Programming - Codeland 2020
erikaheidi
57
14k
Beyond borders and beyond the search box: How to win the global "messy middle" with AI-driven SEO
davidcarrasco
3
200
HU Berlin: Industrial-Strength Natural Language Processing with spaCy and Prodigy
inesmontani
PRO
0
600
What does AI have to do with Human Rights?
axbom
PRO
1
2.3k
How to train your dragon (web standard)
notwaldorf
97
6.7k
Navigating the Design Leadership Dip - Product Design Week Design Leaders+ Conference 2024
apolaine
1
390
How to make the Groovebox
asonas
2
2.3k
RailsConf & Balkan Ruby 2019: The Past, Present, and Future of Rails at GitHub
eileencodes
141
35k
Java REST API Framework Comparison - PWX 2021
mraible
34
9.6k
Transcript
Concept of Data Management @hase-ryo Data Manager
What is Data Management ? Data を どうにかする
What is Data Management ? Data を どうにかする → Data
で どうにかする → Data Analyst Data Scientist etc ... Data Management
What is Data Management ? Data を どうにかする : Userの要求を満たすDataを
使えるようにする
What is Data Management ?
Data Data Analyst Data User ex.) PM Data AnalystはDataを分析して、PMなど利用者にinsightを届ける What
is Data Management ? Analyze
prepare various data Data Userが増えるほどに、扱うDataの種類は多くなる What is Data Management ?
Data Analyst Data User
Data A Data C Data B Data D 必要なDataをData Analystが全て準備するのは大変
What is Data Management ?
新しいDataが必要になるときは特に大変 Request Prepare new data Engineer, Vendors, etc. Generate data(log)
What is Data Management ? Data Analyst Data User
Available and Sufficient Data Data Userを満足させるためには、 Dataを利用可能かつ要求を叶えられるだけ用意する必要がある What is Data
Management ?
Available and Sufficient Data Dataを利用可能かつ十分なだけ用意すること そのためのFramework = Data Management Data
Management What is Data Management ?
For example • KPIを測るためにDataの発生と構造を計画する → Data Management • 散らばったDataを一箇所に集約して分析可能にする →
Data Management! • 増加するUserに向けて簡易にData分析できる環境を用意する → Data Management!!
Contribution of Data Management .1 Dataの発生箇所は複数ある (Micro service化されたproduct、外部など) Data from
A Data from B Data from vendor C
Contribution of Data Management .1 Request Require Data Generate data
Import data Data Management Micro service, Vendor, etc. 必要なDataを定義し、適切な場所から収集する
Contribution of Data Management .2 どんなDataを、いつ、どこから収集するのかを管理する What When Where
Contribution of Data Management .2 結果的にどんなDataが集まっているのかを管理する Data Catalog Data Catalog
Contribution of Data Management .3 Request Processed data 適切に加工されたDataが役立つことはよくある Data
Analyst Data User
Contribution of Data Management .3 Data Management Processed data Raw
data 可用性を高めるため、Raw dataを加工して中間Dataを作成する
Contribution of Data Management .4 適切な加工と分析環境(BI tool)の用意により多数のUserに対応する Data Users Data
Management Analysis by yourself BI tool
Element of Data Management • Data Logistics • Data Activation
Data Managementの主要素は2つ考えられる。LogisticsとActivation
Element of Data Management : Data Logistics • 補給 Supply
• 輸送 Transportation • 整備 Maintenance Data Logisticsは3つの小要素をもつ。Dataの補給、輸送、整備
Element of Data Management : Data Logistics 補給 Supply Require
Data Dataの補給とは、必要とされるDataを取得すること、 また、取得するためにDataを発生させることを指す Generate data Import data
Element of Data Management : Data Logistics 輸送 Transportation Dataの輸送とは、Dataを利用しやすい環境へ移すことを指す。
Element of Data Management : Data Logistics 整備 Maintenance Dataの整備とは、Dataが利用できるように保全すること、
また、利用できるように加工を施すことを指す
Element of Data Management : Data Activation • 証明 Certification
• 検証 Verification Data Activationは2つの少要素をもつ。Dataの証明と検証
Element of Data Management : Data Activation Dataの証明とは、そのDataがどこから、どのように 発生したのかを記述して保存することを指す 証明
Certification
Element of Data Management : Data Activation Dataの検証とは、Dataが想定通りに取得、 輸送、加工されているかを確かめることを指す。 検証
Verification
Summary まとめると、Data Managementとは、 Dataの利活用を促進するために、 その前段階に行うことを規定したFrameworkである Data Analyst Data User BI
tool Data Management