Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
Lakehouseプラットフォームを 採用するまでの話/Lakehouse Platform ...
Search
Masatoshi Shimada
May 26, 2021
Programming
1
1k
Lakehouseプラットフォームを 採用するまでの話/Lakehouse Platform Adoption
Masatoshi Shimada
May 26, 2021
Tweet
Share
More Decks by Masatoshi Shimada
See All by Masatoshi Shimada
データプラットフォーム技術におけるメダリオンアーキテクチャという考え方/DataPlatformWithMedallionArchitecture
smdmts
10
3.6k
Delta Lakeを用いた LLM処理基盤 / Delta Lake with LLM on Dataplatform
smdmts
3
8.5k
Sparkから利用するAirframe/Spark-With-Airframe
smdmts
0
1.8k
Redashで何をみるのか/What Do You Wanna See Redash?
smdmts
1
1.7k
DatabricksとSparkではじめる [ビッグデータETL処理/データ可視化] 実践入門 / Databricks and Spark with ETL and Visualization
smdmts
1
1.7k
DatabricksとSparkではじめる [データ分析/機械学習] 実践入門 / Databrick and Spark with Data Analyze and ML for newbie.
smdmts
6
2.4k
作らない分析基板のススメ/DWH For Startup With YAGNI
smdmts
1
800
エンジニアのためのドメイン駆動設計実践入門 / DDD for Engineer newbie
smdmts
18
3.9k
How to growth the delish kitchen team to data-driven team
smdmts
1
1.2k
Other Decks in Programming
See All in Programming
CSC307 Lecture 09
javiergs
PRO
1
840
コマンドとリード間の連携に対する脅威分析フレームワーク
pandayumi
1
450
コントリビューターによるDenoのすゝめ / Deno Recommendations by a Contributor
petamoriken
0
200
Data-Centric Kaggle
isax1015
2
780
並行開発のためのコードレビュー
miyukiw
0
220
Fluid Templating in TYPO3 14
s2b
0
130
15年続くIoTサービスのSREエンジニアが挑む分散トレーシング導入
melonps
2
210
CSC307 Lecture 06
javiergs
PRO
0
690
AI時代のキャリアプラン「技術の引力」からの脱出と「問い」へのいざない / tech-gravity
minodriven
21
7.3k
余白を設計しフロントエンド開発を 加速させる
tsukuha
7
2.1k
Oxlint JS plugins
kazupon
1
970
なるべく楽してバックエンドに型をつけたい!(楽とは言ってない)
hibiki_cube
0
140
Featured
See All Featured
Building Flexible Design Systems
yeseniaperezcruz
330
40k
Lightning talk: Run Django tests with GitHub Actions
sabderemane
0
120
A Soul's Torment
seathinner
5
2.3k
Crafting Experiences
bethany
1
49
Deep Space Network (abreviated)
tonyrice
0
49
Avoiding the “Bad Training, Faster” Trap in the Age of AI
tmiket
0
76
How People are Using Generative and Agentic AI to Supercharge Their Products, Projects, Services and Value Streams Today
helenjbeal
1
130
WENDY [Excerpt]
tessaabrams
9
36k
Building AI with AI
inesmontani
PRO
1
700
The Art of Delivering Value - GDevCon NA Keynote
reverentgeek
16
1.8k
Visualizing Your Data: Incorporating Mongo into Loggly Infrastructure
mongodb
49
9.9k
Learning to Love Humans: Emotional Interface Design
aarron
275
41k
Transcript
σʔλΣΞϋεੈผ -BLFIPVTFϓϥοτϑΥʔϜΛ ࠾༻͢Δ·Ͱͷ ౡాխ JEDAI ୈೋճ: DeltaΛ͍͓ͨͨ͠ײ
ࣗݾհ w ౡాխ!TNENUT w %8)ΞʔΩςΫτσʔλΞφϦετ w 4DBMBc1ZUIPOc+BWBc(PMBOHc%%% w
גࣜձࣾΤϒϦʔॴଐ w ։ൃຊ෦%"5""*άϧʔϓ.(3
࣍ dͷؒͰσʔλϨΠΫσʔλΣΞϋεͷ &5-&-5ॲཧΛ߹ܭճϦϑΝΫλϦϯά͍ͯ͠·͢ɻ -BLFIPVTFϓϥοτϑΥʔϜ࠾༻·ͰͷಓͷΓΛ͓͠͠·͢ɻ
ୈҰੈd&5- w &NCVML&.3Λར༻ͯ͠&5-ॲཧ͢ΔΈ w 1SPTൺֱతγϯϓϧͳσʔλϑϩʔ ҰఆֹۚͰεΩϟϯՄೳͳܭࢉج൫ͷఏڙ w $POT&NCVML.BQ3FEVDF&YFDVUPSͷকདྷੑʹෆ҆
ୈҰੈd%BTICPBSE w ߏԽσʔλͷશΠϕϯτϩάͷ3"8ςʔϒϧΛࢀর͢Δํࣜ w 1SPTҰͭͷςʔϒϧΛࢀর͢Εྑ͍ w $POT3"8ςʔϒϧංେԽʹΑΔίετͷઢܗ૿Ճ
ୈೋੈ&5- w "QBDIF4QBSL%BUBCSJDLTʹΑΔ&5-ॲཧͷಋೖ w 1SPTΠϯϑϥ؍Ͱͷ&5-ॲཧͷεέʔϧԽ σʔλϑϩʔ/PUFCPPLԽʹΑΔσόοάͷίετԽ w $POT+40/-1BSRVFUͷυϝΠϯࣝͷൃࢄʢڽूʣ &5-ॲཧதͷ614&35ܥॲཧ࣮͕ߴίετ
ୈೋੈ%BTICPBSE w ΠϕϯτςʔϒϧͷϑϧεΩϟϯΛ༰ೝ͢Δํࣜ w 1SPTΠϕϯτςʔϒϧͷυϝΠϯׂʹΑΔॲཧߴԽ ୳ࡧతσʔλੳՄೳͳνʔϜͷεέʔϧԽʢ1E.ɺ&OHɺ4BMFTʣ w $POTΠϕϯτςʔϒϧ૿ՃʹΑΔίετͷઢܗ૿Ճ
ୈࡾੈ&5- w %BUBCSJDLT%FMUBʹΑΔϝμϦΦϯΞʔΩςΫνϟͷಋೖ w 1SPT%FMUBʹΑΔ&5-ॲཧͷ࣮ίετͷίετԽ ɹɹɹɹɹϝμϦΦϯΞʔΩςΫνϟʹΑΔυϝΠϯࣝͷߴڽूԽͱૄ݁߹Խ σʔλαΠΤϯεͳͲͷυϝΠϯࣝར༻ͷεέʔϧԽ w $POTσʔλύΠϓϥΠϯͷߏෳࡶԽͱσʔλஔॴͷൃࢄ
ୈࡾੈ%BTICPBSE w ΠϕϯτςʔϒϧͷϑϧεΩϟϯΛ༰ೝ͢Δํࣜ w 1SPTΠϕϯτςʔϒϧͷυϝΠϯׂʹΑΔॲཧߴԽ ୳ࡧతσʔλੳՄೳͳνʔϜͷεέʔϧԽʢ1E.ɺ&OHɺ4BMFTʣ w $POTΠϕϯτςʔϒϧ૿ՃʹΑΔίετͷઢܗ૿Ճ ୈೋੈͱมߋແ͠
ୈ࢛ੈ&5- w -BLFIPVTFϓϥοτϑΥʔϜͷಋೖ w 1SPTϝμϦΦϯΞʔΩςΫνϟʹΑΔυϝΠϯࣝͷߴڽूૄ݁߹ͷଅਐ w $POT΄΅ແ͠
ୈ࢛ੈ %BTICPBSE w -BLFIPVTFϓϥοτϑΥʔϜ 42-"OBMZUJDTͷ࠾༻ʢ10$தʣ w 1SPTσʔλιʔεͷ΄΅શͳ4405Խ w $POTݱߦͱಉ͡ॲཧੑೳͱ͢Δʹڧ͍ΠϯελϯελΠϓ͕ඞཁ
͝ਗ਼ௌ͋Γ͕ͱ͏͍͟͝·ͨ͠