Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
Lakehouseプラットフォームを 採用するまでの話/Lakehouse Platform ...
Search
Masatoshi Shimada
May 26, 2021
Programming
1
1k
Lakehouseプラットフォームを 採用するまでの話/Lakehouse Platform Adoption
Masatoshi Shimada
May 26, 2021
Tweet
Share
More Decks by Masatoshi Shimada
See All by Masatoshi Shimada
データプラットフォーム技術におけるメダリオンアーキテクチャという考え方/DataPlatformWithMedallionArchitecture
smdmts
6
2.6k
Delta Lakeを用いた LLM処理基盤 / Delta Lake with LLM on Dataplatform
smdmts
3
8k
Sparkから利用するAirframe/Spark-With-Airframe
smdmts
0
1.7k
Redashで何をみるのか/What Do You Wanna See Redash?
smdmts
1
1.6k
DatabricksとSparkではじめる [ビッグデータETL処理/データ可視化] 実践入門 / Databricks and Spark with ETL and Visualization
smdmts
1
1.7k
DatabricksとSparkではじめる [データ分析/機械学習] 実践入門 / Databrick and Spark with Data Analyze and ML for newbie.
smdmts
5
2.3k
作らない分析基板のススメ/DWH For Startup With YAGNI
smdmts
1
770
エンジニアのためのドメイン駆動設計実践入門 / DDD for Engineer newbie
smdmts
18
3.8k
How to growth the delish kitchen team to data-driven team
smdmts
1
1.1k
Other Decks in Programming
See All in Programming
Serena MCPのすすめ
wadakatu
4
900
LLMとPlaywright/reg-suitを活用した jQueryリファクタリングの実際
kinocoboy2
4
670
プログラマのための作曲入門
cheebow
0
540
フロントエンド開発に役立つクライアントプログラム共通のノウハウ / Universal client-side programming best practices for frontend development
nrslib
7
3.9k
After go func(): Goroutines Through a Beginner’s Eye
97vaibhav
0
230
なぜGoのジェネリクスはこの形なのか? Featherweight Goが明かす設計の核心
ryotaros
7
1k
『毎日の移動』を支えるGoバックエンド内製開発
yutautsugi
2
180
私はどうやって技術力を上げたのか
yusukebe
43
17k
メモリ不足との戦い〜大量データを扱うアプリでの実践例〜
kwzr
1
860
CSC305 Lecture 02
javiergs
PRO
1
260
ИИ-Агенты в каждый дом – Алексей Порядин, PythoNN
sobolevn
0
150
デミカツ切り抜きで面倒くさいことはPythonにやらせよう
aokswork3
0
190
Featured
See All Featured
Responsive Adventures: Dirty Tricks From The Dark Corners of Front-End
smashingmag
252
21k
RailsConf & Balkan Ruby 2019: The Past, Present, and Future of Rails at GitHub
eileencodes
140
34k
Automating Front-end Workflow
addyosmani
1371
200k
Done Done
chrislema
185
16k
Agile that works and the tools we love
rasmusluckow
331
21k
Put a Button on it: Removing Barriers to Going Fast.
kastner
60
4k
Making Projects Easy
brettharned
119
6.4k
A designer walks into a library…
pauljervisheath
209
24k
Making the Leap to Tech Lead
cromwellryan
135
9.5k
Typedesign – Prime Four
hannesfritz
42
2.8k
Large-scale JavaScript Application Architecture
addyosmani
514
110k
YesSQL, Process and Tooling at Scale
rocio
173
14k
Transcript
σʔλΣΞϋεੈผ -BLFIPVTFϓϥοτϑΥʔϜΛ ࠾༻͢Δ·Ͱͷ ౡాխ JEDAI ୈೋճ: DeltaΛ͍͓ͨͨ͠ײ
ࣗݾհ w ౡాխ!TNENUT w %8)ΞʔΩςΫτσʔλΞφϦετ w 4DBMBc1ZUIPOc+BWBc(PMBOHc%%% w
גࣜձࣾΤϒϦʔॴଐ w ։ൃຊ෦%"5""*άϧʔϓ.(3
࣍ dͷؒͰσʔλϨΠΫσʔλΣΞϋεͷ &5-&-5ॲཧΛ߹ܭճϦϑΝΫλϦϯά͍ͯ͠·͢ɻ -BLFIPVTFϓϥοτϑΥʔϜ࠾༻·ͰͷಓͷΓΛ͓͠͠·͢ɻ
ୈҰੈd&5- w &NCVML&.3Λར༻ͯ͠&5-ॲཧ͢ΔΈ w 1SPTൺֱతγϯϓϧͳσʔλϑϩʔ ҰఆֹۚͰεΩϟϯՄೳͳܭࢉج൫ͷఏڙ w $POT&NCVML.BQ3FEVDF&YFDVUPSͷকདྷੑʹෆ҆
ୈҰੈd%BTICPBSE w ߏԽσʔλͷશΠϕϯτϩάͷ3"8ςʔϒϧΛࢀর͢Δํࣜ w 1SPTҰͭͷςʔϒϧΛࢀর͢Εྑ͍ w $POT3"8ςʔϒϧංେԽʹΑΔίετͷઢܗ૿Ճ
ୈೋੈ&5- w "QBDIF4QBSL%BUBCSJDLTʹΑΔ&5-ॲཧͷಋೖ w 1SPTΠϯϑϥ؍Ͱͷ&5-ॲཧͷεέʔϧԽ σʔλϑϩʔ/PUFCPPLԽʹΑΔσόοάͷίετԽ w $POT+40/-1BSRVFUͷυϝΠϯࣝͷൃࢄʢڽूʣ &5-ॲཧதͷ614&35ܥॲཧ࣮͕ߴίετ
ୈೋੈ%BTICPBSE w ΠϕϯτςʔϒϧͷϑϧεΩϟϯΛ༰ೝ͢Δํࣜ w 1SPTΠϕϯτςʔϒϧͷυϝΠϯׂʹΑΔॲཧߴԽ ୳ࡧతσʔλੳՄೳͳνʔϜͷεέʔϧԽʢ1E.ɺ&OHɺ4BMFTʣ w $POTΠϕϯτςʔϒϧ૿ՃʹΑΔίετͷઢܗ૿Ճ
ୈࡾੈ&5- w %BUBCSJDLT%FMUBʹΑΔϝμϦΦϯΞʔΩςΫνϟͷಋೖ w 1SPT%FMUBʹΑΔ&5-ॲཧͷ࣮ίετͷίετԽ ɹɹɹɹɹϝμϦΦϯΞʔΩςΫνϟʹΑΔυϝΠϯࣝͷߴڽूԽͱૄ݁߹Խ σʔλαΠΤϯεͳͲͷυϝΠϯࣝར༻ͷεέʔϧԽ w $POTσʔλύΠϓϥΠϯͷߏෳࡶԽͱσʔλஔॴͷൃࢄ
ୈࡾੈ%BTICPBSE w ΠϕϯτςʔϒϧͷϑϧεΩϟϯΛ༰ೝ͢Δํࣜ w 1SPTΠϕϯτςʔϒϧͷυϝΠϯׂʹΑΔॲཧߴԽ ୳ࡧతσʔλੳՄೳͳνʔϜͷεέʔϧԽʢ1E.ɺ&OHɺ4BMFTʣ w $POTΠϕϯτςʔϒϧ૿ՃʹΑΔίετͷઢܗ૿Ճ ୈೋੈͱมߋແ͠
ୈ࢛ੈ&5- w -BLFIPVTFϓϥοτϑΥʔϜͷಋೖ w 1SPTϝμϦΦϯΞʔΩςΫνϟʹΑΔυϝΠϯࣝͷߴڽूૄ݁߹ͷଅਐ w $POT΄΅ແ͠
ୈ࢛ੈ %BTICPBSE w -BLFIPVTFϓϥοτϑΥʔϜ 42-"OBMZUJDTͷ࠾༻ʢ10$தʣ w 1SPTσʔλιʔεͷ΄΅શͳ4405Խ w $POTݱߦͱಉ͡ॲཧੑೳͱ͢Δʹڧ͍ΠϯελϯελΠϓ͕ඞཁ
͝ਗ਼ௌ͋Γ͕ͱ͏͍͟͝·ͨ͠