Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
最近やってる、サーバーレスでデータ分析基盤を構築している話 / 20230916-nds63
Search
kasacchiful
September 16, 2023
Programming
0
120
最近やってる、サーバーレスでデータ分析基盤を構築している話 / 20230916-nds63
第63回 長岡IT開発者勉強会 (NDS#63) で発表した資料。
https://sites.google.com/site/ndssite/no63
kasacchiful
September 16, 2023
Tweet
Share
More Decks by kasacchiful
See All by kasacchiful
Amazon S3 TablesとAmazon S3 Metadataを触ってみた / 20250201-jawsug-tochigi-s3tables-s3metadata
kasacchiful
0
160
Amazon S3 TablesとAmazon S3 Metadataを動かしてみた / 20250125-niigata-5min-tech-lt
kasacchiful
0
17
dbt coreとFargateでデータ変換 / 20240928-jawsug-toyama-hokuriku-shinkansen
kasacchiful
1
91
What we keep in mind when migrating from Serverless Framework to AWS CDK and AWS SAM
kasacchiful
1
340
AWSでIcebergを使ってデータウェアハウスを構築してみる / 20240810-jawsug-akita
kasacchiful
0
41
サーバーレスパターンを元にAWS CDKでデータ基盤を構築する / 20240731_classmethod_odyssey_online_build_a_data_infrastructures_using_aws_cdk_based_on_serverless_patterns
kasacchiful
0
490
AWS IoT 1-clickがサービス終了するので、SORACOMに移行した話 / 20240518-jawsug-niigata-iotlt-niigata
kasacchiful
0
270
AWS Application Composerで始める、 サーバーレスなデータ基盤構築 / 20240406-jawsug-hokuriku-shinkansen
kasacchiful
1
580
AWSの各種サービス紹介と活用方法 − AI・ML活用デモを交えて − / 20231208aws-aiml-seminar
kasacchiful
0
540
Other Decks in Programming
See All in Programming
チームリードになって変わったこと
isaka1022
0
200
Honoとフロントエンドの 型安全性について
yodaka
7
1.2k
Linux && Docker 研修/Linux && Docker training
forrep
24
4.5k
『テスト書いた方が開発が早いじゃん』を解き明かす #phpcon_nagoya
o0h
PRO
2
210
バックエンドのためのアプリ内課金入門 (サブスク編)
qnighy
8
1.8k
Amazon Q Developer Proで効率化するAPI開発入門
seike460
PRO
0
110
パスキーのすべて ── 導入・UX設計・実装の紹介 / 20250213 パスキー開発者の集い
kuralab
3
780
Amazon ECS とマイクロサービスから考えるシステム構成
hiyanger
2
560
Boost Performance and Developer Productivity with Jakarta EE 11
ivargrimstad
0
250
CI改善もDatadogとともに
taumu
0
120
技術を根付かせる / How to make technology take root
kubode
1
250
Honoのおもしろいミドルウェアをみてみよう
yusukebe
1
210
Featured
See All Featured
BBQ
matthewcrist
87
9.5k
実際に使うSQLの書き方 徹底解説 / pgcon21j-tutorial
soudai
174
51k
GraphQLの誤解/rethinking-graphql
sonatard
68
10k
Fashionably flexible responsive web design (full day workshop)
malarkey
406
66k
Templates, Plugins, & Blocks: Oh My! Creating the theme that thinks of everything
marktimemedia
30
2.2k
Embracing the Ebb and Flow
colly
84
4.6k
The Art of Delivering Value - GDevCon NA Keynote
reverentgeek
10
1.3k
YesSQL, Process and Tooling at Scale
rocio
172
14k
Designing Dashboards & Data Visualisations in Web Apps
destraynor
231
53k
The Language of Interfaces
destraynor
156
24k
Building Applications with DynamoDB
mza
93
6.2k
What’s in a name? Adding method to the madness
productmarketing
PRO
22
3.3k
Transcript
࠷ۙͬͯΔɺαʔόʔϨεͰ σʔλੳج൫Λߏங͍ͯ͠Δ͓ ൛ ּݪ /%4
ࣗݾհ @kasacchiful @kasacchiful ּݪ wΫϥεϝιουגࣜձࣾσʔλΞφϦςΟΫεࣄۀຊ෦ w৽ׁݝ৽ׁࢢࡏॅ w͖ͳ"84αʔϏε4ɺ-BNCEBɺ4BHF.BLFS w+"846(৽ׁࢧ෦ʗ1ZUIPOػցֶशษڧձJO৽ׁʗ+B445৽ׁ ʗ48"/**ʗ$MPVE
fl BSF.FFUVQ/JJHBUBʗFUD w"84$PNNVOJUZ#VJMEFS+BQBO"84"MM $FSUJ fi DBUJPOT&OHJOFFS
࣍ wσʔλੳج൫ΛαʔόʔϨεͰ w࠷͓ۙؾʹೖΓͷαʔϏε w·ͱΊ
͢͜ͱ wσʔλΛੳ͢ΔͨΊͷલॲཧΛߦ͏ͨΊͷج൫࡞ͬͯ·͢ w΄ͱΜͲαʔόʔϨεߏͳͷͰɺͦΕΛ͝հʢྫ֎͋Γ w΄΅"84
σʔλੳج൫ΛαʔόʔϨεͰ
࠷ۙΑ͘͏αʔϏε 4 -BNCEB 4UFQ'VODUJPOT (MVF "UIFOB
*P5ηϯαʔσʔλϑΝΠϧΛ-BNCEBͰฒྻՃ
֤छ%#σʔλΛ(MVFͰऔಘͯ͠#JH2VFSZ
ػثใ%#͔ΒσʔλՃͯ͠ՄࢹԽ
ػثใ%#͔ΒσʔλՃͯ͠ՄࢹԽ
࿈ܞσʔλϑΝΠϧ͕དྷͨΒ(MVFˠ3FETIJGU
ߟ͍͑ͯΔ͜ͱɺ͍͍ͩͨҰॹ ͍ۙ༰͕"84#MPHʹࡌͬͨ IUUQTBXTBNB[PODPNKQCMPHTCJHEBUB CVJMEBOFUMQSPDFTTGPSBNB[POSFETIJGUVTJOHBNB[POTFWFOUOPUJ fi DBUJPOTBOEBXTTUFQGVODUJPOT
࠷͓ۙؾʹೖΓͷαʔϏε
(MVFGPS3BZʹظ IUUQTEFWDMBTTNFUIPEKQBSUJDMFTBXTHMVFGPSSBZHFOFSBMMZBWBJMBCMF
1BOEBTͱ΄ͱΜͲมΘΒͳ͍ײ͡Ͱฒྻࢄॲཧ
·ͩ71$ͷϓϥΠϕʔτଓͰ͖ͳ͍͚Ͳ IUUQTEFWDMBTTNFUIPEKQBSUJDMFTBXTHMVFGPSSBZHFOFSBMMZBWBJMBCMF
3FETIJGU"VSPSBͳΒɺ%BUB"1*͕͑Δ IUUQTEFWDMBTTNFUIPEKQBSUJDMFTUSZVTJOHSFETIJGUEBUBBQJPOHMVFGPSSBZ
"844%,GPS1BOEBT "848SBOHMFS ͏ͱ؆୯ IUUQTEFWDMBTTNFUIPEKQBSUJDMFTUSZVTJOHSFETIJGUEBUBBQJPOHMVFGPSSBZ
ެ։ࡁ %FWFMPQFST*0ϏσΦηογϣϯ Glue for Rayを使ってみよう 3435/7/5 データアナリティクス事業本部 笠原 宏
·ͱΊ
·ͱΊ w࠷ۙαʔόʔϨεͰσʔλੳج൫Λߏங͢Δػձ͕ଟ͍ Ͱ͢ w(MVFGPS3BZʹظͯ͠·͢
એ
+B445`/JJHBUB։࠵ w ۚ wਃࠐडऴྃ͠·ͨ͠
1ZUIPOػցֶशษڧձJO৽ׁۙ։࠵༧ఆ wळ w$IBU(15"1*Λͬͨੜ"*ϋϯζΦϯ