Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
最近やってる、サーバーレスでデータ分析基盤を構築している話 / 20230916-nds63
Search
kasacchiful
September 16, 2023
Programming
0
110
最近やってる、サーバーレスでデータ分析基盤を構築している話 / 20230916-nds63
第63回 長岡IT開発者勉強会 (NDS#63) で発表した資料。
https://sites.google.com/site/ndssite/no63
kasacchiful
September 16, 2023
Tweet
Share
More Decks by kasacchiful
See All by kasacchiful
dbt coreとFargateでデータ変換 / 20240928-jawsug-toyama-hokuriku-shinkansen
kasacchiful
1
41
What we keep in mind when migrating from Serverless Framework to AWS CDK and AWS SAM
kasacchiful
1
230
AWSでIcebergを使ってデータウェアハウスを構築してみる / 20240810-jawsug-akita
kasacchiful
0
28
サーバーレスパターンを元にAWS CDKでデータ基盤を構築する / 20240731_classmethod_odyssey_online_build_a_data_infrastructures_using_aws_cdk_based_on_serverless_patterns
kasacchiful
0
390
AWS IoT 1-clickがサービス終了するので、SORACOMに移行した話 / 20240518-jawsug-niigata-iotlt-niigata
kasacchiful
0
210
AWS Application Composerで始める、 サーバーレスなデータ基盤構築 / 20240406-jawsug-hokuriku-shinkansen
kasacchiful
1
510
AWSの各種サービス紹介と活用方法 − AI・ML活用デモを交えて − / 20231208aws-aiml-seminar
kasacchiful
0
490
Amazon Rekognition デモ / 20231208-aws_seminar-01-rekognition-demo
kasacchiful
0
500
Amazon Lookout for Vision デモ / 20231208-aws_seminar-02-lookout-vision-demo
kasacchiful
0
490
Other Decks in Programming
See All in Programming
Amazon Bedrock Agentsを用いてアプリ開発してみた!
har1101
0
340
PHP でアセンブリ言語のように書く技術
memory1994
PRO
1
170
Creating a Free Video Ad Network on the Edge
mizoguchicoji
0
120
【Kaigi on Rails 2024】YOUTRUST スポンサーLT
krpk1900
1
330
LLM生成文章の精度評価自動化とプロンプトチューニングの効率化について
layerx
PRO
2
190
CSC509 Lecture 11
javiergs
PRO
0
180
Jakarta EE meets AI
ivargrimstad
0
180
アジャイルを支えるテストアーキテクチャ設計/Test Architecting for Agile
goyoki
9
3.3k
ECS Service Connectのこれまでのアップデートと今後のRoadmapを見てみる
tkikuc
2
250
CSC509 Lecture 12
javiergs
PRO
0
160
NSOutlineView何もわからん:( 前編 / I Don't Understand About NSOutlineView :( Pt. 1
usagimaru
0
340
Jakarta EE meets AI
ivargrimstad
0
640
Featured
See All Featured
Building a Modern Day E-commerce SEO Strategy
aleyda
38
6.9k
Side Projects
sachag
452
42k
The Web Performance Landscape in 2024 [PerfNow 2024]
tammyeverts
0
96
Creating an realtime collaboration tool: Agile Flush - .NET Oxford
marcduiker
25
1.8k
Happy Clients
brianwarren
98
6.7k
Site-Speed That Sticks
csswizardry
0
26
Building an army of robots
kneath
302
43k
Code Review Best Practice
trishagee
64
17k
The Language of Interfaces
destraynor
154
24k
Design and Strategy: How to Deal with People Who Don’t "Get" Design
morganepeng
126
18k
KATA
mclloyd
29
14k
The Illustrated Children's Guide to Kubernetes
chrisshort
48
48k
Transcript
࠷ۙͬͯΔɺαʔόʔϨεͰ σʔλੳج൫Λߏங͍ͯ͠Δ͓ ൛ ּݪ /%4
ࣗݾհ @kasacchiful @kasacchiful ּݪ wΫϥεϝιουגࣜձࣾσʔλΞφϦςΟΫεࣄۀຊ෦ w৽ׁݝ৽ׁࢢࡏॅ w͖ͳ"84αʔϏε4ɺ-BNCEBɺ4BHF.BLFS w+"846(৽ׁࢧ෦ʗ1ZUIPOػցֶशษڧձJO৽ׁʗ+B445৽ׁ ʗ48"/**ʗ$MPVE
fl BSF.FFUVQ/JJHBUBʗFUD w"84$PNNVOJUZ#VJMEFS+BQBO"84"MM $FSUJ fi DBUJPOT&OHJOFFS
࣍ wσʔλੳج൫ΛαʔόʔϨεͰ w࠷͓ۙؾʹೖΓͷαʔϏε w·ͱΊ
͢͜ͱ wσʔλΛੳ͢ΔͨΊͷલॲཧΛߦ͏ͨΊͷج൫࡞ͬͯ·͢ w΄ͱΜͲαʔόʔϨεߏͳͷͰɺͦΕΛ͝հʢྫ֎͋Γ w΄΅"84
σʔλੳج൫ΛαʔόʔϨεͰ
࠷ۙΑ͘͏αʔϏε 4 -BNCEB 4UFQ'VODUJPOT (MVF "UIFOB
*P5ηϯαʔσʔλϑΝΠϧΛ-BNCEBͰฒྻՃ
֤छ%#σʔλΛ(MVFͰऔಘͯ͠#JH2VFSZ
ػثใ%#͔ΒσʔλՃͯ͠ՄࢹԽ
ػثใ%#͔ΒσʔλՃͯ͠ՄࢹԽ
࿈ܞσʔλϑΝΠϧ͕དྷͨΒ(MVFˠ3FETIJGU
ߟ͍͑ͯΔ͜ͱɺ͍͍ͩͨҰॹ ͍ۙ༰͕"84#MPHʹࡌͬͨ IUUQTBXTBNB[PODPNKQCMPHTCJHEBUB CVJMEBOFUMQSPDFTTGPSBNB[POSFETIJGUVTJOHBNB[POTFWFOUOPUJ fi DBUJPOTBOEBXTTUFQGVODUJPOT
࠷͓ۙؾʹೖΓͷαʔϏε
(MVFGPS3BZʹظ IUUQTEFWDMBTTNFUIPEKQBSUJDMFTBXTHMVFGPSSBZHFOFSBMMZBWBJMBCMF
1BOEBTͱ΄ͱΜͲมΘΒͳ͍ײ͡Ͱฒྻࢄॲཧ
·ͩ71$ͷϓϥΠϕʔτଓͰ͖ͳ͍͚Ͳ IUUQTEFWDMBTTNFUIPEKQBSUJDMFTBXTHMVFGPSSBZHFOFSBMMZBWBJMBCMF
3FETIJGU"VSPSBͳΒɺ%BUB"1*͕͑Δ IUUQTEFWDMBTTNFUIPEKQBSUJDMFTUSZVTJOHSFETIJGUEBUBBQJPOHMVFGPSSBZ
"844%,GPS1BOEBT "848SBOHMFS ͏ͱ؆୯ IUUQTEFWDMBTTNFUIPEKQBSUJDMFTUSZVTJOHSFETIJGUEBUBBQJPOHMVFGPSSBZ
ެ։ࡁ %FWFMPQFST*0ϏσΦηογϣϯ Glue for Rayを使ってみよう 3435/7/5 データアナリティクス事業本部 笠原 宏
·ͱΊ
·ͱΊ w࠷ۙαʔόʔϨεͰσʔλੳج൫Λߏங͢Δػձ͕ଟ͍ Ͱ͢ w(MVFGPS3BZʹظͯ͠·͢
એ
+B445`/JJHBUB։࠵ w ۚ wਃࠐडऴྃ͠·ͨ͠
1ZUIPOػցֶशษڧձJO৽ׁۙ։࠵༧ఆ wळ w$IBU(15"1*Λͬͨੜ"*ϋϯζΦϯ