Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
Kaggleと実務
Search
Takanobu Nozawa
August 29, 2019
Technology
23k
7
Share
Embed
Copy iframe code
Copy JS code
Copy link
Start on current slide
Kaggleと実務
Takanobu Nozawa
August 29, 2019
More Decks by Takanobu Nozawa
See All by Takanobu Nozawa
データ基盤をDataformで整えた話 〜 開発環境を添えて 〜
takapy
0
220
低コストで実現する社内文書RAG機能を搭載したAIチャットボット開発
takapy
4
6.2k
コミュニティサービスに「あなたへ」フィードを リリースするまでの試行錯誤
takapy
1
2k
NLPを活用したオンボーディング改善とコールドスタート問題への対策
takapy
4
6.1k
自然言語可視化ライブラリ 「nlplot」のご紹介
takapy
3
4.5k
コミュニティサービスにおけるレコメンデーションの変遷とMLパイプラインについて
takapy
2
7.4k
SageMaker StudioとStep Functionsを用いてMLOpsへの一歩を踏み出そう
takapy
0
13k
GoogleColabとVSCodeを用いた分析環境運用Tips
takapy
15
15k
word2vecを利用した埋め込み分析とSWEMを用いた比較実験
takapy
0
2.5k
Other Decks in Technology
See All in Technology
なぜ、あなたのエージェントは言うことを聞かないのか
segavvy
1
370
ダッシュボード"開発"について 〜使われるダッシュボードのつくりかた〜
kimichan
0
200
探索・可視化・自動化を一本化 Amazon Quickでデータ活用スピードを上げる方法
koheiyoshikawa
0
170
Amplify Gen2でbackend.tsにCDKを定義する/しない事によるCDKの挙動の違いとユースケース
smt7174
1
490
[Droidcon Orlando '26] The Android Lens: Applying Mobile Forensics to AI Performance
amanda_hinchman
1
110
大 AI 時代におけるC# の事情 ~ぶっちゃけトークを交えながら~
nenonaninu
0
100
Playwright × AI Agent でE2Eテストはどう変わるか AI駆動テストの可能性と実用検証の結果
taiga7543
2
790
非定型なドキュメントを効率よくリファクタする 〜えぇ!?仕様書27本の移行が1日で終わったって!?〜
subroh0508
2
610
大量データに対しても、生成AIを用いてリーズナブルにデータ加工をしたい!Databricksのai_queryについて調べてみた
kamoshika
1
280
AIエージェントがあれば技術書なんてすぐ書けるでしょ→無理でした
watany
2
240
伝票作成AIエージェントを支える、LLMOpsとインフラの選択肢 / AICon2026_takeda
rakus_dev
0
260
Oracle Exadata Database Service on Cloud@Customer X11M (ExaDB-C@C) サービス概要
oracle4engineer
PRO
2
8.5k
Featured
See All Featured
The Illustrated Children's Guide to Kubernetes
chrisshort
51
53k
Exploring the Power of Turbo Streams & Action Cable | RailsConf2023
kevinliebholz
37
6.5k
WCS-LA-2024
lcolladotor
0
750
The Limits of Empathy - UXLibs8
cassininazir
1
530
Pawsitive SEO: Lessons from My Dog (and Many Mistakes) on Thriving as a Consultant in the Age of AI
davidcarrasco
0
190
VelocityConf: Rendering Performance Case Studies
addyosmani
333
25k
Game over? The fight for quality and originality in the time of robots
wayneb77
1
230
The Spectacular Lies of Maps
axbom
PRO
1
870
Reflections from 52 weeks, 52 projects
jeffersonlam
356
21k
Everyday Curiosity
cassininazir
0
260
CSS Pre-Processors: Stylus, Less & Sass
bermonpainter
360
30k
My Coaching Mixtape
mlcsv
0
170
Transcript
ϚϚͷҰาΛࢧ͑Δ ΧάϧͱδπϜ $POOFIJUP*ODᖒর ୈ̐ճLBHHMF͘͘ձ!߿ொ
Έͳ͞Μɺ,BHHMF͖Ͱ͔͢ʁ
,BHHMFͷܦݧ࣮ʹ׆͖͍ͯ·͔͢ʁ
ࠓ͢͜ͱ .-ΤϯδχΞʹͳͬͯϲ݄Ͱײͨ͡ ,BHHMFͱ࣮ͷIPHFIPHFʹ͍ͭͯ
ͪͳΈʹ͜ͷεϥΠυ
൴ΒʹΑͬͯࢧ͑ΒΕ͍ͯ·͢
ຊ
ΞδΣϯμ ࣗݾհ αʔϏεʹ͍ͭͯ ৫ʹ͍ͭͯ ,BHHMFͱ࣮ʹ͍ͭͯ
ࣗݾհ
ࣗݾհ ໊લɿᖒরʢ/P[BXB5BLBOPCVʣ ॴଐɿίωώτגࣜձࣾ ɹɹɿ!UBLBQZ w ʙίωώτʹ.-ΤϯδχΞͱͯ͠+0*/ w ػցֶशؔ࿈ΛϝΠϯʹΓͭͭɺΠϯϑϥษڧத
w ,BHHMFͨ͠ΓɺϒϩάʢIUUQTXXXUBLBQZXPSLʣॻ͍ͨΓɺ ٿͨ͠Γ͍ͯ͠·͢
αʔϏεʹ͍ͭͯ
αʔϏεʹ͍ͭͯ ˞ʮӾཡʯʮར༻ऀʯϝσΟΞͱΞϓϦͷ߹ܭʢ݄݄ͷฏۉʣ ˞ʮϚϚ͚/PΞϓϦʯ݄Πϯςʔδௐɹௐࠪରɿ৷தʙ̎ࡀ̌ϲ݄ͷࢠڙΛ࣋ͭঁੑ O Λநग़ ˞*OTUBHSBNͷϑΥϩϫʔɺ'BDFCPPLͷ͍͍Ͷɺ-*/&ͷͱͩͪͷ߹ܭ ݄࣌
ϚϚϦ ΞϓϦɾ8FC 4/4 *OTUBHSBNɾ-*/&ɾ'BDFCPPL هࣄ ϚϚಉ࢜ͰΈΛ૬ஊ͠߹͏2"ίϛϡχςΟΛத৺ʹ ϢʔβʔΛ֦େ͍ͯ͠·͢ ʮϚϚϦʯͰϢʔβʔಉ͕࢜ ͲΜͲΜܨ͕͍ͬͯ·͢ ϚϚͷੜ׆ʹཱͭهࣄΛ ෯͍δϟϯϧͰ৴͍ͯ͠·͢ ϚϚ͚/P̍ΞϓϦʹબग़ ਓͷϚϚ͕બͿʮݱࡏ͍ͬͯΔΞϓϦʯʹ ͯɺ߲ ଞͷϚϚʹΦεεϝ͍ͨ͠ɺೝɺ ར༻ɺརศੑɺײ Ͱ̍ҐΛ֫ಘ͠·ͨ͠ هࣄ 6,000 هࣄҎ্ ྦྷܭϑΝϯ 85 ສਓ ˞ ݄ؒӾཡ 1.5ԯճ ˞ ݄ؒར༻ऀ 650ສਓ ˞ ˞ lΈzͱzڞײzΛ࣠ʹϚϚʹدΓఴ͍ ΞϓϦɾ8FCɾ4/4ͱଟ֯తʹαʔϏεΛల։͍ͯ͠·͢
αʔϏεʹ͍ͭͯ 0 450,000 900,000 1,350,000 1,800,000 2014/4 2014/5
2014/6 2014/7 2014/8 2014/9 2014/10 2014/11 2014/12 2015/1 2015/2 2015/3 2015/4 2015/5 2015/6 2015/7 2015/8 2015/9 2015/10 2015/11 2015/12 2016/1 2016/2 2016/3 2016/4 2016/5 2016/6 2016/7 2016/8 2016/9 2016/10 2016/11 2016/12 2017/1 2017/2 2017/3 2017/4 2017/5 2017/6 2017/7 2017/8 2017/9 2017/10 2017/11 2017/12 2018/1 2018/2 2018/3 2018/4 2018/5 2018/6 2018/7 2018/8 ݄ؒߘ 150ສ݅ िʹҎ্ىಈ͢Δ ΞΫςΟϒϢʔβʔ 50 ਓʹਓ 57$. ์ө ΞϓϦ૯%-ສ ਓʹਓ ਓʹਓ ਓʹਓ ਓʹਓ ˞ ˞ʮϚϚϦʯͷग़࢈༧ఆΛઃఆͨ͠Ϣʔβʔͱɺްੜ࿑ಇলൃදʮਓޱಈଶ౷ܭʯͷग़ੜ͔Βࢉग़ ˞िʹճҎ্ىಈ͢ΔϢʔβʔ ˞ ʹग़࢈ͨ͠ϚϚͷʮਓʹਓʯ͕ϚϚϦΛར༻த ຊ࠷େڃنΛތΔϒϥϯυͱ͍ͯ͠·͢ ˞
৫ʹ͍ͭͯ
৫ʹ͍ͭͯ αʔόʔαΠυɿ Σϒϑϩϯτɿ ϞόΠϧɿ Πϯϑϥɾ.-ɿ
৫ʹ͍ͭͯ αʔόʔαΠυɿ Σϒϑϩϯτɿ ϞόΠϧɿ Πϯϑϥɾ.-ɿ
৫ʹ͍ͭͯ αʔόʔαΠυɿ Σϒϑϩϯτɿ ϞόΠϧɿ Πϯϑϥɾ.-ɿ Լه݅ͷݩɺҎ߱Λ͠·͢ w 8FCܥελʔτΞοϓ
w #UP$αʔϏε w ΅ͬͪ.-ΤϯδχΞ
,BHHMFͱ࣮ʹ͍ͭͯ
,BHHMFͱ࣮ʹ͍ͭͯ ࣭ऀ ճऀ ෆదͳίϯςϯπͷߘ FH؆୯ʹՔ͛Δํ๏ڭ͑·͢Α ϚϚϦͰͷػցֶश׆༻ྫ
,BHHMFͱ࣮ʹ͍ͭͯ ࣭ऀ ճऀ ෆదͳίϯςϯπͷߘ FH؆୯ʹՔ͛Δํ๏ڭ͑·͢Α ݕ Ӿ ϑ
Ο ϧ λ /-1Λͬͯ ෆదͳߘΛݕ ϚϚϦͰͷػցֶश׆༻ྫ
ҰൠతͳػցֶशϓϩδΣΫτͷϫʔΫϑϩʔ ՝ɾΰʔϧઃఆ σʔλऩू σʔλՃɾੳ Ϟσϧߏங ධՁɾݕূ ධՁɾӡ༻ ຊ൪
࡞Δ ͏ σϓϩΠ 1P$ ఆظతͳ Ϟσϧߋ৽ ,BHHMFͱ࣮ʹ͍ͭͯ σʔλऩू Ϟσϧߋ৽
ҰൠతͳػցֶशϓϩδΣΫτͷϫʔΫϑϩʔ ՝ɾΰʔϧઃఆ σʔλऩू σʔλՃɾੳ Ϟσϧߏங ධՁɾݕূ ධՁɾӡ༻ ຊ൪
࡞Δ ͏ σϓϩΠ 1P$ ఆظతͳ Ϟσϧߋ৽ ,BHHMFͱ࣮ʹ͍ͭͯ σʔλऩू Ϟσϧߋ৽ ,BHHMFͷλεΫ
՝ɾΰʔϧઃఆ σʔλऩू σʔλՃɾੳ Ϟσϧߏங ධՁɾݕূ ධՁɾӡ༻ ຊ൪ ࡞Δ
͏ σϓϩΠ 1P$ ఆظతͳ Ϟσϧߋ৽ ,BHHMFͱ࣮ʹ͍ͭͯ σʔλऩू Ϟσϧߋ৽ ,BHHMFͷλεΫ
՝ɾΰʔϧઃఆ σʔλऩू σʔλՃɾੳ Ϟσϧߏங ධՁɾݕূ ධՁɾӡ༻ ຊ൪ ࡞Δ
͏ σϓϩΠ 1P$ ఆظతͳ Ϟσϧߋ৽ ,BHHMFͱ࣮ʹ͍ͭͯ σʔλऩू Ϟσϧߋ৽ ,BHHMFͷλεΫ ࣮ͷλεΫ
՝ɾΰʔϧઃఆ σʔλऩू σʔλՃɾੳ Ϟσϧߏங ධՁɾݕূ ධՁɾӡ༻ ຊ൪ ࡞Δ
͏ σϓϩΠ 1P$ ఆظతͳ Ϟσϧߋ৽ ,BHHMFͱ࣮ʹ͍ͭͯ σʔλऩू Ϟσϧߋ৽ ࣮ͷλεΫ
՝ɾΰʔϧઃఆ σʔλऩू σʔλՃɾੳ Ϟσϧߏங ධՁɾݕূ ධՁɾӡ༻ ຊ൪ ࡞Δ
͏ σϓϩΠ 1P$ ఆظతͳ Ϟσϧߋ৽ ,BHHMFͱ࣮ʹ͍ͭͯ σʔλऩू Ϟσϧߋ৽ ࣮ͷλεΫ ,BHHMFͷλεΫͱ࣮ͷλεΫΛ ൺֱͯ͠ΈΔ
՝ɾΰʔϧઃఆ σʔλऩू σʔλՃɾੳ Ϟσϧߏங ධՁɾݕূ ධՁɾӡ༻ ຊ൪ ࡞Δ
͏ σϓϩΠ 1P$ ఆظతͳ Ϟσϧߋ৽ ,BHHMFͱ࣮ʹ͍ͭͯ σʔλऩू Ϟσϧߋ৽ ,BHHMFͷλεΫͱ࣮ͷλεΫΛൺֱ
՝ɾΰʔϧઃఆ σʔλऩू σʔλՃɾੳ Ϟσϧߏங ධՁɾݕূ ධՁɾӡ༻ ຊ൪ ࡞Δ
͏ σϓϩΠ 1P$ ఆظతͳ Ϟσϧߋ৽ ,BHHMFͱ࣮ʹ͍ͭͯ σʔλऩू Ϟσϧߋ৽ ,BHHMFͷλεΫͱ࣮ͷλεΫΛൺֱ
,BHHMFͱ࣮ʹ͍ͭͯ ,BHHMF ࣮ ՝ɾΰʔϧઃఆ ෆཁ ཁ σʔλऩू ෆཁ
ཁ σʔλՃɾੳ ཁ ཁ Ϟσϧߏங ཁ ཁ ϞσϧͷධՁɾݕূ ཁ ཁ Ϟσϧͷ"1*ԽɾσϓϩΠ ෆཁ ཁ Ϟσϧͷӡ༻ ෆཁ ཁ ,BHHMFͷλεΫͱ࣮ͷλεΫΛൺֱ
,BHHMFͱ࣮ʹ͍ͭͯ ,BHHMF ࣮ ՝ɾΰʔϧઃఆ ෆཁ ཁ σʔλऩू ෆཁ
ཁ σʔλՃɾੳ ཁ ཁ Ϟσϧߏங ཁ ཁ ϞσϧͷධՁɾݕূ ཁ ཁ Ϟσϧͷ"1*ԽɾσϓϩΠ ෆཁ ཁ Ϟσϧͷӡ༻ ෆཁ ཁ ,BHHMFͷλεΫͱ࣮ͷλεΫΛൺֱ
,BHHMFͱ࣮ʹ͍ͭͯ ,BHHMF ࣮ ՝ɾΰʔϧઃఆ ෆཁ ཁ σʔλऩू ෆཁ
ཁ σʔλՃɾੳ ཁ ཁ Ϟσϧߏங ཁ ཁ ϞσϧͷධՁɾݕূ ཁ ཁ Ϟσϧͷ"1*ԽɾσϓϩΠ ෆཁ ཁ Ϟσϧͷӡ༻ ෆཁ ཁ ,BHHMFͷλεΫͱ࣮ͷλεΫΛൺֱ ,BHHMFͷܦݧ͕ ࣮ʹཱͭͷ͜ͷ෦
,BHHMFͱ࣮ʹ͍ͭͯ ,BHHMF ࣮ ՝ɾΰʔϧઃఆ ෆཁ ཁ σʔλऩू ෆཁ
ཁ σʔλՃɾੳ ཁ ཁ Ϟσϧߏங ཁ ཁ ϞσϧͷධՁɾݕূ ཁ ཁ Ϟσϧͷ"1*ԽɾσϓϩΠ ෆཁ ཁ Ϟσϧͷӡ༻ ෆཁ ཁ ,BHHMFͷλεΫͱ࣮ͷλεΫΛൺֱ ྫ͑
,BHHMFͱ࣮ʹ͍ͭͯ ,BHHMF ࣮ ՝ɾΰʔϧઃఆ ෆཁ ཁ σʔλऩू ෆཁ
ཁ σʔλՃɾੳ ཁ ཁ Ϟσϧߏங ཁ ཁ ϞσϧͷධՁɾݕূ ཁ ཁ Ϟσϧͷ"1*ԽɾσϓϩΠ ෆཁ ཁ Ϟσϧͷӡ༻ ෆཁ ཁ ,BHHMFͷλεΫͱ࣮ͷλεΫΛൺֱ
,BHHMFͱ࣮ʹ͍ͭͯ ,BHHMF ࣮ ՝ɾΰʔϧઃఆ ෆཁ ཁ σʔλऩू ෆཁ
ཁ σʔλՃɾੳ ཁ ཁ Ϟσϧߏங ཁ ཁ ϞσϧͷධՁɾݕূ ཁ ཁ Ϟσϧͷ"1*ԽɾσϓϩΠ ෆཁ ཁ Ϟσϧͷӡ༻ ෆཁ ཁ ,BHHMFͷλεΫͱ࣮ͷλεΫΛൺֱ ʮϞσϧͷ"1*ԽɾσϓϩΠʯ ͚ͩͰ݁ߏΔ͜ͱ͕ଟ͔ͬͨΓ͢Δ
FH"1*ԽɾσϓϩΠʹඞཁͳͷ w ֶशࡁΈϞσϧ w SBXσʔλΛਪͰ͖Δܗʹॲཧ͢ΔͨΊͷϞδϡʔϧ /-1ͷ߹ετοϓϫʔυϑΝΠϧࣙॻͳͲ w
࣮ߦڥʢ"1*αʔόʣ w "1*ʢQZϑΝΠϧͳͲʣ w $*$% ʑ
w ֶशࡁΈϞσϧ w SBXσʔλΛਪͰ͖Δܗʹॲཧ͢ΔͨΊͷϞδϡʔϧ /-1ͷ߹ετοϓϫʔυϑΝΠϧࣙॻͳͲ w ࣮ߦڥʢ"1*αʔόʣ
w "1*ʢQZϑΝΠϧͳͲʣ w $*$% ʑ ͋Εɺ ,BHHMF࣮ͬͯʹ׆͖Δͷʁʁ FH"1*ԽɾσϓϩΠʹඞཁͳͷ
,BHHMFͱ࣮ʹ͍ͭͯ ,BHHMF ࣮ ՝ɾΰʔϧઃఆ ෆཁ ཁ σʔλऩू ෆཁ
ཁ σʔλՃɾੳ ཁ ཁ Ϟσϧߏங ཁ ཁ ϞσϧͷධՁɾݕূ ཁ ཁ Ϟσϧͷ"1*ԽɾσϓϩΠ ෆཁ ཁ Ϟσϧͷӡ༻ ෆཁ ཁ ,BHHMFͷλεΫͱ࣮ͷλεΫΛൺֱ
,BHHMFͱ࣮ʹ͍ͭͯ ,BHHMF ࣮ ՝ɾΰʔϧઃఆ ෆཁ ཁ σʔλऩू ෆཁ
ཁ σʔλՃɾੳ ཁ ཁ Ϟσϧߏங ཁ ཁ ϞσϧͷධՁɾݕূ ཁ ཁ Ϟσϧͷ"1*ԽɾσϓϩΠ ෆཁ ཁ Ϟσϧͷӡ༻ ෆཁ ཁ ,BHHMFͷλεΫͱ࣮ͷλεΫΛൺֱ ͜ͷ෦ͷݟʹؔͯ͠ ൺֱతੈͷதʹग़͖͍ͯͯΔҹ
,BHHMFͱ࣮ʹ͍ͭͯ ,BHHMF ࣮ ՝ɾΰʔϧઃఆ ෆཁ ཁ σʔλऩू ෆཁ
ཁ σʔλՃɾੳ ཁ ཁ Ϟσϧߏங ཁ ཁ ϞσϧͷධՁɾݕূ ཁ ཁ Ϟσϧͷ"1*ԽɾσϓϩΠ ෆཁ ཁ Ϟσϧͷӡ༻ ෆཁ ཁ ,BHHMFͷλεΫͱ࣮ͷλεΫΛൺֱ ͜ͷ෦ʹؔͯ͠ ·ͩ·ͩใ͕গͳ͍ҹ
,BHHMFͱ࣮ʹ͍ͭͯ ,BHHMF ࣮ ՝ɾΰʔϧઃఆ ෆཁ ཁ σʔλऩू ෆཁ
ཁ σʔλՃɾੳ ཁ ཁ Ϟσϧߏங ཁ ཁ ϞσϧͷධՁɾݕূ ཁ ཁ Ϟσϧͷ"1*ԽɾσϓϩΠ ෆཁ ཁ Ϟσϧͷӡ༻ ෆཁ ཁ ,BHHMFͷλεΫͱ࣮ͷλεΫΛൺֱ ͦͷதͰɺ࣮ࡍͷϏδωε՝ʹରͯ͠ Ͳ͏ੳͯ͠ɺͲ͏ϞσϦϯάͯ͠ɺͲ͏ݕূ͢Δ͔ ͱ͍ͬͨใ݁ߏগͳ͍
,BHHMFͱ࣮ʹ͍ͭͯ ,BHHMF ࣮ ՝ɾΰʔϧઃఆ ෆཁ ཁ σʔλऩू ෆཁ
ཁ σʔλՃɾੳ ཁ ཁ Ϟσϧߏங ཁ ཁ ϞσϧͷධՁɾݕূ ཁ ཁ Ϟσϧͷ"1*ԽɾσϓϩΠ ෆཁ ཁ Ϟσϧͷӡ༻ ෆཁ ཁ ,BHHMFͷλεΫͱ࣮ͷλεΫΛൺֱ ·ͯ͠ɺ΅ͬͪ.-ΤϯδχΞͩͱ ϞσϧͷΈํͱ͔ݕূͷํͱ͔݁ߏෆ҆
,BHHMFͱ࣮ʹ͍ͭͯ ,BHHMF ࣮ ՝ɾΰʔϧઃఆ ෆཁ ཁ σʔλऩू ෆཁ
ཁ σʔλՃɾੳ ཁ ཁ Ϟσϧߏங ཁ ཁ ϞσϧͷධՁɾݕূ ཁ ཁ Ϟσϧͷ"1*ԽɾσϓϩΠ ෆཁ ཁ Ϟσϧͷӡ༻ ෆཁ ཁ ,BHHMFͷλεΫͱ࣮ͷλεΫΛൺֱ ͦ͏͍ͬͨதͰ ,BHHMFʢਵ͢ΔίϛϡχςΟؚΊʣ ݟͷๅੴശ
,BHHMFͱ࣮ʹ͍ͭͯ ,BHHMF ࣮ ՝ɾΰʔϧઃఆ ෆཁ ཁ σʔλऩू ෆཁ
ཁ σʔλՃɾੳ ཁ ཁ Ϟσϧߏங ཁ ཁ ϞσϧͷධՁɾݕূ ཁ ཁ Ϟσϧͷ"1*ԽɾσϓϩΠ ෆཁ ཁ Ϟσϧͷӡ༻ ෆཁ ཁ ,BHHMFͷλεΫͱ࣮ͷλεΫΛൺֱ ͏Θͬɾɾɾ ,BHHMFͷϙςϯγϟϧߴ͗͢ɾɾɾʁ
·ͱΊʂ
·ͱΊ w,BHHMFͰཆΘΕΔೳྗ.-ΤϯδχΞͱͯ͠ٻΊΒΕΔೳྗͷ Ұ෦ʢاۀنɾϏδωεϞσϧɾ৫ମ੍ʹΑΔࠩ͋Δ͕ʣ w͕ͩɺ,BHHMFʢͱͦΕʹਵ͢ΔίϛϡχςΟʣ͔ΒಘΒΕΔ ݟͱͯଟ͍ॿ͔Δ w͜Ε͔Β,BHHMF͍ͬͯͧ͘,BHHMFίϛϡχςΟʹߩݙ͠ ͍ͯͧ͘
͝ਗ਼ௌ͋Γ͕ͱ͏͍͟͝·ͨ͠ʂ