Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
機械学習エンジニアのための新サービス/DeepLens & SageMaker
Search
ryo nakamaru
December 14, 2017
Technology
0
990
機械学習エンジニアのための新サービス/DeepLens & SageMaker
re:Invent2017 で発表された新サービスについて JAWS-UG AI 支部で LT しました
ryo nakamaru
December 14, 2017
Tweet
Share
More Decks by ryo nakamaru
See All by ryo nakamaru
AWSで楽をするサービスメッシュ入門/appmesh-trial
pottava
1
1.4k
reinforce-2019-recap-lt
pottava
2
4.1k
ScaleShift-jp-2019-summer
pottava
1
190
Firecracker とは何か/what is Firecracker
pottava
13
5.3k
ハイブリッド並列 on Kubernetes/hybrid-parallel-program-on-kubernetes
pottava
1
410
AWS Fargate + Code 兄弟で始める継続的デリバリー / Continuous Delivery with AWS Fargate and Code brothers
pottava
12
3.1k
Singularity と NVIDIA GPU Cloud で作る ハイブリッド機械学習環境の構築 / Building a hybrid environment for Machine Learning with Singularity and NGC
pottava
3
1.2k
明日から始めるちょい足し λ / get-started-with-aws-lambda
pottava
4
2.4k
NGC と Singularity によるハイブリッド機械学習環境 / A hybrid environment for Machine Learning with NGC and Singularity
pottava
0
460
Other Decks in Technology
See All in Technology
統計データで2024年の クラウド・インフラ動向を眺める
ysknsid25
2
850
UI State設計とテスト方針
rmakiyama
2
600
MLOps の現場から
asei
6
650
祝!Iceberg祭開幕!re:Invent 2024データレイク関連アップデート10分総ざらい
kniino
3
300
NW-JAWS #14 re:Invent 2024(予選落ち含)で 発表された推しアップデートについて
nagisa53
0
270
ハイテク休憩
sat
PRO
2
160
バクラクのドキュメント解析技術と実データにおける課題 / layerx-ccc-winter-2024
shimacos
2
1.1k
大幅アップデートされたRagas v0.2をキャッチアップ
os1ma
2
540
スタートアップで取り組んでいるAzureとMicrosoft 365のセキュリティ対策/How to Improve Azure and Microsoft 365 Security at Startup
yuj1osm
0
220
Opcodeを読んでいたら何故かphp-srcを読んでいた話
murashotaro
0
260
Microsoft Azure全冠になってみた ~アレを使い倒した者が試験を制す!?~/Obtained all Microsoft Azure certifications Those who use "that" to the full will win the exam! ?
yuj1osm
2
110
Fanstaの1年を大解剖! 一人SREはどこまでできるのか!?
syossan27
2
170
Featured
See All Featured
Design and Strategy: How to Deal with People Who Don’t "Get" Design
morganepeng
127
18k
Put a Button on it: Removing Barriers to Going Fast.
kastner
59
3.6k
Navigating Team Friction
lara
183
15k
The Art of Programming - Codeland 2020
erikaheidi
53
13k
Cheating the UX When There Is Nothing More to Optimize - PixelPioneers
stephaniewalter
280
13k
Git: the NoSQL Database
bkeepers
PRO
427
64k
Adopting Sorbet at Scale
ufuk
73
9.1k
Learning to Love Humans: Emotional Interface Design
aarron
273
40k
BBQ
matthewcrist
85
9.4k
How STYLIGHT went responsive
nonsquared
95
5.2k
Imperfection Machines: The Place of Print at Facebook
scottboms
266
13k
We Have a Design System, Now What?
morganepeng
51
7.3k
Transcript
機械学習エンジニアのための新サービス DeepLens & SageMaker JAWS-UG AI #6 @ Dec 14,
2017 Ryo NAKAMARU, SUPINF Inc. / Rescale, Inc.
Amazon SageMaker
3
SageMaker 4 設計 学習 デプロイ • ワンクリック起動 Jupyter notebook •
プリセットされた 機械学習アルゴリ ズム群 ▶ ▶ • ジョブを定義し 学習開始 • 並列分散学習 • ハイパーパラメタ 最適化 • シンプルな API で モデルをデプロイ • フルマネージドな 推論エンドポイント の提供
SageMaker • 一部機能だけの利用も OK ‣ 設計+学習機能だけ使う ‣ 推論エンドポイントだけ使う etc.. •
抽象度の高い SageMaker API • Docker を使えば学習・推論のカスタマイズも 5
SageMaker API 6 • 学習 from sagemaker import KMeans kmeans
= KMeans(k=10, data_location=s3_data_location, output_path=s3_output_location, train_instance_type='ml.c4.8xlarge', train_instance_count=4, role=execution_iam_role) kmeans.fit(kmeans.record_set(train_set[0]))
SageMaker API • デプロイ 7 predictor = kmeans.deploy(instance_type='ml.m4.xlarge', initial_instance_count=1)
SageMaker API 8 • 推論 result = predictor.predict(valid_set[0][0:100])
SageMaker inference bot 9
AWS DeepLens
11
DeepLens での推論 12 DeepLens raw data Local 動画生データ
DeepLens での推論 13 DeepLens raw data Local results Greengrass Inference
with 推論
DeepLens での推論 14 DeepLens raw data Local results AWS Greengrass
IoT Rule Lambda Inference with MQTT 「ホットドック があったよ」
DeepLens へのデプロイ 15 DeepLens AWS SageMaker Trained by EC2 Model
学習
DeepLens へのデプロイ 16 DeepLens AWS DeepLens SageMaker a project Model
Model モデルを インポート
DeepLens へのデプロイ 17 DeepLens AWS DeepLens a project Model 推論
& AWS IoT 連携の実装
DeepLens へのデプロイ 18 DeepLens AWS Greengrass Inference with DeepLens a
project Model デプローイ
DeepLens • 開発者向けデバイス ‣ 動画を使う深層学習をローカルで手軽に回せる ‣ デバイスへのデプロイもとても簡単! • HD ビデオ
& 秒間 10 億回の浮動小数点数演算能力 • 249 USD で予約受付中(Amazon.com) 19
中丸 良 @pottava • AWS Certified Solutions Architect, DevOps Engineer
- Professional • CTO at SUPINF Inc • Solutions Architect at Rescale, Inc. Profile 20
Containerize your app! 21 • クラウド / コンテナ を強みにした受託開発運用、コンサルティング •
2015 年から Docker の本番運用を開始・豊富な CI / CD 事例 • スピンフ、と読みます・・
Cloud HPC with 22 • クラウド HPC シミュレーションプラットフォームの提供 • 2011
年初頭に設立、Peter Thiel や Microsoft から出資 • スケーラブルなシミュレーションや機械学習を!
ご静聴ありがとうございました :) 参考文献: • AWS re:Invent 2017: Introducing Amazon SageMaker
(MCL365) https://www.youtube.com/watch?v=4pbXdsjZx_k • Amazon SageMaker – 機械学習を加速する | Amazon Web Services ブログ https://aws.amazon.com/jp/blogs/news/amazon-sagemaker/ • Extend AWS DeepLens to Send SMS Notifications with AWS Lambda | AWS AI Blog https://aws.amazon.com/jp/blogs/ai/extend- aws-deeplens-to-send-sms-notifications-with-aws-lambda/