Amazon Rekognitionを使ったインターホンハック

Amazon Rekognitionを使ったインターホンハック KMiura(@k_miura_io)

自己紹介 • 三浦耕生(こうき) • Acallのバックエンドエンジニア • JAWS UG名古屋＆神戸運営
• 好きなAWSのサービス：AWS IoT, Lambda, ECS @k_miura_io koki.miura05

今回のテーマ

AWSでスマートホーム化計画 • 築20年超えのマンションには何もスマートホーム要素が無い • QOLを上げるためにありとあらゆるハックをしてきた

例えばこんなことカーテン＆ライトコーヒーメーカー

次なるターゲット

マンションあるある • エントランスはオートロック • 鍵は2つ持ち(最近のマンションはそうでも無いらしい) • 大体カメラ付き

顔認証でエントランスを突破したい

僕のバックグラウンド • 実は情報系ではなくロボット工学の専攻 • C、C++がメイン • ロボットで使われる技術の一つとして画像認識をバリバリ触っていた

Open CV • インテルのエンジニアが開発したオープンソースのコンピュータビジョン向けライブラリ • ディープラーニングモデルを使った画像検出や画像表示に使えるGUIのサポートもある
• ロボット工学、AI(ディープラーニング) の研究やってた人間で知らない人はいないぐらい画像認識の常識

しかしここで問題が • 自分の顔をフルスクラッチで学習するには膨大なデータが必要 • パワフルなGPUの載ったハイスペックなマシンが必要 • アプリ屋さんになった三浦はディープラーニングの知識はとっくに忘れた

Amazon Rekognitionが使えそう • AWSが提供しているクラウドベースの画像、ビデオ分析サービス • Amazonのコンピュータビジョン研究者が開発した実証済みのディープラーニング技術を使って分析をしているらしい •
Recognitionじゃないよ、Rekognitionだよ

顔画像を比較するAPI がある • 2つの画像を比較し、それぞれに映り込んでいる画像の類似度を検出するAPIがある • 画素数が荒くてもちゃんと顔を検出してくれる •
複数の顔が映り込んでてもちゃんと検出してくれるよう

これで顔認証できそう

システム構成

動作の仕組み • Raspberry Piに繋いだWebカメラでインターホンのモニターの映像を撮影 • インターホンのモニターで顔を検出したら画像を保存してAmazon RekognitionのCompare Facesでベー
スの画像との類似度を計算 • 類似度90%超えるとサーボモータで解錠ボタンを押す • シグナルタワーは画像の検出結果のデバッグ用

実際の挙動 https://www.youtube.com/watch?v=WXetAa3L9NM

まとめ • Amazon Rekognitionで思ってたより簡単に顔認証ができてしまった • 画質がどれだけ悪くても割と精度高く認識できる • 生成AIもいいけど、古のAI(ディープラーニング)もいいよ

宣伝 https://jawsdays2025.jaws-ug.jp/

Amazon Rekognitionを使ったインターホンハック

Amazon Rekognitionを使ったインターホンハック

KMiura

More Decks by KMiura

Other Decks in Technology

Featured

Transcript