Smart Speaker & IoT @東北TECH道場 八戸道場

Transcript

1. Google Homer Smart Speaker や IoT なんかについて話すよ
2. VUI : Voice User Interface ( Smart Speaker ) アプリ 「うんこカウンター」 Evangelist VUI LT vol.2 @Google Japan本社
3. IoT : Internet of Things ミニ四駆チキンレース 決勝戦 IoT LT vol.51 @ ORACLE Japan本社
4. RPA : Robotic Process Automation Work Robot 個人戦 ファイナリスト RPA DIGITAL WORLD TOKYO 2019 @ 東京国際フォーラム
5. 本日の内容 1 Google Home Tips ( 使い方 ) ① アプリショートカット ② 会話が弾むコンテキスト機能 2 IoT 体験 ( HTML/JavaScript ) ① 音声で4足歩行ロボット操縦 ② 加速度センサーでラジコンカー操縦
6. 1 Google Home Tips ① アプリ起動ショートカット ② 会話が弾むコンテキスト機能
7. 1 Google Home ① アプリ起動ショートカット
8. OK Google うんこカウンター につないで 説明 うんこうんこ 2点です Google Homeアプリの会話の流れ 終了 ショートカット
9. うんこ漏れそう、今すぐうんこしたい !! ① O K G o o g l e うんこカウンターを使ってうんこうんこ ② O K G o o g l e うんこうんこ or 終了
10. 一般のアプリでも可能、常用アプリ使い倒そう OK Google [起動名]を使って[コマンド] OK Google [コマンド] or 終了 【 いきなりうんこ 】 【 どこでもうんこ 】
11. 1 Google Home ② 会話が弾むコンテキスト機能
12. コンテキスト ≒ 文脈 【人間の会話】 彼が山田です ・ 彼は何歳 山田は二十歳です 【Google Home】 その曲 彼の そこの
13. 八戸市の市長は? → 小林眞 彼は何歳? → 69歳 そこの人口は? → 23万人 会話が弾むコンテキスト機能 みろく横丁って? → 屋台村 そこの営業時間は? → 16時～4時 そこのホテルは → ホテルリバティヒル 月曜から夜ふかしの曲 → スラローム その曲をかけて → 音楽再生
14. 2 IoT 体験 ( HTML/JavaScript ) ① 音声で4足歩行ロボット操縦 ② 加速度センサーでラジコンカー操縦
15. 2 IoT 体験 ( HTML/JavaScript ) ① 音声で4足歩行ロボット操縦
16. JavaScript標準機能で音声認識 const speech = new webkitSpeechRecognition(); speech.lang = 'ja-JP’; speech.start(); speech.onresult = async function (e) { speech.stop(); if (e.results[0].isFinal) { var autotext = e.results[0][0].transcript; // autotextを使った何かの処理 } } speech.onend = () => { speech.start() };
17. (応用例)音声で4足歩行ロボット操縦
18. 2 IoT 体験 ( HTML/JavaScript ) ② 加速度センサーでラジコンカー操縦
19. Sufariはモーションアクセスを有効に
20. window.addEventListener("devicemotion", function (event1) { var X= event1.accelerationIncludingGravity.x; var Y= event1.accelerationIncludingGravity.y; var Z= event1.accelerationIncludingGravity.z; // 以下XYZを使った何かの処理 }, true); JavaScript標準機能で加速度センサー
21. (応用例)加速度センサーでラジコンカー操縦
22. HTML JavaScript 5V1A出力 モーター直接駆動 クラウド CPUボード Internet経由で機器を操作した仕組み 画面操作 音声 加速度センサー ( オブナイズ )
23. <script> var obniz = new Obniz("OBNIZ_ID_HERE"); obniz.onconnect = async function () { var led = obniz.wired("LED", {anode:0, cathode:1}); led.on(); } </script> obniz LチカのJavaScriptコード例
24. まとめ ▪ Google Home Tips ▪ 簡単IoT ・ JavaScript標準機能でセンサー値取得可 ・ obniz お勧めIoT CPUボード OK Google [起動名]を使って[コマンド] OK Google [コマンド] or 終了 OK Google その曲/彼の/そこの XXX
25. Google Homer @google_homer_ グーグル ホーマー @Google_Homer
26. Appendix
27. RPAツール Skill開発ツール IoT CPUボード AlexaでPowerPointを起動した仕組み
28. Google Home Amazon Alexa LINE Clova アプリ ルーティン IFTTT スキル VoiceFlow Blueprints 定型アクション IFTTT スキル マイコマンド IFTTT スマートスピーカーの技術的な攻め所
29. メカナムホイール回転方向による移動特性