XRミーティング 20231220

XRミーティング 20231220 「XREAL Air / Meta Quest 3 でxR + AI + IoT 展示してきたよもやま話」の登壇資料です。

◆スライド内の素材は以下を使用させていただいております。ありがとうございます！

・ICOOON MONO http://icooon-mono.com/
・Adobe Stock https://stock.adobe.com/jp
・Adobe Express https://www.adobe.com/jp/express/

Transcript

1. XRミーティング 20231220 XREAL Air / Meta Quest 3 で xR + AI + IoT 展示してきたよもやま話 ワンフットシーバス 田中正吾
2. 私の話はスライドを後ほど共有します。 話す内容に注力いただいて大丈夫です！
3. 10 分くらいで話します！
4. 田中正吾（たなかせいご） 屋号：ワンフットシーバス 2004年よりフリーランス。以後、FLASH制作を 中心にインタラクティブコンテンツを主に行い現 在に至る。 最近ではWEBフロントエンドをベースにしなが らも、情報とインターフェースが合わさるアプ ローチという視点でIoTやMixed Realityといった 技術も取り入れながら活動しています。
5. 12/9 に LODGE XR Talk vol.10 で xR + AI + IoT 展示をしてきました XREAL Air / Meta Quest 3 で色々うごかす
6. 声で動かす展示 XRMTG や AIMTG でつど進捗を話していた xR で音声から IoT 制御だったり会話できたするもの
7. こんな風に設置して展示 声をかけつつ、xR かぶせつつ、説明しつつ、操作してもらいつつ、デモしつつ、楽しかった
8. 今日はその中で Meta Quest 3 から 声で IoT ライト制御ライブデモします
9. 展示のよもやま話 得た知見やがんばったところ
10. 操作資料作ってみて伝えやすかった ただ A ボタン 1 回で録音開始、もう一度押すと録音停止は操作が難しい 長押しのとき録音中と思う人も多く今後よくしていきたい
11. 音声でアプリ切替実装したけど展示時の喧噪だと かなり厳しいときがある アプリBと認識されるのが「あぷりびー」となる。つらい。Meta Quest 3 は喧噪時でもなんとかなる。
12. 音声操作に頼りすぎず ボタンで操作できるのも大事そう ちょっと「声でうごかす」に特化しすぎてやりすぎた。良い経験。
13. 会話アプリは難しい ChatGPT への会話は楽しいのだけど録音操作をやり続けるのは大変なので ワンショットで操作できる IoT ライトやモータが分かりやすかったので、途中からそっち寄りに
14. 音声送りまくるので通信量やばいかと思ったが 800 MB 程度の消費でわりとなんとかなった たぶん 3 時間 30 人くらい体験で IoT ライト操作で何回か命令するペース
15. OpenAI API もあまり使用料取られなかった 幸い GPT3.5 で作ったのもあるし会話での蓄積が今回のアプリでは弱めなのでよかった。知見。
16. Meta Quest 3 は ON のままだと充電しても 電池が徐々に減ってきて困った W 数が消費に負けてるっぽい。今回、アプリBを維持したいゆえにつけっぱなししたくて困った。 スマートフォンがメインの XREAL Air は電池が持ちやすく、充電時はうまくそちらでフォローしつつ。
17. かたや IoT 部分のバッテリーは ほぼ 1 日持ってくれた 3200 mAh あるので今回の仕組みだと持ってくれた。予備は一度だけ念のためで使った。
18. いろいろと楽しめたしバタバタしたし ちゃんと展示「できた」のでヨシ！ いろいろ展示知見も貯まり、久々の展示筋は鍛えられた
19. ➔ 音声の操作だけで作ってしまうと喧噪など場の影響を受け やすいので、物理ボタン操作も活用するとよさそう ➔ たくさんアプリがあっても体験時には伝わるアプリに絞っ たほうが体験しやすくなる ➔ 通信量や API 使用料あたりは予想を良い意味で裏切る ケースとなり勉強になった ➔ デバイスの電池充電まわりは課題はあるので、うまく運用 したい。今回は 2 デバイスで結構助かった。 ➔ なにはともあれ展示できた。今後もがんばりたい！ まとめ