XRの近況とUX/UIについて

This slide provides an organized introduction to the characteristics of UX/UI in the XR space.

Transcript

1. XRの近況と UX/UIについて 2023/02/28 Akinen Generated by midjourney
2. VR・AR、 やってますか？ 個人的な取り組みと、 そこから得た知見についてご共有します。 以下は私見であり不正確な推測を含む場合があります。
3. 近年、 広告・PR目的ではあるものの、 VRプラットフォーム上への出展事例が増えつつある。 金融・損保業界の取り組み
4. マルチデバイスでアクセス可能なプラットフォームと、 そのユーザー数は着実に増えつつある Fortnite、 VRChat、 Clusterなど 「メタバース」 と呼ばれるプラットフォームが増えつつある。 VRChatについては80億円の資金調達。 ClusterやREALITYなど、 スマホからアクセス可能なアプリも人気に。 一方で、 NFTと絡めてメタバース上の土地を売るバーチャル原野商法も流行。 端末の処理速度が飛躍的に向上し、 誰でもスマホで3Dが動かせるようになった 2000年代の 「セカンドライフ」 の時代と比べて、 ハード面の技術進化が進み、 できることが増えつつある。 HMDについては画質と重さがネックだったが、 近年高画質化・軽量化が進みつつある。 　（最近だとパナソニックのMeganeX、 HTCのVive XR Eliteなど） 現実的なVR・ARの事業化は、 まだ検証段階 さまざまな領域、 医療や建築の分野でも研究が進んでいる。 ただし、 現時点ではゲームや配信が中心であり若い世代が多いため、 エンタメ系以外の企業が事業として成立させるレベルには至っていない。 主な普及の阻害要因としては ①常用するコンテンツの不足、 ② 「かける」 習慣が定着していないこと が挙げられる。 XR(VR, AR, MR)の流行
5. XRによる課題解決の事例 https://www.startupticker.ch/en/news/almer- technologies-begins-series-production-of-its- augmented-reality-glasses ARグラスにはカメラが内蔵されており、 専門家が現場作業員を技術サポート。 遠隔保守のほかにも、 遠隔損傷評価、 遠 隔トレーニング、 遠隔試運転、 医療支援、 作業員誘導、 倉庫での経路最適化など 作業員の遠隔支援(Zurich) NAVITIMEが提供する運転支援システム AiRCAM。 ARで道路交通情報を表示し、 運転者に危険な状況を通知する。 スマホをフロントに設置する必要があり、 ストアの評価は二分している模様。 https://static.cld.navitime.jp/automostorage/ servicestorage/html/aircam.html 運転の危険予知・ガイド https://mavic.ne.jp/automotiveindustry-3dscan- faro/ 交通事故や災害の現場をカメラで撮影・ 転送し、 その3DデータをHMDで確認する ことで遠隔地からも損害調査が可能。 「Luma AI」 では、 １分間iPhoneで動画を 撮影するだけで３Dデータが作成できる。 3Dスキャンで損害調査
6. AIによるコンテンツ不足の解消 Text to Imageの応用で、 スカイボックス （天球用環境マップテクスチャ）を生成。 数秒で任意の世界を作成できる。 Text To Skybox Promptから3Dモデルを生成するAIで、 NVIDIAやGoogleが研究している。 上手 く生成できるオブジェクトはまだ少ない。 Text to 3D 大規模言語モデルと合成音声を使って、 アバターとの自由な会話が実現できる（可 能性がある）。 Text to Speech + GPT 多大な労力・時間が必要だったコンテンツ制作をAIで自動化する時代へ
7. XRUIのプロトタイピング 業務外でプロトタイプをつくってみました ダッシュボードUI（AR） 商品購入UI（VR）
8. つくる・調べる中で得た気づき
9. 従来のデバイスとの体験の違い
10. XRにおけるUIは、 WebよりゲームUIが近い 大きく透明なディスプレイを眼前に置き、 ユーザーの通常の視界に重ねて情報を 表示する手法。 計器などの情報を見るために視線を動か す必要がなく、 現実では戦闘機などに実 装されている。 HUD (Head Up Display) ユーザーの関心を惹くために表示される UIのこと。 常に表示されるわけではなく、 目的地の ある方向を画面に表示したり、 アイテムに 近づくと詳しい情報が表示される。 POI (Point of Interest) ダイエジェティック = 物語世界内に属し ているUI。 UIに現実のオブジェクトや表 現を取り入れる手法のこと。 何を３D化して、 何を２DのUIにするかは情 報量に応じて検討する必要がある。 （常に 空間上に表示されるため） Diegetic UI
11. UIデザインのポイント 画面サイズが自由でウインドウが不要。 ユーザーが自由に動き回れるため、 平面 ではなく3D空間でのインタラクションを 考慮する必要がある。 場合によっては、 ボタンではなくVUI（音 声UI）で操作する方法も考えられる。 3D空間にUIを「置く」 BlenderやUnityよりも手軽に作って試せ る 「Sprine」 や 「Bezel」 といった3Dモデ リングツールが登場しています。 Figmaのように複数人で作成でき、 VRで URLにアクセスするとすぐにモデリングし たものを閲覧可能です。 プロトタイピング 視野角のこと。 VRでは没入感にも影響す るため、 HMDの評価ポイントの１つ。 UIを作成する際は視界に入るか、 ユー ザーとの距離感、 UIの存在に気づけるか 等を考慮する必要がある。 FOV (Field of View)
12. まだまだ模索中
13. テーマ 「XRにおけるデザイン・開発の先行調査」 ① Design: UX/UIの調査 XR空間ではどのようなUIが望ましいか？　入力手段とそのインターフェイスの調査 ※ AI・セキュリティなどをテーマにした、 有志による研究会 やらないこと 「Web3」 「NFT」 「メタバース」 ② Dev: プロトタイピング ・Unityを用いたプロトタイピングによって、 実際の体験やXR開発のノウハウを蓄積　 ・他社事例や新規事業の実現可能性についても調査し、 得られた知見を展開する Cue_Lab参加者募集
14. 私自身もまだ浅学ですが、 ご興味のある方はぜひ小澤までご連絡ください。 Thank You.