Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
Unityでチャットに使えるモバイルキーボードの実現
Search
Nakaji Kohki
February 19, 2021
Programming
2
4.8k
Unityでチャットに使えるモバイルキーボードの実現
CA.unity #1 - Unity Meetup
https://meetup.unity3d.jp/jp/events/1271
https://twitter.com/nkjzm
Nakaji Kohki
February 19, 2021
Tweet
Share
More Decks by Nakaji Kohki
See All by Nakaji Kohki
アバター配信アプリ『Vフレット』 でVRM 1.0対応をしてみる
nkjzm
1
100
VRMアバターでギターの弾き語りがしたい!! 『Vフレット』の開発で考えたこと
nkjzm
0
300
『ALTDEUS: Beyond Chronos』で物語に没入できる操作感を実現するマルチプラットフォーム対応の道のり / The path to multi-platform support for immersive storytelling in ALTDEUS: Beyond Chronos
nkjzm
0
290
『ALTDEUS: Beyond Chronos』におけるマルチプラットフォーム向けコントローラーの対応 / Support for multi-platform controllers in "ALTDEUS: Beyond Chronos
nkjzm
0
370
Unityで使える汎用的な ハンバーガーメニューの実装 / UniHamburger
nkjzm
3
1.1k
20時間超の物語をVRで!『ALTDEUS: Beyond Chronos』の制作を支えた”Uranus”の制作過程と機能紹介 [CEDEC2021] / Introduction of ALTDEUS' VR ADV tool "Uranus", CEDEC2021
nkjzm
1
2.2k
withコロナに見るXR業界のイマ! [CEDEC2021] / XR NOW CEDEC2021
nkjzm
3
1.7k
VRプロダクト開発ラウンドテーブル2021
nkjzm
0
1.4k
Notionで人生を公開している話
nkjzm
0
950
Other Decks in Programming
See All in Programming
CSC305 Lecture 13
javiergs
PRO
0
130
カスタムしながら理解するGraphQL Connection
yanagii
1
1.2k
のびしろを広げる巻き込まれ力:偶然を活かすキャリアの作り方/oso2024
takahashiikki
1
410
AWS IaCの注目アップデート 2024年10月版
konokenj
3
3.1k
讓數據說話:用 Python、Prometheus 和 Grafana 講故事
eddie
0
350
LLM生成文章の精度評価自動化とプロンプトチューニングの効率化について
layerx
PRO
2
140
ECS Service Connectのこれまでのアップデートと今後のRoadmapを見てみる
tkikuc
2
210
Synchronizationを支える技術
s_shimotori
1
150
Boost Performance and Developer Productivity with Jakarta EE 11
ivargrimstad
0
850
Tuning GraphQL on Rails
pyama86
2
1k
Piniaの現状と今後
waka292
5
1.5k
飲食業界向けマルチプロダクトを実現させる開発体制とリアルな現状
hiroya0601
1
390
Featured
See All Featured
A Modern Web Designer's Workflow
chriscoyier
692
190k
Large-scale JavaScript Application Architecture
addyosmani
510
110k
Raft: Consensus for Rubyists
vanstee
136
6.6k
The MySQL Ecosystem @ GitHub 2015
samlambert
250
12k
A designer walks into a library…
pauljervisheath
202
24k
VelocityConf: Rendering Performance Case Studies
addyosmani
325
24k
Helping Users Find Their Own Way: Creating Modern Search Experiences
danielanewman
29
2.2k
The Art of Programming - Codeland 2020
erikaheidi
51
13k
Why Our Code Smells
bkeepers
PRO
334
57k
Save Time (by Creating Custom Rails Generators)
garrettdimon
PRO
27
790
Responsive Adventures: Dirty Tricks From The Dark Corners of Front-End
smashingmag
250
21k
I Don’t Have Time: Getting Over the Fear to Launch Your Podcast
jcasabona
27
1.9k
Transcript
Unityでチャットに使える モバイルキーボードの実現 2020/01/19 CA.unity #1
Nakaji Kohki / なかじ Twitter: @nkjzm ・日本VR学会認定 上級VR技術者 ・専門学校の先生(VRエンジニア専攻) ・Podcast『xR.fm』のパーソナリティ
・エンジニア系勉強会のオーガナイザー 略歴: CyberAgent → メルカリ R4D XR → 現在 Unity / VR Engineer ~0:30
~1:00 ALTDEUS: Beyond Chronos • VRゲーム開発してます! ◦ アドベンチャー ◦ マシンアクション
◦ VRライブ • Quest/Riftで好評配信中 • Steam版 本日リリース!! • PSVR版 4/15発売
本日の内容 モバイルキーボードを 気持ちよく実装する方法 ~2:00 よくある実装 今回の実装 このアプリの開発で使用
アジェンダ ~2:30 1. キーボードの高さにチャット欄を調整する a. キーボード高さの取得 b. チャット欄に反映させる 2. ネイティブの入力フィールドを非表示に
3. ネイティブボタンのOKイベント取得 4. キーボードのハンドリング
キーボード高さの取得(1/2) iOSはそのままいける > Android では Rect は 0 です。 https://docs.unity3d.com/ja/current/ScriptReference/TouchScreenKeyboard-area.html
→ baba-s さんのスクリプトで対応 ~3:00 1. Rect area = UnityEngine.TouchScreenKeyboard.area; 2. int height = Mathf.RoundToInt(area.height);
キーボード高さの取得(2/2) 引用元: https://github.com/baba-s/UniSoftwareKeyboardArea/blob/master/Scripts/SoftwareKeyboardArea.cs ~3:30 1. var currentActivity = unityClass.GetStatic<AndroidJavaObject>( "currentActivity"
); 2. var unityPlayer = currentActivity.Get<AndroidJavaObject>( "mUnityPlayer" ); 3. var view = unityPlayer.Call<AndroidJavaObject>( "getView" ); 4. 5. if ( view == null ) return 0; 6. 7. int result; 8. using ( var rect = new AndroidJavaObject( "android.graphics.Rect" ) ) 9. { 10. view.Call( "getWindowVisibleDisplayFrame", rect ); 11. result = Screen.height - rect.Call<int>( "height" ); 12. }
チャット欄に反映させる(1/3) • uGUIに反映させる処理 ◦ 右図ならBottomに反映 ◦ uGUIの組み方次第 ◦ Debug表示で 実際の値が見られる
~4:00 1. chatContainer.sizeDelta = new Vector2(0, -margin);
チャット欄に反映させる(2/3) • 解像度の調整 ◦ キーボードの高さは端末の解像度で返ってくる ◦ uGUIはCanvasの解像度で制御されている(ことが多い) ~4:30 1. //
解像度比を取得 2. var resolutionHeight = chatContainer 3. .GetComponentInParent<CanvasScaler>() 4. .GetComponent<RectTransform>().sizeDelta.y; 5. var rate = resolutionHeight / Screen.height; 6. 7. var margin = height * rate; 8. chatContainer.sizeDelta = new Vector2(0, -margin);
チャット欄に反映させる(3/3) ~5:00 • SafeAreaの罠 ◦ TouchScreenKeyboard.areaは SafeAreaの下部領域の高さを含む
ネイティブの入力 フィールドを非表示 ~6:00 変数が用意されている TouchScreenKeyboard.hideInput →InputFieldの HideMobileInputで上書きされる ※ネイティブのコピペ機能などが使えなくなる ※Androidだと疑似的な実装 https://docs.unity3d.com/ja/current/ScriptReference/TouchScreenKeyboard-hideInput.html)
ネイティブボタンの OKイベント取得 • Androidだとキーボード表示中に キーボード外の入力が拾えない ◦ →ネイティブのOKボタンで送信 • keyboard.statusを監視で実現 ◦
Done:OKを押した時 ◦ LostFocus:フォーカスが外れた時 ~7:00
キーボードのハンドリング ~8:00 1. Keyboard = TouchScreenKeyboard.Open(string.Empty, TouchScreenKeyboardType.Search); 2. EventSystem.current.SetSelectedGameObject(chatInput.gameObject); •
Unity領域タップ or OKボタン押下でキーボードが閉じる ◦ →チャットだと開きっぱなしにしたい • 色々なタイミングで再表示/再フォーカス ◦ チャット送信をした時 ◦ Unityの送信ボタンを押した瞬間 ◦ ボタンを押しかけて押さなかった時
できなかった事 • キーボードの再表示 ◦ Androidは微妙にチラつく(ちょっと妥協している) • Androidで通知がくるとキーボードのheightに含まれる ◦ ネイティブ部分の処理を見直せば改善しそう ~8:30
解決方法わかる人いたら教えてくださいmm
• キーボードの高さ周りの処理は少し複雑 ◦ Android対応と解像度、SafeAreaを考慮しよう • TouchScreenKeyboard.hideInputはInputFieldで上書きされる • ネイティブのボタン:status監視で疑似的にハンドリング • キーボードの常時表示:再フォーカスを繰り返して実現
• (毎回ビルドして確認するのがめちゃくちゃ大変だった) ◦ →なので・・・ まとめ ~9:00
公開しました UnityMobileKeyboardSample (Unlicense) https://github.com /nkjzm/UnityMobileKeyboardSample ~9:30
最後に
Roppongi.unity開催します ~10:00 Unityに関するLTイベント • 2/24(水) 20:00〜 • YouTube Live &
cluster • 協賛 ◦ クラスター株式会社 ◦ 株式会社ハシラス • #roppongiunity
フォロー & チャンネル登録 お願いします!! ありがとうございました!! @nkjzm VRエンジニアなかじ
None