ブログ

Aug 11, 2023

Meta Research はあらゆる表面を仮想キーボードに変える

Meta 氏は、あらゆる平面を仮想キーボードに変える研究を紹介しました。 マーク・ザッカーバーグ氏は、自身とMetaの最高技術責任者（CTO）であるアンドリュー・ボズワースのクリップを映したビデオを自身のInstagramプロフィールに投稿した。

Meta 氏は、あらゆる平面を仮想キーボードに変える研究を紹介しました。

マーク・ザッカーバーグ氏は、自身とメタ社のCTOアンドリュー・ボスワース氏がQuest 2ヘッドセットで表面ロックされた仮想キーボードを試しているクリップを映したビデオを自身のInstagramプロフィールに投稿した。

ザッカーバーグ氏は毎分約100語を達成できたと主張する一方、ボズワース氏は毎分119語に達したとしている。

従来のキーボードでは、平均的な人は 1 分あたり約 40 ワードで入力しますが、プロのタイピストは、スキル レベルに応じて 1 分あたり 70 ～ 120 ワードに達します。

現在の VR や AR でのテキスト入力は面倒で、PC やスマートフォンよりも大幅に遅くなります。 フローティング仮想キーボードでは、ぎこちなく手を上げて一度に 1 つのキーを押す必要があるため、触覚フィードバックが得られず、手首を休めることができません。 Quest ヘッドセットは、フルスピード タイピングのための物理 Bluetooth キーボードのペアリングをサポートしており、一部のモデルは追跡されていますが、これは、ヘッドセット自体よりも大きい別のデバイスを持ち歩く必要があることを意味します。

将来のヘッドセットがあらゆる平面を仮想キーボードに変えることができれば、部分的な触覚フィードバックが得られ、物理キーボードを持ち歩く必要がなく、物理キーボードと同じように手首を休めることができるようになります。

開発者は現在、ハンドトラッキングを使用し、ユーザーに表面をタップして位置を調整させることで、技術的にはすでに Quest 上に表面ロックされた仮想キーボードを構築できます。 しかし、実際には、仮想面の高さが実際の面からわずかにずれているだけでも、誤ったキーの押下が発生します。

Metaは、その研究がこの問題をどのように解決するのかについてはまだ正確には明らかにしていない。 ただし、クリップ内の机の上に基準マーカーが見られます。 システムがこれらのマーカーの正確な寸法で事前にプログラムされている場合、これは堅牢な動的校正システムとして機能する可能性があります。

Quest 3 では、Meta ヘッドセットに深度センサーが初めて追加され、流出したセットアップ クリップには、ヘッドセットが環境の 3D メッシュを生成する様子が示されています。 このメッシュが十分に正確であれば、Quest 3 は最終的にこの種の仮想キーボードをサポートする可能性があります。 ただし今のところ、Meta はこれを単に研究として説明しており、短期的な製品体験のデモではありません。

Meta は、今年 9 月 27 日に始まる Meta Connect で VR および AR の研究をさらに披露することになるでしょう。