MRの魅力をいかした開発

Meta QuestのMRにより空間を認識したエクスペリエンスを開発し、ユーザー、バーチャルコンテンツ、物理的空間のシームレスな相互作用を実現できます。イノベーションを促進する画期的な機能の数々がもたらす無限の可能性を探求し、現実世界に適応するパーソナライズされたエクスペリエンスを追求しましょう。

複合現実(MR)とは

複合現実(MR)では、ユーザーの実際の物理的空間にデジタルコンテンツを融合させ、物理オブジェクトとバーチャルオブジェクトが共存してリアルタイムに相互作用する新しいエクスペリエンスを作り出すことができます。物理オブジェクトや周囲環境と同様のリアルさで、バーチャル要素のシームレスな表示とインタラクションを実現します。

MRの重要性

MRは開発者の自由な発想を可能にし、イノベーションを促進するとともに、ユーザー、バーチャルコンテンツ、現実世界の動的な相互作用を実現します。これまでVRではできなかったエクスペリエンスも、MRなら開発できます。バーチャルオブジェクトを組み込んでリアルタイムで現実世界を拡張したり現実世界に適応させたりすることも可能です。MRは、ゲーム、教育、ヘルスケア、エンターテイメントなど、数え切れないほどのジャンルのアプリに圧倒的な可能性をもたらし、生産性の向上、創造性の発揮、共同作業の強化、人々の交流促進に貢献します。

ソーシャルプレゼンスとは

ソーシャルプレゼンスとは、たとえ実際には離れた場所にいても、他の人たちと交流している、同じ環境を共有していると感じることです。Meta Horizon OSでは、フラットな2D画面によるエクスペリエンスよりもリアルなインタラクション、コミュニケーション、没入感、フィードバックを実現することで、ソーシャルプレゼンスを高めています。

MRが2Dアプリにもたらすメリット

Meta Horizon OSは空間機能によって2D画面の限界を超え、新規および既存の2Dアプリを強化できる新たな可能性をもたらします。現実空間内での移動や環境の垣根を越えた直感的なインタラクションが可能になるため、アプリのエクスペリエンスに対する没入感やつながりが強く感じられるようになり、積極的な利用を促すことができます。

さまざまなMR機能を見る

パススルー

バーチャルコンテンツを現実世界と融合させ、周囲の環境を豊かな色彩で表示します。

ドキュメントとリソース

シーン

シーンを認識してユーザーの物理環境とさまざまに相互作用する複雑なエクスペリエンスも、シーン機能を使えば短時間で構築できます。

ドキュメントとリソース

空間アンカー

現実空間にバーチャルコンテンツをリアルな深度とオクルージョンで配置して保持できます。

深度API / オクルージョン

現実世界の物体や面によってバーチャルオブジェクトが遮られるような描画や、ユーザーの環境へバーチャルオブジェクトがリアルに埋め込まれたような描画ができます。

Unity

Unreal

OpenXR

インタラクションSDK / ジェスチャーコントロール

両手をコントローラーとして使ったり、コントローラー入力とジェスチャー入力を切り替えたりできます。

Voice SDK

バーチャルキャラクターに話しかけたり、口述でメモを作成したりできる、音声を使用したエクスペリエンスやインタラクションを作成できます。

Unity

Unreal Engine

Audio SDK

空間オーディオを実現することで、臨場感を格段に高め、ユーザーの感覚を刺激できます。

Unity - ネイティブ、FMOD、Wwise

Unreal - ネイティブ、FMOD、Wwise

ボディトラッキング

手やコントローラーおよびヘッドセットの動きをもとに、体のポーズを正確に推論してボディトラッキングスケルトンに組み込むことで、上半身の動的な3D表現を実現します。

Unity

Unreal Engine

OpenXR

さまざまなMR機能の連携

さまざまなMR機能により現実空間を把握して拡充した表示を行うことで、バーチャルコンテンツがユーザーのエクスペリエンスに融合されます。

Meta Quest 3とMeta Quest Proでは、「スペースの設定」を使用してヘッドセットのカメラと深度センサーで環境を3Dスキャンします。このスキャンのおかげで、開発者は物理オブジェクトとリアルに相互作用するバーチャルコンテンツや物理現象を正確に再現するバーチャルコンテンツを作成できます。

パススルー、シーン、アンカーAPIは、スペースの設定や動的なMRエクスペリエンスを実現するために不可欠です。パススルーを使用することにより、アプリでデバイスの外部カメラを使って現実空間をリアルタイムでキャプチャし、ヘッドセット内に周囲環境を表示できます。現実空間のフィードを取得したら、アプリがシーンAPIを使用して、ドア、床、天井といった物理オブジェクトを識別して認識します。それにより、バーチャルコンテンツと物理オブジェクトがまるで同じ空間に共存しているように相互作用したり衝突したりできるようになり、ヘッドセット内での臨場感が高まります。アプリで空間アンカーを使用すると、セッション中や別セッションでもバーチャルオブジェクトの位置を維持でき、一貫性を備えた楽しいユーザーエクスペリエンスが生まれます。

MR向けの開発を始める

ステップ1: 検討する

開発を始める前に、主要なデザインガイドラインとベストプラクティスを読みましょう。誰にとっても利用しやすく楽しいエクスペリエンスを作るために役立ちます。また、推奨ガイドラインを遵守すると、アプリをMeta Horizonストアに送信したときの審査時間を短縮できます。

ヒューマンインターフェイスのデザインガイドラインを読む

MRデザインのベストプラクティス

ステップ2: 開発者ツールに慣れる

設定からテストまでの開発プロセスを合理化し、手間のかかる反復作業を不要にできる各種ツールが用意されています。例えば、Mixed Reality Utility Kitでは現実世界に対するプログラミングができ、Meta XRシミュレーターでは実際にデバイスを装着しなくてもプロジェクトのテストを重ねることができます。

開発者ツールを見る