Android XR は、Gemini 時代に構築された最初の Android プラットフォームであり、ヘッドセット、グラス、その他のあらゆるデバイスのエコシステムを強化します。 Gemini を使用すると、Android XR エクスペリエンスが使いやすくなり、ユーザーが見ているものを理解し、ユーザーに代わって操作を行うことで、独自の機能が追加されます。
Gemini API にアクセスするには、ネイティ ブ Android アプリ（Kotlin を使用）と Unity の両方で使用できる Firebase AI Logic を使用します。これらの API を使用して、クラウドベースの Gemini モデルと Imagen モデルと統合する AI 搭載の機能を構築します。
モデルを選択する
まず、Firebase で利用可能な各モデルの機能を 比較します。次に、AI Studio でさまざまなモデルのさまざまなプロンプトの結果を評価して、ユースケースに最適なモデルを決定します。
Gemini を使用してアプリを強化するその他の方法を確認する
ユースケースに最適なモデルを決定したら、アプリを強化するその他の方法を検討します。
- 音声インターフェースを提供する: Android XR は、手、 視線、音声などの自然な入力を使用してシステムを操作します。ユーザーが音声を使用してアプリを操作できるようにするには、Gemini Live API と関数呼び出しを使用します。
- マルチモーダル サポートで画像を生成する: Gemini または Gemini Developer API を使用して、Imagen モデルを使用して画像を生成します。
- Unity アプリでゲームのインタラクションを強化する: 構造化された 出力を Gemini Developer API または Vertex AI Gemini API を使用して生成します。