Улучшите свое Android XR-приложение с помощью ИИ, используя API Gemini.

Применимые устройства XR
Данное руководство поможет вам создавать приложения для устройств XR такого типа.
XR-гарнитуры
Проводные XR-очки
Аудио и
Очки для демонстрации

Android XR — это первая платформа Android, созданная в эпоху Gemini, и она лежит в основе экосистемы гарнитур, очков и всего остального. Gemini упрощает использование Android XR и добавляет уникальные возможности, помогая пользователям понимать, что они видят, и предпринимать действия от их имени.

Вы можете получить доступ к API Gemini, используя Firebase AI Logic , который доступен как для нативных приложений Android (с Kotlin), так и для Unity. Используйте эти API для создания функций на основе ИИ, интегрирующихся с облачными моделями Gemini и Imagen.

Выберите модель

Для начала сравните возможности каждой модели, доступной в Firebase. Затем вы можете оценить результаты различных запросов для разных моделей в AI Studio, чтобы определить, какая модель подходит для вашего случая.

Изучите другие способы улучшения вашего приложения с помощью Gemini.

После того, как вы определили модель, подходящую для вашего сценария использования, рассмотрите другие способы улучшения вашего приложения:

  • Предоставьте голосовой интерфейс : Android XR использует естественные способы ввода, такие как движения рук, взгляд и голос, для навигации по системе. Чтобы позволить пользователям управлять вашим приложением с помощью голоса, используйте API Gemini Live вместе с вызовом функций .
  • Создание изображений с поддержкой мультимодального отображения : генерация изображений с использованием моделей Gemini или Imagen с помощью API разработчика Gemini .
  • Обогащайте взаимодействие в играх в приложениях Unity : генерируйте структурированный вывод с помощью API разработчика Gemini или API Vertex AI Gemini .