Integração com a API Gemini Live para óculos de áudio e de exibição

Dispositivos XR relevantes

Estas orientações ajudam você a criar experiências para esses tipos de dispositivos XR.

Saiba mais sobre tipos de dispositivos XR →

Saiba mais sobre tipos de dispositivos XR →

A API Gemini Live oferece uma solução abrangente para implementar interfaces de conversa com o usuário. Ao criar para Android XR, é possível fazer a integração com a API Gemini Live usando o recurso Firebase AI Logic. Ao contrário do uso da conversão de texto em voz (TTS, na sigla em inglês) e do reconhecimento automático de fala (ASR, na sigla em inglês), a API Gemini Live processa a entrada e a saída de áudio de maneira integrada. A API Gemini Live exige uma conexão de internet persistente conexão, gera custos, oferece suporte a um número limitado de conexões simultâneas por projeto e pode não ser ideal para lidar com condições de erro ou outras comunicações críticas do usuário comunicação, especialmente em óculos de áudio, porque eles não têm tela.

Além de oferecer suporte a interfaces de áudio, você também pode usar a API Gemini Live para criar experiências agênticas.

Para começar a usar essaa API, siga as etapas descritas no guia da API Gemini Live. Ele mostra como instanciar e configurar um LiveGenerativeModel, estabelecer um LiveSession e criar instâncias FunctionDeclaration personalizadas que permitem que seu app processe solicitações do Gemini.