Panoramica di AppFunctions

AppFunctions consente alla tua app per Android di condividere funzionalità specifiche che il sistema e vari agenti e assistenti AI possono scoprire e richiamare. Definendo queste funzioni, consenti alla tua app di fornire servizi, dati e azioni al sistema operativo Android, consentendo agli utenti di completare le attività tramite agenti AI e interazioni a livello di sistema.

AppFunctions funge da equivalente mobile degli strumenti all'interno del Model Context Protocol (MCP). Mentre MCP standardizza tradizionalmente il modo in cui gli agenti si connettono agli strumenti lato server, AppFunctions fornisce lo stesso meccanismo per le app per Android. In questo modo, puoi esporre le funzionalità della tua app come "strumenti" orchestrabili che le app autorizzate (chiamanti) possono scoprire ed eseguire per soddisfare le intenzioni degli utenti. I chiamanti devono disporre dell'autorizzazione EXECUTE_APP_FUNCTIONS per scoprire ed eseguire AppFunctions e possono includere agenti, app e assistenti AI come Gemini.

AppFunctions funziona con i dispositivi con Android 16 o versioni successive.

Esempi di casi d'uso

AppFunctions fornisce un meccanismo potente per automatizzare le attività e semplificare le interazioni degli utenti. Se esponi le funzionalità della tua app, consenti agli utenti di raggiungere obiettivi complessi utilizzando il linguaggio naturale, spesso senza la necessità di una navigazione manuale passo passo con la tua UI.

I seguenti scenari illustrano come utilizzare App Functions per migliorare le esperienze in una serie di categorie di app:

• Gestione delle attività e produttività
  • Richiesta dell'utente: "Ricordami di ritirare il pacco al lavoro oggi alle 17:00".
  • Azione AppFunction: il chiamante identifica l'app di gestione delle attività pertinente e richiama una funzione per creare un'attività, compilando automaticamente i campi titolo, ora e posizione in base al prompt dell'utente.
• Media e intrattenimento
  • Richiesta dell'utente: "Crea una nuova playlist con i migliori album jazz di quest'anno".
  • Azione AppFunction: il chiamante esegue una funzione di creazione di playlist all'interno di un'app di musica, passando il contesto come "migliori album jazz del 2026" come query per generare e avviare immediatamente i contenuti.
• Flussi di lavoro tra app
  • Richiesta dell'utente: "Trova la ricetta dei noodle nell'email di Lisa e aggiungi gli ingredienti alla mia lista della spesa".
  • Azione AppFunction: questa richiesta utilizza funzioni di più app. Innanzitutto, il chiamante utilizza la funzione di ricerca di un'app di posta elettronica per recuperare i contenuti. Poi, estrae gli ingredienti pertinenti e richiama la funzione di un'app di lista della spesa per compilare la lista dell'utente.
• Calendario e pianificazione
  • Richiesta dell'utente: "Aggiungi la festa di compleanno della mamma al mio calendario per lunedì prossimo alle 18:00".
  • Azione AppFunction: l'app agente approvata richiama la funzione "crea evento" dell'app calendario, analizzando il contesto pertinente come "lunedì prossimo" e "ore 18:00" per creare la voce senza che l'utente debba aprire manualmente il calendario.

Come funzionano le funzioni app

AppFunctions è una funzionalità della piattaforma Android 16 e una libreria Jetpack di accompagnamento che consente alle app di esporre funzioni specifiche per i chiamanti, come le app agente, per accedere ed eseguire sul dispositivo.

Il seguente diagramma illustra il flusso tipico di condivisione delle AppFunctions dalle app a un agente e la loro successiva esecuzione. Gli agenti probabilmente considereranno insieme gli strumenti MCP remoti lato server e le AppFunctions locali quando gestiscono le richieste degli utenti. Il flusso dettagliato per l'utilizzo di AppFunctions locali è il seguente:

• Dichiarazione di AppFunction: l'app per Android è progettata per esporre le sue AppFunction, ad esempio "Crea nota" o "Invia messaggio".
• Generazione dello schema: la libreria Jetpack AppFunctions genera un file di schema XML che elenca tutte le AppFunctions dichiarate nell'app. Questo file viene utilizzato dal sistema operativo Android per indicizzare le AppFunctions disponibili.
• Recupero dei metadati: l'agente può recuperare i metadati di AppFunction eseguendo una query.
• Selezione ed esecuzione di AppFunction: in base ai prompt dell'utente, l'agente selezionerà ed eseguirà l'AppFunction appropriata con i parametri appropriati.

La libreria Jetpack AppFunctions semplifica l'esposizione delle funzionalità della tua app. Con l'annotation processor, gli sviluppatori annotano le funzioni che vogliono esporre. I chiamanti possono quindi scoprire e richiamare queste funzioni indicizzate utilizzando AppFunctionManager.

La tua app non è tenuta a verificare se la funzionalità AppFunction è supportata; questa operazione viene gestita automaticamente all'interno della libreria Jetpack. Ad esempio, AppFunctionManager può verificare se la funzionalità è supportata.

Ecco un esempio di AppFunctions per un'app per prendere appunti con funzionalità per creare, modificare ed elencare le note.

class NoteFunctions(
  private val noteRepository: NoteRepository
) {
    /**
     * A note.
     *
     * @param id The note's ID.
     * @param title The note's title.
     * @param content The note's content.
     */
    @AppFunctionSerializable(isDescribedByKDoc = true)
    data class Note(val id: Int, val title: String, val content: String)

    /**
     * Lists all available notes.
     *
     * @param appFunctionContext The context in which the AppFunction is executed.
     */
    @AppFunction(isDescribedByKDoc = true)
    suspend fun listNotes(appFunctionContext: AppFunctionContext): List<Note>? {
        return if (noteRepository.appNotes.isEmpty()) null else viewModel.appNotes
    }

    /**
     * Adds a new note to the app.
     *
     * @param appFunctionContext The context in which the AppFunction is executed.
     * @param title The title of the note.
     * @param content The note's content.
     */
    @AppFunction(isDescribedByKDoc = true)
    suspend fun createNote(
      appFunctionContext: AppFunctionContext,
      title: String,
      content: String
    ): Note {
        return noteRepository.createNote(title, content)
    }

    /**
     * Edits a single note.
     *
     * @param appFunctionContext The context in which the AppFunction is executed.
     * @param noteId The target note's ID.
     * @param title The new title if it should be updated.
     * @param content The new content if it should be updated.
     */
    @AppFunction(isDescribedByKDoc = true)
    suspend fun editNote(
      appFunctionContext: AppFunctionContext,
      noteId: String,
      title: String?,
      content: String,
    ): Note? {
        return noteRepository.updateNote(noteId, title, content)
    }
}