FoneClaw, l’agente AI che può controllare lo smartphone Android

Gli assistenti basati sull’intelligenza artificiale stanno diventando sempre più capaci di comprendere richieste articolate, ma sullo smartphone spesso si limitano a fornire informazioni. FoneClaw punta invece a trasformare l’AI in un vero e proprio agente in grado di interagire con il dispositivo Android ed eseguire diverse operazioni al posto dell’utente.

Il funzionamento si basa su un modello linguistico configurato dall’utente e su una serie di strumenti integrati che permettono all’agente di interpretare una richiesta, pianificare i passaggi necessari ed eseguire le azioni supportate sul telefono.

Un agente con oltre 100 strumenti

Uno degli aspetti più interessanti di FoneClaw è il numero di strumenti disponibili: il catalogo pubblico conta attualmente 133 strumenti integrati, dedicati a funzioni diverse dello smartphone.

Non si tratta quindi soltanto di chiedere qualcosa all’AI e ricevere una risposta. In base alla richiesta, FoneClaw può leggere determinate informazioni, modificare impostazioni supportate oppure interagire con altre applicazioni.

Controllare lo stato dello smartphone

Una delle funzioni più pratiche è il Device Health Check. Con una singola richiesta è possibile ottenere informazioni su memoria, spazio di archiviazione, batteria e rete.

Sono inoltre disponibili strumenti per controllare i permessi delle applicazioni e alcune impostazioni sensibili. In questo modo l’utente può ottenere una panoramica dello stato del telefono senza dover aprire manualmente numerose schermate delle impostazioni.

SMS e notifiche in un unico riepilogo

FoneClaw può anche lavorare con gli SMS. Per esempio, è possibile chiedergli di riassumere i messaggi ricevuti durante una determinata settimana oppure quelli relativi a uno specifico contatto.

Un’altra funzione è il Daily Brief, che raccoglie in un’unica risposta informazioni provenienti da SMS recenti, notifiche e stato del dispositivo, creando un riepilogo delle informazioni più importanti.

Modificare impostazioni e gestire Wi-Fi e Bluetooth

L’agente può intervenire anche su alcune impostazioni del telefono. Tra gli esempi mostrati da FoneClaw c’è la possibilità di impostare la luminosità dello schermo oppure lavorare con dispositivi Wi-Fi e Bluetooth nelle vicinanze.

Può passare da un’app all’altra

FoneClaw non si limita alle funzioni di sistema. Alcuni workflow permettono di combinare informazioni provenienti da applicazioni diverse.

Un esempio consiste nel riassumere le email configurate e successivamente aprire un percorso verso una destinazione utilizzando un’app di navigazione supportata. L’obiettivo è quindi passare direttamente dall’informazione all’azione successiva, senza dover eseguire manualmente ogni passaggio.

Può anche utilizzare ciò che appare sullo schermo

Un’altra funzione interessante è il Visible Context. Quando viene abilitata, FoneClaw può utilizzare un nuovo screenshot o una fotografia come contesto per una richiesta.

Per esempio, è possibile chiedere di riassumere ciò che appare in uno screenshot. Prima dell’analisi viene comunque richiesta la conferma prevista dal workflow.

Permessi sotto controllo

Considerando la quantità di informazioni a cui un agente di questo tipo può accedere, la gestione dei permessi è particolarmente importante.

FoneClaw utilizza un sistema di autorizzazioni on-demand: alcuni strumenti richiedono permessi o approvazioni quando devono essere utilizzati, invece di concedere necessariamente tutti gli accessi in anticipo. Il catalogo pubblico indica inoltre il livello di rischio e il tipo di approvazione associato ai singoli strumenti.

Un approccio diverso all’AI su Android

FoneClaw prova quindi a spostare l’utilizzo dell’intelligenza artificiale da un semplice sistema di domande e risposte verso un agente capace di eseguire operazioni sullo smartphone.

Tra riepiloghi di SMS e notifiche, controlli dello stato del dispositivo, gestione di alcune impostazioni, Wi-Fi e Bluetooth, operazioni tra applicazioni e analisi del contenuto visualizzato sullo schermo, le possibilità sono decisamente più ampie rispetto a un normale chatbot.

Per ulteriori informazioni e per provare l’app, potete andare direttamente sul sito ufficiale di FoneClaw.

Riguardo a: Faith

Un pinguino intraprendente che dopo diversi anni di "servizio" online (e soprattutto delle guide) ha acquisito conoscenze non di poco conto sui settori Android, Linux e Windows. Le mie specialità sono il modding e le review. Nel tempo libero (che è raro trovare) suono il piano, mi diverto effettuando modding e provando distribuzioni Linux, BSD ed altre.

Guarda anche..

Come trasferire WhatsApp da un telefono all’altro

Cambiare smartphone non significa perdere le proprie chat di WhatsApp. L’app permette di trasferire conversazioni, …