PhoneUse: un agente AI che usa il tuo iPhone vero

Anche per me!

PDF gratis · 7 pagine

La guida in PDF, per te e per il tuo agente.

Leggila con calma, stampala o passala al tuo agente AI: dentro c'è già il prompt da incollare.

Scarica il PDFCopia il link per il tuo agente

Finora gli agenti AI usavano il computer: il browser, il terminale, qualche app desktop. Il telefono restava fuori, perché l'iPhone non si lascia comandare da fuori. PhoneUse, un progetto open source uscito il 7 novembre 2026, ci riesce con due funzioni che ogni iPhone ha già: la duplicazione dello schermo e il puntatore per l'accessibilità. Niente jailbreak, niente app sul telefono, niente cavo.

Prima di iniziare: 5 parole da sapere

• Agente AI: un assistente come Claude Code che non si limita a rispondere, ma fa delle azioni: apre programmi, scrive, clicca.
• AirPlay (Duplica schermo): la funzione dell'iPhone che manda lo schermo a una TV. Qui lo manda al computer.
• Bluetooth HID: il modo in cui mouse e tastiere senza fili parlano con un dispositivo. Il computer finge di essere un mouse e una tastiera.
• AssistiveTouch: l'opzione di accessibilità che mostra un puntatore sull'iPhone quando colleghi un mouse.
• MCP e skill: due modi per dare a un agente nuovi strumenti. PhoneUse li offre entrambi per Claude Code.

Cos'è

PhoneUse è un programma per Linux, scritto da Aleksey Smolenchuk (lxe su GitHub), con licenza MIT. Il telefono manda lo schermo al computer con AirPlay, come farebbe con una Apple TV. Il computer manda tocchi e tasti al telefono come se fosse un mouse e una tastiera Bluetooth.

Sul computer compare una finestra con il telefono dentro. Puoi usarla tu con il mouse, oppure lasciarla a un agente, che dà comandi come "apri Impostazioni" o "tocca Wi-Fi".

Perché è interessante

Molte cose si fanno solo dal telefono: app senza versione web, app di banche e corrieri, notifiche, impostazioni del dispositivo. Finora per farle fare a un agente servivano emulatori, account sviluppatore o telefoni modificati. PhoneUse lavora su un iPhone normale, così come esce dalla scatola.

Il dettaglio più furbo: l'agente non deve guardare uno screenshot a ogni passo. Il programma legge il testo sullo schermo (OCR) e glielo passa come elenco di righe con la posizione. Secondo la documentazione del progetto, leggere lo schermo come testo costa qualche centinaio di token, uno screenshot circa 1.300.

Come funziona, in tre pezzi

1. Lo schermo entra. Dal Centro di Controllo dell'iPhone scegli Duplica schermo e poi "PhoneUse". Il computer riceve il video e lo mostra in una finestra e in una pagina del browser (solo sul tuo computer).
2. I tocchi escono. Il computer si presenta all'iPhone come mouse e tastiera Bluetooth. Con AssistiveTouch acceso, il clic diventa un tocco, il trascinamento uno scorrimento. Se il Bluetooth del computer non basta, c'è un piccolo ponte con una scheda ESP32 da lasciare vicino al telefono.
3. L'agente comanda. Ogni azione è un comando: `phoneuse open Settings`, `phoneuse text` (legge lo schermo), `phoneuse tap-on "Wi-Fi"`, `phoneuse done` (ti restituisce il telefono). Gli stessi comandi ci sono come server MCP per Claude Code, più una skill pronta.

Mentre l'agente lavora, la pagina nel browser si illumina e mostra dove sta puntando. Con "Take over" lo fermi e riprendi tu.

Come si prova

Serve un po' di dimestichezza con Linux. L'autore l'ha provato su una sola configurazione: iPhone 17 Pro con iOS 26, Arch Linux, Hyprland (un gestore di finestre) e una scheda video NVIDIA. Su altri sistemi probabilmente serve qualche correzione.

1. Controlla cosa ti serve: un computer Linux con Bluetooth, sulla stessa rete Wi-Fi del telefono, e i pacchetti elencati nel README (UxPlay, GStreamer, GTK 4, Python 3.11).
2. Installa: scarica il progetto da GitHub e lancia `phoneuse install`. Chiede la password di amministratore.
3. Accendi: `phoneuse up`. Sull'iPhone apri il Centro di Controllo, Duplica schermo, "PhoneUse".
4. Collega mouse e tastiera: sull'iPhone, Impostazioni, Bluetooth, tocca "PhoneUse".
5. Accendi il puntatore: `phoneuse cursor on` lo chiede a Siri, oppure Impostazioni, Accessibilità, Tocco, AssistiveTouch. Lascia spento il Controllo con pausa: altrimenti l'iPhone tocca dove il puntatore si ferma.
6. Collega Claude Code: aggiungi il server MCP con il comando del README, oppure collega la skill in `~/.claude/skills/phoneuse`.

Pronto da copiare, in Claude Code dentro la cartella di PhoneUse:

Prova piccola

Dieci minuti, con il telefono collegato. Chiedi all'agente: "Apri Impostazioni, leggimi il nome della rete Wi-Fi a cui sono collegato, poi restituiscimi il telefono". È riuscito se legge il nome giusto senza toccare altro e alla fine lancia `phoneuse done`. Guarda tutto dalla pagina http://localhost:8777.

Attenzione a

• È una demo tecnologica. Lo dice l'autore: è in costruzione e testata su un solo setup. Non metterla in produzione.
• L'agente usa il tuo telefono vero, con le tue app e i tuoi account. Parti da un telefono di prova, o almeno tieni lontane banca e posta.
• Il codice di sblocco: PhoneUse lo può salvare e lo digita solo dopo che approvi con un avviso. Pensaci prima di salvarlo.
• Il Bluetooth del computer cambia: l'installazione spegne il modulo che accetta mouse e tastiere Bluetooth per il computer stesso. Si annulla con lo script di disinstallazione.
• Solo Linux, per ora. Niente Mac o Windows, e su Linux serve Hyprland.

Se vuoi capire come lavorano gli agenti prima di dargli il telefono, parti da agenti AI in parallelo e da come Claude Code consuma meno.

Fonti: il post di presentazione di lxe su X (7 novembre 2026) e il repository github.com/lxe/phoneuse (README, ARCHITECTURE.md, skill/SKILL.md). Non abbiamo legami con il progetto.

In breve: PhoneUse fa vedere lo schermo dell'iPhone al computer con AirPlay e lo fa toccare come un mouse Bluetooth: un agente AI può usare app vere, senza jailbreak. È una demo: provala su un telefono di prova.