ESP32 e iPhone: un agente AI da 7 dollari, senza jailbreak

Un tizio brillante ha scoperto come far usare un iPhone a un modello di intelligenza artificiale. Basta un microcontrollore ESP32, che costa una manciata di euro. Questa soluzione aggira le restrizioni di Apple, rendendo l'iPhone uno strumento controllabile da AI.

Lo sviluppatore onehumanbeing ha pubblicato il progetto esp32-iphone-agent su GitHub. Dimenticate Mac costosi o procedure complicate di jailbreak. Questo sistema permette a qualsiasi modello di visione compatibile con OpenAI di "vedere" lo schermo dell'iPhone via AirPlay. L'ESP32, poi, "clicca" e "scrive" simulando una tastiera o un mouse USB. Chi l'avrebbe mai detto che un chip da 7 dollari potesse fare tutto questo?

Il trucco sta nel separare le "mani" e gli "occhi" dell'AI. L'iPhone trasmette lo schermo via AirPlay a un Raspberry Pi o a un PC, che lo invia al modello di visione. L'AI decide cosa fare e manda i comandi all'ESP32.

L'ESP32 simula un dispositivo HID (Human Interface Device) USB, permettendo di inviare input come tocchi e digitazioni all'iPhone. È come avere un fantasma che usa il tuo telefono. L'AI vede quello che vedi tu, pensa a cosa fare, e poi l'ESP32 esegue i comandi fisicamente. Tutto questo senza mai toccare il software interno dell'iPhone. Geniale, no?