ESP32 за $7 и локальная vision-модель управляют iPhone без Xcode
Разработчик Генри Юань собрал агента esp32-iphone-agent, который управляет обычным iPhone через ESP32-S3, эмулирующий USB-мышь и клавиатуру, и любую OpenAI-совместимую vision-модель. Экран захватывается через AirPlay (UxPlay + GStreamer), проект набрал 2975 звёзд на GitHub.
- ESP32-S3 за ~$7 эмулирует USB HID, а AssistiveTouch превращает клики в тапы
- Экран снимается через AirPlay на 480x1040 при ~5 fps
- Локальная 7B-модель в Ollama даёт ~3,5 с на шаг против 1,2 с у GPT-4o
- Репозиторий esp32-iphone-agent под MIT набрал 2975 звёзд
Читать дальше
Софт