ClickClickClick — ИИ-агент для управления интерфейсом без API

★ 701

instavm/clickclickclick — это открытый фреймворк на Python для автономного управления Android-телефоном и macOS-компьютером через любую LLM, локальную или облачную. Берут, когда нужно автоматизировать то, у чего нет API: прокликать сценарий в мобильном приложении, прогнать повторяющуюся рутину в настольной программе, собрать прототип агента, который сам открывает приложения и жмёт кнопки как человек. Внутри — связка «планировщик + исполнитель»: одна модель разбивает задачу на шаги, вторая (с поддержкой зрения) находит элементы на экране и выполняет тапы и ввод; модели назначаются раздельно — можно посадить планировщиком облачную GPT-4o или Gemini, а исполнителем локальную через Ollama, чтобы скриншоты не покидали машину. Запускается через CLI, Gradio-интерфейс, REST API или Python API; требует Python, ADB для Android-платформы и API-ключи выбранных моделей. Лучший результат — Gemini Flash в обеих ролях; Ollama-модели работают нестабильно как finder. Направление работы: агент управляет вашим устройством — запускайте только на своих телефонах и машинах и присматривайте за действиями, модель может кликнуть не туда. Код помечен как высокоэкспериментальный. Подойдёт для прототипирования