Мой знакомый отдал ИИ-агенту OpenClaw отдельный Android-телефон, и теперь «клешня» управляет им как настоящий человек: сама анализирует экран и нажимает нужные кнопки. В итоге ты просто закидываешь голосовое сообщение ИИ-агенту в телеграм, а он уже сам открывает приложение, вводит адрес и без единого касания со стороны человека заказывает машину. Видео с заказом такси (со звуком!) можно посмотреть выше.
Узнал у него, как это работает (можете повторить):
— Смартфон подключен к компьютеру по USB, а управление идет через ADB (Android Debug Bridge) — встроенный инструмент для связи ПК с Android-устройствами. Тут идет шутка про то, что Android наконец-то по-настоящему пригодился!
— Чтобы всё работало стабильно, даже Root-права (полный взлом системы смартфона) не понадобились. Многие банковские и сервисные приложения сейчас блокируют ботов, поэтому знакомый настроил все хитрее — через кликер и Accessibility Service (спецвозможности для людей с нарушениями моторики). По сути, это 100% имитация живых тапов пальцем, которую не видит защита приложений.
Что еще он умеет?
Абсолютно всё, что вы делаете на экране руками. Агенту можно поручить заказать пиццу, оформить доставку продуктов, зайти в банковское приложение или выгрузить данные с фитнес-трекеров вроде Whoop или Garmin.
А если нужно больше масштаба?
У знакомого завалялась старая ферма смартфонов — так вот, одна такая «клешня» может по ADB параллельно оркестрировать сразу 20 Android-телефонами.
А как подключить iPhone?
Напрямую через ADB управлять iOS не выйдет. Но для айфонов есть отдельное решение — специальные платы-контроллеры, которые ставятся в разрыв кабеля между компьютером и телефоном. Стоит такая платка всего ~$38 за штуку и позволяет точно так же управлять интерфейсом iOS с ноутбука.
P.S. А еще вчера он прикрутил к нему голосовую модель, и теперь агент сам звонит по телефону через API и бронирует столики в ресторанах. Я тоже попробовал и (с третьего раза) заказал столик в барселонском ресте. Но про это расскажу отдельно.
Подписывайтесь ✍#кейс