ИИ помощник OpenAgent для Mac разработчик собрал в одиночку, объединив шесть функций — от голосового управления без помощи рук до автоматизации постов в Threads и Reddit. Идея родилась из желания говорить со своим Mac, как Тони Старк с Джарвисом, а не кликать мышкой. Это не готовый продукт, а активная бета с открытым кодом, которую уже можно скачать и попробовать.
Как всё это появилось
Автор проекта, пользователь u/Quirky-Low-7500, начинал вообще с другой задачи. Он пользовался ИИ-ассистентом Instinct через WhatsApp и захотел «дотянуть» его до своего ноутбука — чтобы можно было не просто переписываться с ботом, а заставить его реально что-то делать на компьютере: открывать файлы, щёлкать по кнопкам, листать страницы. Так родился маленький «голосовой мост», который со временем вырос в полноценный проект под названием OpenAgent.
Сейчас это уже не просто голосовой переводчик команд, а целый набор инструментов. ИИ помощник умеет:
• вести голосовые сессии без помощи рук — ты говоришь, он выполняет;
• запускать команды в терминале, редактировать файлы и искать нужный код;
• управлять самим macOS нативно — кликать, печатать текст, прокручивать страницы, взаимодействовать с приложениями, как это делал бы человек руками;
• автоматизировать Chrome через технологию CDP, используя уже залогиненные сессии браузера — то есть не нужно заново вводить пароли;
• работать с собственным self-hosted Firecrawl для сбора и извлечения данных с сайтов;
• вести автоматизацию в соцсетях Threads и Reddit через постоянные браузерные профили.
По сути, это голосовой помощник ИИ, который метит не в узкую нишу «ответь на вопрос», а в полное управление компьютером — включая повседневные приложения и работу в соцсетях через интерфейс, как будто за клавиатурой сидит живой человек.
Что это даёт лично тебе
Представь фрилансера-дизайнера, который работает в нескольких программах одновременно: ему не нужно переключаться между окнами руками — он диктует команду, а автоматизация Mac сама открывает нужный файл, прокручивает макет, копирует элемент. Руки остаются свободными, пока он параллельно отвечает клиенту в мессенджере.
Представь владельца небольшой кофейни, который ведёт аккаунты в Threads и Reddit, чтобы рассказывать о новых позициях в меню. Вместо того чтобы вручную логиниться и постить с телефона между заказами, он может делегировать рутинные публикации слою социальной автоматизации — профиль браузера остаётся залогиненным, посты уходят по расписанию.
Представь маму двоих детей, которая вечером, уложив детей, хочет быстро найти и сохранить рецепты или собрать информацию с нескольких сайтов для планирования недели — здесь пригодится self-hosted Firecrawl, который вытаскивает нужные данные со страниц без лишних кликов.
Представь специалиста техподдержки, который целый день открывает одни и те же файлы и ищет куски кода по ключевым словам — локальные команды shell и поиск по коду берут на себя эту рутину, пока человек решает более важные задачи.
Представь студента, который готовит доклад и хочет голосом попросить ноутбук открыть несколько вкладок, прокрутить статью и скопировать цитату — именно для такого сценария и задумано голосовое управление Mac.
Как попробовать прямо сейчас
1. Открой репозиторий проекта на GitHub и посмотри, как всё устроено изнутри.
2. Изучи инструкцию по установке в репозитории — проект open source, то есть исходный код открыт, и ты можешь посмотреть, что именно делает каждый модуль, прежде чем запускать его на своём Mac.
3. Начни с малого: подключи голосовую сессию и попробуй простую команду — например, открыть приложение или найти файл. Это поможет понять, как работает голосовая маршрутизация, прежде чем доверять системе более сложные задачи.
4. Если интересна автоматизация браузера — настрой Chrome через CDP на тестовом профиле, а не на основном рабочем аккаунте, чтобы спокойно разобраться в логике без риска.
5. Для соцсетей (Threads, Reddit) заведи отдельный постоянный профиль браузера под автоматизацию — так проще контролировать, что именно публикуется.
Плюсы и честные ограничения
Главный плюс — это open source ИИ-помощник, то есть ты не зависишь от закрытого сервиса и можешь посмотреть, как всё устроено, под капотом. Второй плюс — широта: один инструмент объединяет голос, управление компьютером, браузером и соцсетями, тогда как раньше для этого требовалось несколько разных программ. Пока это активная бета, а не готовый автономный ассистент — впереди ещё много работы над голосовой маршрутизацией, задержками и безопасным выполнением команд.
Но честно: сам автор признаёт, что заставить все части системы работать вместе стабильно — пока самая сложная задача. Голосовая маршрутизация, задержки в отклике и безопасное выполнение команд ещё требуют доработки. Проект находится в статусе активной беты, а не готового автономного помощника, так что доверять ему критичные задачи пока рано — это скорее инструмент для энтузиастов, которые готовы тестировать и мириться с шероховатостями.
Что делать дальше
OpenAgent — это живой пример того, как один человек, вдохновившись идеей личного Джарвиса, собирает инструмент, который может немного облегчить рутину на Mac. Проект ещё сырой, но открытый код и бесплатный доступ — отличный повод заглянуть в репозиторий уже сегодня и посмотреть, подходит ли он под твои задачи. Сохрани статью, чтобы не потерять ссылку, и напиши в комментариях под постом, какую рутину на своём компьютере ты бы в первую очередь доверил голосовому управлению.
🎁 Бонус: с чего начать тестирование
Чек-лист для первого запуска OpenAgent:
• Зайди в репозиторий на GitHub и прочитай README целиком, прежде чем что-либо устанавливать.
• Установи проект на тестовом, а не на рабочем Mac, если есть такая возможность.
• Начни с одной простой голосовой команды — не пытайся сразу поручить ассистенту сложный workflow.
• Проверь автоматизацию Chrome на отдельном профиле без доступа к важным аккаунтам.
• Следи за обновлениями репозитория — проект активно дорабатывается, и новые версии могут решить текущие ограничения с задержкой и маршрутизацией голоса.
Комментарии 0