Clicky: AI-ассистент в менюбаре, который видит ваш экран и указывает куда нажать
Open-source приложение для macOS: видит экран, слышит голос, отвечает через динамик и двигает курсор к нужному элементу. Под капотом — Claude, ElevenLabs и AssemblyAI.
Clicky — приложение в менюбаре macOS, которое работает как AI-наставник прямо в вашем рабочем процессе. Нажимаете Control + Option, говорите вопрос — Clicky делает скриншот экрана, анализирует его через Claude и отвечает голосом. Главная фишка: приложение умеет «указывать» на элементы интерфейса, двигая курсор-оверлей к нужной кнопке или полю. Работает с несколькими мониторами.
Под капотом: распознавание речи (AssemblyAI), анализ скриншотов (Claude), озвучка (ElevenLabs). API-ключи защищены через Cloudflare Worker. Проект open-source (MIT), 3.1k звёзд на GitHub.
Полезно как пример того, как собрать мультимодальное AI-приложение для десктопа — и как учебный инструмент для тех, кто осваивает новый софт.