Плагин с LLM-агентом снимает демо-ролики без участия человека: камера угадывает клик за 0,55 секунды

Разработчик опубликовал плагин, в котором LLM-агент самостоятельно управляет курсором в Windows-приложении, а каждое действие записывает в журнал с точным временем. На основе этого журнала, а не анализа видео, собирается демо-ролик: камера подъезжает к кнопке за 0,55 секунды до клика.

Обычный рекордер, который висит на хуке мыши, узнаёт о клике только в момент его совершения. Это вынуждает либо догонять курсор камерой, либо исправлять ролик вторым проходом. В данном случае весь сценарий известен до начала записи, поэтому ролик можно пересобрать с другими настройками, не запуская приложение повторно.

Задача возникла у ученицы курса по вайб-кодингу: ей нужно регулярно снимать скринкасты продукта и хотелось автоматизировать этот процесс. Готового инструмента найдено не было, поэтому плагин написали с нуля.

Работу проверили на задаче «открой калькулятор, посчитай 100 × 100, запиши демо». Агент нашёл окно, вывел его на нужный монитор, запустил запись, ввёл 1, 0, 0, ×, 1, 0, 0, = и остановился. В итоговом ролике длительностью 27,7 секунды есть чёрные поля, тень и плавный след курсора. Камера наезжает на цифровую клавиатуру ещё до того, как курсор до неё дойдёт. Агент вернул строку «37.3s recorded → 27.7s output (17 segments)».