Обучение ИИ-агентов через запись действий на рабочем столе

🛠 Обучение ИИ-агентов через запись действий на рабочем столе

Выпущен open-record-replay — MCP-сервер от VideoDB, позволяющий записывать рабочие процессы на рабочем столе и превращать их в структурированные навыки (skills) для ИИ-агентов. Система захватывает события доступности (accessibility events) и видео, после чего LLM создает артефакты SKILL.json и SKILL.md.

🌍 Решает проблему разрыва между текстовыми инструкциями и сложным UI, переводя действия человека в машиночитаемый формат.

👤 Теперь можно обучать ИИ-агентов сложным задачам, просто один раз показав им процесс, вместо написания хрупких скриптов.

Источник 1: https://github.com/video-db/open-record-replay