Перейти к основному содержимому

Windows Desktop

Пресеты управления Windows Desktop через computer_use.

Метаданные навыка​

ИсточникВстроенный (установлен по умолчанию)
Путьskills/computer-use/windows-desktop
Версия1.0.0
АвторVibeOS
ЛицензияMIT
Платформыwindows
Тегиwindows, desktop, computer-use, uia, clipboard
Связанные навыкиcomputer-use, choose-interaction-surface

Справочник: полный SKILL.md​

к сведению

Ниже приведено полное описание навыка, которое VibeOS загружает при его активации. Агент видит эти инструкции, когда навык активен.

Пресет Windows Desktop

Безопасные шаблоны для управления приложениями Windows с помощью computer_use (UIA / SoM). Предпочитайте ссылки на элементы слепым координатам.

Когда использовать​

  • Пользователь просит управлять Проводником, Блокнотом, Edge или другими приложениями Win32/UWP
  • Копирование/вставка между приложениями после генерации текста
  • Фокусировка приложения перед вводом

Предварительные требования​

  • Набор инструментов computer_use включён (vibeos computer-use doctor)
  • Windows UI Automation доступен процессу VibeOS / терминала
  • Предпочитайте MCP (GitHub, Notion, Obsidian), если задача имеет API-ориентированный характер

Как запустить​

  1. Захват UI: computer_use с action=capture, mode=som (или ax/uia).
  2. Действие по идентификаторам элементов из захвата (click / type / set_value).
  3. Буфер обмена через PowerShell при необходимости:
Set-Clipboard -Value 'hello'
Get-Clipboard

Краткая справка​

ЦельПодход
Просмотр UIcomputer_use capture som/uia
Клик / вводcomputer_use с ссылкой на элемент
Буфер обменаSet-Clipboard / Get-Clipboard
Операции с файламиПредпочитайте terminal + файловые инструменты вместо GUI Проводника

Процедура​

  1. Уточните, каким приложением управлять, если это неочевидно.
  2. Захватывайте перед действием; никогда не спамьте кликами.
  3. Повторно захватывайте после важных действий.
  4. Остановитесь и спросите, если права UIA / повышение привилегий блокируют цель.

Подводные камни​

  • Не кликайте через UAC и не подтверждайте запросы безопасности без разрешения пользователя.
  • Избегайте банковских приложений / менеджеров паролей, если это не запрошено явно.
  • Приложения с повышенными привилегиями могут быть невидимы для процесса VibeOS без прав администратора.

Проверка​

  • Захват показывает ожидаемое приложение на переднем плане.
  • Запрошенный текст появляется в целевом поле или вставка из буфера обмена совпадает.