Screph — автоматизация интерфейсов

Screph: подготовка данных для автоматизации GUI

Выделяйте элементы на скриншотах и сериях изображений, добавляйте текстовые и голосовые аннотации, задавайте граф связей и эмулируйте действия. Экспортируйте данные (JSON/PNG) для дальнейшей генерации кода пользователем или LLM‑агентом.

Скачать
Фоновое изображение возможностей

Ключевые возможности

Интуитивное выделение элементов

Выделяйте элементы (кнопки, поля ввода, списки) на изображении экрана. Система сохраняет их координаты и размеры.

Голосовые и текстовые аннотации

Добавляйте к элементам текстовые и голосовые аннотации. Работает через внешний провайдер или офлайн с локальными моделями Vosk.

Подготовка данных и эмуляция действий

Формируйте структурированные данные (изображения, выделения, аннотации, связи) и эмулируйте действия пользователя. Экспортируйте данные для генерации кода автоматизации GUI.

Интеграция с IDE

Экспорт данных, копирование и запуск агента для генерации кода (Trae/VS Code).

Как это работает (кратко)

  1. Шаг 1: Выделите элементы на экране вашего приложения.
  2. Шаг 2: Опишите их назначение и желаемые действия.
  3. Шаг 3: Определите связи между элементами.
  4. Шаг 4: Эмуляция действий и экспорт данных для генерации кода GUI.
  5. Шаг 5: Используйте или доработайте код в вашей IDE.