Screph AI — автоматизация интерфейсов

Screph AI: инструмент для описания UI и генерации сценариев

Screph AI позволяет выделять элементы интерфейса на изображениях экрана, добавлять к ним текстовые или голосовые аннотации, задавать связи в виде графа и получать сгенерированный код (например, на Python) для воспроизведения сценария. Поддерживаются сохранение/загрузка проектов и экспорт для дальнейшей работы в IDE.

Документация
Фоновое изображение возможностей

Ключевые возможности

Визуальное выделение

Выделяйте элементы (кнопки, поля ввода, списки) на изображении экрана. Система сохраняет их координаты и размеры.

Аннотации и связи

Добавляйте к элементам текстовые или голосовые аннотации и описывайте последовательности действий, формируя граф взаимодействий.

Генерация кода

На основе элементов, аннотаций и графа формируется код для воспроизведения сценария. Поддерживается Python; расширение списка языков возможно.

Интеграция с IDE

Экспортируйте проект и код в IDE для просмотра, отладки и доработки. Поддерживается копирование кода и сохранение файлов.

Как это работает (кратко)

  1. Шаг 1: Выделите элементы на экране вашего приложения.
  2. Шаг 2: Опишите их назначение и желаемые действия.
  3. Шаг 3: Определите связи между элементами.
  4. Шаг 4: Screph AI сгенерирует код автоматизации.
  5. Шаг 5: Используйте или доработайте код в вашей IDE.