Поддерживаемые процессы Screph

Описать элементы интерфейса, их признаки, состояния и отношения для последующей автоматизации.

Экран или окно Windows, отдельный снимок либо запись действий.

Разметка элементов и связей, описания, при необходимости OCR и сопоставление изображений, затем проверка результата.

Основной проект и отдельно подготовленный сценарий для Automation Runtime; выбранные данные также можно передать в Screph Code.

Связать область интереса, параметры метода, визуальный результат и решение о применении к разметке.

Изображение, снимок экрана, видео или папка с медиафайлами.

Запуск отдельного метода, последовательности или графа методов и сравнение исходных данных с масками, контурами, распознанным текстом и метриками.

Параметры, журнал выполнения и файлы результатов. Изменение основной разметки сохраняется только после подтверждения.

Определить визуальную цель записанного нажатия клавиши или кнопки мыши.

Запись действий и связанные кадры до, во время и после действия.

LLM может предложить план, методы компьютерного зрения выполняются локально, а результат принимается, изменяется или отклоняется пользователем.

Предложенная цель, сведения о её происхождении и решение пользователя рядом с исходной записью.

Исследовать изображения с предметными типами данных для дефектов, измерений, изменений и траекторий.

Промышленное изображение или кадры UAV с доступными временными и пространственными данными.

Выбор режима, запуск методов, сравнение результата с исходными данными и подтверждение поддерживаемого изменения разметки.

Основная разметка и дополнительные материалы выбранного режима.