Возможности Screph AI

Ниже приведены основные функции и соответствующие разделы документации.

1. Визуальное выделение

Выделяйте элементы на изображении экрана. Система фиксирует координаты, размеры и типы элементов. См. раздел «Выделение и редактирование элементов» в руководстве пользователя.

Иллюстрация визуального выделения элементов на экране

2. Контекстные аннотации

К элементам добавляются текстовые и голосовые аннотации: назначение, ожидаемые действия и данные. См. раздел «Контекстное аннотирование».

Иллюстрация аннотирования выделенного элемента

3. Граф взаимодействий

Определяйте связи и последовательности действий между элементами. Граф используется для генерации сценариев. См. раздел «Структуры взаимодействий (графы)».

Иллюстрация графа связей между элементами интерфейса

4. Генерация кода

На основе элементов, аннотаций и графа генерируется код (в первую очередь Python) для воспроизведения сценария. Поддерживаются библиотеки GUI- и веб-автоматизации. См. раздел «Генерация кода».

Иллюстрация процесса генерации кода с помощью AI

5. Интеграция с IDE

Экспортируйте проект и код в IDE (например, Cursor) для последующей доработки и интеграции. См. раздел «Интеграция с IDE».

Иллюстрация экспорта данных и кода в IDE