Screph объединяет захват экранов и кадров, ручную разметку, конвейеры CV-обработки и явную проверку результата. На выходе остаётся основной проект с данными и материалами, который можно передать в GUI-автоматизацию, IDE или AI-инструмент. Screph combines screen and frame capture, manual markup, CV pipelines and an explicit review step. The result is a canonical project with data and artifacts that can be handed to GUI automation, an IDE or an AI tool.
Каждый модуль отвечает за отдельную часть процесса. Наличие CV-результата, LLM-ответа или связи ещё не означает автоматическое изменение проекта или запуск действий.Each module owns a distinct part of the process. A CV result, LLM response or relation never means the project is silently changed or an action is executed.
Записывайте область, монитор, окно или последовательность действий; подключайте камеру или URL либо собирайте файлы и папки в единый набор медиаданных. Шкала времени и идентификатор источника сохраняют контекст кадра.Record a region, monitor, window or action sequence; connect a camera/URL or combine files and folders into one media set. Timeline and source identity retain frame context.
Работайте с элементами, признаками, областями, связями, группами и аннотациями на общем холсте. Большие ветви можно экспортировать как компактные модули дерева.Work with elements, features, regions, relations, groups and annotations on one Canvas. Large branches can be exported as compact tree modules.
Запускайте OCR, поиск контуров, построение масок, сегментацию, обнаружение и сопоставление как отдельный метод, линейный конвейер или граф методов. Проверяйте предварительный результат и журнал выполнения.Run OCR, contours, masks, segmentation, detection and matching as a method, linear pipeline or method-flow graph. Inspect preview and trace.
При сохранении создаются основной пакет и производный контекст for_ai_agent. Затем выберите получателя: сценарий автоматизации, AI-ассистент, IDE, Screph Code через Pro Agent или собственный адаптер.Saving creates a canonical package and derived for_ai_agent context. Then choose a consumer: an automation script, AI Assistant, IDE, Screph Code through Pro Agent or your own adapter.
Tray-приложение распознаёт речь локально через bundled Russian Vosk или выбранный cloud provider, даёт проверить текст и вставляет его в совместимую Windows-цель. Привязка может добавить снимок области и LLM-преобразование. Открыть точный статус и границы данных →The tray app recognizes speech locally with the bundled Russian Vosk model or a selected cloud provider, lets you review text and inserts it into a compatible Windows target. A binding can add a region capture and LLM transformation. Open exact status and data boundaries →
General — для свободной работы, GUI Automation — для интерфейсов. Экспериментальные режимы отмечены отдельно.General for free-form work, GUI Automation for interfaces. Experimental modes are marked separately.
Область экрана, камера, поток или проверенный набор медиаданных из файлов и папок.A screen scope, camera, stream or validated media set of files and folders.
Создайте элементы и связи либо ограничьте область для CV.Create elements and relations or constrain the area for CV.
Получите маски, контуры, результаты обнаружения, OCR, метрики и журнал выполнения как производные материалы.Produce masks, contours, detections, OCR, metrics and trace as derived artifacts.
Кандидат становится частью основной разметки только после явного решения пользователя.A candidate becomes canonical markup only after an explicit user decision.
Проект остаётся источником истины; экспорт или среда выполнения выбираются отдельно.The project remains the source of truth; export or runtime is selected separately.
Модули повторяют структуру настольного интерфейса и работают на подготовленных данных. Они не запускают реальные CV-расчёты, не открывают локальные файлы и не изменяют систему.The modules mirror the desktop interface structure and use prepared data. They do not run real CV calculations, open local files or change the system.
Перетаскивайте окна за заголовки и переключайте активное окно через значок Screph на панели задач.Drag windows by their title bars and switch the active window with the Screph taskbar icon.
Демо показывает связку из визуального выбора, аннотаций, CV-настроек и результата, который можно передать дальше в кодовый workflow. The demo shows visual selection, annotation, CV setup and an output that can move into a code workflow.
Screph объединяет компьютерное зрение, удобный голосовой интерфейс и бесшовную передачу размеченных данных в популярные агентные инструменты. Screph combines computer vision, a voice-first workflow, and seamless handoff of annotated data to popular agentic tools.
Разметка экранов старых терминалов, SCADA, банковских АБС. По данным разметки можно быстро получить сценарии управления и мониторинга.Annotate screens of old terminals, SCADA, banking ABS. Based on your annotations, you can generate management and monitoring scripts.
Записывайте, как эксперт работает с UI. По разметке можно получить сценарии обучения и автоматизации.Record how an expert works with the UI. Use annotations to generate training and automation scripts.
Размечаете формы с правилами проверки. По разметке можно получить скрипты контроля и протоколирования.Annotate forms with validation rules. Generate control and logging scripts based on your annotations.
Размечаете UI двух систем (CAD ↔ ERP, LIMS ↔ Excel). По разметке можно сформировать пайплайн переноса данных через визуальное взаимодействие.Annotate the UI of two systems (CAD ↔ ERP, LIMS ↔ Excel). Generate a data transfer pipeline via visual interaction.
Разметка кадров скринкастов → по разметке можно получить скрипт и документацию.Annotate screencast frames → generate scripts and documentation from your annotations.
Разметка интерфейса VMS + план объекта. По разметке можно получить сценарии миссий и отчётов.Annotate VMS interface + facility map. Generate mission and report scripts from your annotations.
Разметка интерфейсов приборов → по разметке можно получить скрипты серийных измерений и выгрузки в LIMS.Annotate instrument interfaces → generate serial measurement and LIMS export scripts from your annotations.
Разметка Adobe/DaVinci/Blender. По разметке можно получить сценарии пакетных операций и рендера.Annotate Adobe/DaVinci/Blender. Generate batch processing and rendering scripts from your annotations.
Разметка UI с учётом ограничений. По разметке можно получить сценарии адаптации любого приложения.Annotate UI with accessibility constraints. Generate adaptation scripts for any application from your annotations.
Разметка элементов трансляции. По разметке можно получить скрипты извлечения событий и статистики.Annotate broadcast elements. Generate event extraction and statistics scripts from your annotations.
Разметка намерений элементов. По разметке можно получить чеклисты, метрики и A/B-гипотезы.Annotate element intents. Generate checklists, metrics, and A/B hypotheses from your annotations.
Разметка терминалов. По разметке можно получить скрипты снятия позиций и compliance-отчётов.Annotate terminals. Generate position closing and compliance report scripts from your annotations.
Разметка экранов бизнес-процесса с временной логикой. По разметке можно получить BPMN-модель и исполняемый сценарий.Annotate business process screens with temporal logic. Generate a BPMN model and executable script from your annotations.
Разметка учебных сред. По разметке можно получить проверяющие сценарии и персональные подсказки.Annotate learning environments. Generate assessment scripts and personalized hints from your annotations.
Разметка UI закрытых систем. По разметке можно получить автоматизацию «поверх» без модификации.Annotate closed system UIs. Generate "overlay" automation without modification from your annotations.
Разметка эталонных состояний UI. По разметке можно получить скрипты сравнения и отчёты для QA.Annotate reference UI states. Generate comparison scripts and QA reports from your annotations.
Screph Code получает контекст через отдельный процесс Pro Agent. Агент Builder может изменять выбранную рабочую папку, поэтому результат следует проверять внешним сравнением изменений. Универсального подтверждения для каждого файла пока нет. Запуск файла и GUI-автоматизации остаётся отдельным явным этапом.Screph Code receives context through a separate Pro Agent process. The Builder agent can modify the selected workspace, so inspect the result with an external diff; there is no universal per-file Apply. Running a file or GUI automation remains a separate explicit stage.
Разметка, хранение проектов и классические CV-методы работают локально. Облачные сервисы речи и LLM, загрузка моделей и некоторые интеграции требуют подключения к сети.Markup, project persistence and classical CV methods run locally. Cloud speech/LLM providers, model downloads and some integrations require network access.
Проекты и изображения хранятся локально. Передача происходит только в явно выбранном облачном сценарии, связанном с LLM или распознаванием речи. По умолчанию AI-ассистенту запрещена отправка изображений и файлов проекта.Projects and images are stored locally. Transfer happens only in an explicitly selected cloud/LLM/speech flow; the Assistant disallows images and artifacts by default.
Нет. Они доступны как экспериментальные рабочие области для предварительного просмотра, проверки кандидатов и подтверждённого применения разметки. Полный производственный сценарий и автономное выполнение пока отсутствуют.No. They are experimental workspaces for preview, candidate review and confirmed markup apply, but the complete workflow and production authority are absent.
Для первого проекта используйте General или GUI Automation. Страница статуса покажет, какие модули требуют дополнительных компонентов или остаются экспериментальными.Use General or GUI Automation for your first project. The status page shows which modules need extra components or remain experimental.