Проект Screph хранит изображения и видео, разметку объектов и областей, связи, текстовые и голосовые описания, результаты подбора и настройки методов компьютерного зрения. Сохранённые данные задачи используются во встроенной агентной IDE Screph Code или других агентных инструментах. A Screph project stores images and video, object and region markup, relations, text or voice descriptions, and results from selecting and configuring computer-vision methods. Saved task data is used in the built-in Screph Code agentic IDE or other agent tools.
Проект Screph хранит исходные материалы, разметку, отношения, описания и результаты методов компьютерного зрения. Результаты методов можно просматривать отдельно; основная разметка изменяется только после отдельного применения предлагаемого изменения.A Screph project stores source materials, markup, relations, descriptions and computer-vision results. Method results can be inspected separately; the main markup changes only when a proposed change is applied separately.
Область экрана, монитор, окно, камера, URL, видео, изображения и папки. Для кадров сохраняются источник и позиция на шкале времени.Screen regions, monitors, windows, cameras, URLs, videos, images and folders. Each frame retains its source and timeline position.
Элементы, области, признаки, группы, аннотации и связи редактируются на общем холсте. Ветки дерева можно экспортировать отдельно.Elements, regions, features, groups, annotations and relations are edited on a shared canvas. Tree branches can be exported separately.
При необходимости к задаче добавляются OCR, маски, контуры, сегментация, обнаружение, сопоставление или собственная последовательность методов. Результат можно сравнить с исходником; предлагаемое изменение разметки применяется отдельно.OCR, masks, contours, segmentation, detection, matching or a custom method sequence can be added when needed. The result can be compared with the source; a proposed markup change is applied separately.
Сохранение создаёт основной пакет и контекст for_ai_agent. Screph Code передаёт его агенту Builder, который может изменять код в выбранной папке; изменения требуют отдельной проверки.Saving creates the main package and a for_ai_agent context. Screph Code passes it to the Builder agent, which can modify code in the selected folder; changes require separate review.
Голосовые описания связываются с элементами, признаками и материалами задачи. Распознавание может работать локально через Vosk или через выбранного провайдера. Отдельный сценарий Voice2Text →Voice descriptions are linked to elements, features and task materials. Recognition can run locally with Vosk or through a selected provider. Separate Voice2Text workflow →
General — для свободной работы, GUI Automation — для интерфейсов. Экспериментальные режимы отмечены отдельно.General for free-form work, GUI Automation for interfaces. Experimental modes are marked separately.
Область экрана, камера, поток или проверенный набор медиаданных из файлов и папок.A screen scope, camera, stream or validated media set of files and folders.
Элементы и связи создаются вручную; ROI ограничивает область для методов компьютерного зрения.Elements and relations are created manually; an ROI constrains the area for computer-vision methods.
Маски, контуры, результаты обнаружения, OCR, метрики и журнал выполнения остаются производными материалами.Masks, contours, detections, OCR, metrics and trace remain derived artifacts.
Предлагаемое изменение становится частью основной разметки только после явного решения пользователя.A proposed change becomes part of the main markup only after an explicit user decision.
Проект остаётся источником визуальных данных, а Screph Code получает выбранный контекст для работы с кодом в указанной папке.The project remains the source of visual data, while Screph Code receives selected context for working with code in the selected folder.
Демо показывает визуальный выбор, аннотации и настройки методов компьютерного зрения — данные, из которых Screph формирует контекст для дальнейшей работы с кодом. The demo shows visual selection, annotations and computer-vision settings—the data Screph uses to prepare context for further work with code.
В разных режимах меняются типы объектов и доступные инструменты, но основа задачи остаётся общей: исходные данные, разметка, описания, необязательные методы компьютерного зрения и работа с полученным контекстом в Screph Code. Object types and tools vary by mode, while the task keeps the same foundation: source data, markup, descriptions, optional computer-vision methods and work with the resulting context in Screph Code.
Разметка экранов старых терминалов, SCADA, банковских АБС. По данным разметки можно быстро получить сценарии управления и мониторинга.Annotate screens of old terminals, SCADA, banking ABS. Based on your annotations, you can generate management and monitoring scripts.
Записывайте, как эксперт работает с UI. По разметке можно получить сценарии обучения и автоматизации.Record how an expert works with the UI. Use annotations to generate training and automation scripts.
Размечаете формы с правилами проверки. По разметке можно получить скрипты контроля и протоколирования.Annotate forms with validation rules. Generate control and logging scripts based on your annotations.
Размечаете UI двух систем (CAD ↔ ERP, LIMS ↔ Excel). По разметке можно сформировать пайплайн переноса данных через визуальное взаимодействие.Annotate the UI of two systems (CAD ↔ ERP, LIMS ↔ Excel). Generate a data transfer pipeline via visual interaction.
Разметка кадров скринкастов → по разметке можно получить скрипт и документацию.Annotate screencast frames → generate scripts and documentation from your annotations.
Разметка интерфейса VMS + план объекта. По разметке можно получить сценарии миссий и отчётов.Annotate VMS interface + facility map. Generate mission and report scripts from your annotations.
Разметка интерфейсов приборов → по разметке можно получить скрипты серийных измерений и выгрузки в LIMS.Annotate instrument interfaces → generate serial measurement and LIMS export scripts from your annotations.
Разметка Adobe/DaVinci/Blender. По разметке можно получить сценарии пакетных операций и рендера.Annotate Adobe/DaVinci/Blender. Generate batch processing and rendering scripts from your annotations.
Разметка UI с учётом ограничений. По разметке можно получить сценарии адаптации любого приложения.Annotate UI with accessibility constraints. Generate adaptation scripts for any application from your annotations.
Разметка элементов трансляции. По разметке можно получить скрипты извлечения событий и статистики.Annotate broadcast elements. Generate event extraction and statistics scripts from your annotations.
Разметка намерений элементов. По разметке можно получить чеклисты, метрики и A/B-гипотезы.Annotate element intents. Generate checklists, metrics, and A/B hypotheses from your annotations.
Разметка терминалов. По разметке можно получить скрипты снятия позиций и compliance-отчётов.Annotate terminals. Generate position closing and compliance report scripts from your annotations.
Разметка экранов бизнес-процесса с временной логикой. По разметке можно получить BPMN-модель и исполняемый сценарий.Annotate business process screens with temporal logic. Generate a BPMN model and executable script from your annotations.
Разметка учебных сред. По разметке можно получить проверяющие сценарии и персональные подсказки.Annotate learning environments. Generate assessment scripts and personalized hints from your annotations.
Разметка UI закрытых систем. По разметке можно получить автоматизацию «поверх» без модификации.Annotate closed system UIs. Generate "overlay" automation without modification from your annotations.
Разметка эталонных состояний UI. По разметке можно получить скрипты сравнения и отчёты для QA.Annotate reference UI states. Generate comparison scripts and QA reports from your annotations.
Screph Code получает контекст через отдельный процесс Pro Agent. Агент Builder может изменять выбранную рабочую папку, поэтому результат следует проверять внешним сравнением изменений. Универсального подтверждения для каждого файла пока нет. Запуск файла и GUI-автоматизации остаётся отдельным явным этапом.Screph Code receives context through a separate Pro Agent process. The Builder agent can modify the selected workspace, so inspect the result with an external diff; there is no universal per-file Apply. Running a file or GUI automation remains a separate explicit stage.
Разметка, хранение проектов и классические CV-методы работают локально. Облачные сервисы речи и LLM, загрузка моделей и некоторые интеграции требуют подключения к сети.Markup, project persistence and classical CV methods run locally. Cloud speech/LLM providers, model downloads and some integrations require network access.
Проекты и изображения хранятся локально. Передача происходит только в явно выбранном облачном сценарии, связанном с LLM или распознаванием речи. По умолчанию AI-ассистенту запрещена отправка изображений и файлов проекта.Projects and images are stored locally. Transfer happens only in an explicitly selected cloud/LLM/speech flow; the Assistant disallows images and artifacts by default.
Нет. Они доступны как экспериментальные рабочие области для предварительного просмотра, проверки предлагаемых результатов и отдельного применения изменений разметки. Законченный производственный процесс и автономное выполнение пока отсутствуют.No. They are experimental workspaces for preview, review of proposed results and separate application of markup changes. A complete production process and autonomous execution are not available.
Проект содержит изображение, видео или экранную запись, разметку, связи, текстовые и голосовые описания и необязательные результаты методов компьютерного зрения. Сохранённые данные доступны Screph Code; ограничения режимов перечислены на странице статуса.A project contains an image, video or screen recording, markup, relations, text or voice descriptions, and optional computer-vision results. Screph Code can use the saved data; mode limitations are listed on the status page.