Files
flexly-cms/specs/001-antirion-admin/verification-regression.md
T

8.5 KiB
Raw Blame History

Расширенная регрессия перед коммитами

Дата: 2026-11-17. Проверены текущие реализации Content Editor и Publication, исправление загрузки Publication через htmx и общие изменения редактора/preview. Результаты ниже относятся к локальному FastAPI и Chromium на временных сайтах. Пользовательская визуальная приёмка этапа 5 остаётся отдельным шагом.

Полный набор серверных тестов

401 тест — OK, без пропусков. Повторный прогон через добавленный scripts/run_regression.py также завершился успешно: 401 тест за 190 секунд. Включены Content Editor, Publication, фоновый редактор, темы, авторизация, ошибки API, CAS, история, renderer, сборка и упаковка ресурсов.

Старые тесты зависят от удалённого examples/studio-site. Runner извлекает только его данные из Git-коммита 231490b во временный каталог, переносит inline theme в файловую тему minimal@1 и устанавливает tests/helpers.EXAMPLE до discovery. Код движка и тестов берётся из текущего checkout. Удалённые примеры в рабочее дерево не возвращаются; новые UI-тесты используют собственные фикстуры. Зависимость от вспомогательных файлов предыдущих проверок в /tmp устранена.

Воспроизведение после установки .[server,dev]:

make test
# Эквивалентно:
PYTHONPATH=src python scripts/run_regression.py

Нужны Git и история с указанным коммитом; shallow clone должен получить эту историю. Обычный unittest discover/pytest пока не готовит старую фикстуру. Перенос оставшихся старых тестов на независимые предметные фикстуры остаётся техническим долгом. Для отдельных новых модулей discovery работает напрямую.

Браузер

Все перечисленные сценарии используют настоящий FastAPI и временный Site Studio. В специально проверяемых отказах 409/422/500 и обрывах сети подтверждаются видимые сообщения, request ID и сохранность данных; ожидаемые traceback в этих сценариях не являются падениями тестового прогона.

Проверка Результат
qa_content_001.py 25 групп в двух конфигурациях preview; поля, связи, usages, check, duplicate/delete, CAS, Expert, отсутствие автосохранения; сравнение с оригинальным дизайном
qa_editor_updates.py 26 групп в двух конфигурациях; один update, сохранение input/iframe, задержанные ответы, более новый ввод, конфликт вкладок, восстановление после ошибок
qa_publication_navigation_001.py 14 групп: реальные htmx-клики из Pages/Entry/Page Editor, повторный вход, Back/Forward и reload; 1440/390 px
qa_publication_001.py Полный workflow в обеих конфигурациях preview: 25 групп и 12 визуальных наборов; validate/build без активации, точный кандидат, diff/preview, публикация, устаревший кандидат, rollback, ошибки и восстановление
qa_shell_001.py 12 сравнений геометрии с исходником и 6 сценариев; поиск, меню, фокус, реальная публикация и выход
qa_001.py 8 экранов, 60 проверок ширины
qa_theme_manager_002.py 9 групп и 96 сравнений с оригиналом: шесть ширин, четыре шага, пресеты, overlay, CAS, ошибки, Save и мастер
qa_errors_001.py 6 сценариев намеренных отказов публикации/сохранения/сети с проверкой уведомлений, журнала и восстановления

Непредвиденных JavaScript-ошибок и нативных диалогов в этих прогонах нет. Проверены отдельно обычный и выделенный preview origin. Preview Publication остаётся пассивным и в конфигурации с интерактивным preview редактора. Скриншоты навигации Publication и Content на 1440/390 px дополнительно просмотрены.

PYTHONPATH=src python scripts/qa_content_001.py
PYTHONPATH=src python scripts/qa_editor_updates.py
PYTHONPATH=src python scripts/qa_publication_navigation_001.py
PYTHONPATH=src python scripts/qa_publication_001.py
PYTHONPATH=src python scripts/qa_shell_001.py
PYTHONPATH=src python scripts/qa_001.py --out /tmp/site-engine-broad-general
PYTHONPATH=src python scripts/qa_errors_001.py
PYTHONPATH=src python scripts/qa_theme_manager_002.py --out /tmp/site-engine-broad-theme

Для браузерных проверок нужны Playwright и системный Chromium. В этом окружении использован /tmp/flexly-cms-htmx-check/bin/python, Chromium без proxy. Firefox/WebKit и рабочий удалённый сервер этим прогоном не проверялись.

Пакет, контракт и сборка

  • scripts/verify_package_001.py --site examples/site-studio: wheel собран и установлен вне checkout, без design/. Проверены ресурсы, темы, Content Editor, кандидат/preview/активация Publication, API и отдельный preview origin.
  • site-engine validate examples/site-studio: 0 ошибок, 0 предупреждений.
  • site-engine build examples/site-studio --out /tmp/flexly-broad-site-dist: 13 страниц; рабочий data/ не используется.
  • Команда preview из быстрого старта README выполнена успешно.
  • Экспорт OpenAPI текущего приложения побайтово совпадает с specs/001-antirion-admin/openapi.json.
  • Ruff для всех 30 изменённых/новых Python-файлов, node --check изменённых JS, оба генератора Content/Publication с --check и git diff --check — OK.
  • Локальные ссылки в BRANCHING, MCP-документе и README проверены. MCP-документ сохранён в docs/extends/; ссылки исправлены с учётом переноса.

Артефакты и границы

Журналы текущего прогона: /tmp/flexly-{full-regression,full-reproducible,content-broad, editor-broad,navigation-broad,publication-broad,shell-broad,general-broad, errors-broad,theme-broad,package-broad}.log. JSON и скриншоты: /tmp/site-engine-content-001/, /tmp/site-engine-editor-updates/, /tmp/site-engine-publication-navigation-001/, /tmp/site-engine-publication-001/, /tmp/site-engine-shell-001/, /tmp/site-engine-broad-general/, /tmp/site-engine-broad-theme/. Это временные артефакты, они не включаются в Git.

Не выполнялись нагрузочные/длительные испытания и аварийное завершение процесса между несколькими служебными записями. Ограничения workflow описаны в publication-backend.md. Исходники дизайна, рабочие данные, секреты и Docker-конфигурация в этом прогоне не менялись. Развёртывание контейнера не входит в эту проверку.