Make full regression reproducible with isolated legacy fixtures
This commit is contained in:
@@ -0,0 +1,104 @@
|
||||
# Расширенная регрессия перед коммитами
|
||||
|
||||
Дата: 2026-11-17. Проверены текущие реализации Content Editor и Publication,
|
||||
исправление загрузки Publication через htmx и общие изменения редактора/preview.
|
||||
Результаты ниже относятся к локальному FastAPI и Chromium на временных сайтах.
|
||||
Пользовательская визуальная приёмка этапа 5 остаётся отдельным шагом.
|
||||
|
||||
## Полный набор серверных тестов
|
||||
|
||||
**401 тест — OK**, без пропусков. Повторный прогон через добавленный
|
||||
`scripts/run_regression.py` также завершился успешно: 401 тест за 190 секунд.
|
||||
Включены Content Editor, Publication, фоновый редактор, темы, авторизация,
|
||||
ошибки API, CAS, история, renderer, сборка и упаковка ресурсов.
|
||||
|
||||
Старые тесты зависят от удалённого `examples/studio-site`. Runner извлекает только
|
||||
его данные из Git-коммита `231490b` во временный каталог, переносит inline theme
|
||||
в файловую тему minimal@1 и устанавливает `tests/helpers.EXAMPLE` до discovery.
|
||||
Код движка и тестов берётся из текущего checkout. Удалённые примеры в рабочее
|
||||
дерево не возвращаются; новые UI-тесты используют собственные фикстуры.
|
||||
Зависимость от вспомогательных файлов предыдущих проверок в `/tmp` устранена.
|
||||
|
||||
Воспроизведение после установки `.[server,dev]`:
|
||||
|
||||
```bash
|
||||
make test
|
||||
# Эквивалентно:
|
||||
PYTHONPATH=src python scripts/run_regression.py
|
||||
```
|
||||
|
||||
Нужны Git и история с указанным коммитом; shallow clone должен получить эту
|
||||
историю. Обычный `unittest discover`/`pytest` пока не готовит старую фикстуру.
|
||||
Перенос оставшихся старых тестов на независимые предметные фикстуры остаётся
|
||||
техническим долгом. Для отдельных новых модулей discovery работает напрямую.
|
||||
|
||||
## Браузер
|
||||
|
||||
Все перечисленные сценарии используют настоящий FastAPI и временный Site Studio.
|
||||
В специально проверяемых отказах 409/422/500 и обрывах сети подтверждаются
|
||||
видимые сообщения, request ID и сохранность данных; ожидаемые traceback в этих
|
||||
сценариях не являются падениями тестового прогона.
|
||||
|
||||
| Проверка | Результат |
|
||||
|---|---|
|
||||
| `qa_content_001.py` | 25 групп в двух конфигурациях preview; поля, связи, usages, check, duplicate/delete, CAS, Expert, отсутствие автосохранения; сравнение с оригинальным дизайном |
|
||||
| `qa_editor_updates.py` | 26 групп в двух конфигурациях; один update, сохранение input/iframe, задержанные ответы, более новый ввод, конфликт вкладок, восстановление после ошибок |
|
||||
| `qa_publication_navigation_001.py` | 14 групп: реальные htmx-клики из Pages/Entry/Page Editor, повторный вход, Back/Forward и reload; 1440/390 px |
|
||||
| `qa_publication_001.py` | Полный workflow в обеих конфигурациях preview: 25 групп и 12 визуальных наборов; validate/build без активации, точный кандидат, diff/preview, публикация, устаревший кандидат, rollback, ошибки и восстановление |
|
||||
| `qa_shell_001.py` | 12 сравнений геометрии с исходником и 6 сценариев; поиск, меню, фокус, реальная публикация и выход |
|
||||
| `qa_001.py` | 8 экранов, 60 проверок ширины |
|
||||
| `qa_theme_manager_002.py` | 9 групп и 96 сравнений с оригиналом: шесть ширин, четыре шага, пресеты, overlay, CAS, ошибки, Save и мастер |
|
||||
| `qa_errors_001.py` | 6 сценариев намеренных отказов публикации/сохранения/сети с проверкой уведомлений, журнала и восстановления |
|
||||
|
||||
Непредвиденных JavaScript-ошибок и нативных диалогов в этих прогонах нет.
|
||||
Проверены отдельно обычный и выделенный preview origin. Preview Publication
|
||||
остаётся пассивным и в конфигурации с интерактивным preview редактора.
|
||||
Скриншоты навигации Publication и Content на 1440/390 px дополнительно просмотрены.
|
||||
|
||||
```bash
|
||||
PYTHONPATH=src python scripts/qa_content_001.py
|
||||
PYTHONPATH=src python scripts/qa_editor_updates.py
|
||||
PYTHONPATH=src python scripts/qa_publication_navigation_001.py
|
||||
PYTHONPATH=src python scripts/qa_publication_001.py
|
||||
PYTHONPATH=src python scripts/qa_shell_001.py
|
||||
PYTHONPATH=src python scripts/qa_001.py --out /tmp/site-engine-broad-general
|
||||
PYTHONPATH=src python scripts/qa_errors_001.py
|
||||
PYTHONPATH=src python scripts/qa_theme_manager_002.py --out /tmp/site-engine-broad-theme
|
||||
```
|
||||
|
||||
Для браузерных проверок нужны Playwright и системный Chromium. В этом окружении
|
||||
использован `/tmp/flexly-cms-htmx-check/bin/python`, Chromium без proxy.
|
||||
Firefox/WebKit и рабочий удалённый сервер этим прогоном не проверялись.
|
||||
|
||||
## Пакет, контракт и сборка
|
||||
|
||||
- `scripts/verify_package_001.py --site examples/site-studio`: wheel собран и
|
||||
установлен вне checkout, без `design/`. Проверены ресурсы, темы, Content Editor,
|
||||
кандидат/preview/активация Publication, API и отдельный preview origin.
|
||||
- `site-engine validate examples/site-studio`: 0 ошибок, 0 предупреждений.
|
||||
- `site-engine build examples/site-studio --out /tmp/flexly-broad-site-dist`:
|
||||
13 страниц; рабочий `data/` не используется.
|
||||
- Команда preview из быстрого старта README выполнена успешно.
|
||||
- Экспорт OpenAPI текущего приложения побайтово совпадает с
|
||||
`specs/001-antirion-admin/openapi.json`.
|
||||
- Ruff для всех 30 изменённых/новых Python-файлов, `node --check` изменённых JS,
|
||||
оба генератора Content/Publication с `--check` и `git diff --check` — OK.
|
||||
- Локальные ссылки в BRANCHING, MCP-документе и README проверены. MCP-документ
|
||||
сохранён в `docs/extends/`; ссылки исправлены с учётом переноса.
|
||||
|
||||
## Артефакты и границы
|
||||
|
||||
Журналы текущего прогона: `/tmp/flexly-{full-regression,full-reproducible,content-broad,
|
||||
editor-broad,navigation-broad,publication-broad,shell-broad,general-broad,
|
||||
errors-broad,theme-broad,package-broad}.log`.
|
||||
JSON и скриншоты: `/tmp/site-engine-content-001/`,
|
||||
`/tmp/site-engine-editor-updates/`, `/tmp/site-engine-publication-navigation-001/`,
|
||||
`/tmp/site-engine-publication-001/`, `/tmp/site-engine-shell-001/`,
|
||||
`/tmp/site-engine-broad-general/`, `/tmp/site-engine-broad-theme/`.
|
||||
Это временные артефакты, они не включаются в Git.
|
||||
|
||||
Не выполнялись нагрузочные/длительные испытания и аварийное завершение процесса
|
||||
между несколькими служебными записями. Ограничения workflow описаны в
|
||||
[publication-backend.md](publication-backend.md). Исходники дизайна, рабочие
|
||||
данные, секреты и Docker-конфигурация в этом прогоне не менялись. Развёртывание
|
||||
контейнера не входит в эту проверку.
|
||||
Reference in New Issue
Block a user