Pruebas¶
La disciplina de pruebas de AdaptiveLearner se aplica mediante
make test en cada cambio. La estrategia es una pirámide:
unitarias en la base, integración en el medio, humo E2E en la
cima.
Recuentos de pruebas¶
| Capa | Recuento | Herramienta |
|---|---|---|
| Backend unit + integración | 786 | pytest ^9 |
| Pruebas de plugins (10 plugins) | 615 | pytest ^9 |
| Frontend unit + integración | 1233 | Vitest 4 |
| Humo E2E | 16 archivos de especificación | Playwright |
Total (make test) |
2634 |
Desglose de plugins: assessment 110 + ai-anthropic 34 + ai-openai 31 + ai-gemini 33 + session 215 + tracking 64 + tools 58 + gamification 23 + anki 20 + notebooklm 27.
pytest del backend¶
make test-backend # 786 pruebas, ~35s
cd backend && poetry run pytest -k "test_session" -v
cd backend && poetry run pytest --pdb
Las pruebas viven en backend/tests/. Los fixtures en
conftest.py proporcionan una base de datos SQLite en memoria
nueva por prueba, el TestClient y un gestor de plugins simulado.
El aislamiento de pruebas es estricto - ADAPTIVE_LEARNER_TEST=1
se establece antes de cualquier importación de app.*.
Pruebas de plugins¶
Cada plugin tiene su propio directorio tests/:
make test-plugins # todos los 7
make test-plugin-session # solo uno
cd plugins/adaptive-learner-plugin-session && poetry run pytest
Las pruebas de plugins no cargan la aplicación FastAPI - ejercitan
los módulos del plugin de forma aislada. Simula el pluggy.PluginManager
al probar la activación de hooks.
Vitest del frontend¶
make test-frontend # 387 pruebas, ~2s
cd frontend && bunx vitest # modo vigilancia
cd frontend && bunx vitest run src/storage/ # un directorio
Las pruebas viven junto al código fuente: Componente.test.tsx
junto a Componente.tsx. happy-dom es el entorno; React 19 + RTL.
Patrones de simulación¶
Proveedores de IA: simula global.fetch y verifica la URL,
los encabezados y el cuerpo:
beforeEach(() => {
global.fetch = vi.fn(async (input, init) => {
calls.push({url, method, body});
return new Response(JSON.stringify({content: [{type: "text", text: "hi"}]}), {status: 200});
});
});
fake-indexeddb: al principio de cada archivo de prueba Dexie:
import "fake-indexeddb/auto";
beforeEach(async () => {
await _resetDbForTests();
const {IDBFactory} = await import("fake-indexeddb");
(globalThis as unknown as {indexedDB: IDBFactory}).indexedDB = new IDBFactory();
});
Cada prueba obtiene un IndexedDB en memoria nuevo - sin filtraciones.
Simulaciones de api/client.ts (páginas heredadas):
vi.mock("../api/client", async () => {
const actual = await vi.importActual<typeof import("../api/client")>("../api/client");
return {...actual, api: {...actual.api, users: {...actual.api.users, get: apiGetMock}}};
});
La página importa getStorage(), que delega en ApiStorage, que
delega en api.*. La simulación intercepta en la capa api.* y
sigue disparando a través de la pila de almacenamiento.
E2E con Playwright¶
cd e2e && npx playwright test
cd e2e && npx playwright test --ui # interactivo
cd e2e && npx playwright test smoke/mobile-viewports.spec.ts
Las especificaciones de humo cubren las rutas críticas del usuario:
- Selector de idioma de la página de inicio + formulario de incorporación
- Evaluación con 12 preguntas + renderizado del radar
- Inicio de sesión + finalización + calificación
- Ajustes de idioma + clave API
- Creación del plan de estudios
- Ventanas gráficas móviles (iPhone SE, iPhone 14, Pixel 7, iPad)
Las especificaciones usan solo selectores data-testid - sin
selectores CSS frágiles. Las especificaciones de humo NO están en
la ruta de make test; necesitan una aplicación en ejecución
(make dev-bg primero).
Cobertura¶
La cobertura se ejecuta en CI para cada push a main; descarga los artefactos:
Objetivos según .claude/rules/quality-checks.md:
- Servicios + lógica de negocio: mínimo 95%
- Endpoints de API: mínimo 90%
- Componentes del frontend con lógica: mínimo 85%
- Hooks + utilidades: mínimo 95%
Global: 85-95% en todo el proyecto.
Pre-commit¶
Hooks: ruff check (auto-reparación), ruff format, espacios en blanco al final, corrector de final de archivo, check-yaml, check-merge-conflict. Solo para el backend - el lint del frontend se ejecuta en tiempo de CI, no en pre-commit.
CI¶
La CI se divide en dos niveles: los gates de corrección se ejecutan en cada PR (deben pasar para poder fusionar), y las suites caras o solo de aviso se ejecutan en el turno de noche y en el momento del release.
.github/workflows/ci.yml se ejecuta en cada push a develop /
main y en cada PR (Python 3.12):
- Pruebas del backend (pytest)
- Pruebas de plugins (
make test-plugins, los 13 mediante el venv del backend) - Frontend:
tsc --noEmit, ESLint (--max-warnings 0), comprobación de dependencias circulares, Stylelint, Vitest,vite build,npm audit - Hooks de pre-commit sobre todos los archivos
- ruff + mypy + pip-audit del backend
- Verificador de deriva de la documentación (
verify_docs.py+ sincronización de la navegación de mkdocs)
Test Impact Analysis (#615): en un PR solo se ejecutan las
pruebas afectadas - vitest run --changed origin/<base> y
pytest --testmon. Los push a develop / main, las ejecuciones
nocturnas y las de release ejecutan siempre la suite COMPLETA. El
retorno a la suite completa es automático (una referencia base no
resoluble o un fallo de la caché de testmon).
Otros gates de PR viven en flujos de trabajo propios:
complexity-check.yml- el gate de trinquete de complejidad (make check-complexity-gate, radon para Python + complejidad de ESLint para TS). Es un trinquete de línea base: solo falla ante infractores NUEVOS o que empeoran frente a.complexity-baseline, de modo que bloquea la complejidad nueva sin forzar una limpieza de la deuda preexistente. El informe completo de complejidad, solo de aviso, se ejecuta cada noche.cohesion-check.yml- la comprobación de tamaño de archivo (gate contra.filesize-whitelist) más dos gates de nombres de clase: nombres de clase CSS muertos (check-dead-classnames.pycontra.dead-classnames-baseline) y el gate de className sin estilos (--unstyled, un trinquete contra.unstyled-classnames-baseline) - unclassNamecuyos tokens están todos muertos bloquea el PR. La comprobación de tamaño de carpeta acompañante se ejecuta localmente conmake check-folder-size.visual-baseline-gate.yml- un PR que cambia rutas visualmente críticas (componentes de lección, renderizadores de ejercicios, archivos de tema/CSS) debe incluir en el mismo PR las capturas de referencia (baselines) afectadas; etiqueta de escapevisual-baselines-unaffectedpara cambios demostrablemente inertes.testid-reference-gate.yml- si un PR elimina o renombra undata-testidque una spec E2E referencia estáticamente (en una superficie muy visible para el usuario) sin tocar la spec, el gate falla (make check-testid-refs); etiqueta de escapetestid-refs-unaffected.docker-build-smoke.yml- smoke de solo build de las imágenes de Compose de producción (la ruta del launcher / install.sh), filtrado por rutas en PRs, además enrelease/**, semanalmente y bajo demanda; localmentemake docker-build-smoke.
Turno de noche / release (no en PRs):
dexie-smoke.yml- el gate E2E del modo Dexie (diario + enrelease/**+ bajo demanda; localmentemake test-dexie-smoke)coverage.yml- informe de cobertura (diario + bajo demanda)security-scan.yml- pip-audit / npm audit / bandit (semanal + enrelease/**+ bajo demanda; solo de aviso)content-stats.yml- deriva de las estadísticas de contenido frente a un checkout fresco del contenido (diaria + bajo demanda)mutation-frontend.yml- mutation testing con Stryker (nocturno tras la variable de repoENABLE_NIGHTLY_MUTATION+ bajo demanda; cada ejecución muta una porción de los archivos para que la ejecución quepa en el límite de tiempo del job); el mutation testing del backend usa mutmutwebkit-gate.yml- el gate de layout con el motor WebKit real (clases de bugs de iOS/Safari que los gates de Chromium no pueden ver estructuralmente), diario tras la variable de repoENABLE_NIGHTLY_WEBKIT, siempre enrelease/**y bajo demandavisual-regression.yml- la matriz de baselines visuales (diaria + bajo demanda;update_baselines=truevuelve a renderizar los baselines en CI y los sube como artefacto)visual-baseline-sync.yml- flujo de trabajo de servicio: renderiza los baselines en CI y los empuja como commit a la rama del PR (etiquetarefresh-visual-baselines, o bajo demanda con un número de PR) - la revisión de las imágenes antes del merge sigue siendo obligatoria
.github/workflows/release-gate.yml se ejecuta en pushes de
etiquetas: verifica que los pins de versión estén sincronizados en
todos los archivos que llevan versión (sin deriva), que los
lockfiles de plugins coincidan y que los artefactos regenerados
estén actualizados.