Tests d’intégration

Ce document fournit des informations sur le framework de test d’intégration utilisé dans ce projet.

Aperçu

Les tests d’intégration sont conçus pour valider la fonctionnalité de bout en bout de Qwen Code. Ils exécutent le binaire compilé dans un environnement contrôlé et vérifient qu’il se comporte comme attendu lors de l’interaction avec le système de fichiers.

Ces tests se trouvent dans le répertoire integration-tests et sont exécutés à l’aide d’un test runner personnalisé.

Exécution des tests

Les tests d’intégration ne sont pas exécutés par défaut avec la commande npm run test. Ils doivent être lancés explicitement en utilisant le script npm run test:integration:all.

Les tests d’intégration peuvent également être exécutés en utilisant le raccourci suivant :

npm run test:e2e

Exécuter un ensemble spécifique de tests

Pour exécuter un sous-ensemble de fichiers de test, vous pouvez utiliser npm run <integration test command> <file_name1> .... où est soit test:e2e soit test:integration* et <file_name> est n’importe quel fichier .test.js dans le répertoire integration-tests/. Par exemple, la commande suivante exécute list_directory.test.js et write_file.test.js :

npm run test:e2e list_directory write_file

Exécuter un seul test par nom

Pour exécuter un seul test par son nom, utilisez le flag --test-name-pattern :

npm run test:e2e -- --test-name-pattern "reads a file"

Exécuter tous les tests

Pour exécuter l’ensemble complet des tests d’intégration, utilisez la commande suivante :

npm run test:integration:all

Matrice de sandbox

La commande all exécutera les tests pour no sandboxing, docker et podman. Chaque type individuel peut être exécuté en utilisant les commandes suivantes :

npm run test:integration:sandbox:none

npm run test:integration:sandbox:docker

npm run test:integration:sandbox:podman

Diagnostics

Le test runner d’intégration propose plusieurs options de diagnostic pour aider à identifier les échecs de test.

Conserver la sortie des tests

Vous pouvez conserver les fichiers temporaires créés pendant l’exécution d’un test pour inspection. Cela est utile pour déboguer les problèmes liés aux opérations sur le système de fichiers.

Pour conserver la sortie des tests, définissez la variable d’environnement KEEP_OUTPUT à true.

KEEP_OUTPUT=true npm run test:integration:sandbox:none

Lorsque la sortie est conservée, le test runner affichera le chemin vers le répertoire unique pour l’exécution du test.

Sortie verbeuse

Pour un débogage plus détaillé, définis la variable d’environnement VERBOSE à true.

VERBOSE=true npm run test:integration:sandbox:none

Lorsque tu utilises VERBOSE=true et KEEP_OUTPUT=true dans la même commande, la sortie est diffusée dans la console et également enregistrée dans un fichier de log situé dans le répertoire temporaire du test.

La sortie verbeuse est formatée pour identifier clairement la source des logs :

--- TEST: <log dir>:<test-name> ---
... output from the qwen command ...
--- END TEST: <log dir>:<test-name> ---

Linting et mise en forme

Pour garantir la qualité et la cohérence du code, les fichiers de test d’intégration sont analysés par le linter dans le cadre du processus de build principal. Tu peux également exécuter manuellement le linter et le correcteur automatique.

Exécuter le linter

Pour vérifier les erreurs de linting, exécute la commande suivante :

npm run lint

Tu peux ajouter le flag :fix à la commande pour corriger automatiquement les erreurs de linting qui peuvent l’être :

npm run lint:fix

Structure des répertoires

Les tests d’intégration créent un répertoire unique pour chaque exécution de test à l’intérieur du répertoire .integration-tests. Dans ce répertoire, un sous-répertoire est créé pour chaque fichier de test, et dans celui-ci, un sous-répertoire est créé pour chaque cas de test individuel.

Cette structure facilite la localisation des artefacts pour une exécution de test, un fichier ou un cas spécifique.

.integration-tests/
└── <run-id>/
    └── <test-file-name>.test.js/
        └── <test-case-name>/
            ├── output.log
            └── ...autres artefacts de test...

Intégration continue

Pour garantir que les tests d’intégration soient toujours exécutés, un workflow GitHub Actions est défini dans .github/workflows/e2e.yml. Ce workflow exécute automatiquement les tests d’intégration pour les pull requests contre la branche main, ou lorsqu’une pull request est ajoutée à une merge queue.

Le workflow exécute les tests dans différents environnements de sandboxing pour s’assurer que Qwen Code est testé dans chacun d’eux :

• sandbox:none : Exécute les tests sans aucun sandboxing.
• sandbox:docker : Exécute les tests dans un conteneur Docker.
• sandbox:podman : Exécute les tests dans un conteneur Podman.