devops : retour d'expérience sur les tests

tech.days 2015#mstechdaysSESSION#mstechdays techdays.microsoft.fr

tech.days 2015#mstechdaysSESSION

Contexte

Version 1

Version 2

Futur

Conclusions

tech days•

2015

#mstechdays techdays.microsoft.fr

tech.days 2015#mstechdaysSESSION

Test en laboratoire

SoftwareVerification(9 personnes)

HardwareVerification(5 personnes)

System V&V(5 personnes)

QA/RA

FDA Title 21 Part 820

ANSI/AAMI/IEC 62304

Documenter les cas de test, les résultats,

les dates, les personnes, et les

bugs.

Revues et approbations

de tous les changements.

tech.days 2015#mstechdaysSESSION

tech.days 2015#mstechdaysSESSION

Revues & Approbations Approbations

Exécution manuelle

tech.days 2015#mstechdaysSESSION

tech.days 2015#mstechdaysSESSION

tech.days 2015#mstechdaysSESSION

tech.days 2015#mstechdaysSESSION

tech.days 2015#mstechdaysSESSION

tech.days 2015#mstechdaysSESSION

tech.days 2015#mstechdaysSESSION

tech.days 2015#mstechdaysSESSION

Problématique :Possibilité de signer des revues et approbations de

cas de tests et contrôler ou connaître l’état des test case lors de l’exécution.

Objectif :Le minimum nécessaire pour pouvoir utiliser

MTM à Capsule.

Durée :Début : Eté 2012

Fin : Printemps 2013

tech.days 2015#mstechdaysSESSION

tech days•

2015

#mstechdays techdays.microsoft.fr

Contexte

Version 1

Version 2

Futur

Conclusions

tech.days 2015#mstechdaysSESSION

DémonstrationMicrosoft Test Manager + Capsule Test Manager

Exemple d’une campagne de test

tech.days 2015#mstechdaysSESSION

tech.days 2015#mstechdaysSESSION

tech.days 2015#mstechdaysSESSION

tech.days 2015#mstechdaysSESSION

tech.days 2015#mstechdaysSESSION

tech.days 2015#mstechdaysSESSION

tech.days 2015#mstechdaysSESSION

Exécution manuelle ou automatique

MTM

tech.days 2015#mstechdaysSESSION

tech days•

2015

#mstechdays techdays.microsoft.fr

Contexte

Version 1

Version 2

Futur

Conclusions

tech.days 2015#mstechdaysSESSION

tech.days 2015#mstechdaysSESSION

tech.days 2015#mstechdaysSESSION

tech.days 2015#mstechdaysSESSION

tech.days 2015#mstechdaysSESSION

tech days•

2015

#mstechdays techdays.microsoft.fr

Contexte

Version 1

Version 2

Futur

Conclusions

tech.days 2015#mstechdaysSESSION

tech.days 2015#mstechdaysSESSION

tech days•

2015

#mstechdays techdays.microsoft.fr

Contexte

Version 1

Version 2

Futur

Conclusions

tech.days 2015#mstechdaysSESSION

Challenges : Résistance naturelle au changement

Documentation ≠ Document Word/Excel

En parallèle d’autres changements de processus

Impact de la migration sur les milestones des projets

Florent et Alina, développeur et testeuse de la v.2. Copyright 2015 Capsule Technologie

Mitigations : Beaucoup d’accompagnement

Un grand nombre de démonstrations En groupe

En tête à tête

Support du management

Migration petit à petit

tech.days 2015#mstechdaysSESSION

tech.days 2015#mstechdaysSESSION

« MTM m’aide à faire des rapports de test plus rapidement

et plus précisément grâce à Excel et au Cube »

- Arnaud, Software Test Manager

« Malgré une période d’adaptation, non évidente, MTM permet de

mettre en pratique des test cases « plus intelligents » que sur

des support classiques (*. Word, *. Excel ) »

- Issad, Software Test Engineer

« MTM est un outil plus agréable et plus pratique à utiliser que

Visual Studio pour écrire et gérer les Work Items de test.

Cependant, on attend des améliorations lors de l’exécution des tests

(affichage des variables d’itération plus pratique, visualisation rapide de

l’historique des résultats d’exécution d’un Test Case, visualisation de

l’ensemble d’un Test Case d’un premier coup d’œil) » - Jean, V&V

Engineer

« Fini le travail de scribe préliminaire pour trouver les incohérences lors

de la génération de Verification Report avec des tests manuels, grâce à

MTM et au Cube on peut se concentrer sur l’analyse et plus la

collecte des résultats. » - Marine, Software Test Engineer

« MTM est un outil flexible et répondant à une partie de nos besoins

de tests. Il permet d’apporter une vision macro de nos tests et aideà l’exécution. La génération du rapport est simple. Mais MTM

aujourd’hui ne suffit pas à lui-même, il manque des briques

essentielles comme la comparaison de deux versions ou un rapport

de couverture d'exigences. »

- Thierry, Software Test Engineer

« L’interface de MTM permet une prise en main rapide de

l’outil. La visualisation des steps et des paramètres permet, d’un seul

coup d’œil, de comprendre comment est structuré un test case. »

- Alejandro, Software Test Engineer

© 2015 Microsoft Corporation. All rights reserved.

http://www.capsuletech.fr/nous-recrutons

Questions ?

Notez maintenant notre session

Hassan Annous

hassana@capsuletech.com

Olivier Cornuau

olivierco@capsuletech.com

Jérémy Landon

jlandon@infinitesquare.com