Intégration Continue et PHP

L’équipe ITOswald De Riemaecker, Anthony Laurain,

Sebastien Retoux, Christophe Diprima, Christian Schramm

16 May 2013

Le Test chez atHome.luRetour sur expérience

Friday, May 17, 13

L’équipe atHome

• Oswald De Riemaecker - Team Lead : Passionné de Linux, technologie open source, développement web et gestion de projet/produit Agile.

• Anthony Laurain - Senior Platform Developer (Zend Framework Certified developer)

• Sebastien Retoux - Tactical Coordinator and Release Manager

• Christophe DiPrima - UX/Intégrateur

• Christian Schramm - DevOps/Linux SysAdmin (Zend Framework Certified)

Friday, May 17, 13

La Stratégie de testFriday, May 17, 13

AutomatisésTests Unitaires

Tests de composantsTest GUI

Manuels & Automatisés

Tests FonctionnelsExemples

Tests sur StoryboardsTests de perception

MaquettesPrototypes / Simulation

Outils

Tests de performanceTests de ChargeTests de sécurité

Manuels

Tests exploratoiresScénariosTests d'utilisabilité

Tests d'acceptation (UAT)

Orientation Business

Orientation Technologie

Sout

ien

de l'

équi

pe Critique Produit

Q1

Q2 Q3

Q4

Les quatre quadrants du Test Agile de Brian Marick

Friday, May 17, 13

La pyramide des tests automatisés de Mike Cohn

Unit Tests

Tests APITests d’Intégration

Tests de Composent

Tests GUI

Tests Manuel

Orientation Technologie

Orientation Business

Développons nous le bon système ?

Développons nous le système

correctement ?

Friday, May 17, 13

Les outilsFriday, May 17, 13

L'interface utilisateur avec Sahi

Les critères d'acceptance avec Behat

Le code avec PHPUnit

Les outils par couches

Unit Tests

Tests APITests d’Intégration

Tests de Composent

Tests GUI

Tests Manuel

Friday, May 17, 13

Les tests unitaire avec PHPUnit

PHPUnit est un framework de tests unitaires PHP Nouveau développement avec une approche développement par le test (TDD)

Couverture maximal de nouvelle classe

Friday, May 17, 13

Behat

s

Feature: Testing the RESTfulness of the immotype controller

Background: Given I am using the rest service and I am logged with "username:password"

Scenario: Fetching immotype by id Given that I want to find a "Immotype" When I request "/immotype/24" Then the "id" property equals "24" And the "description_en" property equals "Business Takeover" Then the response is JSON Then the response status code should be 200 When I request "/immotype/1000" Then the response status code should be 404

Friday, May 17, 13

Behat Framework BDD pour PHP

s




Friday, May 17, 13

Behat Framework BDD pour PHP Orienté métier

s




Friday, May 17, 13

Behat Framework BDD pour PHP Orienté métier Utilise le Gerkhin Syntaxe "Un langage compréhensible orienté besoins métier, qui décrit le

comportement d'une application sans se préoccuper des détails de l'implémentation"

s




Friday, May 17, 13

Behat Framework BDD pour PHP Orienté métier Utilise le Gerkhin Syntaxe "Un langage compréhensible orienté besoins métier, qui décrit le

comportement d'une application sans se préoccuper des détails de l'implémentation" Basé sur les critères d'acceptance d'une histoire utilisateur, fonctionne très bien avec un gestion de produit agile

s




Friday, May 17, 13

Sahi

Friday, May 17, 13

Sahi

C’est le haut de notre pyramide de test

Friday, May 17, 13

Sahi

C’est le haut de notre pyramide de test Outil de test pour les applications web

Friday, May 17, 13

Sahi

C’est le haut de notre pyramide de test Outil de test pour les applications web Enregistrement de scénario utilisateur dans le navigateur

Friday, May 17, 13

Sahi

C’est le haut de notre pyramide de test Outil de test pour les applications web Enregistrement de scénario utilisateur dans le navigateur Lorsque nécessaire, les scénarios principaux, peu susceptible de changer au niveau interface mais ayant un risque de régression importante (Inscription d’utilisateur/Login/Alerte email)

Friday, May 17, 13

Les outils pour l'ICFriday, May 17, 13

La gestion des branches de développement

Master

Branch SprintBranch Sprint

Tactic / Bug Fixes Tactic / Bug Fixes Tactic / Bug Fixes Tactic / Bug FixesIntégration Continue

Remonté de la Master

Friday, May 17, 13


Logiciel de gestion de versions décentralisé

Master




Friday, May 17, 13


Logiciel de gestion de versions décentralisé Branch Master, la dernière en production

Master




Friday, May 17, 13


Logiciel de gestion de versions décentralisé Branch Master, la dernière en production Branch de Goal de Sprint/Epique de produit

Master




Friday, May 17, 13


Logiciel de gestion de versions décentralisé Branch Master, la dernière en production Branch de Goal de Sprint/Epique de produit Branch de prototypage pour le test rapide d’implémentation de solution technique

Master




Friday, May 17, 13

Le système de build

Friday, May 17, 13


Outil open source d'intégration continue

Friday, May 17, 13


Outil open source d'intégration continue Interface avec des systèmes de gestion de versions

Friday, May 17, 13


Outil open source d'intégration continue Interface avec des systèmes de gestion de versions Apache Ant et scripts Shell

Friday, May 17, 13


Outil open source d'intégration continue Interface avec des systèmes de gestion de versions Apache Ant et scripts Shell Plugin Extreme feed back sur grand écran pour un retour rapide sur l’état de build

Friday, May 17, 13

La construction sur conteneur virtuel

http://master.athome.lu

http://dev01.athome.luhttp://dev02.athome.luhttp://dev03.athome.luhttp://dev04.athome.lu...

Friday, May 17, 13

http://dev01.athome.lu/









OpenVZ permet à un serveur physique d'exécuter de multiples instances de systèmes d'exploitation isolés



Friday, May 17, 13











Installé à la création de job jenkins



Friday, May 17, 13











Installé à la création de job jenkins Copie de l’environnement de production



Friday, May 17, 13









Le processusFriday, May 17, 13

Scrum with Agile Product Management

Epique

Epique

Epique

Epique En tant qu'administrateur ...

En tant qu'agent ..

En tant que visiteur ...

En tant que utilisateur ...

Critère d’acceptance:............................................................................................................................

Friday, May 17, 13


Carnet Produit

Epique

Epique

Epique


En tant qu'agent ..




Friday, May 17, 13


Carnet Produit Découpage en épique

Epique

Epique

Epique


En tant qu'agent ..




Friday, May 17, 13


Carnet Produit Découpage en épique Découpage en histoire utilisateurs

Epique

Epique

Epique


En tant qu'agent ..




Friday, May 17, 13


Carnet Produit Découpage en épique Découpage en histoire utilisateurs Critère d'acceptance (SEO/Code Postaux/ACL ...)

Epique

Epique

Epique


En tant qu'agent ..




Friday, May 17, 13

Sprint Planning

En tant qu'administrateur ...

En tant qu'agent ..



GOAL DE SPRINT


Friday, May 17, 13

Sprint Planning

Création de la branch de Goal de sprint GIT


En tant qu'agent ..



GOAL DE SPRINT


Friday, May 17, 13

Sprint Planning

Création de la branch de Goal de sprint GIT Création du Job Jenkins


En tant qu'agent ..



GOAL DE SPRINT


Friday, May 17, 13

Le Sprint

Master

Branch Sprint

Tactic / Bug FixesIntégration Continue


Sandbox

Jenkins

Histoire Utilisateur 1PHP Unit / Behat Dev




Production

Tactic / Bug Fixes

VZ Branch de Sprint

VZ Master+ Manuel Testing + Validation+

+ Manuel Testing+

+ Manuel Testing+

Deploy Deploy Deploy

Intégration de la branch de Sprint

+

+

+

Friday, May 17, 13

JenkinsFriday, May 17, 13

Jenkins

• Des Jobs de branch de Goal de sprint • Le job Branch Master avec la master Sahi si Master successful• Le job de déploiement en production• Le modèle pour la création de nouveau job

Friday, May 17, 13

Jenkins

Paramètre du build

Friday, May 17, 13

Jenkins

Paramètre du build

• Synchronisation de la base de donnée de production, jenkins va chercher la dernier base en production et la réinstaller, ce paramètre est très utile pour valider les mise à jour SQL• Rebuild solr• Réinstallation complète du conteneur virtuel (avec installation système)• Version php + mariadb• Ainsi qu’une l’utilisation d’une base de donnée light

Friday, May 17, 13

Jenkins

Extreme Feed back

• Voici un exemple • Lors du dernier build nous avons la branch highlight avec 1 test non passé

Friday, May 17, 13

Jenkins

Rapport de Build avec Résultat de test

Friday, May 17, 13

Jenkins

Message d’erreur pour le test qui n’a pas passé

• Le test vérifie que le service REST en GET retourne bien les statistiques de notre offre, il y a un problème de nom de colonne dans le modèle de la table des statistique• Détection et identification du problème rapide

Friday, May 17, 13

Jenkins

En résumé

Friday, May 17, 13

Jenkins

Jenkins nous permet donc:

En résumé

Friday, May 17, 13

Jenkins


Construction environnement virtuel

En résumé

Friday, May 17, 13

Jenkins


Construction environnement virtuel Intégration développement

En résumé

Friday, May 17, 13

Jenkins


Construction environnement virtuel Intégration développement Mise à jour et test de la base de donnée

En résumé

Friday, May 17, 13

Jenkins


Construction environnement virtuel Intégration développement Mise à jour et test de la base de donnée Mise à jour et test que Solr

En résumé

Friday, May 17, 13

Jenkins


Construction environnement virtuel Intégration développement Mise à jour et test de la base de donnée Mise à jour et test que Solr Installation outils de test

En résumé

Friday, May 17, 13

Jenkins


Construction environnement virtuel Intégration développement Mise à jour et test de la base de donnée Mise à jour et test que Solr Installation outils de test Test Unitaires

En résumé

Friday, May 17, 13

Jenkins


Construction environnement virtuel Intégration développement Mise à jour et test de la base de donnée Mise à jour et test que Solr Installation outils de test Test Unitaires Test BDD Behat

En résumé

Friday, May 17, 13

Jenkins


Construction environnement virtuel Intégration développement Mise à jour et test de la base de donnée Mise à jour et test que Solr Installation outils de test Test Unitaires Test BDD Behat Rapport de build

En résumé

Friday, May 17, 13

Jenkins


Construction environnement virtuel Intégration développement Mise à jour et test de la base de donnée Mise à jour et test que Solr Installation outils de test Test Unitaires Test BDD Behat Rapport de build Identification de tests qui ne sont pas passé

En résumé

Friday, May 17, 13

Jenkins


Construction environnement virtuel Intégration développement Mise à jour et test de la base de donnée Mise à jour et test que Solr Installation outils de test Test Unitaires Test BDD Behat Rapport de build Identification de tests qui ne sont pas passé Lancement d'autre build (Sahi)

En résumé

Friday, May 17, 13

Jenkins


Construction environnement virtuel Intégration développement Mise à jour et test de la base de donnée Mise à jour et test que Solr Installation outils de test Test Unitaires Test BDD Behat Rapport de build Identification de tests qui ne sont pas passé Lancement d'autre build (Sahi) Déploiement en production

En résumé

Friday, May 17, 13

Jenkins


Construction environnement virtuel Intégration développement Mise à jour et test de la base de donnée Mise à jour et test que Solr Installation outils de test Test Unitaires Test BDD Behat Rapport de build Identification de tests qui ne sont pas passé Lancement d'autre build (Sahi) Déploiement en production

En résumé

Friday, May 17, 13

Behat

Le fichier de fonctionnalité

• Behat, le milieu de notre pyramide.• Vérifions pourquoi notre test behat n’est pas passé, nous avons ici nos critères d’acceptance sous forme de Gerkhin Syntaxe.

Friday, May 17, 13

Behat

Le test behat en ligne de commande

• Nous avons donc un problème avec le contrôler REST statistiques global

Friday, May 17, 13

Behat

Identification rapide du problème avec Jenkins

• Nous identifions rapidement sur base des derniers commits que le gateway Omniture Property Views à été changé

Friday, May 17, 13

Behat

Correction de notre Méthode

• Nous pouvons corriger et relancer le build

Friday, May 17, 13

Behat

Notre build passe

Friday, May 17, 13

Behat

Notre test Behat passe

Friday, May 17, 13

Behat

Jeux de donnée de test

• Behat et Jenkins nous permet d’avoir des jeux donnée pour les test manuel et GUI

Friday, May 17, 13

Behat

En résumé

Friday, May 17, 13

Behat

Behat nous permet donc:

En résumé

Friday, May 17, 13

Behat


Tester le métier, avec la même approche que le TDD, on écrit les critère d’acceptance de la fonctionnalité testée, ce qui permet de structuré sa pensée et son code, on pense par le test.

En résumé

Friday, May 17, 13

Behat



Tester les ACL (Accès Control List)

En résumé

Friday, May 17, 13

Behat



Tester les ACL (Accès Control List) Tester les services RESTful et sa sécurité

En résumé

Friday, May 17, 13

Behat



Tester les ACL (Accès Control List) Tester les services RESTful et sa sécurité Injecter des données pour les tests manuel et GUI

En résumé

Friday, May 17, 13

Sahi

Sahi Liens manquant

Friday, May 17, 13

Sahi

Rapport Sahi

Friday, May 17, 13

Sahi

Rapport de Test pour la publication d’offre

• Notre lien manquant

Friday, May 17, 13

Sahi

Scripting Sahi

Friday, May 17, 13

Sahi

Scripting Sahi

• Nous avons ajouté un système de dictionnaire pour pouvoir tester nos différents sites, par exemple l’utilisation de la ville Troisvierges sur athome.lu et Saarbruken sur athome.de• Nous faisons aussi des tests SEO, nous validons que les blocs SEO en bas de page redirige vers la bonne page et que celle-ci a bien les bons Title et Meta• Ce test nous a permis de trouver un problème avec la génération des Titles SEO que nous n’aurions certainement pas pu voir autrement.

Friday, May 17, 13

Sahi

En résumé

Friday, May 17, 13

Sahi

Sahi nous permet donc:

En résumé

Friday, May 17, 13

Sahi


Tests sur plusieurs navigateurs

En résumé

Friday, May 17, 13

Sahi


Tests sur plusieurs navigateurs Valider les fonctionnalités utilisateur critiques (Inscription/Login/Email Alerts)

En résumé

Friday, May 17, 13

Sahi



Valider navigation utilisateur

En résumé

Friday, May 17, 13

Sahi



Valider navigation utilisateur Valider liens SEO

En résumé

Friday, May 17, 13

Sahi



Valider navigation utilisateur Valider liens SEO

En résumé

Friday, May 17, 13

Next Steps

Friday, May 17, 13

Ce qui nous reste encore a faire:

Next Steps

Friday, May 17, 13


Ajout de métrique, Code Coverage + PHP Tools (PHPcp/md ...)

Next Steps

Friday, May 17, 13


Ajout de métrique, Code Coverage + PHP Tools (PHPcp/md ...) Améliorer les tests Sahi sur plusieurs navigateurs

Next Steps

Friday, May 17, 13


Ajout de métrique, Code Coverage + PHP Tools (PHPcp/md ...) Améliorer les tests Sahi sur plusieurs navigateurs Implémenter des tests de performance

Next Steps

Friday, May 17, 13


Ajout de métrique, Code Coverage + PHP Tools (PHPcp/md ...) Améliorer les tests Sahi sur plusieurs navigateurs Implémenter des tests de performance Implémenter JsTestDriver dans Jenkins

Next Steps

Friday, May 17, 13


Ajout de métrique, Code Coverage + PHP Tools (PHPcp/md ...) Améliorer les tests Sahi sur plusieurs navigateurs Implémenter des tests de performance Implémenter JsTestDriver dans Jenkins

Next Steps

Friday, May 17, 13

Questions

Friday, May 17, 13

?Questions

Friday, May 17, 13

Je tiens à remercier

L'équipe atHome pour leur travail! VA Consulting Vous !

Twitter: oswald_odrEmail: [email protected]

Remerciement

Friday, May 17, 13

mailto:[email protected]

mailto:[email protected]

Technology

Intégration Continue et PHP