Zo, klaar! Code ingecheckt en weer verder met een nieuw item van de backlog. Maar hoe weet ik nou of die code die ingecheckt is niet iets anders heeft kapotgemaakt?

Geen functionaliteit omgooien

Allereerst wordt alle code die we inchecken ge-unit-test en ook handmatig getest door testers. Maar daarnaast gebruiken we bij DSW automatische regressietests om de kwaliteit van onze applicaties te waarborgen. Dit doen we zodat we snel feedback hebben dat gedane wijzigingen geen bestaande functionaliteit hebben omgegooid en we zeker kunnen zijn van de kwaliteit van onze software terwijl we de OTAP-straat doorlopen.

Zoeken naar balans

De afgelopen jaren zijn we bezig geweest met het opzetten van deze tests voor ons applicatielandschap. In eerste instantie hebben we deze tests vrij technisch ingestoken. We zetten veel data klaar om een proces te testen en deden dan een technische Assert dat het proces tot de verwachte wijzigingen in gegevens (database, outputbestanden) had geleid. Dit werkte op zich prima, maar het klaarzetten van de testdata kostte veel tijd en we kwamen tot het inzicht dat deze manier van testen onderhoudsgevoelig is en niet de volledige kracht van onze tooling (=Specflow) gebruikt.

Functionele insteek

Inmiddels hebben we binnen ons team een verbeterslag doorgevoerd; we testen nu functionele stromen in plaats van technische processen. Deze manier van testen hebben we ontleend aan de ontwikkelstroming Behaviour Driven Development, dat propageert om functionele testscenario’s op te stellen. Deze scenario’s zijn leesbaar voor niet-ontwikkelaars en bevatten de hoofdlijnen van een procesflow. Een ontwikkelaar kan vervolgens de code achter de test programmeren en Specflow verenigt deze beide werelden, waardoor leesbare tekst in code wordt omgezet.

Een automatische test voor het inlezen van het bankbestand dat onze financiële transacties bevat, bevat de hoofdlijnen van dit proces. Ondereenvolgens: het functionele scenario, de binding van een regel van het functionele scenario van de code en de onderliggende code.

Voordelen

Het grote voordeel dat onze nieuwe aanpak oplevert, is dat de automatische tests nu als levende documentatie kunnen fungeren; de tests beschrijven de functionaliteit van de software, zowel de happy flow als de verwachte uitval. Daarnaast zorgt onze nieuwe aanpak ervoor dat de tests sneller op te stellen en te ontwikkelen zijn en zijn ze bestendig voor nieuwe aanpassingen.

Continuous delivery

Met deze aanpak zijn we klaar voor de toekomst van continuous delivery. We kunnen kwaliteit centraal stellen, terwijl we toch wijzigingen aan onze software kunnen doen zonder het risico per ongeluk de boel plat te gooien op productie.