Arctype

Uitdaging

Als succesvol groeiende startup voelde Arctype de behoefte om hun ontwikkelingsteam te versterken met ervaren QA-ingenieurs. Ze hadden iemand nodig die de best practices volgde en hun expertise gebruikte om nieuwe testgevallen te creëren. Zo verspillen ontwikkelaars hun tijd niet aan softwaretesten en kanaliseren ze hun energie in plaats daarvan naar functieontwikkeling en bugfixing.

Arctype wendde zich tot QAwerk om hen te helpen zorgen voor meerdere maandelijkse releases die soepel en met de benodigde snelheid verlopen. Er werd van ons verwacht dat we testgevallen dezelfde dag nog uitvoerden als de release werd uitgebracht. Dankzij het verschil in onze tijdzones en nachtelijk testen, was het mogelijk dat wanneer Arctype-ontwikkelaars uitloggen, het hier in Oekraïne overdag is en onze QA-ingenieurs beginnen met testen. De volgende dag hebben Arctype-ontwikkelaars alle bugs al in Jira gelogd om de volgende ochtend meteen met bugfixing te beginnen.

Een andere mijlpaal is het behouden van 10-20% consumenten die afhaken vanwege bugs, door de softwarekwaliteit aanzienlijk te verbeteren en kritieke problemen in productie te voorkomen.

Oplossing

Ons QAwerk-team houdt zich voornamelijk bezig met het testen van de Arctype desktop-app voor macOS. Tegelijkertijd, als we zien dat de nieuwe versie incorrect werkt, testen we ook de webclient en doorlopen we de meest kritieke testgevallen op Windows.

Dit zijn de soorten tests die we regelmatig uitvoeren om de gewenste kwaliteit te bereiken:

• Functioneel testen – de basis die we leggen om ervoor te zorgen dat gebruikers geen belemmeringen ondervinden met de functionaliteit van de app.
• Integratietesten – essentieel om te garanderen dat de SQL-client geen integratieproblemen heeft met databases zoals MySQL, PostgreSQL, SQLite, Yugabyte en PlanetScale.
• Regressietesten – een must-have voor startups zoals Arctype die voortdurend werken aan het uitbrengen van nieuwe functies. We voeren consistent regressietests uit om te controleren of updates de bestaande functionaliteit beïnvloeden.
• Automatiseringstesten – we combineren handmatige tests met geautomatiseerde QA-tests om de releases te versnellen. We hebben registratie- en inlogtestgevallen geautomatiseerd en onderzoeken andere gebieden met automatiseringspotentieel.
• Installatietesten – een basistype test, maar wel belangrijk. We zorgen ervoor dat Arctype-gebruikers de app zonder technische fouten kunnen downloaden, installeren en updaten.
• Smoke Testing – voordat we een uitgebreide lijst met testgevallen doorlopen, moeten we ervoor zorgen dat de build stabiel is om tijdverspilling te voorkomen. We controleren snel kritieke functies om te zien of er showstoppers zijn en of we verder kunnen gaan.

We begonnen met 50 testgevallen die Arctype voorstelde en hebben deze uitgebreid tot meer dan 200. Deze omvatten ‘sad’ en ‘happy paths’, evenals testgevallen met verschillende databasetypes en details. We testen wekelijks nieuwe builds en voegen gaandeweg samen testgevallen toe.

Onze QA-ingenieurs zijn nauw betrokken bij het creëren van nieuwe testgevallen en het zo gedetailleerd mogelijk maken ervan. De benodigde tijd voor een testrun van een nieuwe build bedraagt slechts 8-9 uur, gezien de complexiteit en variëteit aan functies.