Skær ned på de manuelle tests - Automatisér!...og undgå skader!

Transkript

1 Skær ned på de manuelle tests - Automatisér!...og undgå skader!

2 Hvem er vi? Morten Bjerg Gregersen Projektkonsulent Marianne Gadegaard Testleder

3 Agenda Vores verden Kvalitetssikring og automatisering Gevinster Fremtid

4 Vores verden

5 Inspiration

6 Teams

7 Medlemsbankerne

8 Mobilbank Privat - til privatøkonomien

9 Mobilbank Erhverv - til de mindre og mellemstore virksomheder

10 Statistik (december 2015) Mobilbank Privat aktive brugere sessioner sidevisninger 9,20 sider pr. session 02:44 gnsn. sessionslængde Mobilbank Erhverv aktive brugere sessioner sidevisninger 5,87 sider pr. session 01:57 gnsn. sessionslængde

11 11

12 Arkitektur og kvalitetssikring

13 Arkitektur Middleware Privat Middleware Erhverv Backend/mainframe

14 Kvalitetssikring

15 Testanalyse - Overførsel Input 1. del Input 2. del Overførsel samme bank Overførsel anden bank Dagsmaksimum Signering Scenarier Beløb Tekst til egen konto Mellem egne Standard Dagsmaks. er overskredet Egne konti uden NemID Helligdag Fra konto Tekst til modtagers konto Fuldmagtskonti Standard - Ingen adgang Andres konti med NemID Weekend Til konto Dato Straks Med nøglekort Konto pantsat Overførsel samme bank Hos modtager med det samme Overførsel anden bank Straks - Grænse Straks - Ingen adgang Med nøgleviser Mobilkode forkert Konto spærret Under 18 år uden tilladelse Mellem egne Uden NemID Standard Med NemID Straks - Ikke tilladt for kunden Scenarier NemID-nøgle forkert Kvittering Særlig indlån uden disp. ret Modtager-bank er nede Straks Med NemID Helligdag

16 Risikobaseret test

17 Manuelle testskemaer Funktions- tests Privat Erhverv Designkontroltests 159 0

18 Automatisering af tests

19 Målsætninger Platformuafhængigt i høj grad Forståeligt for forretningen Alle kan bidrage med testskemaer User-story Acceptkriterier Testskemaer Automatisering

20 Valg af værktøj

21 Struktur af test-kode Gherkin Scenarier Ruby Steps Screens Screens Ruby Ruby

22 Scenarier (Gherkin) Domæne-specifikt sprog Kan læses og forstås af Product Owner Egenskab: At leve godt Scenarie: Kagespisning Givet der er kage Når jeg spiser kagen Så bliver jeg glad

23 Scenarier (Gherkin) Egenskab: Overførsel - Clearing Scenarie: Overførsel frem i tid (dagen før skærtorsdag) Givet jeg ønsker at overføre 99 kr fra min Lønkonto til Når jeg vælger at modtager skal have pengene dagen før skærtorsdag Så ser jeg at modtager får pengene tirsdag efter 2. påskedag Og jeg kan ikke vælge at modtager skal have pengene med det samme

24 Steps (Ruby) Når /^jeg vælger at modtager skal have pengene (med det samme næste torsdag næste tirsdag næste fredag dagen før skærtorsdag)$/ do day page = page(transferscreen) if day.eql?('med det samme') touch(page.immediately_cell) else date = nil if day.eql?('næste torsdag') date = DateTime.now.next_thursday elsif day.eql?('næste tirsdag') date = DateTime.now.next_tuesday elsif day.eql?('næste fredag') date = DateTime.now.next_friday elsif day.eql?('dagen før skærtorsdag') date = Easter.next_maundy_thursday-1 end page = page.transition(tap: page.date_cell, page: DateSelectionScreen) page.select_date(date) end end

25 Screens (Ruby) class DateSelectionScreen < IBDBase def title; 'Vælg dato' end def select_date(date) date_string = date.strftime('%-d. %B %Y') query = "label marked:'#{date_string}'" scroll_down(until_exists: query) transition(tap: query, page: TransferScreen) end end class DateSelectionScreen < ABDBase def title; 'Vælg dato' end def select_date(date) seconds_since_epoch = date.to_time.to_i query('calendarview', :method_name => 'setdate', :arguments => [seconds_since_epoch, true, true]) transition(tap: "button text:'#{title}'", page: TransferScreen) end end

26 Demo

27 Designkontrol

28 Designkontrol Skærmbilleder Menu Login Kontooverblik Kontobevægelser Søgning konto Godkend betalinger Søgning godkend Betalingsoversigt Søgning betaling Betalingsdetaljer Indstillinger... Pengeinstitutter Alm. Brand Bank Djurslands Bank Jyske Bank Kreditbanken Nordfyns Bank Nordjyske Bank x = Nørresundby Bank Ringkjøbing Landbobank Skjern Bank Sparekassen Sjælland Sydbank Østjydsk Bank ca. 400 skærmbilleder

29 Designkontrol fortsat (400 x 4 x 3 ) + (400 x 6 x 5 ) = skærmbilleder : iphone-skærmstørrelser : ios-versioner : Android-skærmstørrelser : Android-versioner

30 Automatisering af designkontrol

31 UI-test-rapport

32 UI-test-rapport fortsat

33 Faste data Mock-server Middleware Privat Mock-server Middleware Erhverv Backend/mainframe

34 Forskelle mellem versioner

35 Udfordringer Startede med særskilte steps Mange ens steps i de 2 baser Alt for meget vedligehold

36 Billeder til lancering

37 Billeder til lancering

38 Automatisering af billeder til lancering

39 App Store og Google Play Butik

40 Hjemmesider og marketing

41 Gevinster

42 Testskemaer automatiseret Funktions- tests Privat Erhverv Designkontroltests 25 25

43 Frigivelsesproces Før ca. 4 uger Nu under en uge

44 Hyppigere leverancer Privat Jan Feb Mar Apr Maj Jun Jul Aug Sep Okt Nov Dec Privat Erhverv Jan Feb Mar Apr Maj Jun Jul Aug Sep Okt Nov Dec ios Android Windows Phone

45 Attraktiv arbejdsplads

46 Udfordringer Mindset i teamet Stabilisering af tests Kun community-support på værktøj

47 Fremtid (og siden TestExpo 2016)

48 Fremtid for automatisering Fokus på automatiseret regressionstest Automatisk kørsel af tests

49 Nutid og fremtid for Bankdata Faste dedikerede teams Selvorganiserede teams Ejerskab og ansvar Nye roller Et agilt mindset Øget medarbejdertilfredshed

50 Tak for i dag

51 Spørgsmål