Skær ned på de manuelle tests - Automatisér!

Transkript

1 Skær ned på de manuelle tests - Automatisér!...og undgå skader! #tedk16

2 Hvem er vi? Morten Bjerg Gregersen Projektkonsulent Marianne Gadegaard Testleder

3 Agenda Vores verden Kvalitetssikring og automatisering Gevinster Fremtid

4 Vores verden

5 Inspiration

6 Teamet

7 Medlemsbankerne

8 Mobilbank Privat - til privatøkonomien

9 Mobilbank Erhverv - til de mindre og mellemstore virksomheder

10 Statistik (december 2015) Mobilbank Privat aktive brugere sessioner sidevisninger 9,20 sider pr. session 02:44 gnsn. sessionslængde Mobilbank Erhverv aktive brugere sessioner sidevisninger 5,87 sider pr. session 01:57 gnsn. sessionslængde

11 Reviews fra brugerne 4,2

12 12

13 13

14 14

15 Arkitektur og kvalitetssikring

16 Arkitektur Middleware Privat Middleware Erhverv Backend/mainframe

17 Kvalitetssikring

18 Testanalyse - Overførsel Overførsel samme bank Overførsel anden bank Scenarier Mellem egne Uden NemID Standard Med NemID Helligdag Straks Med NemID

19 Testanalyse - Overførsel Input 1. del Input 2. del Overførsel samme bank Overførsel anden bank Dagsmaksimum Signering Scenarier Beløb Tekst til egen konto Mellem egne Standard Dagsmaks. er overskredet Egne konti uden NemID Helligdag Fra konto Tekst til modtagers konto Fuldmagtskonti Standard - Ingen adgang Andres konti med NemID Weekend Til konto Dato Straks Med nøglekort Konto pantsat Hos modtager med det samme Straks - Grænse Med nøgleviser Konto spærret Straks - Ingen adgang Mobilkode forkert Under 18 år uden tilladelse Straks - Ikke tilladt for kunden NemID-nøgle forkert Særlig indlån uden disp. ret Kvittering Modtager-bank er nede

20 Risikobaseret test

21 Manuelle testskemaer Funktions- tests Privat Erhverv Designkontroltests 159 0

22 Automatisering af tests

23 Målsætninger Platformuafhængigt i høj grad Forståeligt for forretningen Alle kan bidrage med testskemaer User-story Acceptkriterier Testskemaer Automatisering

24 Valg af værktøj

25 Struktur af test-kode Gherkin Scenarier Ruby Steps Screens Screens Ruby Ruby

26 Scenarier (Gherkin) Domæne-specifikt sprog Skrives sammen med Product Owner Egenskab: At leve godt Scenarie: Kagespisning Givet der er kage Når jeg spiser kagen Så bliver jeg glad

27 Scenarier (Gherkin) Egenskab: Overførsel - Clearing Scenarie: Overførsel frem i tid (askeonsdag/dagen før skærtorsdag) Givet jeg ønsker at overføre 99 kr fra min Lønkonto til Når jeg vælger at modtager skal have pengene dagen før skærtorsdag Så ser jeg at modtager får pengene tirsdag efter 2. påskedag Og jeg kan ikke vælge at modtager skal have pengene med det samme

28 Steps (Ruby) Når /^jeg vælger at modtager skal have pengene (med det samme næste torsdag næste tirsdag næste fredag dagen før skærtorsdag)$/ do day page = page(transferscreen) if day.eql?('med det samme') touch(page.immediately_cell) else date = nil if day.eql?('næste torsdag') date = DateTime.now.next_thursday elsif day.eql?('næste tirsdag') date = DateTime.now.next_tuesday elsif day.eql?('næste fredag') date = DateTime.now.next_friday elsif day.eql?('dagen før skærtorsdag') date = Easter.next_maundy_thursday-1 end page = page.transition(tap: page.date_cell, page: DateSelectionScreen) page.select_date(date) end end

29 Screens (Ruby) class DateSelectionScreen < IBDBase def title; 'Vælg dato' end def select_date(date) date_string = date.strftime('%-d. %B %Y') query = "label marked:'#{date_string}'" scroll_down(until_exists: query) transition(tap: query, page: TransferScreen) end end class DateSelectionScreen < ABDBase def title; 'Vælg dato' end def select_date(date) seconds_since_epoch = date.to_time.to_i query('calendarview', :method_name => 'setdate', :arguments => [seconds_since_epoch, true, true]) transition(tap: "button text:'#{title}'", page: TransferScreen) end end

30 Click her Demo

31 Designkontrol

32 Designkontrol Skærmbilleder Menu Login Kontooverblik Kontobevægelser Søgning konto Godkend betalinger Søgning godkend Betalingsoversigt Søgning betaling Betalingsdetaljer Indstillinger... Pengeinstitutter Alm. Brand Bank Djurslands Bank Jyske Bank Kreditbanken Nordfyns Bank Nordjyske Bank x = Nørresundby Bank Ringkjøbing Landbobank Skjern Bank Sparekassen Sjælland Sydbank Østjydsk Bank ca. 400 skærmbilleder

33 Designkontrol (400 x 4 x 3 ) + (400 x 6 x 5 ) = : iphone-skærmstørrelser : ios-versioner : Android-skærmstørrelser : Android-versioner skærmbilleder

34 Automatisering af designkontrol

35 UI-test-rapport

36 UI-test-rapport

37 Faste data Mock-server Privat Mock-server Erhverv

38 Forskelle mellem versioner

39 Billeder til lancering

40 Billeder til lancering

41 Automatisering af billeder til lancering

42 App Store og Google Play Butik

43 Hjemmesider og marketing

44 Gevinster

45 Testskemaer automatiseret Funktions- tests Privat Erhverv Designkontroltests 25 16

46 Frigivelsesproces Før ca. 4 uger Nu under en uge

47 Hyppigere leverancer Privat Jan Feb Mar Apr Maj Jun Jul Aug Sep Okt Nov Dec Privat Erhverv Jan Feb Mar Apr Maj Jun Jul Aug Sep Okt Nov Dec ios Android Windows Phone

48 Attraktiv arbejdsplads

49 Udfordringer Mindset i teamet Stabilisering af tests Kun community-support på værktøj

50 Fremtid

51 Fremtid for automatisering Fokus på automatiseret regressionstest Automatisk kørsel af tests

52 Fremtid for Bankdata Faste dedikerede teams Selvorganiserede teams Ejerskab og ansvar Nye roller Et agilt mindset Øget medarbejdertilfredshed

53 Tak for i dag #tedk16

54 Spørgsmål