Byggeriets Evaluerings Center Bygge Rating Notat om pointsystem til faktablade og karakterbøger for entreprenører og bygherrer Version 2015
Indholdsfortegnelse 1 Bygge Rating... 3 2 Bygge Rating for entreprenører... 4 3 Bygge Rating for bygherrer... 6 4 Beskrivelse af pointsystemet... 7 5 Helt eller delvist afbrudte evalueringer... 9 6 Opdateringer... 9 7 Bygge Rating for kundetilfredshed og kundeloyalitet... 10 8 Bygge Rating for bestillerens tilfredshed og produkt... 11 Bilag... 12 2
1 Bygge Rating Bygge Rating er en metode til at fortolke og illustrere nøgletallene, dvs. et supplement til nøgletalssystemet. Nøgletallene kan i sig selv være svære at fortolke og anvende, bl.a. fordi de ikke giver læseren information om, hvilke værdier, der kan betragtes som hhv. gode og dårlige. Det er hensigten, at Bygge Rating skal gøre nøgletalssystemet mere brugbart og lettere at beherske. For at opstille et ratingsystem, er det nødvendigt at træffe en række beslutninger, fx om vægtningen af de enkelte nøgletal. Ratingsystemet skal ses som én blandt mange mulige metoder til at fortolke og illustrere nøgletallene. Der findes ikke én rigtig metode, men visse metoder er mere velegnede end andre. Bygge Rating systemet er et kvalificeret forslag til en metode, som brugere af systemet kan vælge at anvende. Det er intentionen, at systemet skal tilgodese behovet hos flertallet af systemets brugere. Bygge Rating er såkaldt open source, dvs. at andre må benytte systemet. Fordelen ved Bygge Rating er, at den er velkendt og intuitiv og derfor ikke behøver en brugsanvisning. Illustrationen, som viser en A-E rating, kan anvendes af de brugere, der har behov for en enkel måde at anvende nøgletalssystemet. Brugere med behov for yderligere information har mulighed for at se på de bagvedliggende nøgletal. Således tilgodeser Bygge Rating både de brugere, der har brug for at anvende nøgletalssystemet på et overordnet niveau, samt de brugere, der har behov for et detaljeret niveau. 3
2 Bygge Rating for entreprenører Nøgletalssystemet for entreprenører består af 10 nøgletal med forskellige enheder. For at kunne summere nøgletallene i en Bygge Rating, opstilles et pointsystem ved at anvende centrets database. Datagrundlaget for pointsystemet i Tabel 1 er nøgletal fra 2400 sager, der er max. 3 år gamle pr. 29. december 2014. I højre kolonne er det beregnede gennemsnit for samme dato vist for hvert nøgletal. Det fremgår heraf, at gennemsnittet for det enkelte nøgletal indgår i det interval, der giver 3 point. Det gælder dog ikke nøgletallene kundetilfredshed og kundeloyalitet for hvilke der henvises til afsnit 7. Tabel 1: Pointsystem for entreprenører (pr. 29. december 2014) Nøgletal Faktisk udførelsestid i forhold til planlagt udførelsestid korrigeret for tidsfristforlængelser Point 1 2 3 4 5 BEC gennemsnit 124,21 <124,21 <105,31 <100,60 <100,26 101,26 1) Antal kosmetiske mangler 25,73 <25,73 <6,12 <1,78 <0,24 3,285 2) Antal mindre alvorlige mangler 10,33 <10,33 <2,10 <0,49 <0,07 0,907 3) Antal alvorlige og kritiske mangler 2,41 <2,41 <0,36 <0,05 <0,01 0,070 4) Antal forhold, der skal undersøges nærmere Der gives ikke point - Økonomisk værdiansættelse af mangler 4,30 <4,30 <1,10 <0,31 <0,03 0,609 Har der været mangler ved afleveringen, som har vanskeliggjort eller faktisk forhindret den forudsatte brug af væsentlige dele af byggeriet? Der gives ikke point - Ulykkesfrekvens 208,77 <208,77 <47,21 <7,68 0 5,9 Der gives ikke point for nøgletallet 4) Antal forhold, der skal undersøges nærmere, fordi der er tale om forhold, som ikke nødvendigvis kan tillægges entreprenøren. Forholdene skal undersøges nærmere, inden det kan afgøres, om der er tale om mangler ved entreprisen. Det vil ikke være rimeligt at give entreprenøren point for antallet af sådanne forhold. Der gives ikke point for nøgletallet Har der været mangler ved afleveringen, som har vanskeliggjort eller faktisk forhindret den forudsatte brug af væsentlige dele af byggeriet?. Det skyldes, at der er forskel på enheden for dette nøgletal i henholdsvis faktablad og karakterbog. I faktabladet kan nøgletallet antage værdierne ja eller nej. I karakterbogen vises nøgletallet derimod med enheden % som Andel sager med mangler, der har haft betydning for ibrugtagning. Sidstnævnte kunne i princippet indgå i et pointsystem, men i så fald ville der være forskel på pointsystemet for henholdsvis faktablad og karakterbog. Det er derfor besluttet, at der ikke gives point for dette nøgletal. Pointsystemet anvendes således, at der altid gives det højst mulige antal point pr. nøgletal. Pointsystemet er udviklet med udgangspunkt i gennemsnittet for hvert nøgletal, således at gennemsnitsværdien af det enkelte nøgletal skal give en middel Bygge Rating, dvs. 3 point. I tabel 2 vises den procentvise fordeling af datagrundlaget, dvs. de evaluerede entrepriser pr. 29. december 2014 ved anvendelse af pointsystemet i Tabel 1. Det fremgår eksempelvis, at 96 % af entrepriserne opnår 5 point på 4
ulykkesfrekvens, svarende til at der ikke er registreret arbejdsulykker i 96 ud af 100 af de evaluerede entrepriser. Til orientering kan oplyses, at den gennemsnitlige entreprisesum er ca. 10,7 mio. kr. i datagrundlaget. Tabel 2: Fordeling af sager ved brug af pointsystem (pr. 27/12/2013) Nøgletal Faktisk udførelsestid i forhold til planlagt udførelsestid korrigeret for tidsfristforlængelser Point 1 2 3 4 5 Sum 1 % 3 % 3 % 1 % 92 % 100 % 1) Antal kosmetiske mangler 5 % 15 % 21 % 17 % 42 % 100 % 2) Antal mindre alvorlige mangler 4 % 11 % 12 % 8 % 65 % 100 % 3) Antal alvorlige og kritiske mangler 2 % 5 % 4 % 0 % 90 % 100 % Økonomisk værdiansættelse af mangler 5 % 15 % 21 % 17 % 42 % 100 % Ulykkesfrekvens 1 % 2 % 1 % 0 % 96 % 100 % Det er ikke muligt at lave en inddeling af datagrundlaget, som medfører, at der er lige mange sager i hver pointklasse. Det skyldes, at en relativt stor andel af sagerne opnår det bedste resultat (dvs. nul mangler, nul arbejdsulykker etc.), og disse sager bør naturligvis have det maksimale antal point for de pågældende nøgletal. I tabel 3 vises den procentvise fordeling af de i alt 778 entreprenører med gyldige nøgletal hos Byggeriets Evaluerings Center pr. 29. december 2014 ved anvendelse af pointsystemet i Tabel 1. Tabel 3: Fordeling af virksomheder ved brug af pointsystem (pr. 29/12/2014) Nøgletal Faktisk udførelsestid i forhold til planlagt udførelsestid korrigeret for tidsfristforlængelser Point 1 2 3 4 5 Sum 1 % 4 % 6 % 3 % 86 % 100 % 1) Antal kosmetiske mangler 5 % 17 % 24 % 23 % 31 % 100 % 2) Antal mindre alvorlige mangler 4 % 12 % 17 % 14 % 52 % 100 % 3) Antal alvorlige og kritiske mangler 2 % 5 % 8 % 2 % 83 % 100 % Økonomisk værdiansættelse af mangler 4 % 17 % 25 % 22 % 33 % 100 % Ulykkesfrekvens 0 % 1 % 4 % 2 % 93 % 100 % 5
3 Bygge Rating for bygherrer Nøgletalssystemet for bygherrer 1 følgende områder: 1. Pris (1 nøgletal samt 7 årsagskategorier) 2. Tid (1 nøgletal samt 7 årsagskategorier) 3. Mangler (1 nøgletal) 4. Arbejdsulykker (1 nøgletal) 5. Energiforbrug (1 nøgletal) 6. Bestillertilfredshed (7 nøgletal) 7. Vurdering af produkt (1 nøgletal) Formålet med at tilføje Bygge Rating til bygherrens nøgletal er at kommunikere nøgletallenes placering i forhold til gennemsnittet på en enkel og velkendt måde. Der beregnes ikke Bygge Rating for områderne Pris, Tid og Energiforbrug, fordi det ikke umiddelbart kan afgøres om en given værdi for disse nøgletal er bedre/værre end gennemsnittet. Eksempelvis er det ikke nødvendigvis et dårligt resultat, at prisen på et byggeprojekt er x % højere end budgetteret, hvis det skyldes tilvalg fra bygherren. For områderne Mangler og Arbejdsulykker beregnes Bygge Rating efter samme pointsystem, som benyttes for entreprenører, jf. afsnit 2: Tabel 4: Pointsystem for bygherrer Nøgletal Point 1 2 3 4 5 BEC gennemsnit Økonomisk værdiansættelse af mangler 4,30 <4,30 <1,10 <0,31 <0,03 0,609 Ulykkesfrekvens 208,77 <208,77 <47,21 <7,68 0 5,9 Pointsystemet anvendes således, at der altid gives det højst mulige antal point pr. nøgletal. Pointsystemet er udviklet med udgangspunkt i gennemsnittet for hvert nøgletal, således at gennemsnitsværdien af det enkelte nøgletal skal give en middel Bygge Rating, dvs. 3 point. For områderne bestillerens tilfredshed og Produkt henvises til afsnit 8. 1 Bygge Rating for bygherrer omfatter alene bygherrenøgletal, som er beregnet i henhold til bekendtgørelse nr. 1469 af 16-12- 2009 om nøgletal for statsbyggerier mv. For sager, der er omfattet af bekendtgørelse nr. 675 af 18-06-2010 om nøgletal for alment byggeri mv. er der ikke krav om beregning af karakterbog. Desuden er bygherrenøgletal fra disse sager ikke kompatible med bygherrenøgletal fra øvrige sager. 6
4 Beskrivelse af pointsystemet Dette afsnit giver en matematisk beskrivelse af, hvordan pointsystemet opstilles på baggrund af nøgletallene samt det beregnede gennemsnit for det enkelte nøgletal. Gennemsnit for de enkelte nøgletal beregnes som vægtede gennemsnit af nøgletal fra de gyldige sager på den dato, hvor pointsystemet opdateres. Som vægt benyttes entreprisesummen. Som gyldige sager regnes alle sager hvor evalueringen er afsluttet indenfor de seneste 3 år. For hvert nøgletal som indgår i pointsystemet rangordnes nøgletallene i stigende rækkefølge. Den første sag får nr. 1, næste sag får nr. 2 osv. For hvert nøgletal optælles antallet af sager i følgende grupper: x: Antal sager med den laveste (dvs. bedste) værdi af nøgletallet 2 y: Antal sager med en værdi af nøgletallet, der er bedre end eller lig med gennemsnittet, men som ikke er med i gruppe x z: Antal sager med en værdi af nøgletallet, der er højere end gennemsnittet De afgrænsende værdier i pointsystemet, jf. tabel 1, fastsættes nu. Der tælles fra sag n=1 til sag n, hvor n fastsættes således: Tabel 5: Inddeling af datagrundlag n = nummer på den sag, hvis nøgletal benyttes som afgrænsende Point værdi For Tidsfrister og Mangler x + 1/10 y For Arbejdsulykker x x + 2/3 y x + y + 1/3 z x + y + 5/6 z Resten Ved beregning af n rundes op til nærmeste heltal. Eksempel Når man skal finde den afgrænsende værdi mellem 4 og 3 point, finder man sag nummer x + 2/3 y. Det beregnede nøgletal for denne sag udgør den afgrænsende værdi mellem 4 og 3 point. Metoden til fastsættelse af grænseværdier er vist i figuren nedenfor. Som eksempel er vist værdier for nøgletallet Faktisk udførelsestid i forhold til planlagt udførelsestid korrigeret for tidsfristforlængelser. De punkterede linjer indikerer at der af pladshensyn er udeladt dele af datagrundlaget. 2 Dvs. 100 % for nøgletallet Tidsfrister og 0 for nøgletallene om Mangler og arbejdsulykker 7
Laveste værdi 100,0 100,0 100,0 x = 2167 sager 5 n = 0 100,02 100,18 n = x + 1/10 y y = 46 sager 4 Gennemsnit = 101,258 100,05 101,08 101,16 101,28 3 n = x + 2/3 y 101,28 101,30 101,55 z = 143 sager 2 n = x + y + 1/3 z n = x + y + 5/6 z Højeste værdi 183,53 190,59 210,82 660,00 1 Figur 1 Metode for fastsættelse af grænseværdier i pointsystem De fundne grænseværdier afrundes til to decimaler, og disse afrundede værdier anvendes i pointsystemet. Som det fremgår af tabel 2, medfører metoden, at der ikke er lige mange sager i hver pointklasse. Derimod er sagerne i den enkelte pointklasse kendetegnet ved deres respektive afstand fra gennemsnittet. 8
5 Helt eller delvist afbrudte evalueringer I både faktablad og karakterbog kan der mangle nøgletal i tilfælde af, at der ikke er opnået enighed. I så fald er der tale om en helt eller delvist afbrudt sag. Når et nøgletal ikke kan beregnes, er det heller ikke muligt at opnå point og Bygge Rating for det pågældende nøgletal. I praksis vil der i så fald blive vist et tomt felt ud for det/de pågældende nøgletal. 6 Opdateringer Datagrundlaget ændrer sig i takt med, at gamle sager forældes og nye sager bliver evalueret. Derfor skal pointsystemet opdateres med passende mellemrum, med henblik på at justere systemet i forhold til de aktuelle gennemsnit. Det vil dog være uhensigtsmæssigt at foretage alt for hyppige opdateringer, fordi der bør være en vis stabilitet i pointsystemet, for at det har størst mulig værdi for brugerne. Desuden foregår ændringerne i det samlede datagrundlag forholdsvist langsomt. Pointsystemet opdateres derfor en gang årligt med virkning fra den 1. januar. Det kan blive nødvendigt at overveje behovet for hyppigere ( ad hoc ) opdateringer af pointsystemet. Det må tilsigtes, at datagrundlaget for disse opdateringer omfatter alle evaluerede sager. Byggeriets Evaluerings Center inviterer derfor øvrige evaluatorer til at samarbejde om opdateringer af pointsystemet. 9
7 Bygge Rating for kundetilfredshed og kundeloyalitet For nøgletallene kundetilfredshed og kundeloyalitet anvendes skalaerne for de to nøgletal direkte i pointsystemet. Det skyldes, at kundens tilfredshedsvurdering skal foretages i forhold til gennemsnittet, og der er således allerede indlagt en gennemsnitsbetragtning i selve nøgletallet. Nøgletallet kundetilfredshed er opgjort efter følgende karakterskala: 1 = Meget værre end gennemsnittet 2 = Værre end gennemsnittet 3 = Som gennemsnittet 4 = Bedre end gennemsnittet 5 = Meget bedre end gennemsnittet. Nøgletallet kundeloyalitet viser kundens vurdering af, om hun/han vil benytte virksomheden igen ved et lignende projekt. Nøgletallet er opgjort efter følgende karakterskala: 1 = Udelukket 2 = Sikkert ikke 3 = Muligvis 4 = Sikkert 5 = Helt sikkert Entreprenørens point for området kundetilfredshed beregnes som gennemsnittet (med en decimal) af nøgletallet kundetilfredshed og nøgletallet kundeloyalitet (uanset om sidstnævnte vises i karakterbogen). 10
8 Bygge Rating for bestillerens tilfredshed og produkt For nøgletallene bestillerens tilfredshed og produkt anvendes skalaerne for de to nøgletal direkte i pointsystemet. Nøgletallet bestillerens tilfredshed er opgjort efter følgende karakterskala: 1 = Meget værre end gennemsnittet 2 = Værre end gennemsnittet 3 = Som gennemsnittet 4 = Bedre end gennemsnittet 5 = Meget bedre end gennemsnittet. Bygherrens point for området bestillerens tilfredshed beregnes med 1 decimal som gennemsnit af A) vurderingen af spørgsmål 7 og B) gennemsnittet af vurderingerne af spørgsmål 1-6. Nøgletallet produkt viser bestillerens samlede vurdering af byggeriet. Nøgletallet er opgjort efter følgende karakterskala: 1 = Meget værre end forventet 2 = Værre end forventet 3 = Som forventet 4 = Bedre end forventet 5 = Meget bedre end forventet. 11
Bilag I pointsystemet version 2011 var den afgrænsende værdi mellem 5 og 4 point for nøgletal om Tidsfrister og Mangler lig med laveste værdi 3. I pointsystemet for 2012 blev det besluttet at ændre grænseværdien, så muligheden for at opnå 5 point på disse områder blev forbedret. Grænsen mellem 4 og 5 point defineres således, at 90 % fraktilen af sagerne, der har nøgletal mellem den laveste værdi af nøgletallet og gennemsnittet, opnår 5 point. Det samme gælder sager med præcis den laveste værdi af nøgletallet: Grænseværdi 5 4 3 2 1 10% 90% Laveste værdi Gennemsnit Højeste værdi 3 Dvs. 100 % for nøgletallet Tidsfrister og 0 for nøgletallet om Mangler 12