Methods for Measuring the Value of R&D Projects in Nordic TSOs

Abstract

For R&D managers in TSOs there is a need for an objective method as part of the innovation process, that aid in assessment of project proposals, and evaluates ongoing and finalized projects. As innovation is the key to growth of output and productivity, Statnett and Fingrid initiated this thesis with a goal to find an objective method to select the correct project proposals.

As of today, the selection process is done by the R&D managers themselves, which increases their work load, as the TSOs receives more than 100 project proposals every year. Selection of projects to implement requires the knowledge and experience of R&D managers to be completed successfully. To lessen their workload there is a need for a simple objective method that captures vital elements of project proposals, so less experienced personnel can aid the managers in the selection process.

The literature study conducted was two parted. Firstly, a literature review was performed to inventory existing of project proposal assessment methods. This study showed that there exists little research on the subject. A new literature study was initiated, to find the means of measurement necessary to design a simple and objective method for assessment of project proposals. This literature study searched for literature about portfolio management, decision making methods, success factors of start-ups, cost benefit analysis, project management and earned value management.

The literature study lead to a hypothesis for a method that could capture the essential areas in project selection. Through interviews and meetings with R&D directors in Statnett and Fingrid, this method was developed to the method shown in this thesis.

The method created consists of two parts; innovation assessment and ability assessment. For the innovation assessment two score are used, the innovation potential and opportunity potential. Innovation potential quantifies the aspects of innovation of the project, while opportunity potential quantifies the economic aspects of the project. This allows for projects to be placed in a matrix, and allows the user to see the projects performance.

The second part of the method is ability assessment. This part covers the formal go or no go factors of a project. The go or no go factors of a project is graded on a color scale based on an indicators performance. If an indicator is given red as a score, a project should not be undertaken. This is to give the user warning lights, so that if a project scores great on innovation potential but lacks means of commercialization or involvement of end-users it should advise against implementing the project. This method for project assessment can also be used for evaluation of ongoing and finalized projects, the indicators needed to conduct these assessments are proposed in this thesis, but require further work before being implemented.

The method created has been tested on two project proposals, and has yielded the same results as when the projects were assessed by R&D managers. The conclusion made is that is possible to create a simple and efficient method to select project proposals.

Sammendrag FoU-direktører i TSOer har behov for en objektiv metode i innovasjonsprosessen som hjelper til med vurdering av prosjektforslag, og evaluerer pågående og ferdigstilte prosjekter. Siden innovasjon er nøkkelen til vekst av produksjon og produktivitet har Statnett og Fingrid startet denne masteroppgaven med mål om å finne en objektiv metode til å velge de beste prosjektforslagene. I dag blir utvelgelsesprosessen gjort av FoU-direktørene, noe som øker deres arbeidsbelastning da TSOene mottar over 100 prosjektforslag hvert år. Utvelgelsen av prosjekter til implementering krever FoU-direktørenes kunnskap og ekspertise for å bli gjennomført korrekt. For å lette deres arbeidsbelastning er det behov for en enkel objektiv metode som fanger vitale elementer i prosjektforslag, slik at ansatte med mindre erfaring kan hjelpe til i prosessen. Den gjennomførte litteraturstudien var todelt. Den første delen bestod av en studie for å finne ut hva som finnes av prosjektutvelgelses metoder. Denne studien viste at det finnes lite forskning innenfor feltet. Den andre ble gjennomført for å finne måleindikatorer nødvendig for å lage en enkel, objektiv metode for evaluering av prosjektforslag. I denne studien ble det undersøkt litteratur innenfor porteføljestyring, beslutnings-teorier, suksess kriterier for oppstarts bedrifter, kost-nytte analyse, prosjekt ledelse og EVA styring. Litteraturstudien ledet frem en hypotese for en metode som kunne fange essensielle faktorer i prosjektforslag. Gjennom intervjuer og møter med FoU-direktørene i Statnett og Fingrid, har denne metoden utviklet seg til metoden vist i oppgaven. Den utviklede metoden er todelt; innovation assessment og ability assessment. For innovation assessment blir indikatorer gitt en poengsum basert på innovasjons potensiale og mulighets potensiale. Innovasjon potensiale kvantifiserer innovasjonsaspekter ved et prosjekt, mens mulighets potensiale kvantifiserer de økonomiske aspektene. På denne måten kan prosjekter bli plassert i en matrise som som gjør det mulig å se et prosjekts ytelse. Den andre delen av metoden kalles ability assessment. Denne delen tar for seg formelle kjør eller ikke kjør faktorer ved et prosjekt. Disse faktorene blir gitt en fargekarakter med grunnlag i deres ytelse. Dersom en av faktorene får karakteren rød skal ikke prosjektet initieres. Dette er for å gi varsellamper slik at dersom et prosjekt scorer høyt på innovasjonspotensiale, men mangler planer for kommersialisering eller deltakende slutt-brukere, skal dette tale imot igangsettelse av prosjektet. Metoden for prosjektvurdering kan også benyttes for å evaluere pågående og ferdigstilte prosjekter. Oppgaven foreslår indikatorer for disse vurderingene, men de trenger mer arbeid før de blir implementert. Den opprettede metoden har blitt testet på to prosjektforslag, og har gitt liknende resultater som når metodene ble vurdert av FoU-direktører. Konklusjonen er at det er mulig a lage en simpel og effektiv metode for å velge prosjekter