Avstem prosjektleveranser mot testloggene
En leveranseoversikt må vise hva som faktisk er ferdig. Et filnavn med «endelig» er ikke dokumentasjon på at testen er gjennomført.
Oppdatert
Begynn med påstandene i rapporten
Marker utsagn som «pilot gjennomført», «metode validert» og «prototypen oppfyller kravene». For hvert utsagn må prosjektet kunne vise hva som ble gjort, hvilken versjon som ble brukt og hvilket resultat som støtter formuleringen.
Lag en kobling fra leveranse til underlag
| Rapportert leveranse | Underlag | Kontrollspørsmål |
|---|---|---|
| Prototype testet | Testprotokoll og versjonsreferanse | Var det samme prototype som omtales i rapporten? |
| Pilot hos kunde | Gjennomføringslogg og avklart tilbakemelding | Hvilke deler av opplegget ble faktisk gjennomført? |
| Metode sammenlignet | Data og analyse | Var betingelsene sammenlignbare? |
| Avvik håndtert | Beslutning og ny test | Er avviket lukket eller fortsatt åpent? |
Bruk dokumentreferanser som andre kan følge. Underlaget kan være skjermet; det må likevel finnes og ha riktig tilgang.
Eksempel: tre planlagte tester, to gyldige resultater
Et prosjekt planla tre testserier. To ble gjennomført som planlagt. Den tredje ble startet, men en sensorfeil gjorde dataene ubrukelige.
Rapporten bør ikke si at alle tre testserier er fullført uten forklaring. Den kan beskrive to gyldige serier, det avbrutte forsøket og konsekvensen for konklusjonen. Hvis ny test kreves, må ansvar, tid og finansiering avklares.
Kostnadene fra det avbrutte forsøket kan være faktiske kostnader. Hvordan de behandles i støttegrunnlaget, må vurderes etter programmet og vilkårene. Faglig gyldighet og økonomisk dokumentasjon er forskjellige kontroller.
Se etter versjonsbrudd
En prototype kan være forbedret etter at en rapportfigur ble laget. Et datasett kan være filtrert på en ny måte. En teknisk konklusjon kan derfor bygge på annet underlag enn rapporten viser.
Noter versjon for testobjekt, datasett og analyse. Hvis figuren er oppdatert, bør det gå fram hvilken analyse den bygger på. Ikke bruk resultatene fra en forbedret versjon som om de dokumenterte en tidligere pilot.
Avstem økonomien i en egen gjennomgang
Forskningsrådets krav til SkatteFUNN-prosjektregnskap gjelder kostnadsgrunnlaget i den ordningen. En faglig testlogg alene oppfyller ikke disse kravene. For andre programmer må riktig rapporteringsgrunnlag kontrolleres.
Les negativt forsøksresultat i rapporten og testplan for prototype. Ved sluttrapportering bør bedriften kunne forklare både hva som er levert og hva den fortsatt ikke kan konkludere om.