Bakteppet er debatten om DORA, om hvordan vi i praksis evaluerer forskning, og om tidsskrifter og hierarkier av disse har viktige funksjoner i forskningssystemet. Røttingen ser ut til å mene at vi kan klare oss godt uten tidsskriftshierarkiene slik vi kjenner dem i dag, men sier lite konkret om hvordan løse praktiske problemer knyttet til evaluering av forskning uten dagens system - spørsmål fremmet blant annet i Bård Harstads nylige kronikk.
Hvis Røttingens innlegg var ment som et svar på Harstads bønn om praktisk hjelp, så var det ikke spesielt nyttig. Vi trenger et fokus på hva man bør gjøre, ikke mer om hva som ikke er ideelt å gjøre.
Slik Thomas Hegghammer påpeker i en kronikk i Aftenposten, vil subjektive og skjønnsmessige vurderinger etter alt å dømme få en langt større plass i et nytt DORA-basert system, uten at det er klart hvordan man skal sikre mot negative slagsider ved subjektive og skjønnsmessige vurderinger.
Parallelt er det beklagelig at fagfellevurderingens rolle i å bidra til forskningskvalitet, og tidsskriftenes funksjon i å sile arbeider etter kvalitet og gi informasjonssignal i en verden der tusenvis av arbeider produseres hvert år, fullstendig underkommuniseres.
Så, hvordan vil Forskningsrådet konkretisere arbeidet med DORA-implementering, her med tanke på rollen som vitenskapelige publikasjoner og vurdering av disse nødvendigvis må spille? Er et system som sikrer at forskning er «god nok» virkelig alt som skal fremmes? Eller skal Forskningsrådet også forholde seg til det av forskningen som er vesentlig bedre eller endog fremragende?
Om informasjon om publiseringskanal skal oversees, hvordan ta høyde for at fageksperter er et knapt gode, og at ikke alle tidsskrift (eller evalueringskomiteer) kan ha de beste og mest relevante ekspertene? Og sist, men ikke minst, hvordan vil Røttingen og Forskningsrådet aktivt motvirke uønskede utilsiktede konsekvenser av økt vekt på subjektive vurderinger, som det er grunn til at bl.a. vil ramme kvinner og menn ulikt?
Disse spørsmålene er langt fra kun polemiske virkemidler - det er spørsmål som representerer reell bekymring om hvordan evaluering under et idealisert DORA rammeverk skal foregå i praks
