• Non ci sono risultati.

I gruppi di esperti della valutazione (main e sub panels)

4. L’applicazione dell’analisi bibliometrica e della peer review nell’ambito degli eserciz

4.1. Il Research Excellence Framework (REF)

4.1.1. I gruppi di esperti della valutazione (main e sub panels)

Il primo aspetto che emerge da quanto detto sopra, è che il REF prevede un processo di valutazione basato sul metodo della peer review eseguita da diversi gruppi di esperti9 (main

e sub panels), ognuno competente della sua area di valutazione, suddivisi in quattro main

panels e trentasei sub panels.

9 I gruppi di esperti sono nominati dai quattro Organismi di finanziamento del Regno Unito tramite un

processo di nomine aperto. In particolare, la nomina dei membri dei main e sub panels inizia innanzitutto con la nomina dei Presidenti dei main panels, che vengono nominati tramite un processo aperto di candidatura. I presidenti dei vari sub panels vengono nominati invece a seguito di una discussione tra gli enti di finanziamento del Regno Unito e i presidenti dei main panel, basata sulle candidature ricevute.

Per quanto riguarda la nomina dei membri dei sub panels, cosi come anche gli altri membri dei main panels e gli assessori, il REF individua una lista di organismi (associazioni accademiche e altri organismi (per esempio l’Association of Business Schools (ABS) e la British Academy of Management) con un interesse nella ricerca e nella nomina dei candidati per essere membri dei panel) incaricati di nominare i candidati per ricoprire il ruolo di membri dei panels. Dopo aver individuato una lista di candidati, la nomina da parte degli chief executives (o equivalente) dei 4 organismi di finanziamento del Regno Unito, avviene come specificato di seguito:

gli ulteriori membri del main panel vengono nominati, dopo aver considerato le nomine ricevute, a seguito dei consigli da parte dei Presidenti dei main panels;

i membri dei sub panels vengono nominati, sulla base dell’elenco delle nomine, a seguito dei consigli dei Presidenti dei sub panels e in discussione con i Presidenti dei main panels;

81

In particolare, i quattro main panles si occupano principalmente di impostare i criteri e i metodi di lavoro10 che i vari sub panels di loro competenza devono seguire durante il

processo di valutazione della qualità dei prodotti di ricerca. In aggiunta, i quattro main panels assistono e supervisionano i sub panels di loro competenza durante il processo di valutazione, al fine di assicurare l’aderenza ai criteri e i metodi stabiliti, e sono responsabili di firmare i risultati derivanti dal processo di valutazione, basati sul lavoro e sui pareri suggeriti dai vari sub panels.

I sub panels invece, oltre a collaborare con i rispettivi main panels nella definizione dei criteri e i metodi di lavoro da applicare nel processo di valutazione, si occupano principalmente della valutazione dei prodotti di ricerca inviati dalle Istituzioni facenti parte dell’area di valutazione di loro competenza. Dunque, essi rappresentano sostanzialmente il gruppo di esperti responsabili del processo di valutazione della qualità della ricerca.

In merito alla loro composizione11, tali gruppi di esperti (main e sub panles) sono composti

sia da soggetti dotati di esperienza nel condurre, gestire e valutare la ricerca di alta qualità, sia da soggetti esperti in grado di valutare la dimensione impatto della ricerca al di fuori dell’accademia. Nello specifico, oltre agli accademici attivi in una determinata area

10 A tal fine, i main panels collaborano con i sub panels di loro competenza e si consultano con la comunità

accademica di riferimento e con altri stakeholder, appartenenti al settore pubblico, privato o terzo settore beneficiari della ricerca, in merito alla definizione dei criteri relativi alla valutazione della dimensione impatto della ricerca al di fuori dell’accademia.

Tuttavia, nel caso in cui una disciplina presenti delle caratteristiche peculiari che la differenziano rispetto alle altre presenti all’interno del main panel, il REF prevede che siano i sub panels stessi a definire dei criteri e metodi di lavoro specifici per quella disciplina, da sottoporre poi ad approvazione da parte dei main panel di riferimento.

11 Nella scelta dei membri che compongono i diversi panels, il REF fornisce alcune indicazioni da seguire. Per

esempio, per quanto riguarda la composizione dei main panels, il REF richiede la presenza anche di alcuni membri internazionali al fine di garantire la scelta di criteri di valutazione che rispettino gli standard riconosciuti a livello internazionale. Mentre, per quanto riguarda i sub panels, il REF fornisce una serie di criteri da seguire nel processo di selezione e nomina dei membri, come per esempio: la presenza di soggetti esperti in tutti i principali campi di ricerca all’interno dell’area di valutazione specifica (in modo da garantire un’adeguata copertura di tutte le discipline all’interno delle singole aree); la scelta dei membri sulla base delle loro personali esperienze, competenze e conoscenze e non perché rappresentanti di determinati gruppi o interessi; inoltre, il REF raccomanda un appropriato grado di continuità dal precedente esercizio di valutazione (RAE) nella scelta dei membri dei sub panels.

82

scientifica, e quindi dotati delle conoscenze necessarie per poter giudicare la qualità (intrinseca) di un prodotto di ricerca, in termini di originalità, rilevanza e rigore metodologico, tali gruppi sono composti anche dai cosiddetti utenti della ricerca (research

users), ovvero quei soggetti esterni al mondo accademico che operano nel settore pubblico,

privato o nel terzo settore e che utilizzano la ricerca universitaria nelle loro organizzazioni o nelle attività professionali (per esempio collaborando con i ricercatori).

La presenza di soggetti esterni al mondo accademico nei gruppi di esperti della valutazione evidenzia l’orientamento del REF a valutare, oltre alla qualità intrinseca dei prodotti di ricerca, anche la dimensione impatto al di fuori dell’accademia che, come discusso di seguito, rappresenta uno dei punti chiavi del REF. Difatti, i cosiddetti utenti della ricerca svolgono un ruolo chiave sia nella fase di definizione dei criteri alla base della valutazione della dimensione “impatto” della ricerca all’esterno dell’ambito accademico, sia durante il processo di valutazione di tale dimensione. In questo modo, di conseguenza, sono proprio i cosiddetti utenti della ricerca (per esempio i manager, i consulenti ecc. nelle discipline economico-aziendali) a giudicare l’”utilità” di una ricerca, e quindi a catturare la dimensione impatto della ricerca all’esterno dell’accademia.

In aggiunta, il REF prevede la possibilità di nominare ulteriori esperti (assessors) all’interno dei sub panels durante il processo di valutazione al fine di ampliare le loro competenze e conoscenze ed assicurare, di conseguenza, una valutazione accurata e dettagliata dei prodotti di ricerca oggetto della valutazione (per esempio, nella valutazione della ricerca interdisciplinare).