Valutazione della Qualità della Ricerca (VQR) 2011-2014 - Commissione Ricerca Scientifica del S.A.

Pagina creata da Stefania Vitale
 
CONTINUA A LEGGERE
Valutazione della Qualità della Ricerca (VQR) 2011-2014 - Commissione Ricerca Scientifica del S.A.
Valutazione della Qualità della
  Ricerca (VQR) 2011-2014
           Commissione
     Ricerca Scientifica del S.A.

           16 settembre 2015

                Versione 1.2        1
Valutazione della Qualità della Ricerca (VQR) 2011-2014 - Commissione Ricerca Scientifica del S.A.
Introduzione
• Il 30 luglio 2015 il Consiglio direttivo di Anvur
  ha approvato la versione definitiva* del bando
  di partecipazione all’esercizio VQR 2011-2014
• La valutazione è articolata per Aree, Settori
  Concorsuali e Settori scientifico-disciplinari
• I risultati della valutazione saranno utilizzati ai
  fini dell’allocazione del FFO

  *in data 3 settembre è stato pubblicato un aggiornamento che modifica
  l’ultimo paragrafo della sezione 2.3 del bando

                                                                          2
I soggetti valutati
• Istituzioni
   • Università statali
   • Università non statali legalmente
     riconosciute
   • Enti di ricerca pubblici vigilati dal MIUR
   • Altri soggetti pubblici e privati

• Dipartimenti universitari (e articolazioni
  assimilate)
                                                  3
Aree di ricerca VQR

   Area          Descrizione        Area                 Descrizione
          Scienze matematiche e              Ingegneria industriale e
Area 1                            Area 9
          informatiche                       dell’informazione
Area 2    Scienze fisiche
                                             Scienze dell’antichità, filologico-
Area 3    Scienze chimiche        Area 10
                                             letterarie e storico-artistiche
Area 4    Scienze della terra                Scienze storiche, filosofiche e
                                  Area 11a
Area 5    Scienze biologiche                 pedagogiche
Area 6    Scienze mediche         Area 11b Scienze psicologiche
Area 7    Scienze agrarie e       Area 12    Scienze giuridiche
Area 8a   veterinarie
          Architettura            Area 13    Scienze economiche e statistiche
Area 8b   Ingegneria civile       Area 14    Scienze politiche e sociali

                                                                                   4
Addetti alla ricerca
          (chi deve presentare i prodotti)

• Ricercatori (a tempo indeterminato e
  determinato, di tipo a e b)
• Assistenti di ruolo a esaurimento
• Professori associati
• Professori ordinari e straordinari

che risultano afferenti alla struttura alla data
del 1 novembre 2015
                                                   5
Open Researcher and Contributor ID

“Tutti gli addetti proposti dalle Istituzioni
per l’esercizio di valutazione dovranno
possedere l’identificativo ORCID che dovrà
essere indicato nella procedura di
accreditamento”

                                                6
Open Researcher and Contributor ID

“Tutti gli addetti proposti dalle Istituzioni
per l’esercizio di valutazione dovranno
possedere l’identificativo ORCID che dovrà
essere indicato nella procedura di
accreditamento”

                                                7
I prodotti oggetto di valutazione
•   Monografia scientifica
•   Contributo in rivista
•   Contributo in volume
•   Altri tipi di prodotti
•   Brevetti

    pubblicati per la prima volta nel periodo
    2011- 2014
                                                8
Caso di doppia pubblicazione
“Sono presi in considerazione per la valutazione dei GEV i prodotti di
ricerca di seguito descritti (prodotti, nel seguito) esclusivamente se
pubblicati per la prima volta nel periodo 2011- 2014. Nel caso di
doppia pubblicazione, in formato elettronico prima e cartaceo poi,
vale la data di prima pubblicazione (ad esempio, un articolo
pubblicato in formato elettronico nel 2014 può essere presentato alla
valutazione anche se il fascicolo della rivista che lo contiene ha una
data di pubblicazione posteriore al 31 dicembre 2014). Fanno
eccezione gli articoli pubblicati in formato elettronico nel 2010 e
contenuti in un fascicolo di rivista pubblicato nel quadriennio
2011-2014, che potranno essere sottoposti alla valutazione nella VQR
2011-2014.”

 modifica ultimo paragrafo della sezione 2.3 del bando del 3 settembre 2015

                                                                              9
Monografia scientifica
                 e prodotti assimilabili
• Monografia di ricerca
• Raccolta di saggi (esclusi quelli pubblicati prima del 2011)
• Concordanza
• Commento scientifico
• Bibliografia critica o ragionata
• Edizione critica di testi
• Edizione critica di scavo
• Pubblicazione di fonti inedite
• Manuali critici non meramente didattici
• Grammatiche e dizionari scientifici
• Traduzione di libro con approccio critico

                                                                 10
Contributo in rivista
•   Articolo scientifico
•   Review essay
•   Lettera (escluse lettere all’editore)
•   Contributo a forum su invito
•   Nota a sentenza
•   Traduzione in rivista (solo per alcuni SSD)

                                                  11
Contributo in volume
• Capitolo o saggio
• Contributo in atti di conferenza con processo di revisione
  peer
• Prefazione/Postfazione con carattere di saggio
• Curatela con saggio introduttivo
• Catalogo con saggio introduttivo
• Voce critica di dizionario o enciclopedia
• Traduzione in volume (solo per alcuni SSD)
• Schede di catalogo, repertorio o corpora

                                                           12
Altri tipi di prodotti
con data di produzione identificabile
  • Composizioni                              • Mostre
  • Disegni                                   • Prototipi d’arte e
                                                relativi progetti
  • Progetti architettonici
                                              • Banche dati e
  • Performance
                                                software
  • Esposizioni
                                              • Carte tematiche

più altre eventuali tipologie incluse nei criteri formulati dai Gruppi Esperti Valutatori

                                                                                     13
Prodotti non valutabili
•   Manuali e testi meramente didattici
•   Recensione
•   Brevi voci di enciclopedia o dizionario
•   Brevi note a sentenza
•   Brevi schede di catalogo

                                              14
Numero prodotti richiesti
                   Ruolo                             Restrizione           N. prodotti
Professore ordinario o straordinario                                           2
Professore associato Assistente universitario                                  2
                                                se in servizio da prima        2
                                                del 1/1/2012
                                                se data presa servizio è
Ricercatore universitario                       tra 1/1/2012 e                 1
                                                31/12/2013
                                                se data presa servizio è
                                                                               0
                                                successiva al 1/1/2014
Professore ordinario o straordinario
incaricato di ricerca presso ente di ricerca                                   +1
per almeno 2 anni nel periodo 2011/2014
Professore associato incaricato di ricerca
presso ente di ricerca per almeno 2 anni nel                                   +1
periodo 2011/2014
Ricercatore incaricato di ricerca presso ente
di ricerca per almeno 2 anni nel periodo                                       +1
2011/2014

                                                                                         15
Affiliazione
               nel periodo 2011-2014
• rapporto di collaborazione scientifica e
  finanziamento o cofinanziamento di una ricerca da
  parte dell’ente della durata di due anni, anche non
  continuativi, e ancora attivo alla data del 1
  novembre 2015.
• il prodotto aggiuntivo attribuito all’ente di ricerca
  deve contenere in maniera esplicita l’affiliazione
  dell’addetto ovvero un ringraziamento esplicito
  per il finanziamento o cofinanziamento della
  ricerca

                                                          16
Valutazione monografie
Le monografie scientifiche possono contare
come due prodotti se così deciso
dall’addetto e quindi la loro valutazione
valere doppio.

                                             17
Selezione dei prodotti
Per ognuno degli addetti l’Istituzione
seleziona, da un insieme suggerito da ciascun
addetto, il numero di prodotti richiesti.

Pubblicazione delle Linee guida per le
modalità di trasmissione dei prodotti di
ricerca 15 ottobre 2015
Esenzione facoltativa
• Periodi di congedo estranei all’attività di
  ricerca (maternità, congedo parentale,
  malattia etc)
  • il numero di prodotti è ridotto di 1 per congedi di durata
    complessiva compresa fra 2 e 3 anni
  • per congedi superiori ai 3 anni si è esentati dalla VQR
  • nascita di un figlio (madre): riduzione di 1 prodotto
  • nascita di più figli (madre): esenzione dalla VQR

                                                                 19
Esenzione facoltativa
                   per cariche direttive
                                                          N. prodotti da
Carica direttiva
                                                           presentare
Rettore                                                         0
Direttore di dipartimento universitario e Preside (pre-
Legge 240) o Presidente di Scuola (post-Legge 240) di           1
università
Presidente e Direttore di ente di ricerca                       1
Direttore di Dipartimento o articolazione interna
                                                                2
assimilata degli enti di ricerca

Membro universitario di commissione di
abilitazione scientifica nazionale per il biennio               1
2012-2013

                                                                           20
Criteri di valutazione
• I GEV (Gruppi Esperti Valutatori) adottano due
  criteri di valutazione:
    -   valutazione diretta (citazioni del prodotto e IF della
        rivista)
    -   peer-review
•   Data pubblicazione criteri di valutazione dei
    prodotti 15 novembre 2015

Almeno la metà più uno dei prodotti complessivi di tutte
le aree sarà valutata utilizzando la peer-review
                                                                 21
Livelli di qualità dei prodotti
•   Eccellente (peso = 1)
•   Elevato (peso = 0.7)
•   Discreto (peso = 0.4)
•   Accettabile (peso = 0.1)
•   Limitato (peso = 0)

• Non valutabile (peso = 0)
    tipologie escluse, allegati inadeguati, anno di pubblicazione
    non valido, pubblicazioni mancanti

                                                                    22
Indicatori di qualità
                 prodotti di ricerca
• IRAS1 (peso = 0.75) rapporto tra ∑ delle valutazioni
  prodotti dell’Istituzione nell’Area e valutazione
  complessiva dell’Area
• IRAS2 (peso = 0.20) IRAS1 riferito agli addetti
  reclutati o avanzati di ruolo nel periodo VQR
• R rapporto tra voto medio prodotti dell’Istituzione
  nell’Area e voto medio complessivo dell’Area
• X rapporto frazione prodotti eccellenti
  dell’Istituzione nell’Area e frazione prodotti
  eccellenti dell’Area
                                                    23
Indicatori di qualità
                ambiente di ricerca
• IRAS3 (Peso = 0.01) ∑ finanziamenti in bandi
  competitivi come % del valore complessivo di Area
• IRAS4 (Peso = 0.01) N. studenti alta formazione
  come % del valore complessivo di Area
• IRAS5 (Indicatore di miglioramento, Peso = 0.03),
  posizione dell’Istituzione nella distribuzione
  dell’indicatore R

                                                      24
Risultati della valutazione
• Il profilo di qualità complessivo è il risultato
  della combinazione di tre profili di qualità:
   1. profilo di qualità espresso come distribuzione nei
     5 livelli dei prodotti attesi (Peso 75%)
   2. profilo di qualità espresso come distribuzione nei
     5 livelli dei prodotti attesi riferito agli addetti
     reclutati o avanzati di ruolo nel periodo VQR
     (Peso 20%)
   3. profilo di competitività dell’ambiente di ricerca
     (Peso 5%)
                                                          25
Risultati VQR
• ripartizione di almeno 3/5 della quota
  premiale del FFO tra le università
• ripartizione di 1/5 della quota premiale del
  FFO sulla base della valutazione delle politiche
  di reclutamento
• possibile utilizzo per definire la qualità
  scientifica dei collegi di dottorato
  nell’accreditamento e valutazione dei corsi di
  dottorato

                                                 26
Cronoprogramma
Addetti   identificazione                                 selezione
  alla    ORCID in                                        dei
ricerca   I.R.I.S                                         prodotti

                                                                                    verifica figure
                                                                                    in formazione
                                                                                    e trasmissione
                                          accreditament               trasmission
Ateneo                                    o e mobilità                e prodotti
                                                                                    info entrate di
                                                                                    cassa per
                                                                                    Bandi
                                                                                    competitivi

                                                                                                      valutazione
                            definizione                                                                             rapporto
 GEV                        criteri
                                                                                                      peer e
                                                                                                                    finale
                                                                                                      diretta

                16             15               30           xx          31               29              10            30
             ottobre        novembre         novembre     dicembre     gennaio         febbraio       settembre     settembre
                                      2015                                                     2016

                              Rapporto finale ANVUR: 31 ottobre 2016

                                                                                                                           27
Scadenze interne Ateneo

                           Scadenza       Scadenza
                        interna Ateneo   bando Anvur

    Certificazione
    elenco addetti            ?          30 novembre 2015
  (Accreditamento)

Trasmissione prodotti         ?          31 gennaio 2016

                                                            28
Fasi
•   ORCID (16 ottobre 2015)
        Alcuni problemi tecnici da risolvere
        Penalizzazione per chi non adempie?
•   Accreditamento (15 settembre [?] - 30 novembre 2015)
        Questione esenzioni: Dipartimenti?
        Affiliazioni: chi le accredita?
        Criteri GEV (15 novembre)
•   Selezione prodotti (1 novembre - 31 gennaio 2016 ! 15 febbraio?)
        Dimensione del set iniziale?
        Coautoraggio – Negoziazione intra-, inter-dipartimentale
        Criteri GEV
        Monografie
        Esenzioni (ancora!)
        Problema prodotti “orfani”
        Inserimento: completamento metadati? 2014? (SUA-RD – Autovalutazione)
        Blocco prodotti in IRIS?
•   Ruolo dei Dipartimenti. Anticipare i processi. Sedute ad hoc Consigli?

                                                                                29
Puoi anche leggere