Valutazione della Qualità della Ricerca VQR 2011-2014 · VQR 2011-2014 08a - Architettura 08b ......
Transcript of Valutazione della Qualità della Ricerca VQR 2011-2014 · VQR 2011-2014 08a - Architettura 08b ......
DINCI Valutazione della Qualità della Ricerca
VQR 2011-2014
08a - Architettura
08b - Ingegneria Civile
DEFINIZIONE DEI CRITERI DI VALUTAZIONE DEI PRODOTTI
A cura diprof. Mauro Francini - Coord.
Ing. Maria Francesca ViapianaIng. Barbara Corasaniti
I PRODOTTI• Sono presi in considerazione per la valutazione dei GEV i prodotti di
ricerca esclusivamente se pubblicati per la prima volta nel periodo2011-2014.Nel caso di doppia pubblicazione, in formato elettronico prima ecartaceo poi, vale la data di prima pubblicazione.
• Fanno eccezione gli articoli pubblicati in formato elettronico nel 2010 econtenuti in un fascicolo di rivista pubblicato nel quadriennio 2011-2014, che potranno essere sottoposti alla valutazione nella VQR 2011-2014.
• Per il singolo Ateneo, ogni prodotto è associato in maniera univoca a unaddetto presente come autore o coautore dello stesso
• Nel caso di prodotti con autore singolo o con coautori appartenenti aIstituzioni diverse, ogni addetto può limitarsi a inserire nella lista ilnumero di prodotti strettamente necessario a soddisfare i requisiti suiprodotti attesi
I PRODOTTI• I prodotti da valutare sono definiti dall’art. 2.3 del bando ANVUR VQR 2011-2014.• Di seguito è riportato l’elenco dei prodotti pertinenti il GEV08a descritti
dettagliatamente nell’Allegato 1 ai Criteri di Valutazione:‐ MONOGRAFIA SCIENTIFICA E PRODOTTI ASSIMILATI‐ CONTRIBUTO IN RIVISTA‐ CONTRIBUTO IN VOLUME‐ ALTRI TIPI DI PRODOTTO‐ BREVETTI CONCESSI NEL QUADRIENNIO DELLA VQR (1/1/2011 – 31/12/2014)
• Le monografie scientifiche e i prodotti a esse assimilati possono contare come dueprodotti se così deciso dall’autore cui il prodotto è associato, e la loro valutazionecontribuisce in questo caso con valore doppio alla valutazione finale dell’Ateneo.
• Ai prodotti bibliometrici che non presentano alcuna citazione è preclusal’attribuzione al livello Eccellente.
• Saranno soggetti a peer review i prodotti non bibliometrici (monografia scientifica,contributo in volume, altri tipi di prodotti a seconda dei casi)
• I prodotti pubblicati su riviste indicizzate nelle basi di dati citazionali ISI Wos eScopus sono suscettibili di valutazione bibliometrica.
I PRODOTTI
• Nel documento sui criteri di valutazione dei prodotti del GEV08b sono riportate le tipologie di prodotti non valutabili perché non pertinenti:
(Elenco non esaustivo)1. Concordanza; Bibliografia Critica o ragionata; Edizione critica di testi;2. Nota a sentenza; Traduzione in rivista3. Prefazione/Postfazione con carattere di saggio; Curatela di volume con
saggio introduttivo; Catalogo con saggio introduttivo4. Composizioni; Disegni; Progetti architettonici; Performance; Esposizioni;
Mostre5. Etc…
• Il GEV08b preclude ad alcune tipologie di prodotti di accedere ad alcune classi divalutazione:
‐ Gli articoli scientifici in atti di conferenza internazionale sono esclusi di defaultdalla classe Eccellente
‐ Gli articoli scientifici in atti di conferenza nazionale sono esclusi di default dalleclassi Eccellente e Elevata.
NUMERO DI PRODOTTI DA PRESENTARE
• Per ognuno degli addetti, l’Università di appartenenza seleziona, da un insieme suggerito da ciascun addetto, il seguente numero di prodotti
ESENZIONI• Nel caso di periodi di congedo, di durata complessiva, anche non
continuativa, compresa fra 2 e 3 anni, il numero di prodotti da presentare èridotto di 1 unità rispetto al valore indicato.
• Per congedi superiori ai 3 anni si è esentati dall’esercizio di valutazione
• Nel caso di maternità, la nascita di un figlio nel quadriennio riduce per lamadre il numero di prodotti di un’unità, e la nascita di più di un figlio esentala madre dall’esercizio di valutazione.
• L’esenzione parziale o totale è facoltativa. Il calcolo dei prodotti attesi perciascun Ateneo sarà effettuato dopo che sarà resa esplicita la scelta inrelazione alla facoltà di fruire dell’esenzione
• Per coloro che hanno ricoperto cariche direttive nelle Istituzioni per almenodue anni anche non continuativi nel quadriennio valgono le seguentiriduzioni: Direttore di dipartimento universitario: 1 prodotto da presentare
MODALITÀ DI PRESENTAZIONEOgni prodotto è trasmesso dalle Istituzioni per via telematica in formato pdf ai GEV tramite laprocedura CINECA, accompagnato da una scheda descrittiva redatta in lingua italiana o inglese checontiene le seguenti informazioni
1. Metadati bibliografici del prodotto (inclusi gli identificatori ISI WoS e Scopus).2. Identificazione dell’addetto attraverso identificativo ORCID.3. Identificazione dei coautori attraverso identificativo ORCID.
4. Identificazione dell’area, del settore concorsuale, del settore scientifico disciplinare, e delcodice ERC di riferimento per la valutazione; per gli articoli indicizzati ISI WoS e Scopus,inserimento della Subject Category di ISI WoS e della All Science Journals Classification (ASJC)di Scopus suggerite per la valutazione bibliometrica.
5. Indicazione della lingua del prodotto.6. Abstract del prodotto, se è già contenuto nel prodotto pubblicato, sarà sufficiente estrarlo e
“caricarlo” nella scheda. Se il prodotto pubblicato non contiene l’abstract, esso dovrà esserepredisposto dall’addetto cui il prodotto è associato.
7. L’eventuale segnalazione, che il prodotto proviene da attività di ricerca in aree emergenti alivello internazionale o in aree di forte specializzazione o a carattere interdisciplinare, per lequali si suggerisce l’adozione preferenziale della metodologia di peer review in ragione dellaminore presenza di tali aree nelle basi di dati bibliometriche.
8. Una descrizione dell’importanza del prodotto nel contesto scientifico internazionale edell'impatto che il prodotto ha avuto in aggiunta a quanto determinabile da una mera analisibibliometrica. In tale sezione andrà riportata qualunque informazione si ritenga utile allavalorizzazione del prodotto (quali ad esempio premi ricevuti e recensioni).
MODALITÀ DI PRESENTAZIONE
• In casi particolari e motivati di indisponibilità del prodotto in formatoelettronico, è ammesso l’invio in formato cartaceo previa comunicazione erelativo consenso dei GEV
• Nel caso in cui la copia pdf fornita dall’editore non sia resa disponibile a duesettimane dalla data di scadenza per la sottomissione dei prodotti, leIstituzioni sono autorizzate a inserire nell’interfaccia CINECA una copia pdfrealizzata a loro cura. Tale copia sarà utilizzata a esclusivo scopo di valutazionecon esplicito divieto di diffusione
Criteri di valutazione dei prodotti di ricerca delle Aree
08a – Architettura
08b – Ingegneria Civile
I SETTORI SCIENTIFICO DISCIPLINARI CON ADDETTI
08a – Architettura
ORGANIZZAZIONE DEL GEV08a
08a – ArchitetturaGEV08a AREA ASSEGNATA RUOLO
Anna Maria Cristina Bianchetti ICAR 21 Coordinatore
Alessandra Capuano ICAR 14 Membro
Michela Cigola ICAR 17 Membro
Riccardo Dalla Negra ICAR 19 Membro
Maurizio D’Amato ICAR 22 Membro
Corrado Diamantini ICAR 20 Membro
Riccardo Florio ICAR 17 Membro
Giovanna Franco ICAR 12 Membro
Tullia Iori ICAR 10 Membro
Carlo Olmo ICAR 18 Membro
Susanna Pasquali ICAR 18 Membro
Teresa Stoppani ICAR 14 Membro
Maria Cristina Tonelli ICAR 13 Membro
Maria Chiara Torricelli ICAR 12 Membro
I SETTORI SCIENTIFICO DISCIPLINARI CON ADDETTI
08b – Ingegneria CivileSettore ERC (ERC) di riferimento PR8_3
Civil engineering, architecture, maritime/hydraulic engineering, geotechnics, waste treatment
ORGANIZZAZIONE DEL GEV08b
08b – Ingegneria Civile
GEV08b AREA ASSEGNATA RUOLO
ARMANINI ARONNE ICAR/01 Coordinatore
COLOMBINI MARCO ENRICO ICAR/01 Membro
BARBARO GIUSEPPE ICAR/02 Membro
MARSELLA MARIA ANTONIETTA ICAR/06 Membro
FOTI SEBASTIANO ICAR/07 Membro
CUENOT BENEDICTE ICAR/07 Membro
AURICCHIO FERDINANDO ICAR/08 Membro
CAILLETAUD GEORGES ICAR/08 Membro
SPACONE ENRICO ICAR/09 Membro
L’analisi bibliometrica• I prodotti di ricerca suscettibili di valutazione bibliometrica sono i prodotti
pubblicati su riviste indicizzate nelle basi di dati citazionali ISI WoS e Scopus.• Il 10% degli articoli per i quali la classificazione finale sarà fatta utilizzando
l’algoritmo bibliometrico verrà inviato anche alla peer review, al fine di valutare ilgrado di correlazione tra i due metodi di valutazione
• Il GEV utilizzerà le basi di dati Web of Science di Thomson Reuters (WoS) e Scopusdi Elsevier (Scopus) secondo le indicazioni fornite dall’autore/Ateneo nella schedaprodotto.
• Nel calcolo dell’indicatore bibliometrico il GEV utilizzerà le citazioni aggiornate al29 Febbraio 2016.
• Autocitazioni:‐ per l’Area 08a non saranno escluse, ma saranno esaminati con particolare
attenzione gli articoli con un numero di autocitazioni superiore al 50% deltotale delle citazioni
‐ per l’Area 08b Il GEV 08b eseguirà la valutazione di ogni singolo prodotto siacon che senza le autocitazioni e valuterà la classe finale attraverso unainformed peer review.
Categoria di riferimento (Subject Category)1. Il primo passo per la valutazione di un dato l’articolo è l’individuazione
della categoria di riferimento nota come Subject Category (SC) in WoSe All Science Journal Classification (ASJC) in Scopus . Una rivista puòappartenere ad una o più SC, e l’indicazione di quale debba essereimpiegata per la valutazione del prodotto in essa pubblicato dovrà essereeffettuata dall’autore/Ateneo che ha proposto l’articolo. Tale indicazionenon è vincolante e può essere modificata da parte del GEV
L’attribuzione dell’articolo a una delle 5 classi previste dal bando è effettuata inseguito a una calibrazione delle soglie nella Subject Category (SC) individuatanello specifico anno.
Categoria di riferimento (Subject Category)• Per l’Area 08a
Una categoria multidisciplinare è presente sia in WoS (MultidisciplinarySciences) sia in Scopus(Multidisciplinary) e include riviste, quali Nature,Science, ecc., caratterizzate da una pluralità di argomenti scientifici. Gliarticoli pubblicati su una rivista che compare solo in tale categoria sarannoriassegnati ad un’altra SC sulla base
‐ delle citazioni contenute nell’articolo e
‐ delle citazioni fatte all’articolo.
In particolare, per ognuna delle riviste citate/citanti si individuerà una (opiù) SC di appartenenza e verrà poi scelta la SC finale con una regola didecisione maggioritaria. In questo modo la pubblicazione sarà confrontatacon pubblicazioni della stessa area tematica e/o disciplinare.Nell’assegnazione alla nuova SC, l’articolo porterà con sé il JM della rivista eil numero di citazioni ricevute, senza modificare le distribuzioni della SC didestinazione
Categoria di riferimento (Subject Category)• Per l’Area 08b
Il GEV osserva che alcune categorie sono molto eterogenee e contengonoriviste che interessano i Settori Scientifico Disciplinari del GEV in manieralimitata, trattando per lo più argomenti relativi ad altre Aree Scientifiche, eche in alcuni casi possono alterare in maniera significativa il processo dicalibrazione.Rientrano in questa categoria le riviste che vedono soddisfatte le seguentiparticolarità:
‐ Da sole ricoprono una percentuale troppo elevata (indicativamente >15%) dei prodotti della SC/ASJC.
‐ Di questi prodotti una percentuale troppo elevata (indicativamente >40%) ricadono nella fascia di Eccellenza.
‐ Sono inserite anche in altre categorie nelle quali non presentano leanomalie rispetto ai due punti di cui sopra.
In questi casi il GEV08b acquisirà anche la valutazione fatta escludendo dalcampione di riferimento le riviste così identificate e deciderà a qualecampione fare riferimento con un processo di IPR.
Classificazione del prodotto
Vista la scarsa consistenza numerica relativa del dato citazionale per articolipubblicati nel 2014, i GEV08a e GEV08b hanno deciso di sottoporre ainformed peer review tutti gli articoli pubblicati nel 2014 la cuiclassificazione sulla base dell’algoritmo proposto non determini unavalutazione finale Eccellente.
A seconda dell’anno di riferimento, nella valutazione finale dell’articolo avrà unpeso maggiore il Numero di Citazioni dell’articolo o l’Impatto della rivista, talecondizione dipende dalle pendenze delle rette di soglia che attualmente sonoquelle indicate in tabella
CRITERI PER LA SCELTA DEGLI ARTICOLI
Pendenza A delle rette di soglia Incidenza sulla valutazione
Anno Area 08a Area 08b
2011 - 0,6 - 0,7 Num. Citazioni articolo
2012 - 0,9 - 0,9 Num. Citazioni articolo
2013 - 1,5 - 1,5 Impatto della rivista
2014 - 2,0 - 2,0 Impatto della rivista
CRITERI PER LA SCELTA DEGLI ARTICOLI
Per gli anni 2011 e 2012, la pendenza delle rette di soglia è in valore assoluto < 1,perciò dovrebbero essere privilegiati articoli con un numero di citazioni piùelevato
Per gli anni 2013 e 2014, la pendenza delle rette di soglia è in valore assoluto > 1,sarebbe opportuno proporre articoli con un indicatore di impatto (JM) più elevatoindicando la base di dati preferita (WoS o Scopus) e un solo indicatore di impatto,fra i due ad essa associati, che sarà utilizzato per la valutazione, ovvero:
‐ per WoS
5-year Impact Factor (5YIF), quale indicatore di popolarità, o
Article Influence (AI), quale indicatore di prestigio
‐ per Scopus
Impact per Publication (IPP), quale indicatore di popolarità, o
SCImago Journal Rank (SJR), quale indicatore di prestigio
SCADENZE
15 dicembre 2015 Apertura sito per la selezione dei prodotti
15 gennaio 2016 Pubblicazione delle Appendici ai criteri bibliometrici per lacalibrazione degli algoritmi e l’individuazione delle fascedi merito
Entro il
25 gennaio 2016 Richiesta dei file pdf agli editori da parte degli autori, chepotranno essere caricati entro l’8 febbraio
29 gennaio 2016 Sottomissione dei prodotti da proporre a valutazione daparte di tutti gli addetti
RIFERIMENTI
Per informazioni e supporto nel caricamento dei prodotti nell’interfaccia CINECA èpossibile rivolgersi a:
Ing. Gianfranco Salfi - [email protected] - 0984.494229
Ing. Barbara Corasaniti - [email protected] - 339.7728680