Rilevazione on-line della Produzione
Scientifica dei Dipartimenti
dell’Università della Calabria
PROGETTAZIONE
Gruppo di Progettazione
OBIETTIVIDefinire gli scopi conoscitivi dell’indagineAdottare definizioni e concetti operativiPianificare gli aspetti applicativi del processo di produzioneREQUSITIPresidenteContenuta numerosità componentiInserimento membri che creino armoniaComposizione bilanciataCostituzione di una segreteria
Gruppo di Progettazione
Nucleo di Valutazione
Liaison Office
Dirigente area informatica
Consulente esperto in progettazione di indagini statistiche
Esperto in valutazione dell’attività di ricerca scientifica
Professore Enrico Rizzarelli, Coordinatore (membro del
Nucleo di valutazione)Dott.ssa Francesca D’ambrosio, Referente per i contenuti
inerenti la valutazione
Dott.ssa Sara Laurita, CoordinatriceDott.ssa Cinzia De Luca, Statistico esperto di
organizzazione di rilevazioni Liaison-office, Referenti per i contenuti inerenti il
monitoraggioArea informatica, Referenti per le personalizzazioni
del sw POLARiS
Gruppo di lavoro
L’ORIGINE………..
L’ORIGINE………..
L. 370/99 Disposizioni in materia scientifica e tecnologica
• COMITATO NAZIONALE PER LA VALUTAZIONE DEL SISTEMA UNIVERSITARIO
•COSTRUZIONE DI UN APPOSITO FONDO INTEGRATIVO PER L’INCENTIVAZIONE DELL’IMPEGNO DIDATTICO
•INTRODUZIONE DI APPOSITE DISPOSIZIONI PER IL COMPLETAMENTO DEL QUADRO DI INTERVENTI PER L’AUTONOMIA DIDATTICA UNIVERSITARIA
L’ORIGINE………..
La legge:
ribadisce e consolida l’attività dei Nuclei rivolta ad
“….adottare un sistema di valutazione interna della gestione amministrativa, delle attività didattiche e di ricerca, degli interventi del diritto allo studio, verificando anche mediante analisi comparative dei costi e dei rendimenti, il corretto utilizzo delle risorse pubbliche, la produttività della ricerca e della didattica, nonché l’imparzialità e il buon andamento dell’azione amministrativa”
introduce elementi nuovi nel sistema di valutazione dei Nuclei:
“…redigono una relazione contenente le informazioni e i dati determinati ogni triennio dal Comitato…”
L’ORIGINE………..
La principale innovazione portata dalla legge è relativa alla possibilità da parte degli Atenei di stabilire criteri di ripartizione dei fondi che inducano comportamenti premianti in termini di risultati.
Tra l’altro, a livello centrale si stanno definendo nuovi meccanismi di finanziamento correlati con oggettivi e trasparenti indicatori di performance.
Da qui la necessità da parte degli Atenei di dotarsi di sistemi affidabili per la raccolta, gestione ed elaborazione delle informazioni su tutte le attività di ricerca dell’università che:
•agevoli le attività di monitoraggio, programmazione e verifica dell’attività di ricerca;
•contribuisca a divulgare le informazioni relative alle competenze ed alle capacità disponibili.
Contenuti informativi
OBIETTIVO DELLA RILEVAZIONE
Più è ampio lo spettro degli argomenti trattati maggiori divengono le complessità da affrontare sul piano concettuale, statistico ed operativo
Contenuti informativi
OBIETTIVO DELLA RILEVAZIONE
Costruire una base conoscitiva della produzione
scientifica dell’Ateneo che fosse interrogabile in
modo sistematico anche da utenti non esperti.
Contenuti informativi
ANALISI DEL FENOMENO
Un’analisi insufficiente e superficiale compromette la completezza e l’effettiva utilizzazione delle informazioni
Contenuti informativi
ANALISI DEL FENOMENO
Analisi di esperienze simili
Documentazione
Contenuti informativi
CAMPO DI OSSERVAZIONE
È costituito dal collettivo (o collettivi) d’interesse all’interno del quale si manifesta il fenomeno
CAMPO DI OSSERVAZIONE
Contenuti informativi
Tutti i prodotti dell’attività
scientifica dell’Ateneo
Contenuti informativi
UNITA’ DI RILEVAZIONE
Docenti strutturati nell’Università
della Calabria
Contenuti informativi
SELEZIONE DELLE VARIABILI SIGNIFICATIVE
Si tratta di specificare le variabili descrittive e specifiche del fenomeno e le variabili connesse al fenomeno che lo influenzano e sono da esso influenzate
Contenuti informativi
SELEZIONE DELLE VARIABILI SIGNIFICATIVE
VARIABILI DESCRITTIVE
Tipologia di prodotto (Brevetto,Curatela,Articolo)
Rivista
VARIABILI CONNESSE
Docenti
Qualifica dei docenti
Dipartimento di appartenenza
Contenuti informativi
ANALISI STATISTICA
Bisogna prendere in esame:
scala di misura
tipologia
classificazione da adottare
“
Contenuti informativi
ANALISI STATISTICA
Classificazione prodotti – Soggetto
Anno pubblicazione - Qualifica docente
Settore scientifico disciplinare - Peso rivista
Disegno d’indagine
Nella definizione del disegno d’indagine si individuano le modalità di rilevazione che soddisfano esigenze conoscitive su:
particolari tipologie di stime
tutta o parte della popolazione oggetto di studio
Disegno d’indagine
Indagine Totale
Tecniche d’indagine
La scelta della tecnica più idonea da utilizzare è strettamente connessa ad altre caratteristiche quali:
fenomeno indagato
archivi di base
organizzazione del personale
costi e i tempi attesi
Tecniche d’indagine
C.A.W.I.
(Computer Assisted Web Interviewing)
Le fasi dell’indagine
1. Attività organizzative preliminari:
a. Aggiornamento banca dati
b. Preparazione elenchi eleggibili
2. Raccolta dati
3. Elaborazione dati
4. Redazione del rapporto finale
5. Diffusione risultati
Sensibilizzazione
INVIO AI DIRETTORI DI DIPARTIMENTO
Sensibilizzazione
ELENCO ELEGGIBILI
LETTERA AVVIO
RILEVAZIONE
LINEE GUIDA
Per quest’anno è stato previsto un invio e-mail automatico a tutti i docenti interessati alla rilevazione per informarli direttamente sulle modalità della rilevazione
Data screening
La sequenza di operazioni per lo screening dei dati è la seguente:
Analisi dell’accuratezza dei dati
Valutazione dei dati mancanti
Data screening
Duplicati nomi docenti
Nomi riviste
Attribuzione tipologia errata
Mancato collegamento
Dati sulla rilevazione
# docenti afferenti al 31/12/2002Assistenti
Associati
Incaricati
Ordinari – Straordinari
Ricercatori
593
2
212
6
161
212
#PUBBLICAZIONI PRESENTI IN POLARiS 4559
ALCUNE STATISTICHE
Dipartimento/Tipologia
Mon
ogra
fia
Man
uale
Cata
logo
Volu
me
mis
cella
neo
Cura
tela
Ediz
ione
crit
ica
Artic
olo
o sa
ggio
pub
blic
ato
su ri
vist
a
Art.
o sa
ggio
pub
bl. s
u vo
l. m
isce
llane
o
Capi
tolo
di l
ibro
Art.
o sa
ggio
pub
bl. i
n at
ti di
con
v.
Rece
nsio
ne o
sche
da b
iblio
graf
ica
Not
a a se
nten
za
Voce
di e
ncic
lope
dia o
di l
essi
co
Not
a int
rodu
ttiva
o ap
pend
ice
Pref
azio
ne o
pos
tfazi
one
Wor
king
pap
er
Rapp
orto
di r
icer
ca (p
roje
ct re
port)
Rela
zion
e te
cnic
a
Cont
ribut
o co
nv./c
onf.
senz
a pub
bl.at
ti
Appl
. sw
o pr
odot
to m
ultim
edia
le
Brev
etto
Dis
pens
a
Tota
le
Biologia Cellulare 37 6 5 48Chimica 1 79 2 1 15 5 103Difesa del Suolo 1 12 7 21 3 1 45Ecologia 19 1 1 14 1 16 52Economia e Statistica 3 2 1 2 17 30 5 10 1 11 3 3 1 1 90Elettronica Informatica e Sistemistica 34 2 3 75 1 3 118Farmaco-Biologico 25 1 3 2 1 32Fisica 1 1 88 2 1 8 14 1 1 117Ingegneria Chimica e dei Materiali 43 3 1 25 72Matematica 2 2 20 33 4 8 1 70Meccanica 7 40 1 48Organizzazione Aziendale e Amm. Pubblica 4 2 2 18 23 2 5 4 4 2 66Pianificazione Territoriale 11 1 4 3 18 2 1 40Scienze della Terra 16 2 5 24 47Scienze Farmaceutiche 1 26 10 1 38Sociologia e Scienza Politica 6 3 6 1 15 17 1 1 2 52Strutture 11 3 25 2 3 5 1 50
Totale Ateneo 27 5 1 12 10 2 470 90 18 313 2 4 1 1 2 24 20 1 79 2 2 2 1.088Fonte: Elaborazione Ufficio di Supporto al Nucleo di Valutazione su dati POLARiS
Tabella 3 : Numero di pubblicazioni per dipartimento di area scientifica e per tipologia - Anno 2001
Area/Tipologia
Mon
ogra
fiaM
anua
leCa
talog
oVo
lum
e misc
ellan
eoCu
rate
laEd
izion
e crit
ica
Artic
olo
o sa
ggio
pubb
licato
su ri
vista
Art.
o sa
ggio
pubb
l. su
vol.
misc
ellan
eoCa
pito
lo di
libr
o
Art.
o sa
ggio
pubb
l. in
atti
di co
nv.
Rece
nsio
ne o
sche
da bi
blio
graf
ica
Nota
a sen
tenz
aVo
ce di
enci
clop
edia
o di
less
ico
Nota
intro
dutti
va o
appe
ndic
ePr
efaz
ione
o po
stfaz
ione
Wor
king
pape
rRa
ppor
to di
rice
rca (
proj
ect r
epor
t)Re
lazio
ne te
cnic
aCo
ntrib
uto
conv
./con
f. se
nza p
ubbl
.atti
Appl
. sw
o pr
odot
to m
ultim
edial
eBr
evet
toDi
spen
sa
Tota
le
Ingegneria Civile e Architettura 12 1 4 22 10 56 2 3 8 4 122Ingegneria Industriale e dell'informazione 61 5 1 128 1 1 197Scienze Agrarie e Veterinaree 3 3Scienze Biologiche 67 1 2 22 2 1 21 116Scienze Chimiche 1 1 98 2 1 20 6 129Scienze della Terra 17 1 2 8 29 1 58Scienze Economiche e statistiche 7 1 3 29 26 6 10 1 13 2 2 2 102Scienze Fisiche 1 1 88 1 1 7 9 1 109Scienze Giuridiche 2 5 21 1 4 2 35Scienze Matematiche e informatiche 2 3 26 3 50 5 8 1 4 1 103Scienze Mediche 9 1 10Scienze Politiche e sociali 6 3 5 1 15 14 1 2 47Scienze storiche, filologiche, pedagogiche e psicologiche 1 1 3 1 6
Totale Ateneo 27 5 1 11 9 2 441 84 18 302 2 4 1 1 2 24 19 1 77 2 2 2 1.037Fonte: Elaborazione Ufficio di Supporto al Nucleo di Valutazione su dati POLARiS
Tabella 5: Numero di pubblicazioni per area disciplinare (*) e per tipologia - Anno 2001
DipartimentoDocenti afferenti
Docenti collegati
(*)
Di cui Ordinar
i
% rispondenti ordinari
Di cui Associati
% risponden
ti associati
Di cui Ricercato
ri
% risponden
ti ricercator
i
Di cui Assistent
i
% rispondenti assistenti
Di cui Incaricat
i
% rispondent
i incaricati
Biologia Cellulare 18 17 7 100,0 2 100,0 7 87,5 1 100,0 0 -Chimica 26 26 10 100,0 9 100,0 7 100,0 0 - 0 -D.E.I.S. 33 30 9 100,0 12 85,7 9 90,0 0 - 0 -Difesa del Suolo 27 19 7 70,0 6 75,0 5 62,5 1 100,0 0 -Ecologia 22 20 3 100,0 7 100,0 10 83,3 0 - 0 -Economia e Statistica 35 30 5 83,3 13 86,7 11 91,7 0 - 1 50,0Farmaco-Biologico 14 13 2 100,0 4 100,0 7 87,5 0 - 0 -Fisica 35 26 10 90,9 13 68,4 3 60,0 0 - 0 -Ing. Chimica e dei Materiali 17 16 5 83,3 7 100,0 4 100,0 0 - 0 -Matematica 37 25 7 77,8 12 80,0 5 45,5 0 - 1 50,0Meccanica 24 23 10 100,0 6 85,7 7 100,0 0 - 0 -Org. Az. e Amm. Pubbl. 43 33 8 88,9 13 72,2 12 80,0 0 - 0 -Pianificazione Territoriale 15 14 4 80,0 6 100,0 4 100,0 0 - 0 -Scienze della Terra 14 12 5 100,0 2 50,0 5 100,0 0 - 0 -Scienze Farmaceutiche 11 10 2 100,0 3 100,0 5 83,3 0 - 0 -Sociologia e Sc. Politiche 20 19 6 100,0 5 100,0 7 87,5 0 - 1 100,0Strutture 17 16 5 100,0 4 80,0 7 100,0 0 - 0 -Totale 408 349 105 91,3 124 83,8 115 83,9 2 66,7 3 60,0Fonte: Elaborazioni Ufficio di supporto al Nucleo di Valutazione su dati POLARiS
Tabella 29:Risultati della rilevazione sulla produzione scientifica dell'Ateneo dei Dipartimenti di area scientifica per tipologia docenti. Anno 2001
Dipartimento
Docenti che hanno effettuato
inserimenti (a)
Docenti senza
pubblicazioni (b)
Docenti che non hanno effettuato
inserimenti (1)
(c)
Totale (d)=(a)+(b)+(c)
Docenti afferenti
(e)
Tasso di risposta
(f)=(d)/(e)*100
Biologia Cellulare 13 0 4 17 18 94,4Chimica 22 2 2 26 26 100,0D.E.I.S. 29 1 0 30 33 90,9Difesa del Suolo 15 0 4 19 27 70,4Ecologia 17 1 2 20 22 90,9Economia e Statistica 27 2 1 30 35 85,7Farmaco-Biologico 11 0 2 13 14 92,9Fisica 24 1 1 26 35 74,3Ing. Chimica e dei Materiali 14 0 2 16 17 94,1Matematica 19 2 4 25 37 67,6Meccanica 17 2 4 23 24 95,8Org. Az. e Amm. Pubbl. 25 8 0 33 43 76,7Pianificazione Territoriale 13 0 1 14 15 93,3Scienze della Terra 11 0 1 12 14 85,7Scienze Farmaceutiche 8 0 2 10 11 90,9Sociologia e Sc. Politiche 17 2 0 19 20 95,0Strutture 14 0 2 16 17 94,1Totale 296 21 32 349 408 85,5Fonte: Elaborazioni Ufficio di supporto al Nucleo di Valutazione su dati POLARiS
Tabella 30:Tasso di risposta della rilevazione sulla produzione scientifica dell'Ateneo dei Dipartimenti di area scientifica. Anno 2001
Diffusione POLARiS
On-line
Relazione Nucleo
CD-ROM