Indicatori della didattica e monitoraggio dei corsi
Giuseppe Carci (ANVUR)
Workshop «La didattica universitaria in Italia. Una prima ricognizione»
Roma 18 marzo 2016
• L’ANVUR presenta oggi i risultati del lavoro svolto per la costruzione di un sistema di indicatori omogeneo sui percorsi di studio.
• Gli indicatori elaborati:
• permettono agli atenei di monitorare i propri corsi e valutarne punti di forza e debolezza in maniera comparata
• permettono all’ANVUR di monitorare le carriere degli studenti nei diversi corsi e atenei
Dati sui risultati delle attività formative: finalità istituzionali
• Attività di analisi: Rapporto ANVUR sullo Stato del Sistema Universitario e della Ricerca
• AVA: Accreditamento, Valutazione Periodica e Autovalutazione. L’Allegato F del DM 47/2013 ha individuato 23 “Indicatori e parametri per la Valutazione Periodica delle attività formative”, anche se alcuni in forma non immediatamente operativa
1. Carriera accademica dello studente : dati Anagrafe Nazionale Studenti
2. Attrattività del corso e internazionalizzazione: dati Anagrafe Nazionale Studenti
3. Sostenibilità didattica: dati SUA-CDS
4. Soddisfazione dello studente: dati Almalaurea; opinioni degli studenti sui singoli insegnamenti e sul corso
5. Esiti occupazionali: dati Almalaurea e in prospettiva banche dati amministrative
Gli indicatori che presentiamo sono parte di un più ampio sistema che si intende sviluppare:
La presentazione è organizzata in due parti:
• INDICATORI: presentazione delle Schede di Ateneo e delle Schede di Corso di Studio e di alcuni dati di sistema.
• ANALISI LONGITUDINALE DELLE CARRIERE ACCADEMICHE: si presentano alcuni risultati oggetto di approfondimento nel prossimo Rapporto ANVUR, per mostrare le potenzialità dell’approccio per coorte.
PRESENTAZIONE
INDICATORI CARRIERE STUDENTI
Obiettivi • Informazioni sull’ateneo e sui corsi di studio, arricchite da informazioni
qualitative (Relazione dei Nuclei - Schede SUA) e messe a disposizione degli atenei, dell’ANVUR, delle CEV nelle visite di accreditamento periodico:
• come strumento di monitoraggio finalizzato alla definizione della loro politica di qualità della didattica;
• supporto informativo necessario per le attività connesse all’Accreditamento Periodico.
• Il Corso di Studio essere confrontato con i corsi della stessa classe di laurea e tipologia, per l’intero territorio nazionale o per ripartizione.
• Gli indicatori sui corsi, opportunamente aggregati, possono restituire il posizionamento relativo dell’ateneo rispetto alle carriere dei suoi studenti.
Indicatori sui percorsi di studio
Nell’Allegato F del DM 47/2013, gli indicatori sui percorsi di studio fanno riferimento alla:
• produttività, in termini di crediti conseguiti nel corso del primo anno di corso;
• abbandono (del Corso o del sistema universitario) tra I e II anno di corso e dopo N anni rispetto all’immatricolazione;
• prosecuzione e produttività, in termini passaggio ad anni successivi e di crediti conseguiti degli studenti;
• conseguimento del titolo (laureati regolari e il tempo medio di conseguimento del titolo);
• ritardo, inteso come iscrizione fuori corso (indicazione già ricavabile dagli indicatori su laureati in corso e abbandoni dopo N anni).
INDICATORI
Indicatori di corso di studio: modalità di calcolo
Nei CdS degli atenei tradizionali, si riporta il valore dell’indicatore
relativo al Corso di studio e il valore di tutti i CdS della stessa Classe di
Laurea, sia a livello nazionale che a livello di area geografica in cui si
colloca il CdS.
Per i CdS degli atenei telematici, oltre al valore relativo del singolo CdS
considerato, viene riportato il valore di tutti i CdS appartenenti alla
stessa Macroarea CUN e tipologia di corso (triennale, magistrale o a
ciclo unico).
Primo anno di corso
e passaggio al secondo anno
CdS Corsi della stessa
Classe di laurea
Italia Area
geogr.
CFU conseguiti al termine del 1° anno su CFU da conseguire
Immatricolati inattivi al termine del 1° anno
Prosecuzioni nello stesso Corso al 2° Anno (%)
Prosecuzioni nello stesso Corso al 2° Anno con più di 39 CFU
Scheda di Corso di Studio Sezione 1
Scheda di CDS – sezione 1: esempio
Scheda di Corso di Studio Sezione 2
Esito dopo N e N+1 anni dall'immatricolazione
(N = durata del Corso)
CdS Corsi della stessa Classe
Italia Area geogr.
LAUREATI REGOLARI STABILI (%)
MEDIA VOTO ESAMI
MEDIA VOTO LAUREE
RAPPORTO TRA CFU STAGE E CFU TOTALI
LAUREATI STABILI DOPO N+1 ANNI (%)
Ancora iscritti dopo N+1 anni (%)
Abbandoni dopo N+1 (%)
Scheda di CDS – sezione 2: esempio
Scheda di Corso di Studio Sezione 3
Attrattività e internazionalizzazione CdS Corsi della stessa Classe
Italia Area geogr.
MOBILITA’ REGIONALE
ISCRITTI A LM CON TITOLO I LIVELLO IN ALTRO ATENEO
ISCRITTI A LM CON TITOLO I LIVELLO CONSEGUITO
ALL'ESTERO
IMMATRICOLATI CON DIPLOMA DI SCUOLA
SECONDARIA ESTERO
ISCRITTI CON ALMENO 6 CFU CONSEGUITI ALL'ESTERO
LAUREATI CON ALMENO 9 CFU CONSEGUITI ALL'ESTERO
Scheda di CDS – sezione 3: esempio
Gli indicatori di ateneo sono calcolati in 3 modi:
1. Indicatore semplice
2. Indicatore rapportato alla media nazionale
3. Indicatore normalizzato e ponderato (per tener conto della composizione dei corsi): il valore sintetico di ateneo per ciascun indicatore è stato ottenuto utilizzando delle aree di aggregazione (ADA) omogenee al proprio interno.
Indicatori di Ateneo: modalità di calcolo
Scheda di ATENEO – sezione 1: esempio
Scheda di ATENEO – sezione 2: esempio
DATI NAZIONALI:
INDICATORE Tipo di Corso di Studio
Laurea
triennale
Laurea magistrale
CFU conseguiti su CFU da conseguire al I anno 52,0% 68,1%
Prosecuzione stabile al II anno 70,7% 89,6%
Prosecuzione nel sistema universitario al II anno 85,9% 91,0%
Prosecuzione nello stesso CDS al II anno con >39 CFU 40,6% 55,1% Laureati regolari stabili 27,1% 50,6%
Laureati stabili dopo N+1 anni 38,6% 72,9%
Laureati stabili o ancora iscritti dopo N+1 anni 64,0% 86,4%
61,4% 64,4%
53,9% 50,1% 48,1%
0%
10%
20%
30%
40%
50%
60%
70%
NORD-OVEST NORD-EST CENTRO SUD ISOLE
Indicatore 1 - CFU conseguiti su CFU da conseguire al I anno
40,8% 38,7%
29,3%
22,8% 22,0%
0%
5%
10%
15%
20%
25%
30%
35%
40%
45%
NORD-OVEST NORD-EST CENTRO SUD ISOLE
Laureati regolari stabili
15,5%
19,0%
21,9%
23,6%
23,7%
26,0%
26,5%
28,8%
33,5%
33,6%
35,7%
37,4%
38,4%
57,5%
0,0% 10,0% 20,0% 30,0% 40,0% 50,0% 60,0% 70,0%
12 Scienze giuridiche
4 Scienze della Terra
5 Scienze biologiche
7 Scienze agrarie e veterinarie
1 Scienze Matematiche e Informatiche
8 Ingegneria civile ed Architettura
3 Scienze chimiche
9 Ingegneria industriale e dell'informazione
14 Scienze politiche e sociali
10 Scienze dell’antichità, filologico-letterarie e storico-…
2 Scienze fisiche
13 Scienze economiche e statistiche
11 Scienze storiche, filosofiche, pedagogiche e…
6 Scienze mediche
Laureati regolari stabili, per AREA CUN del CdS
• Giugno 2013: prima estrazione dati ANS (a.a. 2011/2012)
• Marzo 2014: pubblicazione risultati analisi pilota (Rapporto ANVUR)
• Giugno 2014: estrazione dati per «Indicatori 2014»
• Marzo 2015: creazione «Area riservata Atenei» sul sito Anvur. Dati organizzati in Scheda di Ateneo e Scheda di CDS, a disposizione dell’ateneo per verifiche, confronto e suggerimenti
• Aprile/settembre 2015: confronto con gli atenei, raccolta feedback, revisione degli indicatori e delle schede
• Ottobre 2015: estrazione dati per «Indicatori 2015»
• Novembre/Dicembre 2015: analisi dati per pubblicazione (sito Anvur; Rapporto ANVUR)
Fasi e tempi
• Affidabilità dei dati e di ANS, Metodologia di analisi, scelta degli indicatori e definizioni operative: confronto e condivisione
• Utilizzo e utilità dei dati per l’ateneo e per l’Anvur:
• All’interno del Sistema AVA: nelle procedure di accreditamento periodiche per la scelta dei CDS da visitare e come supporto all’autovalutazione
• All’interno del CRUSCOTTO ATENEO del MIUR, per consentire la consultazione e la personalizzazione delle analisi da parte degli Atenei o dei Corsi di Studio
Utilizzo degli Indicatori
PRESENTAZIONE
ANALISI PER COORTE
Analisi longitudinale delle coorti di immatricolati
1. Esito della coorte (abbandono, laurea, iscrizione) all’inizio dell’a.a. 2014/15
2. Esito della coorte dopo un numero N di anni successivi all’immatricolazione (al termine della durata del corso, a un anno oltre e a un numero di anni pari al doppio della durata del corso di studio)
3. Tasso di abbandono tra il I e il II anno di corso
4. Mobilità durante il percorso (passaggi, trasferimenti, sospensioni)
5. Passaggio a un Corso di Laurea magistrale dei laureati nei Corsi di Laurea triennali
26,8
42,4
49,3
53,1
55,8
56,8
56,8
57
57,8
13,7
19,6
24,7
28,1
31
32,8
34
35,8
36,8
38,5
38,7
86,3
80,3
48,5
29,4
19,7
14
10,2
7,4
6,4
4,5
3,5
0% 10% 20% 30% 40% 50% 60% 70% 80% 90% 100%
Coorte 2013/2014 -dopo 1 anno
Coorte 2012/2013 -dopo 2 anni
Coorte 2011/2012 -dopo 3 anni
Coorte 2010/2011 -dopo 4 anni
Coorte 2009/2010 -dopo 5 anni
Coorte 2008/2009 -dopo 6 anni
Coorte 2007/2008 -dopo 7 anni
Coorte 2006/2007 -dopo 8 anni
Coorte 2005/2006 -dopo 9 anni
Coorte 2004/2005 -dopo 10 anni
Coorte 2003/2004 -dopo 11 anni
Laureati Abbandoni Ancora iscritti
ESITO DELLE COORTI AL 2014/2015
18,8 19,6 19,1 20,9 21,2 22,3
23,8 26 26,8
0
5
10
15
20
25
30
35
40
Coorte diimmatricolatinel 2003/2004
Coorte diimmatricolatinel 2004/2005
Coorte diimmatricolatinel 2005/2006
Coorte diimmatricolatinel 2006/2007
Coorte diimmatricolatinel 2007/2008
Coorte diimmatricolatinel 2008/2009
Coorte diimmatricolatinel 2009/2010
Coorte diimmatricolatinel 2010/2011
Coorte diimmatricolatinel 2011/2012
LAUREATI REGOLARI (DOPO 3 ANNI – CDS TRIENNALI)
19
33
47
20
33
47
19
33
48
21
36
51
21
37
52
22
39
53
24
41
26
42
27
0
10
20
30
40
50
60
dopo 3 anni dopo 4 anni dopo 6 anni
Coorte di immatricolati nel2003/2004
Coorte di immatricolati nel2004/2005
Coorte di immatricolati nel2005/2006
Coorte di immatricolati nel2006/2007
Coorte di immatricolati nel2007/2008
Coorte di immatricolati nel2008/2009
Coorte di immatricolati nel2009/2010
Coorte di immatricolati nel2010/2011
Coorte di immatricolati nel2011/2012
Percentuale di laureati dopo «N» dall’immatricolazione Corsi di laurea triennali
26
19
11
27
20
11
26
21
10
28
23
12
28
23
12
29
24
13
31
25
14
32
27
16
33
27
17
0
5
10
15
20
25
30
35
40
45
50
NORD CENTRO MEZZOGIORNO
Laureati regolari (dopo 3 anni) per area geografica sede del Corso Corsi di laurea triennali
2003/2004
2004/2005
2005/2006
2006/2007
2007/2008
2008/2009
2009/2010
2010/2011
2011/2012
24
13 14
24
13
15
24
12
14
27
12
15
27
12
15
28
12
15
29
14
16
31
16
19
32
16
19
0
5
10
15
20
25
30
35
40
45
50
Liceale Professionale Tecnica
Percentuale di Laureati regolari (dopo 3 anni) per tipo di diploma di maturità
Corsi di laurea triennali 2003/04
2004/05
2005/06
2006/07
2007/08
2008/09
2009/10
2010/11
2011/12
17,2 17,2
16 16,3 16 15,8 16,1
15,4 15
13,9
7,2
7,6
6,4
10 9,5 9
9,5 9,5 9,8 8,5
10,1
7,4
8,1
7,7 8,3 8 8 7,8 7,2
6,4
0
2
4
6
8
10
12
14
16
18
20
IMM nel2003/2004
IMM nel2004/2005
IMM nel2005/2006
IMM nel2006/2007
IMM nel2007/2008
IMM nel2008/2009
IMM nel2009/2010
IMM nel2010/2011
IMM nel2011/2012
IMM nel2012/2013
Triennali Ciclo unico Magistrali
ABBANDONI TRA IL PRIMO E IL SECONDO ANNO DI CORSO
Utilità degli Indicatori
• Individuare punti di forza e debolezza in maniera comparata (Schede ANVUR, Cruscotto Ateneo MIUR)
• Supporto alla autovalutazione, al monitoraggio, al riesame dei corsi.
• Spunti di riflessione in sede di assicurazione della qualità della didattica, promuovendo il miglioramento dei corsi.
• Favorire politiche di qualità della didattica basate anche su indicatori affidabili e oggettivi
• Per ANVUR possibilità di monitorare l’andamento dei corsi, dei percorsi di studio e dei loro esiti, studiandone i fenomeni
• Indicatori «sentinella», a supporto alle attività di accreditamento periodico delle Sedi e dei Corsi di Studio (AVA-ANVUR)