Riassunto esame Metodologia della ricerca empirica, prof Vannini, libro consigliato Origini e sviluppi della ricerca valutativa, Vertecchi

CONTENUTO CRITERIO COSTRUTTO PRESENTAZIONE ODI FACCIATAC’

è una misura che Si riferisce all’analisi diLe domande devono Insieme delleessere differenziate in funge da criterio e un costrutto e dipende caratteristiche con cui

l’effettivamodo da consentire di viene utilizzata come la prova si presenta a12Origini e Sviluppi della ricerca valutativa – Vertecchi, Agrusti, Lositounmisurare tutte le riferimento. E’ disponibilità di una chi deve sostenerlacomponenti di una esame effettuato a teoria di riferimento (impaginazione, uso didefinizione. posteriori. che consenta di figure/grafici)identificare l’insiemedelle caratteristichedel fenomeno che siintende misurare, maanche di definirlo intermini operativi. E’diretta, a posteriori edifficilmente definibile.

18. Le indagini comparative internazionaliagli anni ’60, Iea era l’unica organizzazione internazionale in grado di realizzare indaginiFino gli anni ’90, nuove

Indagini comparative sono state organizzate su larga scala. Dopodall'OCSE come il progetto Pisa, indagine di maggiore rilevanza realizzata nel settoredell'istruzione.

Le indagini comparative dell'Iea

La motivazione principale delle indagini dell'Iea è stata quella di fornire ai responsabili delle politiche scolastiche le informazioni necessarie per migliorare l'efficacia dell'istruzione.

Le caratteristiche dell'Iea sono:

• Centralità riconosciuta al curricolo
• Indicazione degli obiettivi per ogni indagine inseriti in un quadro di riferimento

La centralità del curricolo

Rilevare l'impatto delle diverse forme di organizzazione del curricolo, delle strategie di insegnamento e delle diverse caratteristiche organizzative e amministrative delle scuole sul rendimento degli studenti. Punto di partenza: individuare gli elementi curricolari condivisi all'interno dei sistemi scolastici dei paesi.

Partecipanti e distinguere il curricolo dichiarato (indicato nei documenti ufficiali livello di sistema), realizzato (sviluppato nelle attività di insegnamento livello di scuola e classe) e raggiunto (realmente appreso dagli studenti in termini di abilità e di conoscenze livello studente).

Il secondo tipo di curricolo è quello che definisce le effettive opportunità di apprendimento degli studenti e costituisce anche il termine di confronto dei livelli di rendimento degli studenti. È quella l'ambizione di elaborare modelli interpretativi in grado di spiegare le differenze di rendimento tra gli alunni.

Il campionamento è stato realizzato in 2 fasi: nella prima fase vengono scelte le scuole con un campionamento a grappolo, dopo vengono scelte le classi in modo randomizzato.

Costrutti e variabili: si collocano su più livelli, quello dei diversi contesti, scolastici ed extra, e quello dei processi di insegnamento.

apprendimento realizzati nella scuola. Gli strumenti di rilevazione utilizzano quattro strumenti differenti:

1. Origini e Sviluppi della ricerca valutativa – Vertecchi, Agrusti, Losito
• Prova cognitiva (test) in cui sono incluse domande di diverso formato (risposta chiusa/aperta)
2. Questionario studente sul retroterra socioeconomico-culturale degli studenti
3. Questionario scuola per determinare le caratteristiche della scuola; rivolto all'insegnante dell'area indagata
4. Questionario insegnante

In alcuni casi, ci sono anche i questionari per i genitori. Le rilevazioni fatte prima del 2006 erano campionarie, ora sono censuarie (vengono rilevati i dati di tutte le persone).

Il disegno e l'organizzazione delle indagini. Nel corso degli anni, l'Iea ha progressivamente individuato come popolazione di riferimento per gli studenti del 4° (quarta primaria) e dell'8° anno di scolarizzazione (terza media).

Il progetto Pisa dell'OCSE

L'elaborazione del progetto Pisa è uno degli sviluppi del progetto Ines, che ha per obiettivo dei sistemi di istruzione dei paesi facenti parte dell'Ocse indicatori di qualità che annualmente vengono aggiornati. Gli obiettivi principali sono:

• Raccogliere i dati per la costruzione di indicatori relativi al rendimento scolastico degli studenti di 15 anni nelle capacità di comprensione di lettura matematica scienze;
• Offrire ai paesi partecipanti elementi di valutazione sull'efficacia delle proprie politiche scolastiche e partire dall'individuazione dei sistemi scolastici con risultati migliori;
• Fornire con regolarità dati sui sistemi di istruzione per orientare le politiche educative e scolastiche.

Per garantire la diacronicità, Pisa tiene delle domande segrete che vengono ciclicamente riproposte. Il campionamento è probabilistico, come per l'indagine Iea. La rilevazione delle competenze si propone non solo

di lettura, un testo di matematica e un testo di scienze, con domande a risposta chiusa o aperta; (questionari) in cui gli studenti devono rispondere a domande su di sé, sulle loro abitudini di studio, sulle loro opinioni e atteggiamenti nei confronti della scuola e dell'apprendimento; (attività) in cui gli studenti devono svolgere compiti pratici o risolvere problemi concreti. I risultati di Pisa vengono poi analizzati e confrontati tra i diversi paesi partecipanti, al fine di valutare le performance degli studenti e individuare eventuali differenze e tendenze. L'obiettivo principale di Pisa è quello di fornire informazioni utili per migliorare i sistemi educativi e promuovere l'equità nell'accesso all'istruzione. I risultati di Pisa vengono spesso utilizzati come base per prendere decisioni politiche e implementare interventi educativi mirati. In conclusione, Pisa è un importante strumento di valutazione internazionale che permette di monitorare le competenze degli studenti a livello globale e promuovere il miglioramento dei sistemi educativi.

stimolo che illustra problemi e situazioni con- Prova cognitivadomande di vario tipo (risp. aperta, vero o falso, scelta multipla);- Questionario studente organizzato per definire le variabili del retroterra socioeconomico-culturale e per definire gli atteggiamenti dei ragazzi nei confronti della literacy indagata;- Questionario scuola, rivolto ai dirigenti per comprendere le caratteristiche strutturali e organizzative, le risorse umane e l'organizzazione didattica.

Origini e Sviluppi della ricerca valutativa – Vertecchi, Agrusti, Losito

A volte viene utilizzato un questionario per genitori (nel 2006), ma non per gli insegnantirelativamente al disegno di ricerca.

Il disegno e l'organizzazione delle indagini Pisa è organizzato in cicli che prevedono tre rilevazioni, una su ogni literacy indagata che costituisce l'ambito principale (sono la maggior parte di domande, poi ci sono anche domande sulle altre aree), a distanza di tre anni ognuna: il

Il primo ciclo è iniziato nel 2000 con la lettura, nel 2003 con la matematica, nel 2006 con le scienze. Poi è iniziato il secondo ciclo nel 2009 con la lettura. Anche Pisa è un'indagine campionaria. Il disegno di indagine è funzionale alla raccolta di una serie storica di dati e alla determinazione di livelli delle competenze in senso diacronico. Il campionamento: la costruzione del campione avviene in 2 fasi: in una prima fase vengono campionate le scuole (campione probabilistico), poi il gruppo di studenti appartenenti a classi diverse (campione casuale) (per questo non c'è un questionario docente). L'organizzazione e la gestione di questo progetto è affidato a molte persone. L'importanza e i limiti delle indagini comparative internazionali In Italia, è intorno a queste indagini che è cresciuta la leva di ricercatori in campo valutativo. I limiti: - Non sono in grado di fornire tutte le informazioni per la conoscenza dei

sistemil'idea stessa di concentrarsi solo sui curricoli, escludenazionali: importanti ambiti educativiche non possono essere indagati in termini comparativi perché non comuni a tutti i paesi;C'è la necessità che l'influenza dei- le indagini comparative internazionali limitinocontesti nazionali specifici, somministrando prove culturalmente decontestualizzate;C'è il rischio che venga- imposto un unico modello culturale di riferimento;un'accettazione dei modelli metodologici e della strumentazione- Vi è tipica delle indaginicomparative internazionali, rinunciando alle metodologie innovative.Quindi, le indagini comparative svolgono un ruolo importante per la comparazione internazionale,ma non possono sostituirsi alla costruzione e allo sviluppo di ricerche ed indagini valutative nazionali.19. La valutazione dei sistemi di istruzioneQuando oggi si parla di valutazione, ci si riferisce a tre livelli in ambiti diversi: il

livello degli studenti (rendimento ed apprendimenti), il livello della scuola e il livello dei sistemi di istruzione (attività di raccolta di informazioni e di dati relativi all'organizzazione, all'attività e ai loro effetti). Inoltre, si aggiunge anche la valutazione del personale della scuola.

Problemi di ordine concettuale e metodologico

Le difficoltà sono molteplici e sono connesse ai caratteri concettuali e metodologici.

Ordine concettuale nei sistemi di istruzione relative all'individuazione dell'insieme delle caratteristiche del sistema da tenere sotto osservazione e dalle relazioni tra loro esistenti. I modelli utilizzati individuano tre gruppi fondamentali:

• Quelli relativi alle risorse: insieme delle risorse finanziarie e non solo, qualità degli studenti e dell'ambiente insegnanti, caratteristiche socio-culturali da cui provengono;

Origini e Sviluppi della ricerca valutativa – Vertecchi,

Agrusti, Lositoqualità dei curricoli, delle singole scuole, dell'insegnamento e: - Quelli relativi ai processi dell'istruzione; - Quelli relativi ai risultati considerati non solo in termini di acquisizione di conoscenze, ma anche in termini di costruzione e sviluppo di un insieme di atteggiamenti e valori. Naturalmente, è necessario anche tenere conto dei contesti e della relazione che questi hanno con i sistemi di istruzione e con le singole scuole spesso in modo indiretto. La relazione tra questi fattori non è sempre lineare, essi interagiscono e retroagiscono tra loro. I processi scolastici, inoltre, possono solo essere valutati nel medio e lungo periodo temporale. Gli indicatori dei sistemi di istruzione: È possibile costruire indicatori relativi ad alcune caratteristiche dei sistemi di istruzione attraverso la raccolta di dati quantitativi.