Teorie e tecniche dei test

Teorie e tecniche dei test

La psicometria scientifica cerca di rendere espliciti:

• L’oggetto che vogliamo valutare (costrutto)
• L’unità di analisi (comportamento osservabile)
• I criteri di classificazione
• Gli strumenti per quantificare le osservazioni.

Un comportamento osservabile è qualcosa che possiamo vedere: è l’espressione concreta di un costrutto teorico. Per esempio, l’ansia è un costrutto. Ma noi non possiamo vedere direttamente “l’ansia”. Possiamo però osservare comportamenti che la rappresentano: il tremore delle mani, l’agitazione, il tono di voce incerto, l’evitamento del contatto visivo, il respiro accelerato. Ed è proprio su questi comportamenti osservabili che costruiamo i test psicologici.

Possiamo valutare il comportamento osservabile tramite quattro dimensioni:

1. Presenza / assenza
2. Grado di presenza: quanto è presente un comportamento?
3. Intensità: forza e potenza del comportamento
4. Frequenza

Il passaggio fondamentale è: dall’esperienza soggettiva al comportamento osservabile, alla codifica in dati numerici o simbolici.

Il primo passo per costruire un test è definire ciò che vogliamo misurare. Lavoriamo con costrutti: concetti come ansia, autostima, motivazione, che non si vedono e non si toccano, ma che ci servono per comprendere e organizzare l’esperienza psicologica. Sono costrutti, appunto. E per renderli misurabili, dobbiamo trasformarli in qualcosa che possa essere osservato, registrato, quantificato.

Ma anche quando ho definito bene il costrutto e ho cominciato a raccogliere dati, non è detto che quei dati siano affidabili. In psicologia, i dati spesso non arrivano da sensori o da osservazioni oggettive, ma da racconti, ricordi, percezioni. Esiste l’effetto alone (una singola impressione influenza tutto il giudizio), l’euristica della rappresentatività (giudichiamo una persona in base a quanto corrisponde a un’immagine mentale che abbiamo già), l’euristica della disponibilità (valutiamo quanto un evento sia frequente o importante solo in base a quanto ci viene facile ricordarlo).

Tutte queste distorsioni, questi errori di percezione o di memoria, mettono a rischio la validità dei dati psicologici. Un test ben costruito è, prima di tutto, uno strumento che protegge il dato. Protegge la misurazione da chi osserva troppo, da chi interpreta, da chi giudica sulla base delle emozioni. Serve a fissare dei criteri, a rendere ripetibile l’osservazione. Serve, soprattutto, a evitare che ogni valutazione sia una storia a sé, e a trasformarla invece in una misura confrontabile.

Assessment psicologico

Un test psicologico è uno strumento, l’assessment psicologico è un processo. Il test è come un singolo fotogramma: scatta un’istantanea su una caratteristica. L’assessment, invece, è un film intero. È un’indagine, una ricostruzione, un percorso articolato per comprendere il funzionamento psicologico di una persona nel suo insieme. Non si limita a registrare un dato, ma cerca di comprendere.

Fare assessment significa porsi delle domande – vere domande cliniche o educative – e utilizzare diverse fonti e metodi per raccogliere dati pertinenti. A volte potremo usare test, certo, ma solo dopo aver ascoltato, osservato, compreso il contesto. Un assessment può includere un colloquio anamnestico, un’osservazione in situazione naturale, la revisione di documenti scolastici o clinici, o il confronto con altri professionisti. Non è la somma meccanica di queste attività, ma l’integrazione coerente dei dati raccolti.

1. Definizione della domanda valutativa: questa domanda è fondamentale: non si parte mai dal test, ma da un interrogativo clinico formulato sulla base del colloquio iniziale.
2. Raccolta preliminare di informazioni (fase esplorativa):
   • Colloquio clinico iniziale: viene effettuato un colloquio clinico anamnestico orientato alla raccolta di informazioni sul funzionamento generale.
   • Osservazione clinica indiretta: linguaggio non verbale.
   • Fonti complementari: persone che stanno intorno al pz.
3. Formulazione di ipotesi valutative preliminari: ipotesi di diagnosi.
4. Scelta degli strumenti e metodologia multimodale: lo psicologo seleziona strumenti standardizzati integrabili con i dati osservativi e anamnestici, per esplorare i principali assi: funzionamento, sintomatologia attuale, struttura di personalità, funzionamento adattivo e impatto soggettivo.
5. Raccolta e analisi integrata dei dati
6. Restituzione e indicazioni
7. Follow-up: formulazione condivisa e ipotesi di intervento.

La misurazione

Le proprietà osservabili possono essere variabili o costanti. In psicologia si analizzano le prime.

I dati possono essere:

• Quantitativi: è più semplice da trattare, da confrontare, da analizzare. Ma ha un prezzo: semplifica.
• Qualitativi: ci permette di cogliere la complessità, la sfumatura, la ricchezza della realtà. Ma non ci permette di fare operazioni matematiche.

Il costrutto è una entità teorica, una proprietà astratta che non possiamo osservare direttamente, ma che ipotizziamo esiste per spiegare il comportamento (intelligenza, ansia, autostima). È ciò che vogliamo misurare rendendolo osservabile. Possiamo identificare variabili manifeste e latenti.

• Variabili latenti: sono i costrutti non osservabili direttamente.
• Variabili manifeste: i comportamenti che sono indicatori osservabili.

Per poter misurare un costrutto, dobbiamo decidere in che modo renderlo visibile attraverso osservazioni, item, comportamenti: operazionalizzarlo. Operazionalizzare un costrutto significa trasformarlo in indicatori osservabili e misurabili.

Lo scaling è il processo mediante il quale si decide come misurare le variabili, è ciò che ci permette di trasformare l’osservazione in informazione numerica:

• Su quale scala lavoriamo
• Quale unità di misura usare
• Come trasformare le risposte in dati numerici utilizzabili.

I comportamenti visibili sono, però, solo delle manifestazioni del costrutto, non il costrutto in sé. Un errore molto comune, infatti, è quello di raccogliere comportamenti che sembrano legati a un costrutto, ma che in realtà non lo rappresentano in modo coerente. Le sfide aumentano quando ci confrontiamo con contesti culturali differenti. Senza criteri chiari, il rischio è quello di attribuire significati arbitrari, facendo errori di valutazione.

Quando si costruisce un test psicologico bisogna definire il dominio di contenuto (definire con precisione cosa osservare), e dobbiamo selezionare una porzione rappresentativa di questi comportamenti: un insieme ristretto ma significativo che ci permetta di descrivere e valutare il costrutto in modo valido. Questa selezione prende il nome di campionamento del dominio. Si tratta di una scelta mirata, non casuale, basata su ciò che meglio rappresenta il costrutto in determinati contesti.

Una buona definizione del dominio di contenuto nasce da un’analisi approfondita e pluralistica, che può includere lo studio della letteratura scientifica, interviste a esperti del settore, analisi di risposte aperte fornite da soggetti (come diari o questionari) e osservazioni sul campo.

Molti costrutti, però, non sono semplici e unitari, ma complessi e articolati. Ne è un esempio l’intelligenza. In questi casi, la psicometria propone una struttura gerarchica, in cui il costrutto principale viene suddiviso in sottodimensioni chiamate facets, e talvolta anche in ulteriori sottosuddivisioni chiamate subfacets.

Distorsioni sistematiche

Nella costruzione e nell’uso dei test psicologici, uno degli aspetti più delicati da tenere sotto controllo è la presenza di distorsioni sistematiche che possono compromettere la validità delle misurazioni.

Una di queste distorsioni è il bias dell’osservatore: si manifesta quando le aspettative, le convinzioni o le ipotesi di chi osserva o valuta i dati influenzano in modo più o meno consapevole la rilevazione, la codifica o l’interpretazione delle informazioni raccolte. In altre parole, si verifica quando chi misura non è neutrale, ma filtra ciò che vede alla luce di ciò che si aspetta o desidera trovare.

• Effetto dell’osservatore-aspettativa: quando le aspettative del ricercatore influenzano direttamente il comportamento del partecipante, anche solo tramite il linguaggio del corpo o il tono di voce.
• Bias attore-osservatore: tendiamo ad attribuire i nostri insuccessi a cause esterne ma quelli altrui a tratti interni.
• L’effetto Hawthorne: tendenza dei partecipanti a modificare il proprio comportamento quando sanno di essere osservati.

Le conseguenze di questa distorsione sono significative. Il bias dell’osservatore può compromettere l’affidabilità delle misurazioni, poiché introduce un errore sistematico che si ripete ogni volta che l’osservatore interpreta i dati. Inoltre, mina la validità interna dello studio, perché ciò che viene registrato non corrisponde fedelmente al comportamento o alla risposta del soggetto, ma ne rappresenta una versione distorta. Di conseguenza, anche la validità esterna può risultare compromessa, rendendo difficile generalizzare i risultati a contesti diversi o ad altri gruppi.

È quindi fondamentale adottare strategie di prevenzione per contenere questo rischio. Una delle più efficaci è la cecità, cioè il fatto che il valutatore non conosca a quale gruppo appartiene il partecipante o quale sia l’ipotesi dello studio. Un altro strumento utile è l’assegnazione casuale dei soggetti ai gruppi, che riduce la probabilità che le caratteristiche individuali influenzino sistematicamente l’osservazione. Anche l’utilizzo di più metodi per osservare la stessa variabile può essere una strategia efficace: se diverse fonti convergono su uno stesso risultato, è più probabile che quel risultato sia attendibile.

Creazione dei test

Quando costruiamo un test psicologico una delle parti più cruciali è la creazione degli item. Ogni costrutto psicologico può essere associato a comportamenti o aggettivi descrittivi che ne esprimono le manifestazioni visibili. Alcuni di questi aggettivi sono considerati prototipici, cioè centrali e altamente rappresentativi della dimensione psicologica a cui si riferiscono. Tuttavia, nella pratica, uno degli errori più comuni è la sovrabbondanza: nella paura di tralasciare qualcosa, si finisce per includere troppi item, cercando di coprire ogni possibile sfumatura del costrutto.

Per evitare questo problema, è necessario adottare una strategia precisa di campionamento degli item. Esistono varie modalità per farlo:

• Il campionamento teorico si basa sulle definizioni presenti nella letteratura scientifica, sulla base di ciò che sappiamo del costrutto.
• Il campionamento empirico, invece, si fonda su dati oggettivi, ad esempio scegliendo quegli item che si dimostrano più discriminanti tra gruppi o più correlati alla dimensione principale.
• Il campionamento misto, che unisce i punti di forza dell’approccio teorico e di quello statistico, cercando di massimizzare sia la validità contenutale sia l’affidabilità.

Tecniche come l’analisi fattoriale o il calcolo delle correlazioni item-totale servono a mettere alla prova il nostro modello, verificare che le ipotesi teoriche trovino riscontro nei dati e, se necessario, correggere il tiro. Queste analisi ci permettono di identificare cluster di item che si muovono insieme in modo coerente, aiutano a individuare ridondanze o item che, pur sembrando pertinenti, si rivelano poco informativi o fuorvianti.

In psicologia, osservare un comportamento non significa automaticamente capirlo o saperlo interpretare nel modo corretto. Si sviluppa l’idea di costellazione di comportamenti, ovvero un costrutto psicologico deve essere ricostruito attraverso una rete di segnali, di indicatori, che nel loro insieme creano un’immagine chiara e coerente. Qui entra in gioco l’ambiguità degli indicatori: quando non abbiamo abbastanza informazioni.

Esistono alcune misurazioni che si basano su una sola domanda; le single-item measures. Ma spesso non sono sufficienti. In definitiva, osservare in psicologia è un processo articolato, che richiede consapevolezza, metodo e rigore. Non basta cogliere un comportamento: bisogna sapere cosa osservare, come farlo, e in quale contesto. Serve costruire un sistema coerente di indicatori, raccogliere più dati, evitare deduzioni affrettate.

Lo scoop del test si tratta di orientare un test al criterio: classificare, selezionare, discriminare chi rientra o meno in una certa categoria. Questo è diverso da un test costruito con un intento descrittivo o teorico, dove si vuole esplorare la struttura del costrutto stesso. In questi casi, lo strumento non è pensato per dividere le persone in gruppi, ma per misurare quanto e come si manifesta il costrutto in una popolazione. In questo caso si parla di test orientati alla teoria: strumenti che servono a mettere alla prova un modello teorico e che, di conseguenza, mirano ad avere una buona copertura concettuale e una distribuzione più uniforme dei punteggi.

Il modo in cui traduciamo la teoria in item dipende dallo scopo per cui stiamo costruendo il test. Questo significa che due test che misurano formalmente lo stesso costrutto – per esempio, l’autoefficacia o la motivazione – possono essere profondamente diversi se destinati a usi diversi. Nella valutazione psicologica si distinguono due orientamenti:

1. Test orientati al criterio: per identificare soglie, livelli minimi o massimi, utili a prendere decisioni operative.
2. Test orientati alla teoria: per comprendere meglio la struttura del costrutto, esplorarne le componenti, verificarne la validità e l’utilità teorica.

Inoltre bisogna considerare il tipo di pubblico a cui il test è indirizzato. Uno strumento pensato per la popolazione generale non potrà contenere lo stesso tipo di item di un test rivolto a un campione clinico o a studenti universitari. La chiarezza, la pertinenza, la difficoltà degli item devono essere calibrate in funzione di chi risponderà. Anche la modalità di somministrazione – orale, scritta, assistita – e la forma delle risposte richieste dipendono da queste scelte.

1. Scelta del costrutto e revisione letteratura.
2. Operazionalizzazione: identificazione degli indicatori.
3. Definizione della scala di risposta.
4. Revisione linguistica e valutazione di esperti: scriviamo una prima versione e la somministriamo ad esperti del settore indagato, chiedendo feedback sulla chiarezza e leggibilità degli item, rilevanza teorica e adeguatezza degli item. Eventualmente si modificano gli item ambigui.
5. Somministrazione pilota.
6. Analisi dei dati: validità ed affidabilità: iniziano le analisi psicometriche con strumenti come l’analisi fattoriale esplorativa, analisi della consistenza interna.
7. Validazione esterna: confrontiamo il test con strumenti noti.
8. Versione finale e pubblicazione.

Modelli grafici

I modelli grafici sono vere e proprie ipotesi teoriche visive, che ci aiutano a capire se consideriamo un costrutto come causa o effetto, se pensiamo che le sue componenti siano autonome o interconnesse, se la relazione tra le variabili è simmetrica, direzionale o dinamica. Saper costruire e interpretare un modello grafico non è solo una questione di visualizzazione: significa avere una visione chiara del costrutto, delle sue componenti e delle sue relazioni.

• Modello latente: il focus è sulla coerenza tra item che indicano lo stesso costrutto latente. Per esempio l’ansia è la variabile latente, un costrutto psicologico non osservabile direttamente ma inferito sulla base di sintomi visibili. L’ansia è la causa comune di un insieme di indicatori — insonnia, tachicardia, paura, preoccupazione, ecc. — che sono effetti passivi. Non è detto che tra i sintomi ci siano connessioni dirette: ognuno riflette in modo indipendente il livello di ansia della persona. Utilizzato per scale cliniche e di personalità.
• Modello a rete - Network Analysis personalizzabile: non c’è più una causa centrale, le variabili osservate sono tutte collegate tra loro in modo diretto. Il colore e lo spessore degli archi indicano l’intensità della relazione (verde per associazioni positive, rosso per quelle negative). Il modello suggerisce che le variabili si attivano reciprocamente, in un sistema dinamico e interdipendente. Molto usato per comprendere la comorbidità tra sintomi dei disturbi mentali e per le relazioni tra tratti cognitivi ed emotivi.
• Grafo aciclico diretto (DAG): questa è un’organizzazione gerarchica. Le variabili sono disposte su più livelli. Questo modello è utile per formalizzare ipotesi causali, cioè rappresentare quali variabili influenzano altre in modo unidirezionale e strutturato. È molto usato nei modelli di motivazione scolastica, ma anche per descrivere la progressione di stati emotivi o processi cognitivi complessi.
• Modello dinamico multilivello: si cerca di rappresentare la dinamica temporale dei sintomi. Vogliamo capire come le variabili cambiano insieme nel tempo.