Affidabilità e coerenza nella psicometria

Quando chiamiamo qualcuno o qualcosa di affidabile, intendiamo che sono coerenti e affidabili. L'affidabilità è anche una componente importante di un buon test psicologico. Dopotutto, un test non sarebbe molto prezioso se fosse incoerente e producesse risultati diversi ogni volta. In che modo gli psicologi definiscono l'affidabilità? Che influenza ha sui test psicologici?

L'affidabilità si riferisce alla coerenza di una misura. Un test è considerato affidabile se otteniamo ripetutamente lo stesso risultato. Ad esempio, se un test è progettato per misurare un carattere (come l' introversione ), allora ogni volta che il test viene somministrato a un soggetto, i risultati dovrebbero essere approssimativamente uguali. Sfortunatamente, è impossibile calcolare esattamente l'affidabilità, ma può essere stimato in diversi modi.

Test-Retest Affidabilità

L'affidabilità test-retest è una misura della coerenza di un test o di una valutazione psicologica. Questo tipo di affidabilità viene utilizzato per determinare la coerenza di un test nel tempo. L'affidabilità test-retest è utilizzata al meglio per cose che sono stabili nel tempo, come l' intelligenza .

L'affidabilità test-retest viene misurata somministrando un test due volte in due diversi momenti. Questo tipo di affidabilità presuppone che non ci saranno cambiamenti nella qualità o nella costruzione misurata.

Nella maggior parte dei casi, l'affidabilità sarà più elevata quando è trascorso poco tempo tra i test.

Il metodo test-test è solo uno dei modi che possono essere utilizzati per determinare l'affidabilità di una misurazione. Altre tecniche che possono essere utilizzate includono l'affidabilità tra valutatori, la coerenza interna e l'affidabilità delle forme parallele.

È importante notare che l'affidabilità test-retest si riferisce solo alla coerenza di un test, non necessariamente alla validità dei risultati.

Affidabilità inter-rater

Questo tipo di affidabilità viene valutato avendo due o più giudici indipendenti che hanno valutato il test. I punteggi vengono poi confrontati per determinare la coerenza delle stime dei valutatori.

Un modo per testare l'affidabilità inter-rater è che ogni valutatore assegni a ciascun elemento di test un punteggio. Ad esempio, ciascun valutatore può assegnare elementi su una scala da 1 a 10. Quindi, si calcola la correlazione tra i due rating per determinare il livello di affidabilità tra valutatori.

Un altro mezzo per testare l'affidabilità inter-valutatore è quello di determinare in quale categoria ogni osservazione cade e quindi calcolare la percentuale di accordo tra i valutatori. Quindi, se i valutatori concordano 8 volte su 10, il test ha un tasso di affidabilità inter-valutatore dell'80%.

Affidabilità delle forme parallele

L'affidabilità delle forme parallele viene misurata confrontando due diversi test creati con lo stesso contenuto. Ciò si ottiene creando un ampio pool di elementi di test che misurano la stessa qualità e dividendo poi gli elementi in due test separati. I due test devono quindi essere somministrati agli stessi soggetti contemporaneamente.

Affidabilità interna

Questa forma di affidabilità viene utilizzata per valutare la coerenza dei risultati tra gli articoli sullo stesso test. In sostanza, si confrontano gli elementi di test che misurano lo stesso costrutto per determinare la coerenza interna dei test. Quando vedi una domanda che sembra molto simile a un'altra domanda di test, potrebbe indicare che le due domande vengono utilizzate per valutare l'affidabilità. Poiché le due domande sono simili e progettate per misurare la stessa cosa, l'esaminatore dovrebbe rispondere a entrambe le domande allo stesso modo, il che indicherebbe che il test ha una coerenza interna.

Fattori che possono influenzare l'affidabilità

Esistono diversi fattori che possono influire sull'affidabilità di una misura.

Primo e forse più ovviamente, è importante che la cosa che viene misurata sia abbastanza stabile e coerente. Se la variabile misurata è qualcosa che cambia regolarmente, i risultati del test non saranno coerenti.

Aspetti della situazione di prova possono anche avere un effetto sull'affidabilità. Ad esempio, se il test viene somministrato in una stanza che è estremamente calda, i partecipanti potrebbero essere distratti e incapaci di completare il test al meglio delle proprie capacità. Ciò può influire sull'affidabilità della misura. Altre cose come stanchezza, stress, malattia, motivazione, cattive istruzioni e distrazioni ambientali possono anche danneggiare l'affidabilità.

Affidabilità vs. validità

È importante notare che solo perché un test ha affidabilità non significa che abbia validità. Validità indica se un test misura realmente ciò che afferma di misurare. Pensa all'affidabilità come misura di precisione e validità come misura dell'accuratezza. In alcuni casi, un test potrebbe essere affidabile, ma non valido. Ad esempio, immagina che i candidati di lavoro stanno facendo un test per determinare se possiedono un particolare tratto di personalità . Mentre il test potrebbe produrre risultati coerenti, potrebbe non misurare effettivamente il tratto che pretende di misurare.