Comprendere la validità interna ed esterna

La validità interna ed esterna sono concetti che riflettono se i risultati di uno studio sono affidabili e significativi. Mentre la validità interna si riferisce al modo in cui uno studio è condotto (la sua struttura), la validità esterna riguarda l'applicabilità dei risultati al mondo reale.

Che cos'è la validità interna?

La validità interna è la misura in cui uno studio stabilisce una relazione causa-effetto affidabile tra un trattamento e un risultato. La validità interna riflette anche che un dato studio consente di eliminare spiegazioni alternative per un risultato.

Ad esempio, se implementi un programma per smettere di fumare con un gruppo di individui, quanto puoi essere sicuro che qualsiasi miglioramento osservato nel gruppo di trattamento sia dovuto al trattamento che hai somministrato?

La validità interna dipende in gran parte dalle procedure di uno studio e dal rigore con cui viene eseguito.

La validità interna non è un concetto di tipo "sì o no". Invece, consideriamo quanto possiamo essere fiduciosi con i risultati di uno studio, in base al fatto che eviti trappole che potrebbero rendere discutibili i risultati.

Minore è la possibilità di "confondimento" in uno studio, maggiore è la validità interna e più fiduciosi possiamo essere nei risultati. Il confondimento si riferisce a una situazione in cui entrano in gioco altri fattori che confondono l'esito di uno studio. Ad esempio, uno studio potrebbe renderci incerti se possiamo fidarci di aver identificato lo scenario "causa-effetto" di cui sopra.

In breve, puoi essere sicuro che il tuo studio sia valido internamente solo se puoi escludere spiegazioni alternative per i tuoi risultati. Come breve riassunto, puoi ipotizzare causa ed effetto solo quando soddisfi i seguenti tre criteri nel tuo studio:

La causa ha preceduto l'effetto in termini di tempo.
La causa e l'effetto variano insieme.
Non ci sono altre spiegazioni probabili per questa relazione che hai osservato.

Fattori che migliorano la validità interna

Se stai cercando di migliorare la validità interna di uno studio, vorrai prendere in considerazione aspetti del tuo progetto di ricerca che renderanno più probabile che tu possa rifiutare ipotesi alternative. Ci sono molti fattori che possono migliorare la validità interna.

accecante: partecipanti, e talvolta ricercatori, che non sono consapevoli dell'intervento che stanno ricevendo (ad esempio utilizzando un placebo in uno studio farmacologico) per evitare che questa conoscenza pregiudichi le loro percezioni e comportamenti e quindi l'esito dello studio
Manipolazione sperimentale: Manipolare una variabile indipendente in uno studio (ad esempio, dare ai fumatori un programma di cessazione) invece di osservare semplicemente un'associazione senza condurre alcun intervento (esaminando la relazione tra esercizio fisico e comportamento del fumo)
Selezione casuale: Scegli i tuoi partecipanti in modo casuale o in modo che siano rappresentativi della popolazione che desideri studiare
Randomizzazione: Assegna in modo casuale i partecipanti ai gruppi di trattamento e di controllo e garantisce che non vi siano distorsioni sistematiche tra i gruppi
Protocollo di studio: Seguire procedure specifiche per la somministrazione del trattamento in modo da non introdurre alcun effetto, ad esempio, di fare le cose in modo diverso con un gruppo di persone rispetto a un altro gruppo di persone

Fattori che minacciano la validità interna

Così come ci sono molti modi per garantire che uno studio sia valido internamente, c'è anche un elenco di potenziali minacce alla validità interna che dovrebbero essere considerate quando si pianifica uno studio.

attrito: Partecipanti che abbandonano o abbandonano uno studio, il che significa che i risultati si basano su un campione parziale delle sole persone che non hanno scelto di andarsene (e possibilmente che hanno tutti qualcosa in comune, come una maggiore motivazione)
confondendo: una situazione in cui si può ritenere che i cambiamenti in una variabile di esito siano il risultato di una terza variabile correlata al trattamento somministrato.
Diffusione: si riferisce al trattamento in uno studio che si diffonde dal gruppo di trattamento al gruppo di controllo attraverso i gruppi che interagiscono e parlano o si osservano l'un l'altro. Questo può anche portare a un altro problema chiamato demoralizzazione risentita, in cui un gruppo di controllo si sforza meno perché si sente risentito per il gruppo in cui si trova.
bias dello sperimentatore: uno sperimentatore che si comporta in modo diverso con diversi gruppi in uno studio, che porta a un impatto sui risultati di questo studio (e viene eliminato attraverso l'accecamento)
Eventi storici: può influenzare l'esito degli studi che si verificano in un periodo di tempo, come un cambiamento nel leader politico o un disastro naturale che influenza il modo in cui i partecipanti allo studio si sentono e agiscono
Strumentazione: è possibile "innescare" i partecipanti a uno studio in determinati modi con le misure che utilizzi, il che li induce a reagire in un modo diverso da come avrebbero altrimenti.
Maturazione: descrive l'impatto del tempo come variabile in uno studio. Se uno studio si svolge in un periodo di tempo in cui è possibile che i partecipanti siano cambiati naturalmente in qualche modo (invecchiando, si stancassero), allora potrebbe essere impossibile escludere se gli effetti osservati nello studio fossero semplicemente dovuti all'effetto di tempo.
Regressione statistica: L'effetto naturale dei partecipanti agli estremi di una misura che cade in una certa direzione solo per il passare del tempo piuttosto che per l'effetto di un intervento
test: Testare ripetutamente i partecipanti utilizzando le stesse misure influenza i risultati. Se sottoponi a qualcuno lo stesso test tre volte, non è probabile che faccia meglio quando impara il test o si abitua al processo di test in modo che risponda in modo diverso?

Che cos'è la validità esterna?

La validità esterna si riferisce a quanto ci si può aspettare che il risultato di uno studio si applichi ad altri contesti. In altre parole, questo tipo di validità si riferisce a quanto siano generalizzabili i risultati. Ad esempio, i risultati si applicano ad altre persone, ambienti, situazioni e periodi di tempo?

La validità ecologica, un aspetto della validità esterna, si riferisce alla possibilità di generalizzare i risultati di uno studio al mondo reale.

Mentre metodi di ricerca rigorosi possono garantire la validità interna, la validità esterna, d'altra parte, può essere limitata da questi metodi.

Un altro termine chiamato trasferibilità si riferisce alla validità esterna e si riferisce a un disegno di ricerca qualitativo. La trasferibilità si riferisce al trasferimento dei risultati a situazioni con caratteristiche simili.

Fattori che migliorano la validità esterna

Cosa puoi fare per migliorare la validità esterna del tuo studio?

Considera il realismo psicologico: Assicurati che i partecipanti vivano gli eventi di uno studio come un evento reale raccontando loro una "storia di copertina" sullo scopo dello studio. Altrimenti, in alcuni casi, i partecipanti potrebbero comportarsi in modo diverso da come farebbero nella vita reale se sapessero cosa aspettarsi o qual è lo scopo dello studio.
Eseguire il ritrattamento o la calibrazione: utilizzare metodi statistici per correggere problemi relativi alla validità esterna. Ad esempio, se uno studio aveva gruppi irregolari per alcune caratteristiche (come l'età), potrebbe essere utilizzata la riponderazione.
Replicare: Eseguire nuovamente lo studio con campioni diversi o in impostazioni diverse per vedere se si ottengono gli stessi risultati. Quando sono stati condotti molti studi, meta-analisi può essere utilizzato anche per determinare se l'effetto di una variabile indipendente è affidabile (basato sull'esame dei risultati di un gran numero di studi su un argomento).
Prova esperimenti sul campo: Condurre uno studio fuori dal laboratorio in un ambiente naturale.
Utilizzare criteri di inclusione ed esclusione: Ciò assicurerà di aver definito chiaramente la popolazione che stai studiando nella tua ricerca.

Fattori che minacciano la validità esterna

La validità esterna è minacciata quando uno studio non tiene conto delle interazioni delle variabili nel mondo reale.

Effetti pre e post testtest: Quando il pre o il post test è in qualche modo correlato all'effetto osservato nello studio, in modo tale che la relazione causa-effetto scompaia senza questi test aggiunti
Caratteristiche di esempio: Quando una caratteristica del particolare campione era responsabile dell'effetto (o parzialmente responsabile), portando a una generalizzazione limitata dei risultati
bias di selezione Selection: considerato una minaccia alla validità interna, il bias di selezione descrive le differenze tra i gruppi in uno studio che possono riguardare la variabile indipendente (ancora una volta, qualcosa come la motivazione o la volontà di prendere parte allo studio, i dati demografici specifici degli individui hanno maggiori probabilità di partecipare in un sondaggio online).
Fattori situazionali: L'ora del giorno, l'ubicazione, il rumore, le caratteristiche del ricercatore e il numero di misure utilizzate possono influire sulla generalizzabilità dei risultati.

Validità interna e validità esterna

La validità interna ed esterna sono come due facce della stessa medaglia. Puoi avere uno studio con una buona validità interna, ma nel complesso potrebbe essere irrilevante per il mondo reale. D'altra parte, potresti condurre uno studio sul campo che è molto rilevante per il mondo reale, ma che non ha risultati affidabili in termini di conoscenza di quali variabili hanno causato i risultati che vedi.

Somiglianze

Quali sono le somiglianze tra validità interna ed esterna? Sono entrambi fattori che dovrebbero essere considerati quando si progetta uno studio ed entrambi hanno implicazioni in termini di significato dei risultati di uno studio. Entrambi non sono concetti "o/o", quindi sarai sempre tu a decidere in che misura il tuo studio si comporta in termini di entrambi i tipi di validità.

Ciascuno di questi concetti è in genere riportato in un articolo di ricerca pubblicato su una rivista accademica. Questo è così che altri ricercatori possono valutare lo studio e prendere decisioni sull'utilità e la validità dei risultati.

differenze

La differenza essenziale tra validità interna ed esterna è che la validità interna si riferisce alla struttura di uno studio e alle sue variabili, mentre la validità esterna si riferisce a quanto universali sono i risultati. Ci sono anche ulteriori differenze tra i due.

Validità interna

Le conclusioni sono giustificate
Controlla variabili estranee
Elimina spiegazioni alternative
Concentrati sull'accuratezza e su metodi di ricerca solidi

Validità esterna

I risultati possono essere generalizzati
I risultati si applicano a situazioni pratiche
I risultati si applicano al mondo in generale
I risultati possono essere tradotti in un altro contesto

La validità interna si concentra sul mostrare una differenza dovuta alla sola variabile indipendente, mentre i risultati della validità esterna possono essere tradotti nel mondo in generale.

Esempi di validità

Un esempio di uno studio con una buona validità interna sarebbe se un ricercatore ipotizzasse che l'uso di una particolare app di consapevolezza ridurrà l'umore negativo. Per testare questa ipotesi, il ricercatore assegna in modo casuale un campione di partecipanti a uno dei due gruppi: coloro che utilizzeranno l'app per un periodo definito e coloro che si impegnano in un compito di controllo.

Il ricercatore assicura che non vi siano distorsioni sistematiche nel modo in cui i partecipanti vengono assegnati ai gruppi e inoltre acceca i suoi assistenti di ricerca ai gruppi in cui si trovano gli studenti durante la sperimentazione.

Viene utilizzato un protocollo di studio rigoroso che delinea le procedure dello studio. Le potenziali variabili confondenti sono misurate insieme all'umore, come lo stato socioeconomico dei partecipanti, il sesso, l'età, tra gli altri fattori. Se i partecipanti abbandonano lo studio, le loro caratteristiche vengono esaminate per assicurarsi che non vi siano distorsioni sistematiche in termini di chi rimane nello studio.

Un esempio di uno studio con una buona validità esterna sarebbe nell'esempio sopra, il ricercatore ha anche assicurato che lo studio avesse una validità esterna facendo in modo che i partecipanti utilizzassero l'app a casa piuttosto che in laboratorio. Il ricercatore definisce chiaramente la popolazione di interesse e sceglie un campione rappresentativo e replica lo studio per diversi dispositivi tecnologici.

Una parola da Verywell

Impostare un esperimento in modo che abbia una valida validità interna ed esterna implica essere consapevoli fin dall'inizio dei fattori che possono influenzare ogni aspetto della tua ricerca.

È meglio dedicare più tempo alla progettazione di uno studio strutturalmente solido che abbia implicazioni di vasta portata piuttosto che affrettarsi rapidamente attraverso la fase di progettazione solo per scoprire problemi in seguito. Solo quando la validità sia interna che esterna è elevata si possono trarre conclusioni forti sui risultati.

Una panoramica del metodo scientifico