Una recente serie di studi ha messo a fuoco una preoccupazione accademica di lunga data: una parte significativa della ricerca nelle scienze sociali potrebbe non reggere ad un esame accurato. I risultati del progetto SCORE (Systematizing Confidence in Open Research and Evidence) suggeriscono che quasi la metà dei risultati pubblicati su rinomate riviste di scienze sociali non può essere replicata da ricercatori indipendenti.
Sebbene questa notizia possa sembrare allarmante, evidenzia una tensione fondamentale nel modo in cui produciamo, convalidiamo e utilizziamo la conoscenza in un mondo sempre più complesso.
Il nocciolo del problema: riproducibilità vs. replica
Per comprendere il dibattito attuale, è essenziale distinguere tra due termini spesso confusi:
- Riproducibilità: la capacità di ottenere gli stessi risultati utilizzando gli stessi dati e metodi originali.
- Replicazione: la capacità di ottenere gli stessi risultati utilizzando nuovi dati in contesti diversi.
Il progetto SCORE, durato sette anni, ha analizzato 3.900 articoli di scienze sociali. I suoi risultati hanno rivelato una tendenza chiara: le ricerche e gli studi più recenti pubblicati su riviste che impongono la condivisione aperta dei dati hanno molte più probabilità di essere riprodotti. Ciò suggerisce che la trasparenza è l’antidoto più efficace contro l’errore.
Perché la scienza fatica a ripetersi
La difficoltà nel replicare i risultati non è necessariamente un segno di frode, ma piuttosto un riflesso degli argomenti studiati. A differenza della fisica di laboratorio, dove le variabili possono essere strettamente controllate, le scienze sociali e mediche si occupano di sistemi umani complessi.
Diversi fattori contribuiscono a questa difficoltà:
– Ambienti variabili: il comportamento umano e i risultati medici sono influenzati da diversi casi, da contesti sociali mutevoli e da differenze individuali imprevedibili.
– Limiti delle risorse: condurre una replica su vasta scala è costoso e richiede molto tempo. La maggior parte dei ricercatori accademici è incentivata a produrre nuovo lavoro per far avanzare la propria carriera piuttosto che passare anni a ritestare vecchi studi.
– Complessità metodologica: sebbene rianalizzare i dati esistenti sia relativamente semplice, ricreare un intero esperimento da zero è un’impresa enorme che nemmeno l’intelligenza artificiale può ancora risolvere in modo efficiente.
L’arma politica del dubbio
Uno dei rischi più significativi identificati non è l’errore scientifico in sé, ma il modo in cui tale errore viene percepito dai politici. C’è una tendenza crescente a trasformare l’incertezza scientifica in negazione politica.
Inquadrando il naturale processo di perfezionamento scientifico come una “crisi”, gli attori politici possono riformulare la legittima incertezza come prova di un fallimento sistemico. Questa tattica viene spesso utilizzata per giustificare l’inazione o per respingere prove concrete che contraddicono un programma specifico.
Trattare la non replicabilità come una squalifica totale di una teoria confonde l’incertezza con l’ignoranza, rischiando una paralisi nel processo decisionale laddove il giudizio umano è maggiormente necessario.
Costruire la fiducia attraverso la trasparenza
La soluzione al problema della riproducibilità non è abbandonare le scienze sociali, ma riformare la cultura della ricerca. Per andare avanti, la comunità accademica deve concentrarsi su:
- Trasparenza universale dei dati: seguendo l’esempio di finanziatori come l’Economic and Social Research Council del Regno Unito, sempre più istituzioni dovrebbero richiedere ai ricercatori di condividere i loro dati sottostanti.
- Verifica incentivante: L’attuale modello accademico “pubblica o perisci” dà priorità alla novità. Spostare gli incentivi per premiare i ricercatori che testano e verificano i risultati esistenti consentirebbe alla documentazione scientifica di “correggersi automaticamente” in modo più efficace.
- Contestualizzare le prove: ai policy maker deve essere insegnato a considerare i singoli studi come pezzi di un puzzle più ampio. Una singola replica fallita non invalida un campo; piuttosto, i risultati dovrebbero essere valutati rispetto all’intera base di prove disponibile.
Conclusione
L’incapacità di replicare alcuni studi è un segnale di riforma strutturale, non una ragione per scartare le scienze sociali. La fiducia nella ricerca sarà costruita abbracciando la trasparenza e riconoscendo l’incertezza, piuttosto che tentare di fingere che non esista.
