Who's Afraid of Peer Review?

Da Wikipedia, l'enciclopedia libera.
Vai alla navigazione Vai alla ricerca

Who's Afraid of Peer Review? (in italiano: Chi ha paura della revisione paritaria?) è il titolo di un articolo pubblicato dalla rivista Science il 4 ottobre 2013, a firma del corrispondente scientifico inglese John Bohannon.

L'articolo riporta i risultati di una sua inchiesta giornalistica in merito alla revisione paritaria delle riviste a pagamento consultabili in modalità open access. Tra gennaio e agosto 2013, Bohannon inviò una serie di documenti scientifici falsi a 304 riviste di proprietà di altrettanti editori di pubblicazioni open access a pagamento. I paper, scrive Bohannon, "sono stati progettati con difetti scientifici così gravi ed evidenti che avrebbero dovuto essere immediatamente respinti dagli editori e dagli autori [selezionati] per la revisione paritaria", ma, al contrario delle aspettative, il 60% dei periodici accettò.[1][2]

Contesto[modifica | modifica wikitesto]

Le riviste scientifiche Open Access a pagamento nacquero nei primi anni 2000 con la creazione di BioMed Central e della Public Library of Science. Il modello di business di tali riviste non derivava dagli abbonamenti dei lettori e delle istituzioni accademiche e culturali, quanto piuttosto dalle commissioni di pubblicazione corrisposte dagli autori (o dai loro finanziatori). Gli articoli erano resi disponibili gratuitamente su Internet subito dopo la loro prima pubblicazione. Il cosiddetto modello gold open access fu una delle soluzioni ideate per rendere economicamente sostenibile la pubblicazione ad accesso aperto.[3]

Nel 2013, oltre la metà dei lavori scientifici pubblicati due anni prima risultavano disponibili gratuitamente.[4]

La scarsità di barriere all'ingresso e un ritorno sugli investimenti rapido e potenzialmente elevato, attirò in questo mercato vari "editori predatori", che crearono riviste di bassa qualità scientifica, prive di revisione paritaria o di un'iniziativa di controllo editoriale interna, che in sostanza pubblicavano qualsiasi articolo fosse loro sottoposto, pur di introitare le commissioni di pubblicazione. Anche gli autori talora furono ingannati riguardo alle spese di pubblicazione, inserendo ignari scienziati fra i nominativi degli autori o dei revisori a loro insaputa ovvero omettendo nominativi, ruolo ed eventuali conflitti di interessi dei veri autori.[5] La diffusione di questo tipo di editoria a pagamento aprì un acceso dibattito all'interno della comunità scientifica.[6]

Metodo[modifica | modifica wikitesto]

Generazione dei paper[modifica | modifica wikitesto]

Bohannon impiegò il linguaggio Python per creare una "versione scientifica di Mad Libs",[1][7] un videogioco basato su un modello fraseologico: Bohannon scelse la frase "La molecola X delle specie di licheni Y inibisce la crescita della cellula tumorale Z", dove alle lettere doveva essere sostituito il nome di molecole, licheni e cellule tumorali, estratti da una database da lui creato.

Gli articoli presentavano tutti i medesimi dati e conclusioni, oltre allo stesso falso elenco di autori con relative affiliazioni. Tutti i paper descrivevano la scoperta di un nuovo farmaco antitumorale estratto da un lichene, i risultati erano privi di riscontro nei dati sperimentali e inoltre erano stati deliberamente introdotti errori palesi.[8][9]

Scelta del campione[modifica | modifica wikitesto]

Per creare un elenco completo di editori di riviste open access a pagamento, Bohannon si è basato su due fonti: la lista di editori predatori aggiornata da Jeffrey Beall, professore all'Università del Colorado, e l'elenco delle riviste di accesso aperto (DOAJ).

Dopo aver filtrato entrambi gli elenchi per selezionare gli editori che avevano almeno una rivista di medicina, chimica o biologia ad accesso aperto pubblicate, in lingua inglese e che addebitasse agli autori una commissione di pubblicazione, fu estratta una lista target di 304 editori: 167 del DOAJ, 121 dell'elenco di Beall e 16 comuni a entrambi.

L'indagine si focalizzò esclusivamente su riviste Open Access a pagamento. Bohannon decise di non prendere in considerazione altri tipi di riviste tradizionali ad accesso aperto o riviste in abbonamento per il confronto perché i loro tempi di revisione erano eccessivamente lunghi a confronto con quelli del campione di riferimento. Di conseguenza, lo studio non trasse conclusioni in merito alla qualità relativa dei diversi tipi di riviste.[10]

Risultati[modifica | modifica wikitesto]

Accettazione vs rifiuto[modifica | modifica wikitesto]

In totale, 157 delle riviste accettarono il paper inviato, 98 rifiutarono la pubblicazione, mentre altre 49 non avevano completato la propria valutazione quando Bohannon firmò l'articolo.[1] In altre parole, quasi il 60% dei 255 articoli che avevano concluso l'iter di revisione paritaria con un'accettazione o un rifiuto, non era in pratica stata presa seriamente in esame. Mentre una quota parte dei rifiuti può aver riflettuto un filtro a livello editoriale, l'accettazione può solo correlata soltanto al processo di revisione che presenta criticità e aree di necessario intervento.

Solamente in 36 casi, i revisori e le riviste hanno trasmesso dei commenti che riconoscono uno qualsiasi degli errori o difetti scientifici del paper. In 16 di questi 36 casi di commento, gli articoli sono stati comunque accettati. Dai risultati emerse che numerose riviste che avevano accettato i paper, erano pubblicate da prestigiose istituzioni e case editrici, fra le quali: Elsevier, SAGE, Wolters Kluwer (attraverso la controllata Medknow), oltre a diverse università.[1]

Al contrario, PLOS e Hindawi erano gli editori di riviste che avevano respinto il documento. PLOS ONE è stata segnalata come la rivista che aveva il processo di revisione paritaria più rigoroso di tutte, come l'unica rivista che ha identificato i problemi di natura etica della ricerca, quali la carenza documentale in merito alle modalità di trattamento degli animali ai fini della creazione delle linee cellulari tumorali.[1]

DOAJ e lista di Beall[modifica | modifica wikitesto]

L'82% degli editori classificati come "predatori" nella lista di Beall che avevano concluso il processo di revisione, avevano anche accettato il paper. Bohannon asserì che "i risultati mostrano che Beall è bravo a individuare editori con scarso controllo di qualità". Secondo Jeffrey Beall, inventore della lista, l'indagine confermerebbe il valore della banca dati da lui aggiornata e la validità della definizione di "editoria predatoria" da lui utilizzata.[11] Tuttavia, il restante 18% degli editori identificati da Beall come predatori, avevano respinto il paper falso, dato che il comunicatore scientifico Phil Davis commentò dicendo: questo "significa che Beall sta accusando ingiustamente quasi un [editore] su cinque".[12]

Fra gli editori DOAJ che avevano completato il processo di revisione, il 45% accettò il paper. Dopo la diffusione dell'articolo, sul sito web di DOAJ fu comunicato che erano stati modificati i criteri di ammissione delle riviste alla directory.

Mappa globale[modifica | modifica wikitesto]

Science integrò il rapporto con la mappatura geografica degli editori, dei redattori e dei rispettivi conti bancari, evidenziando con colori distinti quelli che avevano accettato o rifiutato il paper. Le mappe furono elaborate a partire dalle tracce di indirizzi IP presenti nelle intestazioni delle e-mail, da registrazioni di WHOIS e da fatture bancarie relative alle spese di pubblicazione.

L'India è risultata essere il più grande mercato mondiale dell'editoria predatoria per la pubblicazione Open Access a pagamento, con 64 editori che avevano accettato i paper, a fronte di soli 15 rifiuti. Gli Stati Uniti si sono posizionati al secondo posto, con 29 editori che avevano accettato il paper, a fronte di 26 che avevano rifiutato.[1] Nel continente africano, il quadro peggiore è risultato essere quello della Nigeria, con una quota relativa di accettazioni pari al 100%.[13]

Reazioni[modifica | modifica wikitesto]

Nell'editoria accademica[modifica | modifica wikitesto]

Tre editori annunciarono la chiusura delle riviste interessate dall'indagine.[14] Il DOAJ riesaminò la propria directory e introdusse criteri di selezione più rigorosi.[15]

L'Open Access Scholarly Publishers Association (OASPA) istituì una commissione d'inchiesta interna per accertare le circostanze che portarono tre dei suoi membri all'accettazione di un documento falso.[16] L'11 novembre 2013, l'OASPA espulse la Dove Medical Press e Hikari Ltd.[17]

SAGE Publications fu sospesa per sei mesi per aver accettato un paper falso.[17] La casa editrice annunciò che avrebbe modificato la linea editoriale della rivista che aveva accettato il paper falso, precisando che non intendeva chiuderla.[18] A conclusione dei sei mesi e delle iniziative intraprese, l'associazione riabilitò SAGE fra i suoi membri.[19]

Nella comunità scientifica[modifica | modifica wikitesto]

A poche ore dalla sua pubblicazione, l'articolo fu fortemente criticato da parte di alcuni sostenitori del movimento Open Access.

La prima critica sostanziale fu condivisa dal cofondatore di PLOS, Michael Eisensul, nel suo blog personale: "Suggerire - come la scienza (sebbene non Bohannon) sta provando a fare - che il problema con l'editoria scientifica è che l'accesso aperto abilita le truffe su Internet equivale ad affermare che il problema del sistema finanziario internazionale siano le truffe nigeriane sui bonifici bancari. Si tratta di problemi profondi dell'editoria scientifica. Ma il modo di risolvere questo problema non è limitare le pubblicazioni ad accesso aperto. È quello di correggere la revisione paritaria".[20] Eisen fece notare anche che la stessa revisione paritaria di Science aveva prodotto nel 2010 gli articoli sul GFAJ-1.

Note[modifica | modifica wikitesto]

  1. ^ a b c d e f John Bohannon, Who's Afraid of Peer Review?, in Science, vol. 342, n. 6154, 2013, pp. 60–65, DOI:10.1126/science.342.6154.60, PMID 24092725. URL consultato il 20 ottobre 2013.
  2. ^ John Bohannon, Who's Afraid of Peer Review: Data and Documents, in Science, vol. 342, n. 6154, 2013, pp. 60–5, DOI:10.1126/science.342.6154.60, PMID 24092725.
  3. ^ Peter Suber, Open Access Overview, su legacy.earlham.edu, Earlham College. URL consultato il 21 ottobre 2013.
  4. ^ Richard Van Noorden, Half of 2011 papers now free to read, in Nature, vol. 500, n. 7463, 20 agosto 2013, pp. 386–387, DOI:10.1038/500386a, ISSN 0028-0836 (WC · ACNP), PMID 23969438.
  5. ^ Richard Knox, Some Online Journals Will Publish Fake Science, For A Fee, in NPR, 3 ottobre 2013. URL consultato il 20 ottobre 2013.
  6. ^ Declan Butler, Investigating journals: The dark side of publishing, in Nature, vol. 495, n. 7442, 27 marzo 2013, pp. 433–435, DOI:10.1038/495433a, ISSN 0028-0836 (WC · ACNP), PMID 23538810.
  7. ^ Jason Koebler, Inside Science Magazine's 'Sting' of Open Access Journals, su motherboard.vice.com, Motherboard. URL consultato il 22 ottobre 2013 (archiviato dall'url originale il 23 ottobre 2013).
  8. ^ Science's Sokal moment, in The Economist, 5 ottobre 2013. URL consultato il 20 ottobre 2013.
  9. ^ Dan Vergano, Fake Cancer Study Spotlights Bogus Science Journals, in National Geographic, 3 ottobre 2013. URL consultato il 22 ottobre 2013.
  10. ^ Ivan Oransky, Science reporter spoofs hundreds of open access journals with fake papers, su retractionwatch.wordpress.com, Retraction Watch. URL consultato il 22 ottobre 2013.
  11. ^ Jeffrey Beall, Science Magazine Conducts Sting Operation on OA Publishers, su scholarlyoa.com, Scholarly Open Access. URL consultato il 22 ottobre 2013 (archiviato dall'url originale il 12 ottobre 2013).
  12. ^ Phil Davis, Open Access "Sting" Reveals Deception, Missed Opportunities, in The Scholarly Kitchen.
  13. ^ Peer review map, in Science, AAAS. URL consultato il 21 ottobre 2013.
  14. ^ Ivan Oransky, Fallout from Science's publisher sting: Journal closes in Croatia, in Retraction Watch, 17 ottobre 2013.
  15. ^ Second response to the Bohannon article, su doaj.org, Directory of Open Access Journals. URL consultato il 21 ottobre 2013 (archiviato dall'url originale il 10 novembre 2013).
  16. ^ Claire Redhead, OASPA's response to the recent article in Science entitled "Who's Afraid of Peer Review?", su oaspa.org, Open Access Scholarly Publishers Association. URL consultato il 21 ottobre 2013.
  17. ^ a b OASPA’s second statement following the article in Science entitled "Who’s Afraid of Peer Review?", su oaspa.org, Open Access Scholarly Publishers Association. URL consultato l'11 novembre 2013.
  18. ^ Camille Gamboa, Statement by SAGE on the Journal of International Medical Research, su sagepub.com, Sage. URL consultato il 22 novembre 2013.
  19. ^ Sarah Shaffi, OASPA reinstates Sage membership, in The Bookseller, 29 aprile 2014.
  20. ^ Michael Eisen, I confess, I wrote the Arsenic DNA paper to expose flaws in peer-review at subscription based journals, su michaeleisen.org. URL consultato il 21 ottobre 2013.

Collegamenti esterni[modifica | modifica wikitesto]

Estratto da "https://it.wikipedia.org/w/index.php?title=Who%27s_Afraid_of_Peer_Review%3F&oldid=138412014"