Domanda:
Cosa devo fare se effettivamente trovo un grave difetto nella tesi di dottorato di qualcuno e in un articolo derivato da quella tesi di dottorato?
Alone Programmer
2019-08-14 22:39:24 UTC
view on stackexchange narkive permalink

Recentemente, mi sono imbattuto in una tesi di dottorato e in un articolo derivato da quella tesi di dottorato e ho trovato in essi un grave difetto che rende effettivamente non valide le loro conclusioni.

In primo luogo, non ero sicuro di Ho ragione o no, quindi ho contattato il ragazzo che ha scritto la tesi di dottorato e il successivo articolo e gli ho descritto le mie preoccupazioni e gli ho mostrato i miei calcoli e gli ho chiesto se pensa che in realtà ci sia un grosso problema nella sua tesi di dottorato e in quell'articolo, che ne deriva. Ha risposto così in modo imbarazzante, infatti ho ragione e c'è un problema ma non può farci niente.

Non volevo costringerlo a fare qualcosa ma sono solo pensando che forse potrebbe esserci la possibilità di pubblicare un erratum almeno per quell'articolo. È un grave difetto e sfortunatamente invalida le principali conclusioni di articoli e tesi di dottorato. Sorprendentemente, l'articolo è stato citato per 15 volte e nessuno ha riscontrato questo ovvio problema. La mia domanda: qual è il modo migliore per affrontare questo tipo di situazioni in cui anche l'autore stesso ammette che in realtà c'è un grosso difetto nella sua tesi o articolo?

"Ho ragione e c'è un problema ma lui non può farci niente."Perchè no??
@PeteL.Clark Questa è la sua risposta, non la mia, che non può farci niente, ma ovviamente non sono convinto di questa risposta.
Bene, sono d'accordo con te.Faccio fatica a pensare a una situazione in cui non è vero che non solo PU fare qualcosa al riguardo, ma è eticamente obbligato a farlo.Quello che stavo chiedendo era: quali ragioni ha fornito?
@PeteL.Clark "quali ragioni ha fornito?"Niente!Voglio dire, non ho chiesto perché dopo aver ammesso che c'è un problema e non può farci niente, perché non volevo dare l'impressione di aver trovato qualcosa nel suo lavoro e ora voglio metterelui nei guai.
Il ragazzo non può semplicemente aggiungere un errore?
Cinque risposte:
Jon Custer
2019-08-14 22:54:43 UTC
view on stackexchange narkive permalink

Una possibilità è che tu scriva un articolo sulla tua nuova analisi. Spesso questo dovrebbe essere qualcosa di più che sottolineare il difetto da solo, ma ciò potrebbe dipendere dalla disciplina. Se il difetto che hai rilevato è una parte fondamentale nella tua analisi del tuo lavoro, inclusa la tua analisi aggiornata in un articolo più ampio (citando il loro articolo) è un modo semplice per sottolineare come hai dovuto cambiare il metodo.

La seconda possibilità è che molte riviste (almeno nella mia area) consentano commenti su articoli che hanno pubblicato. Questi servono solo a questo scopo: segnalare qualcosa di "sbagliato" in un documento che è stato pubblicato. Se gli editori decidono di procedere con esso, agli autori originali viene solitamente data l'opportunità di creare un pezzo Reply per concordare, non essere d'accordo, alterare, qualsiasi cosa. Quindi vengono pubblicati back-to-back nella rivista.

Sfortunatamente, non è possibile inserire commenti sugli articoli pubblicati in quella rivista.La mia piccola preoccupazione per la tua prima opzione è che, non voglio che la mia breve lettera, per mostrare il difetto basato sulla rianalisi, sarà considerata un'offesa per il ragazzo che ha scritto l'articolo e la tesi di dottorato.Nonostante il fatto che effettivamente ci sia un grosso difetto in questo articolo, lui ei suoi coautori sono grandi attrattori nel mio campo di ricerca e non voglio lottare con loro.L'autore principale è un bravo ragazzo e si è subito preso la responsabilità del problema, ma non so degli altri suoi coautori.
Devo preparare la mia lettera e inviargliela per vedere se è effettivamente d'accordo e poi inviarla al giornale?Voglio dire, non voglio creare una situazione imbarazzante perché sono solo uno studente laureato.
@AloneProgrammer - l'analisi (difettosa) nel documento è qualcosa di centrale nel tuo lavoro?In tal caso, in uno dei tuoi documenti potresti mostrare la tua analisi e affermare che è diversa dall'altra.Lascia che i lettori capiscano che l'altro è in errore (almeno per il tuo utilizzo).
Sì, in effetti è correlato alla maggior parte della mia ricerca.Questa idea suona alla grande, credo.Grazie!
Per evitare problemi con gli autori dell'articolo originale, puoi invitarli a scrivere insieme il documento di riesame e co-autore.
Conoscendo un po 'di più sul lavoro dell'OP dalle domande passate, questa risposta è decisamente corretta.Questa non è un'area in cui le cose sono veramente * sbagliate *, ma questo suona come un difetto nell'approccio.La cosa corretta da fare è pubblicare un documento utilizzando un approccio diverso facendo riferimento al documento precedente, spiegare perché il nuovo approccio è superiore (lasciare che gli altri decidano se ciò rende il lavoro precedente inferiore) e spiegare le differenze nei risultati.Oppure, come suggerito, pubblicare un commento che affronti gli errori metodologici.Non scrivere all'editore originale, non chiedere la ritrattazione.
Penso che [pubpeer] (https://pubpeer.com/) sia un'alternativa decente alla sezione dei commenti della rivista.Vale la pena menzionarlo?
@KamilSJaron Ho provato PubPeer ma il mio commento è stato moderato ed eliminato.
@AloneProgrammer È ... strano?Hai ricevuto feedback?In teoria, eliminano solo commenti scortesi o accusativi.
seteropere
2019-08-15 00:27:32 UTC
view on stackexchange narkive permalink

Non pensarci troppo.

Ho avuto un'esperienza simile e all'inizio gli autori erano riluttanti (soprattutto perché si sono spostati su un altro problema).

È molto pericoloso lasciare un difetto nella letteratura. Soprattutto un difetto critico in cui altri possono costruirsi su di esso. Questo porterà a più caos. Sono consapevole che alcune persone (ben note) non si preoccupano che i loro vecchi risultati non siano corretti. Ma non è questo l'argomento di Academia. Dovresti apprezzare la revisione tra pari e i risultati rigorosi più di ogni altra cosa. Hai già contattato l'autore, offrigli una collaborazione (se sembra giusto) per correggere il tutto nel contesto del tuo lavoro.

Di solito hai individuato l'errore perché il tuo lavoro è correlato. Su quel particolare collegamento, rianalizza l'affermazione e correggila. Includi nel tuo nuovo documento il reclamo, dimostra perché non è corretto e prova il nuovo risultato corretto. Questo in realtà può essere visto come un nuovo contributo al tuo articolo / tesi.

Per me, sono rimasto molto soddisfatto del risultato; il primo autore dell'altro articolo mi ha fatto da mentore per un po 'dopo che ci siamo incontrati a una conferenza.

Non lo compro.L'intero quadro fisiologico di Descartes è quasi del tutto errato.Il * normale processo * della scienza lo sta correggendo.Non ha causato il caos: forma la struttura basata sulle ipotesi del metodo scientifico.
Gli errori @ScottSeidman si verificano effettivamente, ed è dovere dell'autore assicurarsi che qualsiasi risultato sia corretto prima di rivendicarlo.È anche dovere di altri se individuato un errore risolverlo.Ma lasciare un difetto nella letteratura solo per evitare "situazioni imbarazzanti" (come suggerito dal commento dell'OP alla risposta di Jon) non è la cosa giusta.
Poidah
2019-08-15 15:34:58 UTC
view on stackexchange narkive permalink

Scrivi all'editore della rivista. Offri la tua spiegazione e chiedi il modo migliore per procedere. Potresti essere fortunato e avere la possibilità di scrivere un articolo con i tuoi chiarimenti. L'editore potrebbe invece decidere di fare una correzione con diversi livelli di riconoscimento di te.

L'articolo è stato citato per 15 volte e nessuno ha trovato questo problema ovvio

Il problema non è ovvio nonostante la tua impressione iniziale. Potrebbe essere utile analizzare e contemplare la complessità del punto cieco in quest'area. È stato ovvio per te perché vieni da una prospettiva diversa? Hai esperienza in una disciplina diversa? Interrogati sul perché il problema non fosse ovvio per almeno 15 autori degni di pubblicazione e per non parlare di un numero maggiore di editori e revisori paritari.

Sì, sono d'accordo che non sarà ovvio a meno che non approfondisci il problema.Credo che non sia stato scoperto prima dall'autore stesso o dai revisori della rivista, a causa dell'enorme ambiguità che esiste nella letteratura di quest'area di ricerca.Non è così difficile cogliere il difetto in questo documento, perché si tratta solo di un numero di Reynolds sbagliato, che potrebbe essere calcolato facilmente anche dagli studenti delle scuole superiori.Ma mi chiedo perché nessuno lo abbia fatto prima e perché nessuno si è reso conto semplicemente che se il tuo numero di Reynolds è sbagliato di un ordine di grandezza, i tuoi risultati sono semplicemente sbagliati ...
Bella idea pensare al motivo per cui nessuno ha segnalato il problema fino ad ora.Vale la pena considerare che forse alcune persone l'hanno notato ma non hanno fatto nulla al riguardo.Un altro fattore da considerare è che quelle 15 citazioni potrebbero non essere basate direttamente sul lavoro, potrebbero essere citazioni abbastanza accidentali sulla falsariga di "Altri metodi precedentemente utilizzati in quest'area sono X (1), Y (2) e Z (3)".
Indagare e descrivere l'ambiguità nella letteratura potrebbe essere utile.Potrebbe essere che la maggior parte delle persone non apprezzi o non realizzi l'ambiguità?Potrebbe valere la pena discutere con i colleghi o fare ricerche se si tratta di un problema con il numero di Reynolds o se si inserisce in una categoria di errori riconosciuta?
@user2390246 Le citazioni provengono da una ristretta cerchia di ricercatori, che sono molto conosciuti nel mio campo, ma si citano semplicemente a vicenda.La parte peggiore è che il risultato di questa ricerca proviene da una sfida della conferenza nel 2011 in cui sei diversi gruppi di ricerca hanno eseguito una serie identica di simulazioni e i loro risultati in questi sei gruppi vengono confrontati insieme.Ma semplicemente, tutte queste simulazioni sono costruite sulla base di un input sbagliato (le simulazioni sono altamente sensibili a questo input), il che significa che le loro conclusioni sono sbagliate.
Magari pubblicare una serie di articoli usando l'input "giusto" allora.È più utile descrivere e derivare concetti sul perché e come si verificano questo tipo di errori e ipotesi.Nel mondo dei computer, il lavoro di concettualizzazione non è apprezzato come lo è dalle altre scienze, in particolare dalla psicologia e dalla ricerca sui fattori di sicurezza.Ma se puoi concettualizzarlo, allora puoi usare quella tecnica o conoscenza per identificare altri errori simili o produrre nuovi controlli ed equilibri per tali discussioni in futuro ...
@AloneProgrammer, suona quasi come quello che diceva il mio grande amico psicologo del suo campo: “Ricerca empirica al dieci per cento;il trenta percento di ipotesi plausibili;e il sessanta per cento citando gli altri. "Che (a parte i numeri specifici) sono arrivato a credere che valga anche per la medicina e l'ingegneria del software.
@WGroleau in medicina discutiamo anche dei numeri.E prova a raccogliere più numeri per discutere ulteriormente.Lol.
Ma il punto è che "tutti sanno" X è vero quando in realtà se lo rintracci, scopri che era un'ipotesi che non è mai stata testata.(O in alcuni casi, noto per essere falso ai pochi che si sono presi la briga di controllare prima che diventasse conoscenza comune.)
Scott Seidman
2019-08-15 18:18:09 UTC
view on stackexchange narkive permalink

Questo è ciò che è la scienza. Non tutto ciò che viene pubblicato è corretto o vero. Presumibilmente, la letteratura scientifica si corregge da sola. Qualcuno alla fine lo affronterà e lo correggerà. Ad esempio, l'intero quadro fisiologico di Descartes è quasi del tutto errato. Il processo scientifico ha risolto questo problema, nel corso di centinaia di anni, e ancora le pubblicazioni di Descartes erano una parte importante di quel processo.

Se l'area di ricerca a cui fai riferimento è importante, l'errore che ritieni sia presente fuorvierà la comunità e danneggerà i futuri sforzi di ricerca e partecipi alla comunità con sufficiente credibilità e posizione per correggere il problema , potresti prendere in considerazione una lettera all'editore o una rapida pubblicazione a un rivista di alto profilo.

Se uno qualsiasi di questi criteri non è valido, le tue azioni dovrebbero essere temperate. Se la pubblicazione che ritieni non corretta è sull'argomento della tua ricerca personale, il problema potrebbe trovare la sua strada nella sezione di discussione di una delle tue pubblicazioni del prossimo futuro. Se non raggiunge quel livello nel tuo portafoglio di ricerca personale, potresti semplicemente lasciarlo andare e lasciare che qualcuno più appropriato lo affronti.

La ricerca riguarda la simulazione del flusso sanguigno nella rete neurovascolare, che penso sia importante ...
@AloneProgrammer "Importance" non è ciò che è rilevante qui.Tutti pensano che il loro lavoro sia importante.Non sei in un campo in cui questo tipo di errore viene trattato come qualcosa da rimuovere dalla cronologia.Sviluppa il lavoro con il tuo lavoro migliore.
"Importante" è relativo.Sto parlando più in termini di errore in un documento che può potenzialmente cambiare la politica di salute pubblica in una direzione sbagliata.Pensa ai "vaccini".
@BryanKrause Hai ragione.Ma questo non riguarda la nostra interpretazione dei risultati o anche il confronto dei risultati ottenuti con i dati clinici, che direi che la varianza in quest'area è enorme e anche i risultati contrastanti non sono considerati sbagliati, e come hai sottolineato correttamente, è altoai lettori e ai ricercatori di decidere.Ma il problema qui è qualcosa di più fondamentale sugli input del modello matematico, che viene utilizzato essenzialmente per costruire lo strumento di calcolo ed estrarre i risultati in questo documento.Un fattore di grandezza inferiore al numero di Reynolds è davvero una grande preoccupazione in quest'area.
@AloneProgrammer Va bene, pubblica il tuo lavoro mostrando qualcosa di diverso con diversi input del modello.Succede tutto il tempo.Una lettura corretta di qualsiasi ricerca biologica / medica è "dati questi metodi, abbiamo ottenuto questi risultati" - ci sono migliaia di documenti che utilizzano metodi che sono stati sostituiti con approcci migliori.Se i tuoi nuovi risultati hanno un impatto sul campo che va bene, significa che hai un lavoro potenzialmente ad alto impatto.
Sandra
2019-08-16 19:42:56 UTC
view on stackexchange narkive permalink

Mi sono trovato in una situazione simile, ma dall'altra parte. La mia tesi sulla SM e un articolo derivato da essa contenevano un grave difetto. In breve, la tesi riguardava lo studio di alcune onde statiche in un certo sistema, ma il sistema stesso è instabile nello stesso modello, con la lunghezza d'instabilità paragonabile alla lunghezza d'onda caratteristica delle onde statiche in questione. L'intera indagine non aveva alcun senso scientifico, perché il sistema ipotizzato non poteva essere realizzato fisicamente in primo luogo.

Io stesso ho scoperto il difetto pochi mesi prima di presentare la mia tesi. Ho scoperto il difetto abbastanza per caso: volevo dimostrare formalmente che il sistema è stabile, ma il risultato dei miei calcoli ha mostrato che è vero il contrario. Non avevo mai sentito dal mio supervisore, che mi aveva dato il problema per la mia tesi, o dai suoi colleghi che il sistema potrebbe essere instabile. Tutti semplicemente non hanno nemmeno pensato a quella possibilità.

E poi ho affrontato il dilemma su cosa fare.

La mia scelta finale è stata quella di non dirlo a nessuno e semplicemente di laurearmi. Ero uno studente universitario laureato in un'università russa, e ottenere la mia laurea in MS al più presto e trasferirmi all'estero per ottenere un dottorato di ricerca occidentale era la mia massima priorità. Se avessi sollevato la questione del difetto, avrei subito una grave battuta d'arresto nella mia carriera. Avrei dovuto ricominciare il mio progetto sulla SM e non sono nemmeno sicuro che mi sarebbe stato permesso di farlo. Se avessi avuto una battuta d'arresto nella mia carriera, non sarei stato in grado di vincere un prestigioso stipendio di dottorato in un paese occidentale.

Avrei dovuto controllare all'inizio del mio progetto MS se il sistema è stabile. Avrei dovuto, ma non l'ho fatto. In parte è colpa del mio supervisore, che ha diretto il mio lavoro in modo molto rigido, dandomi compiti e scadenze concrete. Non mi ha mai detto di controllare se il sistema è stabile. Il piano di ricerca ufficiale, che io e lui abbiamo firmato, non conteneva alcuna menzione di un'analisi di stabilità. È stata una mia iniziativa cercare di dimostrare la stabilità, perché sentivo che era necessario per completare la mia indagine. Non ho nemmeno parlato con il mio supervisore della mia idea di eseguire un'analisi di stabilità. Dopo aver scoperto il difetto, ero sicuro che se avessi parlato con il mio supervisore del difetto, avrebbe detto che l'intero progetto MS doveva essere cancellato.

Dopo aver presentato la mia tesi, il mio relatore ha insistito perché scrivessi e pubblicassi un articolo derivato dalla tesi. Non volevo farlo, ma dovevo. Dopotutto, avevo bisogno di buone lettere di raccomandazione dal mio supervisore, quindi dovevo obbedire. L'articolo è stato pubblicato su una rispettabile rivista americana ed è stato citato ~ 20 volte. Scrivere quell'articolo è stata l'esperienza più spiacevole della mia carriera scientifica.

Nessuno ha notato il difetto, quindi ho conseguito con successo la mia laurea in Russia, mi sono trasferito all'estero, ho conseguito un dottorato di ricerca in Occidente e alcuni anni dopo ho pubblicato un articolo che spiega il difetto. Ho scritto esplicitamente in quell'articolo che il mio articolo precedente e una serie di altri articoli, che ho citato, sono scienza non valida. Nessuno ha pubblicato un commento in risposta. Nelle conversazioni private, i miei colleghi hanno confermato che la mia conclusione sul difetto è corretta.

Perché ho aspettato circa sei anni per parlare alla comunità scientifica del difetto? Non odiare il giocatore, odia il gioco. Semplicemente non potevo permettermi una battuta d'arresto nella carriera. Avevo bisogno della mia laurea in MS al più presto. Credo di aver fatto una scelta saggia. Farei esattamente lo stesso nelle stesse circostanze. Chi non lo farebbe?

Riguardo alla tua domanda, la cosa principale è questa: cosa ci guadagni? L'articolo del ragazzo danneggia te o la tua reputazione, ad esempio contraddicendo i tuoi articoli? In caso contrario, voglio dirlo: ci sono così tanti articoli sbagliati o fuorvianti nella scienza, ci sono così tante cose orribili nella scienza e l'articolo del ragazzo è una goccia nell'oceano di tutto questo. Perché invece non dovresti concentrarti sul fare la tua grande ricerca? Immagino che l'articolo del ragazzo sia comunque insignificante e non meriti nemmeno di essere preso in considerazione, proprio come la maggior parte degli articoli di scienza. Immagino sia solo un esercizio matematico o computazionale fatto allo scopo di produrre un articolo e conseguire un dottorato di ricerca. Se la mia ipotesi è corretta, non è necessario chinarsi a quel livello e cercare errori in articoli insignificanti e non è necessario danneggiare la carriera del ragazzo all'inizio. Ho articoli pubblicati su Physical Review Letters, anche come primo autore, ma ho iniziato la mia carriera con una tesi sulla SM sbagliata e fuorviante.

Immagina di aver notato un errore in un articolo pubblicato sull'Indian Journal of Physics, il cui fattore di impatto è inferiore a 1. Ti andrebbe di correggere l'errore pubblicando un commento? Dubito che lo faresti. Non tutti gli errori devono essere corretti. Alcuni non valgono la pena spendere tempo e sforzi per correggerli.

I miei principi sono semplici:

  1. Tutte le riviste di fisica che sono "inferiori" alle riviste di Physical Review sono bidoni della spazzatura.

  2. Se un articolo non interferisce con la mia ricerca, allora questo articolo non è affar mio.

Spero che il mio post aiuti te e altri a guardare il problema da un'angolazione diversa da quella da cui molte persone vedono il problema.

Non ne sono sicuro, ma coprire consapevolmente il difetto solo per far avanzare la "carriera", anche se l'hai chiarito alcuni anni dopo l'incidente, è una cattiva condotta di ricerca o no ...
@AloneProgrammer Naturalmente, è una cattiva condotta di ricerca.Ma se non avessi scelto di coprire il difetto, molto probabilmente non sarei diventato affatto uno scienziato.Non potevo permettermi altri due anni universitari in Russia.I miei genitori non volevano più aiutarmi finanziariamente.Ho dovuto laurearmi al più presto e trasferirmi all'estero.A quel tempo (fine degli anni '90), vivere in Russia era molto difficile a causa di una crisi economica.
@AloneProgrammer Tecnicamente parlando, la mia tesi di laurea magistrale e l'articolo da essa derivato non contenevano errori, perché ho preso un modello che mi è stato dato e ho studiato le onde statiche nell'ambito di quel modello.Il fatto che il modello sia difettoso è un problema a parte.In sostanza, il messaggio della mia tesi e dell'articolo era: "Se prendiamo quel modello, otteniamo questi risultati".Ero solo uno studente universitario che doveva fare quello che diceva il supervisore.Mi ha dato il modello e ha ordinato di fare alcuni calcoli.Li ho fatti e li ho fatti in modo assolutamente accurato.
@AloneProgrammer Non appena ho ritenuto che fosse sicuro per la mia carriera dire alla comunità che il modello era difettoso, l'ho fatto.So di aver violato le norme etiche di condotta della ricerca, ma sono stato FORZATO dalle circostanze.In ogni caso, il mio progetto sulla SM era comunque una ricerca insignificante.Era piuttosto un progetto di formazione che mi ha permesso di imparare a fare calcoli e a scrivere una tesi e un articolo di ricerca.Anche se il modello non fosse difettoso, l'articolo non avrebbe avuto un impatto considerevole.Nessuno ha utilizzato i risultati di quel progetto.La gente ha semplicemente citato il mio articolo.
@AloneProgrammer L'unico danno dovuto al fatto che ho coperto il difetto è che un certo numero di altri scienziati ha continuato a utilizzare lo stesso modello difettoso per altri scopi nelle loro ricerche, ignari che il modello fosse difettoso.Se avessi detto loro che il modello è difettoso, avrebbero speso i loro sforzi di ricerca per qualcosa di più utile.Ma questo avrebbe messo in pericolo la mia carriera.Sfortunatamente, a volte dobbiamo affrontare scelte difficili.


Questa domanda e risposta è stata tradotta automaticamente dalla lingua inglese. Il contenuto originale è disponibile su stackexchange, che ringraziamo per la licenza cc by-sa 4.0 con cui è distribuito.
Loading...