Domanda:
Cosa fare quando il revisore desidera i valori p, ma preferisco utilizzare le stelle significative per evitare il disordine nella tabella?
wwl
2017-06-21 19:58:34 UTC
view on stackexchange narkive permalink

Le mie tabelle di regressione contengono stime dei coefficienti, errori standard e stelle di significatività che indicano l'intervallo di valori p (ad es. due stelle significa p < 0,05).

Un revisore vuole i valori p esatti. Personalmente penso che renderebbe la tabella più disordinata di quanto non sia già, e ho 12 tabelle di regressione.

Devo adottare il suggerimento del revisore, semplicemente perché sono loro che giocheranno un ruolo importante nel determinare se il mio articolo è accettato? O dovrei cercare di spiegare, dicendo che il valore p può essere calcolato dalle stime dei coefficienti e dagli errori standard (inoltre, le stelle di significatività danno già una buona guida al valore p?)

== ===

Modifica: ho deciso di eliminare le stelle significative e inserire i valori p. Grazie per il feedback! (È interessante notare che il documento è stato accettato e il revisore ha consigliato il documento per l'accettazione, ma hanno suggerito che avevo sia le stelle significative che il valore p. Ma non ho accettato il loro commento)

Sei determinato nella tua opinione e vuoi sapere qual è una buona * strategia * per far accettare il tuo articolo senza tenere conto del commento di questo revisore?O stai chiedendo * altre opinioni * sui pro e contro di fornire valori p esatti?
(Suggerimento: una di queste due alternative è fuori tema qui.)
Questi valori p esatti sono scritti altrove nel documento?Altrimenti stai potenzialmente nascondendo parte dei tuoi dati, il che sembra una cattiva idea.
@TobiasKildetoft se ho capito correttamente, il valore p può essere calcolato dai valori forniti in modo che tutte le informazioni necessarie siano lì.
Di quanti p-value in totale stiamo parlando?Avrebbe senso scegliere una selezione rappresentativa di valori p che potrebbero essere forniti nel testo?
@StrongBad Ahh, giusto.Suppongo che questo mi riveli come qualcuno che non lavora mai con nessuna di queste cose :)
Una discussione correlata, con alcuni punti su entrambi i lati: https://stats.stackexchange.com/questions/94974/is-the-exact-value-of-a-p-value-meaningless
puoi aggiungere i valori p alla risposta alla recensione (in modo che il revisore possa vederla) ma non al manoscritto?
Dato che hai menzionato molti valori p, spero che tu sia a conoscenza della correzione del test di ipotesi multiple.Ciò potrebbe ridurre in modo significativo il significato dei tuoi risultati e potrebbe essere uno dei motivi per cui il revisore desidera che tu includa i valori esatti.
Caro signore, la quantità di spazzatura in alcune risposte qui è inquietante.Non esiste qualcosa di più significativo, un'osservazione È o NON È significativa.Potrei essere irritabile ma mi infastidisco molto quando vedo persone che mettono cose come * = p <0,05, ** = p <0,01 e così via perché NON DIRE quello che devo sapere quando leggo i tuoi risultati, vale a dire è stato significativo DOPOla tua correzione di test multipli.
@SinanÜnür Sono d'accordo e non ho mai inteso dire che il valore p debba essere omesso (anche se potrebbe essere calcolato sulla base delle informazioni presenti).Stavo discutendo contro l'uso di *, ** e così via poiché è privo di significato.Personalmente propongo di elencare il valore p e l'alfa (corretto), poiché questo mi consentirà di vedere se il valore p di 0,049 è significativo o, in alternativa, se il valore p di 0,0013 non è significativo (perché l'alfa era 0,0012 dopocorrezione bonferroni == esempio personale).
Dopo aver letto alcune nozioni nei commenti e il contenuto di alcune risposte, stavo per consigliare di chiedere sulle statistiche.SE ma (leggendo ulteriormente) penso che Fomite (che ha un'alta reputazione lì) abbia fornito un utile riassunto di gran parte di ciò che unbuona risposta sulle statistiche, probabilmente direbbe E., quindi forse non è necessario, dopotutto.
@lighthousekeeper Non penso che esista un "insieme rappresentativo di valori p" e, anche se esiste, non è comunemente usato.
@wwl La mia ipotesi era che tu discuti il contenuto della tabella nel testo del tuo articolo e, così facendo, discuti alcune, ma non tutte le voci della tua tabella in modo specifico.Quindi, per quelli di cui parli, puoi dare il valore p tra parentesi.Questa è una soluzione che ho effettivamente visto nell'ingegneria del software.Ma per essere onesti, gli autori nel nostro settore spesso non sono i maggiori esperti di statistica al mondo.
Sei risposte:
silvado
2017-06-21 20:25:47 UTC
view on stackexchange narkive permalink

In generale non sei obbligato a soddisfare tutti i desideri del revisore nella tua revisione, a meno che l'editore non abbia menzionato esplicitamente tale punto nella lettera di decisione. Se non vuoi seguire il suggerimento di revisione di un revisore, spiega semplicemente nella tua lettera di risposta in modo fattuale perché scegli di farlo e guarda cosa ne pensano l'editore e il revisore. Hai già buoni motivi per una risposta del genere nella tua domanda.

Suggerirei comunque di rendere la vita del revisore il più semplice possibile. Anche se non vuoi averli nel documento, potresti forse aggiungere un elenco di valori p alla lettera di risposta esattamente per quel commento, affermando che per comodità del revisore hai calcolato i valori p dai dati fornito nel documento (invece di aspettarsi che lo faccia il revisore). Potresti anche offrirti di inserire un elenco di questo tipo in qualsiasi materiale supplementare se la rivista lo ha e il revisore pensa che sia importante che i lettori lo vedano.

+1 per "inserire tale elenco in qualsiasi materiale supplementare".Tutti coloro che vogliono vedere i valori p possono leggerli lì ma non disturbano il flusso delle informazioni rilevanti nelle tabelle dell'articolo.
Anche i materiali supplementari sono stati il mio primo pensiero.Se il revisore vuole davvero che quei valori p siano facilmente accessibili, potrebbe essere meglio incorporare il suo suggerimento.Aggiungerlo ai materiali supplementari non cambierà affatto il tuo articolo, ma probabilmente lo renderà più completo e soddisferà il revisore.Tutti vincono!
StrongBad
2017-06-21 20:27:18 UTC
view on stackexchange narkive permalink

Qualcosa di simile non dovrebbe influenzare la decisione finale dell'editor. Inoltre, non vale la pena litigare con l'editor / revisore, quindi dovresti essere flessibile e accomodante.

Dovresti controllare i problemi passati e vedere qual è il formato. Se in genere vengono forniti valori p, coefficienti di regressione ed errori standard, probabilmente dovresti farlo. Se vengono forniti solo 2, vai con quelli. Supponendo che i coefficienti di regressione e gli errori standard siano tipicamente forniti, nella tua lettera di confutazione una dichiarazione sulla falsariga di

Seguendo quello che riteniamo sia il formato standard per Titolo rivista , noi hanno incluso solo i coefficienti di regressione e gli errori standard. Poiché il valore p può essere stimato da questi valori, non vi è alcuna perdita di informazioni. Saremmo lieti di apportare una modifica se la nostra comprensione del formato standard non è corretta o se in questo caso dovrebbe essere fatta un'eccezione. Per tua comodità abbiamo allegato una copia delle tabelle con i valori p inclusi a questa lettera.

* non dovrebbe influenzare la decisione finale *, ma potrebbe ancora.Allora perché lottare per una questione così banale?
Fomite
2017-06-22 02:17:41 UTC
view on stackexchange narkive permalink

Risposta per argomento: dovresti fare come chiede il revisore. Le stelle di regressione sono vaghe e non specifiche e amplificano differenze che in realtà sono banali. Sono una versione più grossolana delle stesse informazioni e notevolmente meno utili.

Sono anche scettico sul fatto che la differenza tra "*" e "0.46" sia ciò che renderà la tua tabella troppo ingombra.

Semmai, la risposta più difendibile basata su "il valore p può essere calcolato dalle stime dei coefficienti e dagli errori standard" è di eliminare entrambi.

Academia Answer La risposta a ciò che dovresti fare dipenderà molto dai revisori e da quanto importante vogliono fare di questo, oltre che dalla posizione della rivista al riguardo. Ci sono riviste che recensisco per le quali questa obiezione (e in effetti, i valori p in generale) è abbastanza probabile da far deragliare l'intero articolo. Ce ne sono altri in cui questo è meno preoccupante.

La domanda diventa quindi "Vale la pena di fare un altro giro di revisione potenzialmente non dover riformattare le mie tabelle?"

Non riesco a immaginare un circostanza in cui risponderei "Sì", ma YMMV.

migliore risposta finora (di gran lunga)
Per un'opinione dissenziente sul tuo primo paragrafo, [dai un'occhiata a Boos & Stefanski (2011, * TAS *)] (http://www.tandfonline.com/doi/abs/10.1198/tas.2011.10129).Fondamentalmente, i valori $ p $ sono statistiche proprio come le stime dei coefficienti e altri, e mostrano variabilità di campionamento.Boos & Stefanski sostengono che alla luce di questa variabilità campionaria, la precisione delle "stelle significative" può essere proprio ciò che è giustificato, mentre dare i valori esatti di $ p $ implica una precisione che semplicemente non c'è.[Maggiori informazioni su questo qui.] (Https://stats.stackexchange.com/a/284135/1352)
+1 A volte potresti finire i "round" e il foglio viene semplicemente rifiutato dall'editore.Vale davvero la pena rischiare?
@StephanKolassa ha buoni punti e il documento [The Meta-Distribution of Standard P-Values] (https://arxiv.org/abs/1603.07532) di Taleb afferma di mostrare che un valore p di 0,05 non ha comunque senso.
@StephanKolassa Personalmente, ho semplicemente smesso di riportare i valori p, ma questo sembrava troppo lontano per la domanda delle operazioni.Per lo più sono contrario alle stelle ai confini.p = 0,055 ottiene "" e p = 0,05 ottiene "*"
@crobar: grazie, l'articolo sembra interessante - daremo un'occhiata.Il tipo astratto mi ricorda [la danza dei valori p] (https://www.youtube.com/watch?v=5OL1RqHrZQ8).
NeutronStar
2017-06-21 20:58:11 UTC
view on stackexchange narkive permalink

Oltre ai suggerimenti per includere i valori p esatti per rendere felice l'arbitro, voglio anche aggiungere che includendo i valori p in modo esplicito (piuttosto che costringere i lettori a calcolarli da soli se vogliono sapere) farà anche i tuoi lettori sono più felici.

Quando leggo un articolo, spero che l'autore abbia incluso tutte le informazioni di cui ho bisogno per capire di cosa ho bisogno dal foglio senza dover fare molti passi da solo .

I commenti non sono per discussioni estese;questa conversazione è stata [spostata in chat] (http://chat.stackexchange.com/rooms/60998/discussion-on-answer-by-joshua-what-to-do-when-reviewer-wants-p-values-but-i-pr).
Cem Kalyoncu
2017-06-21 23:36:45 UTC
view on stackexchange narkive permalink

Spiega che la tabella sarebbe troppo ingombra e includi una tabella completa con i valori p nella risposta.

A volte richieste come queste servono a determinare se i valori (valori p in questo caso) sono accettabili in tutti i casi. "Voglio vedere i valori" non sempre significa che devono essere sul giornale. Potrebbe letteralmente significare che vuole vedere personalmente i valori a scopo di revisione.

In qualità di revisore, ho chiesto informazioni extra solo per vedere se tutto va bene e come autore ho fornito ai revisori informazioni extra sulla risposta per assicurarmi che tutto sia a posto e che le cose mancanti non siano davvero lì solo perché in realtà non rientra nei limiti della pagina.

Non penso che avere informazioni nella risposta al solo revisore sia sufficiente, se necessario, dovrebbe essere disponibile anche per il lettore.
@Davidmh Certamente, ma a volte non c'è modo di aggirare, alcune tabelle sono troppo grandi per stare in qualsiasi pagina.I lettori possono presumere che tutto sia in ordine.
"I lettori possono presumere che tutto sia in ordine".Sono fortemente in disaccordo.La revisione tra pari non è una garanzia di qualità e i lettori sono fortemente incoraggiati a trattare ogni articolo in modo critico.E senza revisioni aperte, non ho modo di sapere cosa pensano i revisori o qual è la loro esperienza (ad esempio, potrebbero essere molto ben informati sul dominio in questione, ma deboli nelle statistiche).
Prima di tutto, lasciatemi difendere la mia risposta dicendo che questo è (il recensore che chiede informazioni per se stesso) a volte il caso.Allora lascia che continui a dire che hai ragione su tutto ciò che hai detto.La peer review * dovrebbe * essere una garanzia sulla qualità, ma ho assistito abbastanza da sapere che non è così.
Bryan Krause
2017-06-22 00:45:03 UTC
view on stackexchange narkive permalink

Capisco la tua obiezione all'inserimento di informazioni ridondanti, ma le tue tabelle così come sono davvero tutte così disordinate? Con solo coefficienti, errore standard e alcuni asterischi codificati, insieme a un'etichetta per ogni riga, suona come solo 3 colonne (non è necessario che gli asterischi siano la loro colonna).

A meno che non mi manchi qualcosa, consiglierei semplicemente di aggiungere i valori p per placare il revisore nella tua revisione. Se causa un problema con la composizione e l'organizzazione, potresti chiedere all'editore la sua preferenza, che potrebbe prevalere sul revisore o provocare un passaggio a materiale supplementare.

Proprio come preferenza personale, di solito preferisco vedere coefficienti e intervalli di confidenza piuttosto che errori standard, valori p e stelle di significatività, se ci limitiamo a solo un paio di elementi. Gli intervalli di confidenza sono molto più flessibili.

È una tabella di correlazione che di solito è il triangolo superiore / inferiore di una matrice NxN simmetrica, quindi potrebbe avere un numero molto elevato di righe e colonne.Ogni voce della tabella sembra probabilmente x.xx (y.yy) *
@StrongBad Questo ha senso;Raramente, se non mai, ho visto quelle tabelle incluse nel corpo di un giornale, comunque.OP si riferiva a "tabelle di regressione" che ho assunto fosse una tabella di coefficienti fattoriali, anche se suppongo che quelle potrebbero anche essere disposte orizzontalmente in livelli e verticalmente in fattori, ho visto entrambi.


Questa domanda e risposta è stata tradotta automaticamente dalla lingua inglese. Il contenuto originale è disponibile su stackexchange, che ringraziamo per la licenza cc by-sa 3.0 con cui è distribuito.
Loading...