Domanda:
Come reagire alle affermazioni errate dei revisori?
O. R. Mapper
2015-07-22 13:48:06 UTC
view on stackexchange narkive permalink

Dato che ora mi è successo più volte per diversi articoli, non sto descrivendo un caso specifico, ma gli aspetti astratti che erano comuni a tutte le situazioni.

Occasionalmente, nella sezione "Attività" o "Materiali" del capitolo "Valutazione" o "Studio dell'utente", i miei documenti contengono affermazioni come:

  • "La figura ... mostra uno dei le attività dallo studio sull'utente. La risposta corretta era .... "
  • " Per lo studio sull'utente, avevamo preparato otto attività. Sono state fornite sotto forma di domande in linguaggio naturale. Gli utenti dovevano utilizzare il nostro nuovo concetto per inserire i parametri appropriati come descritto dalle domande. Le domande andavano da semplici (come "...?", vedere la figura ... per la soluzione) a complesse (come "...?" , cfr. soluzione nella figura ...). "

In questi casi, le didascalie delle figure menzionano ancora una volta le figure raffigurano domande e / o soluzioni dallo studio dell'utente.

Occasionalmente, questi vengono accolti con commenti di revisori come:

    "Il documento non fornisce alcun esempio delle attività presentate durante lo studio sugli utenti. Migliorerebbe notevolmente la qualità dell'articolo se gli autori potessero fornire almeno uno di questi esempi. Senza questo, trovo molto difficile avere un'idea chiara di come è stato condotto lo studio e, quindi, non posso nemmeno dire quanto siano affidabili i risultati presentati nella sezione ... "

Baso il mio ragionamento sull'idea che il commento di questo revisore sia, chiaro e semplice, errato, in quanto ho fornito esempi concreti di attività. Se in qualche modo mi sbaglio, fatemelo sapere.

Sebbene tali affermazioni non fossero certamente l'unica ragione per il rifiuto del voto, alcuni dei revisori che hanno scritto qualcosa in questo senso hanno reso piuttosto chiaro che vedevano la presunta mancanza di qualsiasi esempio di attività come uno dei più problemi critici con l'invio.

La mia domanda si concentra sulla situazione in cui un documento di questo tipo viene rivisto: o perché è stato accettato dopo tutto e sto preparando una versione pronta per la fotocamera, o perché è stato rifiutato e sto cercando di migliorarlo prima presentandola altrove: Qual è la reazione appropriata rispetto a tali commenti?

  • Ignora le dichiarazioni e non modificare nulla dei rispettivi esempi nel mio articolo . Questa potrebbe essere una strada percorribile, ma lascia un cattivo gusto ignorare completamente alcune affermazioni del revisore, anche se sono chiaramente comprensibili e dovrebbero essere semplici da implementare.
  • Rielabora le frasi che menzionano gli esempi. Potrei farlo, ma sono cauto nel peggiorare le cose, poiché considero già le rispettive affermazioni nel mio articolo abbastanza inequivocabili.
  • Aggiungi altri esempi e possibilmente in posizioni diverse. Ciò potrebbe rendere più difficile perdere l'exa mples, ma nei documenti della conferenza CS, lo spazio è una risorsa estremamente scarsa.
  • Chiedi all'editore. Soprattutto nei casi in cui il documento è stato eventualmente ancora accettato, questo mi sembra abbastanza estremo . Ritengo che contattare l'editore dovrebbe essere riservato a problemi veramente eccezionali e gravi, non alle "preoccupazioni quotidiane" di tutti gli autori che stanno preparando le loro versioni CR.

Nota che non sto chiedendo come gestire la decisione di revisione. Anche se è un po 'fastidioso se un rifiuto è effettivamente basato su dichiarazioni errate del revisore, sono d'accordo nel ripresentare una versione rivista altrove. Chiedo specificamente come rivedere le parti particolari che sono state erroneamente criticate.

Alcune peculiarità del mio campo da notare che potrebbero non essere ovvie:

  • Solo alcune conferenze hanno una fase di confutazione. Se lo fanno, non è garantito (o anche ragionevolmente probabile) che specialmente i revisori che hanno criticato molto un articolo leggeranno effettivamente la confutazione e forse addirittura modificheranno la loro recensione. Inoltre, queste confutazioni sono generalmente limitate in lunghezza (ad esempio a 500 parole), quindi di solito puoi menzionare solo una selezione di tutte le questioni sollevate dai revisori.
  • Le versioni CR sono raramente accompagnate da lettere esplicative agli editori (o, più precisamente, il comitato del programma) nella mia esperienza.
    • La sottomissione di solito avviene per mezzo di sistemi di presentazione basati sul web che consentono il caricamento di esattamente un file PDF, che a volte viene controllato automaticamente in base a fattori formali, come il numero di pagine (quindi anche aggiungere una pagina in più con note esplicative davanti al foglio non funzionerà).
    • Se viene fornita l'opportunità di caricare alcuni file aggiuntivi, questo di solito è inteso per caricare le fonti e materiale supplementare come video che verranno inseriti nel CD degli atti. Non è chiaro se il materiale verrà vagliato abbastanza a fondo in modo che le lettere agli editori vengano trovate in tempo e trattate in modo appropriato.
  • Il mio campo è correlato all'HCI.
    • Pertanto, i contributi a volte sono di natura grafica. Di conseguenza, le cifre a volte non forniscono solo informazioni sul contributo (grafici statistici, architetture esemplari), le cifre sono spesso una parte cruciale per mostrare il contributo. In altre parole, a volte, la rappresentazione è il contributo, o mostra come il nuovo concetto presentato nel documento fa qualcosa.
    • Gli studi sugli utenti vengono utilizzati per verificare in che misura gli utenti umani possono andare d'accordo con il nuovo concetto. Pertanto, le attività sono spesso scritte come domande. I partecipanti allo studio devono quindi trovare le risposte corrette a queste domande utilizzando il nuovo concetto da testare. Questo di solito significa che devono interagire / fare input con / nel prototipo implementato che mostra il nuovo concetto. Questo ha lo scopo di imitare il modo in cui il concetto verrebbe utilizzato nella vita reale, dove gli utenti utilizzerebbero anche la rispettiva nuova tecnica HCI per recuperare le informazioni.
Sembra che la tua situazione dipenda molto dalla tua specifica disciplina CS: limiti di pagina rigidi, cicli di revisione a round singolo, confutazioni rare. Molte cose che mi verrebbero in mente in altre discipline non funzioneranno per te.
Presumo tu sia in CS (anch'io). Non sono sicuro della tua sottodisciplina, però. Perché gli esempi che utilizzi "La figura ... mostra una delle attività dallo studio dell'utente. La risposta corretta era" o "Per lo studio dell'utente, avevamo preparato otto attività". Questi esempi non suonano come il tipico documento CS.
@Alexandros: Il mio campo è correlato all'HCI, quindi i contributi, i concetti e / o parti degli studi sugli utenti sono tipicamente di natura grafica. Come credo di aver accennato una volta in qualche altro post: Nel mio campo, alcune cifre non si limitano a descrivere i dati sul contributo. Alcune cifre * mostrano * o * sono * il contributo.
Come lettore occasionale, che non ha familiarità con il tuo campo, trovo le tue frasi di esempio un po 'confuse. Ad esempio, trovo difficile associare una _risposta corretta_ a un _task_, o considerare un'attività data sotto forma di domande. Inoltre trovo poco chiara la frase "Gli utenti avrebbero dovuto utilizzare il nostro nuovo concetto per inserire i parametri appropriati come descritto dalle domande". Forse i revisori hanno condiviso le mie stesse perplessità.
@MassimoOrtolano: Questa è un'osservazione interessante. Ho ampliato l'ultimo paragrafo della mia domanda per sottolineare il modo usuale in cui vengono svolti gli studi sugli utenti nel mio campo. Spero che questo ti chiarisca. (Nonostante ciò, le mie sezioni di studio sugli utenti nei documenti di solito forniscono alcune informazioni più introduttive, come "Nello studio sugli utenti, agli utenti sono state poste una serie di domande. Ciascuna delle domande costituiva un'attività e agli utenti è stato chiesto di fornire una corretta risposta.")
Sei risposte:
Danny Ruijters
2015-07-22 16:47:31 UTC
view on stackexchange narkive permalink

Una semplice regola pratica può aiutare a gestire i commenti dei revisori: "I revisori hanno sempre ragione, anche quando hanno torto."

Ciò significa che quando i revisori fanno supposizioni sbagliate o traggono conclusioni sbagliate, apparentemente l'articolo non è abbastanza chiaro e ha permesso loro di farlo.

Per lo più, nella mia esperienza, la soluzione che funziona meglio è ristrutturare l'articolo per evitare che i lettori traggano conclusioni sbagliate. Rendi il testo più chiaro, migliora la struttura, evita di essere eccessivamente prolisso.

I revisori apprezzeranno un simile approccio più di quanto tu cerchi di far notare nelle risposte ai revisori perché hanno torto, o ignorando semplicemente i loro commenti.

Quando il tuo articolo è stato rifiutato immediatamente, utilizza questo approccio per migliorare il documento per un nuovo invio ed evitare di incappare negli stessi problemi.

Potresti espandere la tua risposta con un esempio concreto, per favore? Quando è presente un capitolo "Studio dell'utente" con un sottocapitolo "Attività" che contiene l'affermazione "C'erano otto attività, ad esempio: ''" e la conclusione di un revisore è "Nessun esempio di attività da lo studio dell'utente è stato fornito. ", Non capisco davvero come posso migliorare la struttura o rendere il testo più chiaro. Sarei interessato a vedere come gli altri autori gestiscono questo, senza rischiare che allo stesso tempo il testo diventi meno chiaro per gli altri revisori che hanno trovato tutte le informazioni.
@O.R.Mapper, una cosa che puoi fare è spargere più puntatori agli esempi in tutto il testo. Ciò funziona particolarmente bene se, come suggerisce la tua domanda originale, un'attività è esemplificata in una figura. La figura appartiene a una sezione specifica del testo, qualcosa come "metodi", ma già nell'introduzione probabilmente dici qualcosa sul fatto che avevi soggetti che svolgevano compiti, e lì scrivi tra parentesi ", per esempi vedi Sez. xy e Fig. z ".
@O.R.Mapper: è difficile fornire consigli per il tuo articolo concreto, poiché non ho letto il tuo articolo, né le recensioni. Potrebbe essere che il capitolo specifico sia perfettamente a posto, ma che la struttura complessiva del documento possa essere migliorata, o che il documento sia troppo lungo, o che il documento si occupi di troppi dettagli, o che il pubblico del giornale e del giornale lo faccia non corrisponde bene, o qualcosa di completamente diverso. Capisco che sia frustrante quando i revisori commentano qualcosa che consideri completamente evidente (credimi, ci sono stato).
In alternativa, potrebbe essere che la natura * concreta * dei tuoi esempi non sia così concreta come potresti pensare che siano - prova a rafforzare la sostanzialità delle tue prove ed evidenziarla nel modo più chiaro possibile.
@Zibbobz: "concreto" è inteso come "letterale" - le parole esatte che sono state mostrate ai partecipanti allo studio sono state scritte anche nel documento.
jakebeal
2015-07-22 17:28:58 UTC
view on stackexchange narkive permalink

Quasi mai ignoro il commento di un revisore. Anche se il revisore ha semplicemente torto, il modo in cui ha torto di solito indica un modo in cui una significativa sottopopolazione di lettori rischia di leggere male l'articolo.

Detto questo, quando un revisore sembra avere semplicemente Ho trascurato un pezzo di carta, generalmente giocherò con la formulazione, la struttura o il materiale introduttivo per farlo risaltare più chiaramente.

Ad esempio, con il tuo esempio di "otto attività", potrei eseguire una o tutte le seguenti operazioni per rendere più evidente la presenza e la visibilità del materiale:

  • Rendi assicurati che l'introduzione abbia una sottosezione "la struttura di questo documento" che includa la parola "esempio".
  • Fai lo stesso per la sezione che include le attività con un paragrafo "struttura di questa sezione" in il suo inizio.
  • Aggiungi un'intestazione di sottosezione per "Esempi di attività"
  • Inserisci gli esempi di domande in un elenco puntato, anziché in prosa

Ricorda, il revisore potrebbe essere incompetente e sciatto, ma molti dei tuoi lettori lo saranno anche . Vuoi far conoscere il tuo punto di vista al maggior numero possibile di loro, a prescindere.

+1 per "il modo in cui si sbagliano di solito indica un modo in cui una significativa sottopopolazione di lettori rischia di leggere male l'articolo"
+1 per lo stesso! Questa è una luce guida, anche senza revisori. Se il tuo amico legge il giornale e qualcosa non gli è chiaro, non sarà l'unico.
CrepusculeWithNellie
2015-07-22 14:51:21 UTC
view on stackexchange narkive permalink

Quanto segue si basa sul presupposto che i commenti del revisore riguardino effettivamente principalmente questioni editoriali che possono essere risolte attraverso modeste quantità di modifiche del testo (i tuoi esempi hanno questo aspetto) e non sollevano alcun problema sostanziale (un esempio del quale sarebbe essere dove i revisori ti chiedono di eseguire ulteriori esperimenti che richiederebbero una notevole quantità di tempo). In quest'ultimo caso, suggerirei di mettersi in contatto con l'editore per discutere se ci si può ragionevolmente aspettare che il lavoro aggiuntivo venga svolto entro il periodo di tempo dato per la revisione (se presente).

Penso che sono successe due cose: i revisori sono stati sciatti o non hanno avuto il tempo di leggere il documento ininterrotto e ne hanno dimenticato alcune parti, e in secondo luogo: a quanto pare hai reso loro abbastanza facile dimenticare le parti rilevanti.

Non conoscendo i tuoi documenti, posso solo dare suggerimenti generali per evitare il secondo problema o ridurne l'impatto. Il primo è avere una struttura adeguata nel tuo articolo: avere (sotto) sezioni separate che chiariscono diversi aspetti del tuo approccio tecnico. Nel mio sottocampo di CS, ad esempio, è molto comune avere una (sotto) sezione che descrive il modello del sistema, che può avere un'ulteriore sottostruttura che descrive il modello di guasto, i modelli di carico ecc. - anche quando io come revisore ho dimenticato alcuni dettagli su alcune ipotesi o dettagli della configurazione sperimentale, so dove guardare quando una tale sezione è presente e si distingue. In secondo luogo, puoi cospargere riferimenti incrociati alle sezioni pertinenti in vari punti ("L'utente ha fatto bene nell'attività X (vedi Sezione xy per la descrizione dell'attività) perché ..") invece di ripetere le descrizioni dell'attività.

Correggere / riorganizzare il tuo articolo in questo modo dovrebbe sicuramente far parte della tua reazione, non ignorare questi commenti. Consiglierei di non infastidire l'editore su questioni editoriali: spetta a te rendere le cose chiare e rendere felici i revisori.

Per riassumere, penso che il tuo approccio globale dovrebbe essere basato sul presupposto che tutto è colpa tua e non dei revisori. Non sto dicendo che lo sia, ma penso che il risultato complessivo sia migliore se lo tratti in questo modo.

Gli esempi per le attività venivano solitamente forniti in una sottosezione "Attività" o "Materiali" del capitolo "Valutazione" o "Studio dell'utente". Nel mio sottocampo di CS, la struttura comune per gli articoli è spesso "Introduzione - Lavori correlati - - Implementazione - Valutazione - Conclusione e lavoro futuro" (non necessariamente con esattamente gli stessi titoli). Il tuo suggerimento con riferimenti incrociati sembra promettente.
"Ho dimenticato alcune parti" sembra alquanto improbabile quando gli esempi desiderati appaiono in una forma eccezionale come qui, vale a dire come una figura separata.
Vaibs
2015-07-23 19:23:46 UTC
view on stackexchange narkive permalink

Essendo io stesso un ricercatore e avendo visto come viene svolto il processo di revisione, so che ci sono revisori che assegnano il compito di revisione ai loro studenti e questi studenti che non sono esperti valutano articoli scritti da altri ricercatori seri. Naturalmente, in seguito il revisore originale controlla anche le recensioni scritte dagli studenti, ma penso che questo sia un duro colpo per la qualità della pubblicazione. Naturalmente, non posso dire quanto sia comune questa pratica. Può essere molto piccolo. E poiché ti sei lamentato del fatto che ricevi spesso quelle recensioni negative, credo che non sei una vittima di questi revisori non qualificati. D'altra parte, come menziona un'altra risposta, un revisore ha sempre ragione, quindi, dalla tua descrizione, quello che suggerirei è, cerca di creare una descrizione chiara dei tuoi esempi. Ad esempio, scrivi i sottotitoli, "Esempio 1", "Esempio 2" e in questo modo, non c'è alcuna possibilità che anche un revisore mezzo attento lo perda.

Ricorda, oggigiorno la maggior parte dei revisori è oberata di altro lavoro, e se il tuo articolo non è leggibile molto chiaramente, è probabile che riceverai commenti negativi, anche quando pensi di non meritarlo.

Bill Barth
2015-07-22 17:17:05 UTC
view on stackexchange narkive permalink

Se l'articolo viene accettato e non è presente una fase o un passaggio di confutazione e hai davvero una sezione che chiama le attività, ignora quella parte della revisione. Se c'è un'opportunità per confutare, o questo è un diario in cui l'editore ha bisogno di una risposta, scrivi all'editore che hai già fornito compiti di esempio, cita il numero di pagina e la sezione e cita il testo. Non c'è davvero più niente che devi fare o dovresti fare.

gefei
2015-07-22 15:04:42 UTC
view on stackexchange narkive permalink

Ad essere onesti, non credo che un commento come

il documento non fornisca alcun esempio delle attività presentate durante lo studio dell'utente. Migliorerebbe notevolmente la qualità dell'articolo se gli autori potessero fornire almeno uno di questi esempi

non sono corretti. Sebbene tu abbia descritto brevemente i tuoi sondaggi, il revisore potrebbe comunque volerli esaminare effettivamente. Se fossi in te, pubblicherei i sondaggi su Internet e includerei un collegamento ad essi nel documento. In questo modo, chiunque potrebbe facilmente vedere quali sono le tue "otto attività" e convincersi che hai fatto un ottimo lavoro :)

Non capisco. Non ho solo descritto brevemente i sondaggi, ho mostrato domande reali dal sondaggio.
Il poster ha scritto esplicitamente nella sua domanda, che c'era un esempio esplicito di un'attività. Non vedo come insinuare il contrario sia utile in alcun modo.


Questa domanda e risposta è stata tradotta automaticamente dalla lingua inglese. Il contenuto originale è disponibile su stackexchange, che ringraziamo per la licenza cc by-sa 3.0 con cui è distribuito.
Loading...