Domanda:
Le distribuzioni dei voti dei corsi dovrebbero essere a campana?
Michael Stachowsky
2017-08-11 17:50:21 UTC
view on stackexchange narkive permalink

Ho appena finito di insegnare il mio primo corso e i miei voti sono fortemente distorti:

enter image description here

Considero le mie valutazioni corrette e le hanno fatte controllare da docenti più esperti. Inoltre, le medie dei corsi sono generalmente alte in questo corso (la mia era 83,5 circa). Tuttavia, sembra che io abbia una strana distribuzione dei voti. Cosa potrebbe averlo causato?

Per rispondere alla domanda del titolare: ** no **.E se pensi che la distribuzione dei voti sia un problema, prova a chiedere ai docenti senior.
Non è che nessuna distribuzione nel mondo debba essere a forma di campana e le qualità possono avere qualsiasi tipo di distribuzione.Le poche volte che ho esaminato la distribuzione nei miei esami erano bimodali o vagamente esponenziali.
Nota che c'è un limite massimo ai voti al 100%, ed è qui che sembra che tu abbia un secondo picco.Potresti essenzialmente spremere tutti quelli che sarebbero stati sulla coda alta in un secchio.
Cosa dice @Walt.Questo è un classico [effetto soffitto] (https://en.wikipedia.org/wiki/Ceiling_effect_ (statistiche)).Il primo impulso di uno psicometrista sarebbe quello di aggiungere un paio di elementi più difficili al test, per distinguere meglio gli studenti molto bravi da quelli stellari.YMMV.
Nota che filosoficamente, una distribuzione a forma di campana implica anche cose come "Tanti studenti dovrebbero fallire la mia classe quanti dovrebbero ottenere A".Probabilmente dovresti decidere se questo è desiderabile.
Vedi anche [Che aspetto ha una distribuzione ottimale dei voti?] (Https://academia.stackexchange.com/questions/61038/what-does-an-optimal-grading-distribution-look-like)
secondo me i voti sono troppo alti a meno che la dimensione della classe non sia abbastanza piccola e gli studenti siano stati in qualche modo preselezionati per la classe.Questa distribuzione è più vicina a quello che mi aspetterei in una classe di scuola superiore.A proposito, dove lavoro 0 è riservato alla disonestà accademica, quindi scontando questo potresti avere un singolo fallimento, che sarebbe basso.
Il bello di questo corso è che i voti sono già su questo livello.Tuttavia, non sono sicuro di come sia la distribuzione per gli altri istruttori
In una distribuzione dei gradi perfettamente a campana, generalmente ti aspetteresti tanti quanti Fs.Ma se la tua classe si svolge nel tipico stile americano, la stragrande maggioranza dei F * dovrebbe * essere eliminata poiché gli studenti possono abbandonare il corso fino al semestre - di solito avendo tutto il tempo per rendersi conto che non sono pronti per ilclasse.Questo da solo produrrà una forte inclinazione verso risultati elevati, e questa è solo una singola ragione.Nel complesso non vedo nulla di evidentemente sbagliato in base alla sola distribuzione.
@Walt buona osservazione.Aggiungo solo che potrebbe essere necessario.
Perché vorresti che i tuoi voti risultassero come una curva a campana?Non significherebbe una classe fallimentare?
Suppongo che gli esami pre-corso dovrebbero ottenere qualcosa di simile a una curva a campana.Potresti aspettarti che metà delle persone sappia metà delle cose e il resto lo sappia più o meno, prima di entrare in qualsiasi corso.
Che tipo ovviamente è questo?
@anonymous: è un corso di calcolo multivariabile del secondo anno
@Fomite Questo non è necessariamente vero: il campanello può essere (e di solito è) centrato in modo significativo sopra il segno di passaggio / fallimento.Il dettaglio di una forma ottimale potrebbe probabilmente essere discusso per sempre, ma il * troncamento * implicito in questa distribuzione mi interesserebbe.Vorrei seguire il suggerimento di Stephan e aggiungere alcuni elementi più stimolanti alla fine delle domande per distinguere tra tutti quegli studenti nel primo paio di bidoni.
Sette risposte:
Penguin_Knight
2017-08-11 18:15:15 UTC
view on stackexchange narkive permalink

La distribuzione non deve essere a forma di campana. In esami aperti su vasta scala può essere ragionevole ipotizzare una curva a campana. In molte altre situazioni, le distribuzioni possono essere influenzate dalla dimensione della classe, dalla combinazione degli studenti, dagli obiettivi del corso, dalla validità delle domande d'esame e dalla difficoltà delle domande d'esame, ecc.

Dimensioni della classe: Più piccola è la classe, più difficile è osservare eventuali distribuzioni distinguibili, come una distribuzione normale a forma di campana.

Misto di studenti: se stai insegnando in una classe quantitativa e ci sono due flussi di studenti da i ) programmi artistici e ii) programmi ingegneri, potresti vedere qualche altra distribuzione come una distribuzione bimodale a doppia campana.

Obiettivi del corso: alcuni corsi possono essere progettati sulla base di un insieme di standard fissi e rigorosi . Ad esempio, se insegni anestesiologia e il voto per superare l'esame da parte degli studenti è del 90%, è improbabile che la distribuzione finale sia a campana.

Validità e difficoltà dell'esame: domande non valide può ridurre l'accuratezza che vieta di vedere la vera distribuzione; un esame eccessivamente facile o difficile può spostare la curva verso il limite alto e basso, causando distribuzioni a campana troncate.

Se devo dare una valutazione, suggerirei prima di rimuovere lo 0% in quanto è un caso speciale e tuttavia inclinando piuttosto male l'impressione della curva. Per il resto, direi che se stai insegnando un corso introduttivo in cui ci si aspetta che gli studenti acquisiscano una buona base, questa non è una cattiva distribuzione. Se stai insegnando un corso molto avanzato, con quasi il 20% che si avvicina al punteggio massimo, la valutazione potrebbe trarre vantaggio da una nuova messa a punto.

In generale, consiglierei:

  • Analizza i voti e gli obiettivi del tuo corso in tandem. Solo la distribuzione dei voti in sé non dice se stai facendo un buon lavoro.

  • Accumula più dati tra coorti di studenti. Trovo che dopo 3-4 volte l'insegnamento dello stesso corso inizierebbero a emergere i modelli.

  • Confronta con la distribuzione storica dei voti (solo pochi anni prima di iniziare questo corso) per assicurarti di non essere lontano. Consultare il preside appropriato se lo è.

  • Se è così propenso, prova ad analizzare gli elementi dell'esame. Sono disponibili statistiche speciali per verificare se le domande dell'esame sono "valide". La maggior parte degli istituti accademici dovrebbe avere un ufficio per le questioni educative che possa aiutarti.

A questa risposta molto esauriente, aggiungerei che una distribuzione bimodale come quella osservata da OP è, nella mia esperienza, piuttosto usuale.E, se devi usare una singola misura della tendenza centrale, * mediana, * non media, è quella giusta.
La forma sembra meno importante del fatto che la forma possa essere spiegata o meno.Dopo tutto, a che servono le osservazioni senza ipotesi?
@corsiKa Quando ero molto nuovo nell'insegnamento ho mostrato a un membro anziano della facoltà la mia distribuzione bimodale dei voti e ho chiesto cosa significasse."Significa", ha detto, toccando la gobba destra sul grafico, "che questi ragazzi capiscono e," toccando la gobba sinistra, "questi ragazzi no."Da allora questa è stata la mia ipotesi.
Especially Lime
2017-08-11 19:55:57 UTC
view on stackexchange narkive permalink

Questo mi sembra il tipo di distribuzione che ti aspetteresti da un esame che è semplicemente troppo facile e non riesce a distinguere nella fascia alta.

Probabilmente hai una distribuzione approssimativamente a forma di campana delle abilità degli studenti, ma poiché nel tuo esame la metà della campana è all'85% o giù di lì, tutta la coda ad alta abilità viene inevitabilmente ammassata insieme la barra del 95-100%.

Interessante.Follow-up totalmente basato sull'opinione: è una brutta cosa?
Dipende qual è il punto dell'esame.Se vuoi solo verificare che gli studenti abbiano raggiunto almeno un certo standard, va bene.Se vuoi anche essere in grado di dire chi è semplicemente buono e chi è eccezionale, allora è una cosa negativa.Di solito in un contesto universitario vuoi fare entrambe le cose.
@Michael Stachowsky Da studente, odio sempre gli esami facili.Anche se sei ancora molto generoso con i voti, fare esami oltre i limiti mentali degli studenti lo rende molto più divertente.Inoltre fa capire che c'è molto di più da imparare.
@A.W.Grossbard Sì, gli studenti forti spesso godono di esami impegnativi.Ma gli esami che mettono alla prova gli studenti migliori possono facilmente portare a lacrime (letterali) all'altro capo della classe.
@A.W.Grossbard Il punto di un esame non è necessariamente quello di sfidare gli studenti.Soprattutto nelle classi di livello inferiore si tratta di determinare se hanno raggiunto un certo livello di comprensione adeguato per passare al corso successivo senza perdersi totalmente.Un esame difficile sarebbe inappropriato in una classe del genere.
@A.W.Grossbard: Come istruttore in un grande college della comunità urbana, ho imparato il seguente criterio: se trovo che una domanda di prova sia "interessante", allora è catastrofico (cioè, l'intera classe ma una falliràmale), e deve essere cancellato.
liori
2017-08-12 19:34:15 UTC
view on stackexchange narkive permalink

Ricorda che il tuo compito principale non è distinguere con precisione gli studenti migliori dal peggio, ma assicurarti che imparino ciò che dovrebbero. Questo è anche il ruolo del test: per gli studenti che superano un test dovrebbe essere un obiettivo fisso e specifico da raggiungere, non una competizione.

Pertanto, la domanda corretta qui è: credi davvero a tutti dei tuoi studenti ad eccezione di quei pochi sfortunati meritano di passare la tua classe? Hanno imparato quello che avrebbero dovuto imparare? Se è così, va bene. I punteggi riflettono bene su di te che hai insegnato bene ai tuoi studenti. Questo potrebbe anche essere un segno che non è il test che richiede aggiustamenti, ma il curriculum: potresti probabilmente insegnare più materiale in quella classe e indirettamente renderà l'esame più difficile.

Se no, allora dovresti assolutamente aggiustare il test.

Qualche tempo fa ho raccolto grafici da alcuni documenti del Ministero dell'Istruzione polacco durante l'esame di scuola superiore. Questo è un campione enorme (circa 300.000 all'anno) e puoi vedere che i punteggi non assumono sempre una forma a campana. Alcune discussioni utili sull'interpretazione di questi grafici si trovano in un thread reddit, in particolare una spiegazione sul picco intorno al 30% (il punto di passaggio) dell'esame di lingua.

È fantastico.Grazie mille per aver condiviso quel link.
"Ricorda che il tuo compito principale non è distinguere accuratamente gli studenti migliori dal peggio, ma assicurarti che imparino ciò che dovrebbero."Questo chiaramente non è il caso in molte circostanze.
nicomp
2017-08-13 21:46:18 UTC
view on stackexchange narkive permalink

Docenti senior qui ... Chiediti se stai valutando i tuoi studenti l'uno contro l'altro, contro il materiale o una combinazione di entrambi. Se stai classificando in base al materiale, la forma della distribuzione non è rilevante. Ad esempio, se il primo esame è scrivere il programma "Hello World" e tutti lo accettano, allora avresti una distribuzione molto distorta ma avrai il risultato ottimale per la classe nel suo insieme.

Se i tuoi risultati di apprendimento sono ben definiti, come dovrebbero essere, e il tuo curriculum affronta questi risultati, quindi stai facendo il tuo lavoro quando tutti guadagnano una "A". Quando insegno programmazione sto attento a valutare gli studenti in base al materiale, non uno contro l'altro. Ho una serie di risultati e insegno a questi risultati. Il primo giorno dico agli studenti: "Spero che guadagniate tutti un" A. " Non li sto mettendo l'uno contro l'altro, dal punto di vista del grado. Ci sono altri modi per premiare gli studenti che ottengono risultati migliori che imporre una curva a campana o qualsiasi altra distribuzione in una classe.

In effetti, il materiale appreso non dovrebbe essere rappresentato da una curva gaussiana.Altezze dei tuoi studenti, sì.
jrh
2017-08-13 03:13:29 UTC
view on stackexchange narkive permalink

Generalmente le distribuzioni dei voti vengono analizzate in questo modo:

  1. Se troppi studenti superano la curva a campana, significa che i test sono troppo facili. I test non separano gli studenti "eccezionali" da quelli "medi".
  2. Se troppi studenti scendono al di sotto della curva a campana, significa che i test sono troppo difficili.

Tuttavia, non sono sicuro che guardare la distribuzione dei voti sia il modo migliore per avere un'idea di come gli studenti stanno reagendo ai compiti. Se guardi solo i voti, in realtà guardi solo alla somma di tutti i risultati e potrebbe essere difficile per te identificare la cosa migliore che puoi fare per migliorare il tuo corso.

L'istruttore ricorda che ci sono più risorse a tua disposizione oltre a un voto complessivo su un test (o un voto complessivo della classe). Consiglio di suddividere un esame o una lezione per argomento e valutare il rendimento degli studenti con ciascun argomento.

  1. Se un'ampia percentuale di studenti ha risposto correttamente alle domande su un determinato argomento, è fantastico ! La tua scelta del libro di testo combinata con la tua presentazione lo sta facendo in modo che possano assorbire le informazioni molto bene. Se ti trovi in ​​questo scenario, e hai già coperto i requisiti del corso potresti prendere in considerazione l'idea di approfondire il materiale o sollevare ulteriori argomenti correlati che ritieni possano aiutare gli studenti. Hai un'enorme opportunità di andare oltre le basi, se hai tempo. Se non puoi entrare in maggiori dettagli, potresti anche andare in una direzione più pratica e parlare di come applicare questi concetti.

  2. Se una grande percentuale di studenti sembra avere problemi con un argomento, se non è un argomento cruciale potresti prendere in considerazione l'idea di lasciarlo cadere. Se si tratta di un argomento cruciale, considera di rivederlo di nuovo in classe (possibilmente utilizzando un approccio diverso), inserendolo nell'esame successivo o assegnando un documento sull'argomento. Potresti anche prendere in considerazione la possibilità di rivedere le diapositive sull'argomento per le lezioni future o guardare le presentazioni di altre persone sull'argomento per darti idee per altri modi in cui puoi presentarlo.

Alcune risposte e commenti hanno menzionato l'aspetto competitivo dei voti che a volte è presente. Vorrei menzionarlo anche nella mia risposta.

  • Innanzitutto, non sono convinto che ogni classe debba essere competitiva, valuta attentamente se sarà utile per i tuoi studenti aggiungi un po 'di sana e costruttiva competizione all'esperienza in classe prima di buttarti in quella.

  • Se vuoi cercare e premiare gli studenti eccezionali, ti consiglio farlo assegnando progetti e documenti di ricerca. Sfidare gli studenti a fare ricerche per conto proprio e presentare il proprio lavoro porterà naturalmente il meglio di studenti di talento e potrebbe essere una pratica molto preziosa per la loro carriera (e anche per la scuola di specializzazione).

  • Incoraggia gli studenti a pubblicare il loro lavoro se il loro lavoro è a quel livello. Questo può anche essere un ottimo modo per trovare studenti laureati se li stai cercando. Nel peggiore dei casi, introdurrà gli studenti a come sarebbe una carriera nella ricerca.
  • Per favore, non dare per scontato che gli studenti non siano interessati alla ricerca, c'era un professore che avevo assegnato a documenti di ricerca "realistici" (destinati a somigliare il più possibile ai requisiti della pubblicazione su una rivista). È stata una grande esperienza e sulla base di ciò ho finito per fare una tesi invece di un puro master "in classe".

NOTA: la mia esperienza è principalmente nei campi STEM.

Joel Coehoorn
2017-08-14 23:19:16 UTC
view on stackexchange narkive permalink

La teoria è, dato un campione casuale di studenti che hanno soddisfatto i prerequisiti del corso, dovresti vedere qualcosa di simile a una curva a campana nei risultati del tuo voto.

In pratica , ci sono una serie di cose che lo distorcono. La dimensione del campione è grande. Per classi più piccole, la dimensione del campione di un corso è semplicemente troppo piccola. L'auto-selezione è un'altra. Al livello superiore, gli studenti si sono auto-selezionati per i corsi nella loro specializzazione, in modo tale da seguire più corsi per soddisfare il loro interesse e (presumibilmente) capacità. Inoltre, l'intero processo di ammissione al college dovrebbe preselezionare gli studenti che hanno almeno alcune capacità accademiche. Questo è uno dei motivi per cui molti college e università negli Stati Uniti hanno un requisito di laurea che impone agli studenti di mantenere una media B per i corsi all'interno del loro maggiore (o qualche variazione di questo).

Un altro difetto nella curva a campana è che guarda solo ai risultati finali. La curva a campana completa dovrebbe includere una cosiddetta "coda lunga" a sinistra per i gradi inferiori, che indica che gli studenti si ritirano prima del completamento del corso.

Ci sono molti altri elementi umani che possono anche distorcere un " pura "curva a campana. L'abilità di insegnamento può essere una di queste. In qualità di nuovo istruttore, potresti dover sviluppare una certa esperienza per valutare e misurare meglio le prestazioni dei tuoi studenti. Ma con una sola lezione alle spalle, è troppo presto per dire se questo è il fattore principale per quello specifico insieme di dati.

E quale teoria dice che si dovrebbe vedere qualcosa di simile a una curva a campana nei risultati del voto?
Darshan Chaudhary
2017-08-14 07:19:46 UTC
view on stackexchange narkive permalink

Se la dimensione della tua classe è abbastanza grande e il tuo test non è né troppo facile né troppo difficile (rispetto alle capacità dei tuoi studenti), dovresti ottenere una curva a campana approssimativa.

La tua distribuzione è bimodale. O gli studenti hanno barato (avevano le domande prima dell'esame) o il foglio era troppo facile.

Ho visto distribuzioni bimodali notevolmente più estreme di questa.In alcuni casi, significa semplicemente che alcuni studenti hanno capito il materiale e altri no.


Questa domanda e risposta è stata tradotta automaticamente dalla lingua inglese. Il contenuto originale è disponibile su stackexchange, che ringraziamo per la licenza cc by-sa 3.0 con cui è distribuito.
Loading...