Page 1 of 1

Icone e numeri in registro valutazione + bug?

Posted: Thu Dec 13, 2018 7:39 pm
by kingbluz
Ciao a tutti,

potreste spiegarmi per favore il significato delle icone nella pagina di dettaglio del registro valutazioni?

Alcune mi sono un po' oscure... :?
13-12-2018 19-05-37.png
Dunque, nella colonna con il nome del test (Test1) compaiono due numeri: 3(2). Il 2 è il numero dei tentativi fatti, e se ci clicco sopra mi dà il dettaglio. Ma il 3 cosa significa?

Poi, nella colonna punteggio finale è riportato 30... se non ricordo male questo dovrebbe essere il punteggio medio di tutti i tentativi fatti.
Però il mio test ha 10 domande impostate con 1 punto ciascuna e soglia superamento a 6 (punteggio in punti).
Nei due tentativi fatti ho preso (in ordine cronologico): 4 e poi 3.
Quindi non capisco da dove viene fuori 30.

Infine ci sono le tre icone nell'intestazione della colonna Punteggio finale:
- facendo clic su quella con la calcolatrice ricarica la pagina e non succede nulla
- facendo clic sulla seconda, quella con le due frecce ricarica la pagina e non succede nulla (tra l'altro vedo che punta allo stesso link dell'icona con la calcolatrice)
- facendo clic sull'ultima con il simbolo di modifica arrivo alla schermata sottostante:
13-12-2018 19-22-34.png
...solo che: Punteggio massimo e Punteggio richiesto sono 100 e 60 (ma io nel test ho impostato 10 e 6)
Poi a fianco di ogni utente vedo il punteggio 0.00: deduco che dda qui possa assegnare a mano un punteggio allo studente, ma se metto un numero e salvo...non cambia nulla nel registro.
Per esempio se per il primo utente (che non ha ancora sostenuto il test) metto punteggio 9.00 e la data di oggi e poi salvo, nel dettaglio del registro non vedo nulla, continuano ad esserci i due trattini nelle colonne test1 e punteggio finale. Stessa cosa se imposto punteggio per il secondo utente.

Se invece modifico i punteggi del test dalla scheda Overview del registro valutazioni il nuovo voto che metto viene registrato correttamente (ma non compare nello storico, nè nel numero di tentativi): in pratica sostituisce il punteggio dell'ultimo test svolto, ma solo ai fini del punteggio finale.


Infine quello che sembra essere un piccolo bug: se nella scheda Overview del registro valutazioni clicco sull'icona con istogramma, vedo il dettaglio di tutte le domande del test con la percentuale di risposta.
Per alcune domande però vedo come da immagine sottostante: solo le risposte che sono state date almeno una volta (nell'esempio 2) e non tutte le risposte possibili (4), e in più le due risposte citate hanno entrambe il 100%:
13-12-2018 19-31-19.png

Maurizio

Re: Icone e numeri in registro valutazione + bug?

Posted: Fri Dec 14, 2018 8:28 am
by alfa24
kingbluz wrote: Thu Dec 13, 2018 7:39 pm Dunque, nella colonna con il nome del test (Test1) compaiono due numeri: 3(2). Il 2 è il numero dei tentativi fatti, e se ci clicco sopra mi dà il dettaglio. Ma il 3 cosa significa?
Il 3 è il punteggio assoluto dell'ultimo tentativo.
kingbluz wrote: Thu Dec 13, 2018 7:39 pm Poi, nella colonna punteggio finale è riportato 30... se non ricordo male questo dovrebbe essere il punteggio medio di tutti i tentativi fatti.
Però il mio test ha 10 domande impostate con 1 punto ciascuna e soglia superamento a 6 (punteggio in punti).
Nei due tentativi fatti ho preso (in ordine cronologico): 4 e poi 3.
Quindi non capisco da dove viene fuori 30.
Il 30 è il punteggio finale, ottenuto da una media ponderata su base 100 di tutti i test e attività (scorm) effettuati e considerati per il calcolo del punteggio finale.
kingbluz wrote: Thu Dec 13, 2018 7:39 pm - facendo clic su quella con la calcolatrice ricarica la pagina e non succede nulla
Il punteggio finale è calcolato on the fly, quel pulsante serve per ricalcolare ed eventualmente storare in db.
kingbluz wrote: Thu Dec 13, 2018 7:39 pm - facendo clic sulla seconda, quella con le due frecce ricarica la pagina e non succede nulla (tra l'altro vedo che punta allo stesso link dell'icona con la calcolatrice)
No, cambia l'op. Serve per spostare nella sequenza a destra o a sinistra il test. Se non ci sono altri test o altri oggetti da valutare, è ovvio che non cambi nulla.
kingbluz wrote: Thu Dec 13, 2018 7:39 pm - facendo clic sull'ultima con il simbolo di modifica arrivo alla schermata sottostante:
...solo che: Punteggio massimo e Punteggio richiesto sono 100 e 60 (ma io nel test ho impostato 10 e 6)
Come dicevo, il punteggio finale è calcolato su base 100 come media ponderata. Il test è una cosa, il punteggio finale un'altra.
kingbluz wrote: Thu Dec 13, 2018 7:39 pm Poi a fianco di ogni utente vedo il punteggio 0.00: deduco che dda qui possa assegnare a mano un punteggio allo studente, ma se metto un numero e salvo...non cambia nulla nel registro.
Per esempio se per il primo utente (che non ha ancora sostenuto il test) metto punteggio 9.00 e la data di oggi e poi salvo, nel dettaglio del registro non vedo nulla, continuano ad esserci i due trattini nelle colonne test1 e punteggio finale. Stessa cosa se imposto punteggio per il secondo utente.
Se invece modifico i punteggi del test dalla scheda Overview del registro valutazioni il nuovo voto che metto viene registrato correttamente (ma non compare nello storico, nè nel numero di tentativi): in pratica sostituisce il punteggio dell'ultimo test svolto, ma solo ai fini del punteggio finale.
Se provi a ricalcolare cambia qualcosa? In teoria c'era un bug su questo, ma non so se è stato risolto. Avevo risolto questo e il bug dell'overview che tu stesso hai citato in una installazione di un cliente (era 1.4.3) ma credo che Forma 2 ne soffra ancora.

Re: Icone e numeri in registro valutazione + bug?

Posted: Fri Dec 14, 2018 10:31 am
by kingbluz
Grazie Alfa,

tutto chiarissimo :)

A questo punto mi rimane solo il dubbio legato al calcolo della percentuale delle risposte che trovo cliccando sull'icona con istogramma nella scheda Overview del registro valutazioni, dove da un lato vedo solo le risposte che sono state date almeno una volta e non tutte quelle possibili, e dall'altro lato le percentuali (100% per due risposte nel mio caso) sono sballate.

Ho provato a sostenere altre 4-5 volte il test (sempre rispondendo a caso) e ora il risultato è che compaiono più risposte per ogni quiz, ma ogni volta ho una percentuale del 100%, come sotto:
14-12-2018 10-18-26.png
Tra l'altro ho dato almeno 2 volte una delle risposte presenti e non ho mai evitato di rispondere, quindi quel 100% non so proprio da dove esca :?
E' come se 100% volesse dire "ce l'ho!", è stata data almeno una volta, ma poin non tiene conto di quante volte è stata data quella risposta rispetto alle altre risposte.

Maurizio

Re: Icone e numeri in registro valutazione + bug?

Posted: Fri Dec 14, 2018 11:18 am
by alfa24
Ti ripeto, questo è un bug, riguarda i surveys, i test e in generale le aggregazioni sintetiche dei risultati per domanda.

Re: Icone e numeri in registro valutazione + bug?

Posted: Fri Dec 14, 2018 12:28 pm
by kingbluz
ok grazie.

Comunque facendo una prova in parallelo con un test su una 1.4.3:
- ho visto che il bug c'era anche prima
- ho capito che il 100% indica la risposta data nell'ultimo tentativo effettuato (sulla 1.4.3). Se però ho più utenti, allora compaiono tutte le risposte e la percentuale è corretta.
Nel senso che se ho 2 utenti che alla domanda XY rispondono uno A e l'altro B, nel registro vedo correttamente le stat: risposta A 50%, risposta B 50%, nessuna risposta 0%. Continuano a mancare le risposte che non ha dato nessuno ma pazienza.
E chiaramente se un utente ha fatto il test 6 volte, ai fini delle stat viene presa solo la risposta data all'ultimo tentativo.

Sulla 2.0 funziona allo stesso modo, ma (forse solo perchè ho il flag su ratain answer history) tiene in memoria tutte le risposte date da tutti gli utenti in tutti i tentativi, quindi calcola la percentuale a livello di singola risposta, ma lo fa in maniera sbagliata.
Cioè per esempio 2 utenti fanno 4 tentativi a testa e alla domanda rispondono ogni volta in maniera diversa: una volta A, una volta B, una volta C e una volta D.
Il risultato è che nel registro ho 50% di percentuale per ogni risposta, mentre dovrebbe essere 25% (2 volte su 8 tentativi)

Maurizio

Re: Icone e numeri in registro valutazione + bug?

Posted: Fri Dec 14, 2018 12:31 pm
by alfa24
Ai fini statistici il comportamento corretto è considerare una sola compilazione (che sia l'ultima o la migliore secondo me è da customizzare).

Tra l'altro, non mi sembra che i tentativi precedenti vengano memorizzati a livello di risposte date. Magari sbaglio, ma dal db ho questa impressione.

Re: Icone e numeri in registro valutazione + bug?

Posted: Fri Dec 14, 2018 3:33 pm
by kingbluz
alfa24 wrote: Fri Dec 14, 2018 12:31 pm Ai fini statistici il comportamento corretto è considerare una sola compilazione (che sia l'ultima o la migliore secondo me è da customizzare).
Mah insomma...dipende da cosa vuoi calcolare.
Se vuoi la media dei tentativi meglio riusciti di ogni studente va bene, altrimenti non va bene.
Avere il punteggio medio di tutti i tentativi, compresi quelli falliti, ha un senso didattico sia per lo studente che per il docente. Dà comunque informazioni che possono essere sfruttate didatticamente (se si vogliono sfruttare).
Lo stesso vale per le risposte a una domanda. Se dai la possibilità di rispondere più volte è chiaro che prima o poi lo studente risponde correttamente, quindi quanto è utile come statistica?
Molto poco, perchè vedrai la risposta giusta con una percentuale molto alta e le altre con percentuali basse (di fatto chi passa il test non lo rifà per correggere gli errori).
Invece l'analisti delle risposte degli studenti è molto utile per fare diverse considerazioni. Insomma, se vogliamo dire che tutti i test devono essere solo superati o no in base a una soglia va bene, ma i test possono anche avere altri obiettivi.
alfa24 wrote: Fri Dec 14, 2018 12:31 pm Tra l'altro, non mi sembra che i tentativi precedenti vengano memorizzati a livello di risposte date. Magari sbaglio, ma dal db ho questa impressione.
Dalla 2.0 sì perchè se vai nel dettagli del registro valutazioni e clicchi sui tentativi fatti da uno studente hai lo storico dei tentativi fatti: clic sull'icona a forma di grafico e hai il dettaglio del tentativo con tutte le risposte date. Per fare questo credo sia necessario mettere flag su retain answers history nelle opzioni del test.

Maurizio

Re: Icone e numeri in registro valutazione + bug?

Posted: Fri Dec 14, 2018 3:40 pm
by alfa24
Ho scritto appunto "secondo me è da customizzare", proprio per lasciare all'utente la possibilità di scegliere che tipo di stat vuole.
Per l'history ok, non uso forma2 quindi questa feat mi è scappata.