Tassi di scarto per famiglia di modelli
Ogni domanda scritta per questo sito passa dagli stessi controlli, qualunque modello l’abbia scritta. Questa è la quota che ogni famiglia di modelli perde, negli ultimi 30 giorni, con il numero da cui i tassi sono calcolati.
Questi tassi sono contati dal registro delle chiamate, tenuto dal 14 settembre 2026. I totali progressivi stampati altrove sul sito contano ogni domanda da quando il sito ha aperto, in data 11 settembre 2026, quindi le due serie di numeri coprono periodi diversi e non devono tornare tra loro.
Conteggio dal al : 2.459 chiamate di generazione che hanno restituito 6.183 domande. Una famiglia viene pubblicata quando ha restituito 200 domande nel periodo; sotto quella soglia la pagina lo dice invece di stampare un tasso ricavato da una manciata di chiamate.
| Famiglia di modelli | Domande scritte | Citazione non trovata sulla pagina indicata | Il secondo modello non era d'accordo | Duplicato | Difetto | Non richiesta o arrivata tardi | Accettate |
|---|---|---|---|---|---|---|---|
| qwen | 4,583 | 6.2% | 6.1% | 14.0% | 28.9% | 2.1% | 42.7% |
| deepseek | 503 | 14.3% | 3.0% | 2.4% | 11.5% | 2.0% | 66.8% |
| glm | 410 | 2.0% | 7.3% | 5.6% | 51.5% | 2.2% | 31.5% |
| nemotron | 393 | 3.1% | 0.5% | 2.5% | 53.9% | 1.3% | 38.7% |
| gpt-oss | 281 | 7.8% | 1.4% | 1.8% | 38.4% | 1.8% | 48.8% |
| openrouter-primary | 13 | dati insufficienti | dati insufficienti | dati insufficienti | dati insufficienti | dati insufficienti | dati insufficienti |
| gemma | 0 | dati insufficienti | dati insufficienti | dati insufficienti | dati insufficienti | dati insufficienti | dati insufficienti |
Per corsia
La corsia gratuita usa prima DeepSeek V4 Flash su Cloudflare Workers AI, con altri modelli open-weight come riserva. La corsia a pagamento usa i modelli prioritari: DeepSeek V4 Pro scrive e Kimi K2,6 risponde alla cieca. Entrambe le corsie passano gli stessi controlli e sono contate entrambe qui, ed è per questo che questa pagina parla di famiglie di modelli e non di corsie.
| Corsia | Domande scritte | Citazione non trovata sulla pagina indicata | Il secondo modello non era d'accordo | Duplicato | Difetto | Non richiesta o arrivata tardi | Accettate |
|---|---|---|---|---|---|---|---|
| gratuita | 6,140 | 6.5% | 5.3% | 11.2% | 31.1% | 2.0% | 43.9% |
| a pagamento | 43 | dati insufficienti | dati insufficienti | dati insufficienti | dati insufficienti | dati insufficienti | dati insufficienti |
Che cosa significa ogni colonna
- Domande scritte: le domande che il modello ha restituito in una risposta leggibile. Le risposte che non si sono potute leggere come JSON sono contate a parte nel CSV, per chiamata, perché non hanno restituito domande da contare.
- Citazione non trovata nella pagina citata: la citazione letterale non era nel testo salvato della pagina indicata dal modello, oppure il modello ha citato una pagina fuori dalla sezione che gli era stata data. Il CSV distingue questi due casi.
- Il secondo modello non è d’accordo: un modello di una famiglia diversa, a cui sono state mostrate la domanda e le sue citazioni ma mai la chiave di risposta, ha scelto una risposta diversa.
- Duplicata: la domanda ripeteva una già accettata dallo stesso documento.
- Difetto: una regola di struttura o di qualità l’ha scartata, per esempio un insieme di opzioni con un indizio evidente o una consegna senza una sola risposta migliore. Quelle regole sono le stesse che il verificatore di difetti MCQ esegue nel tuo browser.
- Non richiesta o troppo tardi: la domanda era valida ma non è comunque arrivata a uno studente. O era di un tipo che il lavoro non aveva richiesto (una domanda a risposta aperta in un lavoro a scelta multipla), oppure il lavoro si è riempito con altre chiamate mentre questa veniva scritta. Entrambi i casi sono contati perché la riga torni; nessuno dei due è un demerito per il modello.
- Accettate: quelle che hanno superato tutti i controlli e sono arrivate a uno studente.
Metodo
Ogni numero qui viene da lavori di produzione su questo sito. Viene scritta una riga per ogni chiamata a un fornitore, nel momento in cui l’esito della chiamata è noto, con soli conteggi e nient’altro: nessun testo delle domande, nessun testo dei documenti e nessun utente. I conteggi sono attribuiti al modello che ha risposto davvero, che non è sempre il modello richiesto dal lavoro, perché l’insieme ripiega su un altro modello quando uno è limitato nella frequenza o lento. Attribuire un ripiego al modello che non è stato eseguito pubblicherebbe un numero sul modello sbagliato.
La finestra è quella degli ultimi 30 giorni, ricalcolata al massimo due volte all’ora, ed è una delle tre finestre fisse. I tassi sono quote delle domande restituite da una famiglia, e ogni domanda restituita da una chiamata sta in esattamente una di queste colonne, quindi insieme alla quota accettata fanno il totale. Una chiamata tornata a un lavoro già concluso non scrive nessuna riga: le sue domande non sono mai state esaminate, e un modello che ha risposto tardi non è un modello che ha risposto male. Una famiglia sotto le 200 domande restituite è indicata come dati insufficienti, perché a quelle dimensioni una sezione andata male sposta un tasso di diversi punti.
Scarica gli stessi numeri in CSV, oppure leggili in JSON. I numeri sono pubblicati con licenza Creative Commons Attribution 4,0: usali, citali e indica MedUni Exam come fonte.
Aggiornato il 24 settembre 2026.
Non serve un account per provarlo. Registrarsi conserva la tua libreria, i voti e la coda di ripasso su ogni dispositivo.
Pubblicata , aggiornata .