שיעורי פסילה לפי משפחת מודלים
כל שאלה שנכתבת לאתר הזה עוברת את אותן בדיקות, לא משנה איזה מודל כתב אותה. זה כמה מהן כל משפחת מודלים מאבדת, ב-30 הימים האחרונים, יחד עם המספר שממנו מחושבים השיעורים.
השיעורים האלה נספרים מיומן הקריאות, שנשמר מאז 14 בספטמבר 2026. הספירות המצטברות שמופיעות במקומות אחרים באתר סופרות כל שאלה מאז שהאתר נפתח ב-11 בספטמבר 2026, ולכן שתי קבוצות המספרים מכסות תקופות שונות ולא אמורות להסתכם זו לזו.
נספר מ- עד : 2,459 קריאות יצירה שהחזירו 6,183 שאלות. משפחה מתפרסמת כשהיא החזירה 200 שאלות בתקופה; מתחת לזה העמוד אומר זאת, במקום להדפיס שיעור מקומץ קריאות.
| משפחת מודלים | שאלות שנכתבו | הציטוט לא נמצא בעמוד שצוין | המודל השני לא הסכים | כפילות | פגם | לא התבקש או מאוחר מדי | התקבלו |
|---|---|---|---|---|---|---|---|
| qwen | 4,583 | 6.2% | 6.1% | 14.0% | 28.9% | 2.1% | 42.7% |
| deepseek | 503 | 14.3% | 3.0% | 2.4% | 11.5% | 2.0% | 66.8% |
| glm | 410 | 2.0% | 7.3% | 5.6% | 51.5% | 2.2% | 31.5% |
| nemotron | 393 | 3.1% | 0.5% | 2.5% | 53.9% | 1.3% | 38.7% |
| gpt-oss | 281 | 7.8% | 1.4% | 1.8% | 38.4% | 1.8% | 48.8% |
| openrouter-primary | 13 | אין מספיק נתונים | אין מספיק נתונים | אין מספיק נתונים | אין מספיק נתונים | אין מספיק נתונים | אין מספיק נתונים |
| gemma | 0 | אין מספיק נתונים | אין מספיק נתונים | אין מספיק נתונים | אין מספיק נתונים | אין מספיק נתונים | אין מספיק נתונים |
לפי מסלול
המסלול החינמי מריץ קודם את DeepSeek V4 Flash ב-Cloudflare Workers AI, ומודלים אחרים עם משקלים פתוחים משמשים גיבוי. המסלול בתשלום מריץ את מודלי העדיפות: DeepSeek V4 Pro כותב ו-Kimi K2.6 עונה בלי לראות את התשובה. שני המסלולים עוברים את אותן בדיקות ושניהם נספרים כאן, ולכן העמוד הזה עוסק במשפחות מודלים ולא במסלולים.
| מסלול | שאלות שנכתבו | הציטוט לא נמצא בעמוד שצוין | המודל השני לא הסכים | כפילות | פגם | לא התבקש או מאוחר מדי | התקבלו |
|---|---|---|---|---|---|---|---|
| חינמי | 6,140 | 6.5% | 5.3% | 11.2% | 31.1% | 2.0% | 43.9% |
| בתשלום | 43 | אין מספיק נתונים | אין מספיק נתונים | אין מספיק נתונים | אין מספיק נתונים | אין מספיק נתונים | אין מספיק נתונים |
מה המשמעות של כל עמודה
- שאלות שנכתבו: שאלות שהמודל החזיר בתשובה שאפשר לפענח. תשובות שאי אפשר היה לקרוא כ-JSON נספרות בנפרד ב-CSV, לפי קריאה, כי הן לא החזירו שאלות לספירה.
- הציטוט לא נמצא בעמוד שצוין: הציטוט המילולי לא היה בטקסט השמור של העמוד שהמודל ציין, או שהמודל ציין עמוד מחוץ לקטע שניתן לו. ה-CSV מפריד בין שני המקרים.
- המודל השני לא הסכים: מודל ממשפחה אחרת, שקיבל את השאלה ואת הציטוטים שלה אבל לא את מפתח התשובות, בחר תשובה אחרת.
- כפילות: השאלה חזרה על שאלה שכבר אושרה מאותו מסמך.
- פגם: כלל מבני או כלל איכות פסל אותה, למשל מערך אפשרויות שמסגיר את התשובה או פתיח שאין לו תשובה אחת טובה ביותר. הכללים האלה הם אלה שבודק הפגמים בשאלות רב-ברירה מריץ בדפדפן שלכם.
- לא התבקש או מאוחר מדי: השאלה הייתה תקינה אבל בכל מקרה לא הגיעה לסטודנט. או שהיא הייתה מסוג שהמשימה לא ביקשה (שאלת תשובה קצרה במשימה של שאלות רב-ברירה), או שהמשימה התמלאה מקריאות אחרות בזמן שהיא נכתבה. שני המקרים נספרים כדי שהשורה תסתכם; אף אחד מהם אינו נזקף לחובת המודל.
- אושרו: מה ששרד את כל זה והגיע לסטודנט.
שיטה
כל מספר כאן מגיע ממשימות אמיתיות באתר הזה. נכתבת שורה אחת לכל קריאה לספק, ברגע שתוצאת הקריאה ידועה, והיא מכילה ספירות ותו לא: בלי טקסט של שאלות, בלי טקסט של מסמכים ובלי משתמש. הספירות נזקפות למודל שבאמת ענה, שלא תמיד הוא המודל שהמשימה ביקשה, כי המאגר עובר למודל אחר כשאחד מוגבל בקצב או איטי. זקיפת התוצאה של המודל החלופי למודל שלא רץ הייתה מפרסמת מספר על המודל הלא נכון.
החלון הוא 30 הימים האחרונים, נספר מחדש לכל היותר פעמיים בשעה, והוא אחד משלושה חלונות קבועים. השיעורים הם חלקים מתוך השאלות שמשפחה החזירה, וכל שאלה שקריאה החזירה נמצאת בדיוק באחת מהעמודות האלה, כך שיחד עם חלק השאלות שאושרו הם מסתכמים בשלם. קריאה שחזרה למשימה שכבר הסתיימה לא כותבת שורה בכלל: השאלות שלה מעולם לא נבדקו, ומודל שענה מאוחר אינו מודל שענה רע. משפחה עם פחות מ-200 שאלות שהוחזרו מסומנת כחסרת נתונים מספיקים, כי בגודל כזה קטע גרוע אחד מזיז שיעור בכמה נקודות.
הורידו את אותם מספרים כ-CSV, או קראו אותם כ-JSON. המספרים מתפרסמים תחת רישיון Creative Commons Attribution 4.0: השתמשו בהם, צטטו אותם, וציינו את MedUni Exam כמקור.
עודכן ב-24 בספטמבר 2026.
לא צריך חשבון כדי לנסות. הרשמה שומרת את הספרייה, הציונים ותור החזרה שלכם בכל המכשירים.
פורסם , עודכן .