ما مدى دقة أسئلة الامتحان المكتوبة بالذكاء الاصطناعي؟ ما تبيّنه المهام الحقيقية
Every question this site writes is checked before a student sees it, and the checks keep a count. This is what the 10 days since of real jobs on medical textbooks, lecture decks and notes show: how many questions a model writes that cannot be traced to the page, that a second model answers differently, or that repeat one already written.
الأرقام، محسوبة من سجل الطلبات
| What the checks counted | Share of questions written |
|---|---|
| Questions the models wrote | 6,183 in 2,459 calls |
| Kept, every check passed | 44.0% |
| Thrown out, all reasons | 56.0% |
| لم يوجد الاقتباس في الصفحة المذكورة | 6.5% |
| Second model answered differently | 5.4% |
| Repeat of a question already written | 11.2% |
| Structural flaw (all of the above, a vague stem, an option that gives itself away) | 30.9% |
Counted from the call log over September 14, 2026 to September 24, 2026, refreshed twice an hour. The same report, split by model family and with a CSV, is on the rejection rates page.
ماذا يعني كل رفض
الاقتباس غير موجود في الصفحة المذكورة. على كل سؤال أن يحمل جملة أو جملتين منقولتين من المستند، مع الصفحة التي تقعان فيها. ويبحث الخادم عن الجملة في النص المخزَّن لتلك الصفحة. فإن لم تكن هناك، فالنموذج كتب سؤالًا عن شيء لا تقوله المادة، أو أخطأ في تذكر الصياغة، ويُسقط السؤال. وهذا هو الفحص الذي يمسك الحقيقة المختلقة.
النموذج الثاني أجاب إجابة مختلفة. يُعطى نموذج من عائلة مختلفة السؤال والاقتباسات، ولا شيء غير ذلك: لا مفتاح إجابة ولا مستند. فإن لم يصل إلى الإجابة المفتاحية من الاقتباسات وحدها، فالاقتباسات لا تثبت الإجابة، ويُسقط السؤال. وهذا هو الفحص الذي يمسك السؤال الذي يبدو صحيحًا ومفتاحه خاطئ، أو المفتاح الذي لا يدعمه الاقتباس.
تكرار لسؤال مكتوب من قبل. يُقارَن كل سؤال جديد بكل ما وُلِّد من المستند من قبل. ويُسقط التكرار المتقارب، فتعطي الجولة الطويلة أسئلة مختلفة بدل الحقائق نفسها معادة الصياغة.
عيب بنيوي. "كل ما سبق"، و"لا شيء مما سبق"، ومقدمة تسأل أي العبارات صحيحة، وخيار أطول من غيره بشكل لافت، وسؤال يشير إلى "النص". هذه هي العلامات التي يُدرَّب الممتحنون على إزالتها، وتُزال هنا بقواعد ثابتة قبل أن تجري الفحوص الأخرى. وفاحص عيوب أسئلة الاختيار من متعدد يطبّق القواعد نفسها على أي سؤال تلصقه.
لماذا لا يستطيع مولّد لا يعرض اقتباسًا أن يخبرك بدقته
الأداة التي تسلّمك اختبارًا بلا الجملة التي جاء منها كل سؤال لا تملك طريقة لمعرفة عدد أسئلتها التي لا سند لها، لأن مسارها لا يتضمن أي خطوة تتحقق من ذلك. ودقتها هي ما تجده حين تفحص الأسئلة بنفسك، وهذا هو العمل الذي كنت تريد أن تعفي نفسك منه. وصفحة المساعدة لدى إحدى الأدوات المنافسة تطلب من مستخدميها مراجعة الاختبار المولَّد قبل الاعتماد عليه، وهذا هو القول الصادق حين لا يُفحص شيء. والأرقام أعلاه موجودة لأن الفحص يجري قبل أن يرى الطالب أي شيء، ولأن ما أُسقط عُدّ ولم يُحذف بصمت.
كيف تفحص سؤالًا مكتوبًا بالذكاء الاصطناعي بنفسك في عشرين ثانية
- ابحث عن الجملة. إن لم يبيّن السؤال من أين جاء، فابحث في المستند عن عبارته المفتاحية. فإن لم تكن العبارة هناك، فالسؤال ليس من مادتك.
- غطِّ مفتاح الإجابة وأجب من الاقتباس. اقرأ الجملة المقتبسة وحدها واختر خيارًا. فإن لم يحسم الاقتباس الأمر، فالسؤال يختبر شيئًا لا يقوله الاقتباس.
- انظر إلى الخيارات. خيار أطول بكثير من البقية، أو خيار يكرر المقدمة، أو "كل ما سبق": كل واحد منها علامة، وكل واحد سبب لعدم الثقة بالسؤال لا للتعلم منه.
ماذا يعني هذا للتحضير للامتحان
مجموعة أسئلة نجت من هذه الفحوص هي مجموعة يمكنك التدرب عليها دون إعادة قراءة الفصل للتأكد من أن كل سؤال حقيقي. والحصة المرفوضة ليست جهدًا ضائعًا، بل هي الجزء من أي بنك أسئلة مولَّد بالذكاء الاصطناعي الذي كان سيدرس منه طالب يستخدم أداة بلا فحص. والخطة المجانية على هذا الموقع تجري الفحوص نفسها على كل سؤال تكتبه، وصفحة النماذج تعرض ثلاثة أسئلة نجت، مع الصفحة التي يقتبسها كل منها.
أسئلة يطرحها الطلاب
هل معدل الرفض المرتفع يعني نموذجًا سيئًا؟
ليس وحده. النموذج الذي يكتب حالات سريرية طموحة يخسر منها أمام النموذج الثاني أكثر مما يخسر نموذج يكتب أسئلة تذكّر، والجولة الطويلة من فصل قصير تخسر أسئلة أمام فحص التكرار لأن الفصل لا يحوي إلا قدرًا محدودًا من الحقائق. فالمعدل صفة للنموذج والمادة والجولة معًا، ولهذا يُنشر التقرير مع العدد الذي حُسب منه.
هل الأسئلة التي تجتاز الفحوص مضمونة الصحة؟
لا. تمسك الفحوص السؤال الذي لا يوجد اقتباسه في الصفحة التي يستشهد بها، والسؤال الذي يجيب عنه نموذج ثانٍ خلافًا للمفتاح، والسؤال الذي يكرر سؤالًا سابقًا، ومجموعة من العيوب البنيوية. لكنها لا تحكم في الطب. ولهذا يُعرض كل سؤال محفوظ مع اقتباسه ورقم صفحته، ليقرأ الطالب السطر الذي جاء منه السؤال.
لماذا يُحسب السؤال المكرر رفضًا؟
لأن المولّد الذي يُطلب منه أربعون سؤالًا من نشرة من اثنتي عشرة صفحة سيعيد صياغة الحقائق الاثنتي عشرة نفسها بكلمات مختلفة إن لم يمنعه شيء. فيُقارَن كل سؤال جديد بكل ما كُتب من المستند من قبل، ويُسقط التكرار المتقارب بدل أن يُسلَّم للطالب على أنه تدريب جديد.
أين البيانات الخام؟
تنشر صفحة معدلات الرفض التقرير حسب عائلة النماذج وحسب المسار مع تنزيل CSV، والأرقام في هذه الصفحة مقروءة من التقرير نفسه. وسجل الطلبات محفوظ منذ 14 سبتمبر 2026.
اطّلع على المعدلات حسب النموذج
لا حاجة إلى حساب للتجربة. والتسجيل يحفظ مكتبتك ودرجاتك وقائمة المراجعة على كل أجهزتك.
نُشرت , حُدِّثت .