اساتذہ کے لیے منٹوں میں سوالات کی ترتیب بدلنے والے ٹیسٹ نافذ کریں
سوال بے ترتیبی کے ٹیسٹ ہر طالب علم کے لیے مختلف سوالوں کی ترتیب، جوابات کی ترتیب، یا سوالات کا ایک مختلف مجموعہ پیش کرتے ہیں، تاکہ جواب کی چابی کاپی کرنا یا پڑوسی کی سکرین جھانکنا بے فائدہ ہو جائے۔ اس کا سب سے بڑا فائدہ یہ ہے کہ غیر مجاز معلومات کے اشتراک کے مواقع کم ہو جاتے ہیں، لیکن یہ طریقہ اسی وقت منصفانہ رہتا ہے جب بنیادی سوالات کے ذخیرے یکساں مشکل اور کافی گہرائی کے ساتھ بنائے گئے ہوں تاکہ دہرائے جانے سے بچا جا سکے۔
خلاصہ:
- بے ترتیبی اس وقت بہترین کام کرتی ہے جب سوالات کے ذخیرے گہرے اور اچھی طرح متوازن ہوں، یعنی ہر ۱۰ سوالوں کے لیے کم از کم ۱۰۰ سے ۲۰۰ آئٹمز ہوں تاکہ اوورلیپ کم سے کم ہو۔
- متعدد بے ترتیبی تکنیکوں کو یکجا کرنے سے نقل کی مشکل نمایاں طور پر بڑھ جاتی ہے، خاص طور پر جب سوالات، جوابات کے اختیارات، اور فراہمی کو بیک وقت تبدیل کیا جائے۔
- درست سیٹ اپ میں سوالات کو نتائج اور مشکل کے مطابق ٹیگ کرنا، بیجز کے ساتھ پیش نظارہ کرنا، اور یہ تفصیلی ریکارڈ رکھنا شامل ہے کہ ہر طالب علم کو کون سا ورژن ملا۔
- کم سوال-سے-ذخیرہ تناسب کے ساتھ بہت سے چھوٹے ذیلی ذخیروں کا استعمال بڑی کلاسوں میں اوورلیپ اور یکے بعد دیگرے دہرائے جانے کو کم کرنے کا ثابت شدہ طریقہ ہے۔
- Talent Approved جیسے خودکار تشخیصی نظام بے ترتیبی اور نقل مخالف اقدامات کو آسان بناتے ہیں، سیٹ اپ کے وقت کو نمایاں طور پر کم کرتے ہوئے انصاف اور سیکیورٹی کو یقینی بناتے ہیں۔
فہرست مضامین
- سوال بے ترتیبی کیا ہے اور یہ کیوں اہم ہے
- سوال بے ترتیبی کی اقسام اور تکنیکیں
- LMS یا تشخیصی ورک فلو میں بے ترتیبی کیسے ترتیب دیں
- بے ترتیب ٹیسٹوں کو منصفانہ رکھنے کے لیے ڈیزائن کے بہترین طریقے
- نفاذ کی چیک لسٹ: سیٹنگز، میٹا ڈیٹا، اور ٹیسٹ کے دن کی جانچ
- بے ترتیبی کی حدود اور تکمیلی دیانتداری کے اوزار
- دستی سیٹ اپ کے بغیر بے ترتیب، کردار کے مطابق ٹیسٹ بنائیں
- مصنف کا نقطہ نظر: اصل میں کیا فرق پڑتا ہے
- مآخذ
- اکثر پوچھے جانے والے سوالات
سوال بے ترتیبی کیا ہے اور یہ کیوں اہم ہے
سوال بے ترتیبی دو متعلقہ اقدامات پر مشتمل ہے: آئٹمز کے ظاہر ہونے کی ترتیب کو ردوبدل کرنا، اور ایک بڑے ذخیرے سے سوالات کھینچنا تاکہ مختلف طلبا کو مختلف ذیلی مجموعے ملیں۔ پہلا طریقہ اس شخص سے حفاظت کرتا ہے جو پڑوسی کی سکرین دیکھ کر جواب کی پوزیشن ملاتا ہے۔ دوسرا طریقہ، جسے اکثر بے ترتیبی سے منتخب سوالات کے امتحانات (RSQE) کہا جاتا ہے، اس طالب علم سے حفاظت کرتا ہے جس نے کل ٹیسٹ دیا اور آج ٹیسٹ دینے والے دوست کو میسج پر جوابات بھیج دیے۔
ادارے اس پر تین عملی وجوہات سے انحصار کرتے ہیں:
- دور دراز اور آن لائن ٹیسٹنگ نے وہ جسمانی کنٹرول ختم کر دیا جو ایک نگران کو کمرے پر حاصل ہوتا تھا۔
- خودکار گریڈنگ سسٹمز کو منظم آئٹمز کی ضرورت ہوتی ہے، اس لیے بے ترتیبی دستی جائزہ کار کا کام بڑھائے بغیر پیمانے پر کام کرتی ہے۔
- بڑے کورس سیکشنز ایک ہی آئٹم بینک کو متعدد نشستوں میں دوبارہ استعمال کرتے ہیں، اور بے ترتیبی اس دوبارہ استعمال کو معلومات کے اخراج کا ذریعہ بننے سے روکتی ہے۔
بے ترتیبی نگرانی یا سرقہ کی جانچ کا متبادل نہیں ہے۔ یہ ایک ساختی پرت ہے جو ان دیگر اوزاروں کو زیادہ مؤثر بناتی ہے کیونکہ یہ پہلے ہی نقل کے فائدے کو کم کر دیتی ہے۔
سوال بے ترتیبی کی اقسام اور تکنیکیں
چار تکنیکیں اکثر اساتذہ کی ضروریات پوری کرتی ہیں، اور انہیں ایک ساتھ استعمال کیا جا سکتا ہے۔
- سوالات کی ترتیب بدلیں۔ آئٹمز کا وہی مجموعہ ہر طالب علم کے لیے مختلف ترتیب میں ظاہر ہوتا ہے، جو سادہ "جواب کی پوزیشن موازنہ" والی نقل کو ناکام بناتا ہے۔
- جوابات کے اختیارات بدلیں۔ متعدد انتخابی سوال کے اندر، خود اختیارات گھومتے ہیں، اس لیے "جواب C ہے" کی معلومات شیئر کرنا بے فائدہ ہو جاتا ہے۔
- ذیلی ذخیروں سے بے ترتیب انتخاب۔ ہر طالب علم کو یکساں ۴۰ سوالات دینے کی بجائے، ہر طالب علم درجنوں مساوی ذیلی ذخیروں سے چند سوالات کھینچتا ہے، تاکہ کوئی دو ٹیسٹ ایک جیسے نہ لگیں۔
- ایک وقت میں ایک سوال کی فراہمی۔ طلبا اگلا سوال آنے سے پہلے ایک آئٹم دیکھتے اور جواب دیتے ہیں، جو پورے امتحان کو اسکین کرنے اور حقیقی وقت میں جوابات مربوط کرنے سے روکتا ہے۔
چاروں کو یکجا کرنا نقل کی لاگت کو بہت بڑھا دیتا ہے، کیونکہ طالب علم کو نہ صرف جوابات بلکہ پوزیشنز، الفاظ، اور رفتار کو بھی کسی ایسے شخص کے ساتھ مربوط کرنا پڑے گا جو واقعی مختلف ٹیسٹ دے رہا ہو۔ ایک احتیاط: کچھ آئٹمز کو بدلنا نہیں چاہیے۔ اگر "مذکورہ میں سے کوئی نہیں" جیسا اختیار ہمیشہ آخر میں ہو، تو اس پوزیشن کو مقفل رکھتے ہوئے باقی کو بدلنا آئٹم کو منطقی طور پر درست رکھتا ہے۔
پرو ٹِپ: شائع کرنے سے پہلے پیش نظارہ موڈ میں بے ترتیب کوئز چلائیں۔ غلطی سے بے ترتیب ہو جانے والے مقررہ جواب کے اختیارات وہ سب سے عام بے ترتیبی غلطی ہے جو اساتذہ لانچ کے بعد رپورٹ کرتے ہیں۔
LMS یا تشخیصی ورک فلو میں بے ترتیبی کیسے ترتیب دیں
زیادہ تر لرننگ مینجمنٹ سسٹمز اور سروے پلیٹ فارمز کے پاس پہلے سے وہ کنٹرولز موجود ہیں جن کی آپ کو ضرورت ہے۔ کام کسی چھپی سیٹنگ تلاش کرنے سے کم اور اپنے مواد کو اس طرح منظم کرنے سے زیادہ ہے کہ وہ سیٹنگز قابل اعتماد طریقے سے کام کریں۔
- لیبل شدہ آئٹم بینک بنائیں۔ سوالات کو موضوع اور مشکل کے مطابق گروپ کریں، اور ہر ایک کو اس سیکھنے کے نتائج سے ٹیگ کریں جسے وہ ناپتا ہے، تاکہ بے ترتیب ڈرا پھر بھی صحیح مواد کا احاطہ کرے۔
- ڈرا کے قواعد مقرر کریں۔ ایک بڑے بینک سے کھینچنے کی بجائے، فی سیکشن "اس ذخیرے سے X سوالات کھینچیں" ترتیب دیں، اور جہاں مناسب ہو وہاں جواب انتخاب کی ردوبدل کو فعال کریں۔
- بیج کے ساتھ پیش نظارہ کریں۔ Qualtrics جیسے پلیٹ فارم بے ترتیب بلاک کی خصوصیات دستاویز کرتے ہیں جو آپ کو ایک ٹیسٹ ڈرا بنانے اور طلبا کے دیکھنے سے پہلے آؤٹ پٹ کی تصدیق کرنے دیتے ہیں۔
- جو مقفل کرنا ہو اسے مقفل کریں۔ مقررہ پوزیشن کے جوابات اور کوئی بھی رہائش سے متعلق سیٹنگز (توسیعی وقت، اسکرین ریڈرز) کو ردوبدل کے باوجود برقرار رہنا چاہیے۔
- میپنگ برآمد کریں۔ اس بات کا ریکارڈ رکھیں کہ کون سے بیج یا ڈرا نے کون سا ورژن تیار کیا، تاکہ گریڈنگ اور اپیلز میں اس عین ٹیسٹ کا حوالہ دیا جا سکے جو طالب علم نے دیا۔
Canvas اور اسی طرح کے سسٹمز کے آئٹم بینک بالکل اسی ورک فلو کے لیے بنائے گئے ہیں، جو ایک مشترکہ بینک سے ہر طالب علم کے لیے ایک الگ ذیلی مجموعہ بناتے ہیں۔ RSQE ڈیزائن کے مونٹے کارلو مطالعے میں پایا گیا کہ ذیلی ذخیروں کی تعداد اور ڈرا کا تناسب براہ راست اس بات کا تعین کرتے ہیں کہ دو طلبا کتنی بار اوورلیپنگ سوالات تک پہنچتے ہیں، یہی وجہ ہے کہ اگلا حصہ ذخیرے کی گہرائی کو تفصیل سے بیان کرتا ہے۔
بے ترتیب ٹیسٹوں کو منصفانہ رکھنے کے لیے ڈیزائن کے بہترین طریقے
بے ترتیبی تبھی کام کرتی ہے جب وہ ذخیرے جن سے یہ کھینچتی ہے اچھی طرح بنائے گئے ہوں۔ ہر ذیلی ذخیرے میں پانچ آئٹمز والا ایک کم گہرا ذخیرہ ایک بڑی کلاس میں مسلسل سوالات دہرائے گا، چاہے ردوبدل کا الگورتھم کتنا بھی اچھا ہو۔
اس پر سب سے مضبوط شواہد ۲۰۲۲ کے ۶۰۰ بے ترتیبی سے منتخب سوالات کے امتحانات کے مونٹے کارلو تجزیے سے آتے ہیں، جس میں پایا گیا کہ کم سوال-سے-ذخیرہ تناسب کے ساتھ بہت سے ذیلی ذخیروں کا استعمال، ۵ سے ۱۰ فیصد کی حد میں، طلبا کے درمیان دہرائے جانے اور یکے بعد دیگرے اوورلیپ ہونے والے سوالات کو نمایاں طور پر کم کرتا ہے۔ عملی طور پر، اس کا مطلب ہے کہ ۱۰ سوالوں کا امتحان ۴۰ کی بجائے ۱۰۰ سے ۲۰۰ ذیلی ذخیرے کی آئٹمز سے کھینچنے پر بہتر کام کرتا ہے۔
صرف گہرائی کافی نہیں ہے۔ چند اور قواعد بھی اتنے ہی اہم ہیں:
- ذیلی ذخیرے کے ہر آئٹم کو تقریباً یکساں مشکل پر ایک ہی سیکھنے کے نتائج کی جانچ کرنی چاہیے، تاکہ کوئی طالب علم اتفاقاً آسان یا مشکل ورژن نہ کھینچے۔
- ہر ٹیسٹنگ ونڈو کے بعد ذخیروں کو ریٹائر اور تجدید کریں، خاص طور پر زیادہ داخلہ والے کورسز کے لیے جہاں ایک ہی امتحان متعدد سیکشنز یا سمسٹرز میں چلتا ہے۔
- اگر آپ ٹیمپلیٹس سے آئٹمز بناتے ہیں، تو نئے آئٹم کو لائیو ذخیرے میں شامل کرنے سے پہلے ایک مشکل جانچ، تاریخی کارکردگی کا ڈیٹا، یا نقلی آئٹم رسپانس تھیوری (IRT) ڈرا، چلائیں۔
بے ترتیب متعدد انتخابی امتحانات پر تاریخی تجربات نے عام طور پر پایا ہے کہ اوسط کارکردگی میں کوئی قابل پیمائش کمی نہیں آتی جب آئٹمز مشکل کے لحاظ سے مناسب طور پر کیلیبریٹ ہوں۔ یہ نتیجہ مکمل طور پر اس کیلیبریشن کا کام پہلے کرنے پر منحصر ہے۔
نفاذ کی چیک لسٹ: سیٹنگز، میٹا ڈیٹا، اور ٹیسٹ کے دن کی جانچ
اجرا کو ایک بڑے کنفیگریشن سیشن کی بجائے تین مراحل کے طور پر دیکھیں۔
- امتحان سے پہلے: ہر آئٹم کو موضوع، مشکل، اور نتائج کے مطابق ٹیگ کریں۔ کم ڈرا تناسب کے ساتھ ذیلی ذخیرے بنائیں۔ ایک پائلٹ پیش نظارہ چلائیں اور تصدیق کریں کہ مقررہ جواب کی پوزیشنز ردوبدل کے بعد بھی برقرار ہیں۔
- امتحان کے دوران: طلبا کے ٹیسٹ حل کرتے وقت سیشن لاگز کی نگرانی کریں، اور تصدیق کریں کہ رہائش سے متعلق سہولیات، توسیعی وقت، اسکرین ریڈر مطابقت، بے ترتیبی سیٹنگز کے ذریعے منسوخ ہوئے بغیر منتقل ہوئی ہیں۔
- امتحان کے بعد: مکمل بیج-سے-طالب علم میپنگ برآمد کریں تاکہ آپ بالکل وہ ورژن دوبارہ تشکیل دے سکیں جو ہر طالب علم کو ملا۔ جمع کرائے گئے جوابات میں بنیادی جواب پیٹرن اسکین چلائیں، اور جائزے کے لیے انصاف کے میٹرکس لاگ کریں۔
پرو ٹِپ: بیج-سے-طالب علم میپنگ اسی دن محفوظ کریں جس دن آپ امتحان لیں، نہ کہ جب تین ہفتے بعد ری گریڈ کی درخواست آئے۔ جتنا زیادہ انتظار کریں گے، طالب علم نے کون سا ورژن لیا تھا یہ دوبارہ تشکیل دینا اتنا ہی مشکل ہوتا جاتا ہے۔
بڑے گروپس کا انتظام کرنے والی ٹیمیں اکثر اس چیک لسٹ کو ایک وسیع تر زیادہ حجم کے تشخیصی ورک فلو میں شامل کر لیتی ہیں تاکہ ٹیسٹ کے دن کے اقدامات ہر ٹیسٹنگ سائیکل میں یک طرفہ افراتفری کی بجائے معمول بن جائیں۔
بے ترتیبی کی حدود اور تکمیلی دیانتداری کے اوزار
بے ترتیبی نقل کے مواقع کو محدود کرتی ہے۔ یہ بعد میں اسے پکڑتی نہیں، اور نہ ہی یہ ضمانت دیتی ہے کہ ٹیسٹ کا ہر ورژن یکساں مشکل ہے۔
- شماریاتی جانچ اب بھی اہم ہے۔ بے ترتیبی p-value ٹیسٹ طلبا کے درمیان مشکوک طور پر ملتے جلتے جواب پیٹرنز کو نشان زد کر سکتا ہے چاہے سوالات خود بدلے گئے ہوں یا مختلف ذیلی ذخیروں سے کھینچے گئے ہوں۔
- اسے نگرانی اور لاگز کے ساتھ ملائیں۔ سیشن ریکارڈنگز اور ٹائم اسٹامپ شدہ سرگرمی لاگز وہ رویہ پکڑتے ہیں جو اکیلی بے ترتیبی نہیں پکڑ سکتی، جیسے امتحان کے دوران براؤزر ٹیب کا بدلنا۔
- IRT کے ساتھ انصاف کی جانچ کریں۔ یونیورسٹی آف الینوائے کے ایک تجزیے میں آئٹم رسپانس تھیوری نقالی ۱۰۰ ردوبدل اور فی طالب علم ۵۰۰ چلاؤ کے دوران پایا گیا کہ زیادہ تر بے ترتیب ذخیرے والے امتحانات معقول حد تک منصفانہ تھے، جب کوئی خاص ذخیرے کا ڈرا بہت آسان یا بہت مشکل ہو تو اسے نشان زد کرنے کے لیے اوسط مطلق انحراف جیسے میٹرکس استعمال کیے گئے۔
جب انصاف کی جانچ کوئی مسئلہ نشان زد کرے، تو حل عموماً ذیلی ذخیرے کو دوبارہ ڈیزائن کرنا ہوتا ہے، نہ کہ بے ترتیبی کو مکمل طور پر ترک کرنا۔
دستی سیٹ اپ کے بغیر بے ترتیب، کردار کے مطابق ٹیسٹ بنائیں
اوپر بیان کی گئی ہر چیز، آئٹمز کو ٹیگ کرنا، ذیلی ذخیرے بنانا، مقررہ جوابات مقفل کرنا، یہ ٹریک کرنا کہ ہر شخص کو کون سا ورژن ملا، ہاتھ سے ترتیب دینے میں حقیقی گھنٹے لگتے ہیں۔ Talent Approved اس سیٹ اپ کو منٹوں میں کر دیتا ہے۔ اس کی Magic Create خصوصیت ملازمت کی تفصیل یا مہارتوں کی فہرست سے براہ راست کردار کے مطابق مہارت کا تشخیصی ٹیسٹ بناتی ہے، پھر دوبارہ قابل استعمال سوالات کی لائبریریز پر کھینچتی ہے تاکہ آپ کو ہر بار جب بھی بھرتی کریں خالی ذخیرے سے شروع نہ کرنا پڑے۔
پلیٹ فارم کی نقل مخالف پرت، اسکرین اور ویب کیم نگرانی، سیشن ریپلیز، اور مکمل بیج میپنگ، چیک لسٹ کے آپریشنل پہلو کو خودبخود سنبھالتی ہے، اور AI سے بنائے گئے خلاصے کا مطلب ہے کہ آپ کو انصاف کا فیصلہ کرنے یا بے ضابطگیوں کو نشان زد کرنے کے لیے ہر امیدوار کے خام جوابات کا دستی طور پر جائزہ نہیں لینا پڑتا۔ چونکہ Talent Approved فی مکمل امیدوار تشخیص $5 وصول کرتا ہے بغیر کسی سبسکرپشن کے، زیادہ حجم کی بھرتی کے راؤنڈز چلانے والی ٹیمیں اس گائیڈ میں بیان کردہ بے ترتیب، محفوظ ٹیسٹنگ انفراسٹرکچر حاصل کرتی ہیں بغیر ایسے سافٹ ویئر کی ادائیگی کے جو وہ سال میں صرف دو بار استعمال کرتے ہیں۔ ایک تشخیص بنانا شروع کریں اور دیکھیں کہ ملازمت کی تفصیل کتنی جلدی ایک لائیو، چھیڑ چھاڑ مزاحم ٹیسٹ میں تبدیل ہوتی ہے۔
مصنف کا نقطہ نظر: اصل میں کیا فرق پڑتا ہے
زیادہ تر ٹیمیں ردوبدل کی سیٹنگز میں زیادہ سرمایہ کاری کرتی ہیں اور ذخیرے کی گہرائی میں کم۔ کم ڈرا تناسب کے ساتھ ایک وسیع ذیلی ذخیرہ کسی بھی ردوبدل ٹوگل سے انصاف کے لیے زیادہ کام کرتا ہے۔ اعلی داؤ کے تشخیصات کو ضرورت سے زیادہ ذیلی ذخیروں کے ساتھ شروع کریں، ان کا پائلٹ کریں، اور ازخود اندازے نہیں بلکہ امتحان کے بعد کا انصاف کا ڈیٹا آپ کو بتائے کہ ذخیرے کہاں بہت پتلے ہیں۔
— Jimmie
مآخذ
- Canvas کوئزز میں سوالات اور جوابات کے اختیارات بدلنا
- آن لائن امتحانات میں دہرائے جانے اور یکے بعد دیگرے آنے والے سوالات کو حل کرنے کے لیے عملی بے ترتیبی سے منتخب سوالات کے امتحان کا ڈیزائن
- کیا ہم منصفانہ ہیں؟ بے ترتیب سوالات کے ذخیروں کے ساتھ کمپیوٹر سائنس کے امتحانات کے اسکور پر اثرات کی پیمائش
اکثر پوچھے جانے والے سوالات
بے ترتیبی ٹیسٹ کیا ہے؟
تشخیصی ڈیزائن میں، بے ترتیبی ٹیسٹ سے مراد ہر امتحان دہندہ کو مختلف سوالوں کی ترتیب، جوابات کی ترتیب، یا آئٹمز کے مجموعے پیش کرنا ہے، جسے اکثر بعد میں ایک شماریاتی بے ترتیبی p-value ٹیسٹ کے ساتھ ملایا جاتا ہے جو طلبا کے درمیان مشکوک جواب پیٹرن کی مماثلت کا پتہ لگانے کے لیے استعمال ہوتا ہے۔
کسی سوال کا بے ترتیب ہونے کا کیا مطلب ہے؟
بے ترتیب سوال یا تو ہر امتحان دہندہ کے لیے مختلف پوزیشن پر ظاہر ہوتا ہے، اس کے جواب کے اختیارات بدلے ہوئے ہوتے ہیں، یا اسے مساوی آئٹمز کے ذخیرے سے کھینچا جاتا ہے تاکہ مختلف طلبا کو شاید وہی سوال نہ بھی دیکھنے کو ملے۔
ٹیسٹ کے سوالات کی وہ پانچ اقسام کون سی ہیں جو اکثر بے ترتیب کی جاتی ہیں؟
متعدد انتخابی، صحیح/غلط، ملاپ، خالی جگہ پُر کریں، اور مختصر جواب والے آئٹمز عام طور پر بے ترتیب کیے جاتے ہیں، تاہم متعدد انتخابی میں سب سے زیادہ پیچیدہ اقدامات ہوتے ہیں کیونکہ سوال کی ترتیب اور جواب کے اختیارات کی ترتیب دونوں آزادانہ طور پر بدل سکتے ہیں۔
میں ٹیسٹ کو غیر منصفانہ بنائے بغیر سوالات کو بے ترتیب کیسے کروں؟
کم سوال-سے-ذخیرہ تناسب کے ساتھ، عموماً ۵ سے ۱۰ فیصد، بہت سے ذیلی ذخیروں کا استعمال کریں، اور تصدیق کریں کہ ذیلی ذخیرے کا ہر آئٹم لائیو ہونے سے پہلے یکساں مشکل پر ایک ہی نتائج کی جانچ کرتا ہے۔
کیا Talent Approved تشخیصی سوالات کو خودبخود بے ترتیب کر سکتا ہے؟
جی ہاں۔ Talent Approved کی دوبارہ قابل استعمال سوالات کی لائبریریز اور Magic Create خصوصیت بھرتی کاروں کو بے ترتیب آئٹم انتخاب اور بلٹ ان نقل مخالف نگرانی کے ساتھ کردار کے مطابق تشخیصات بنانے دیتی ہے، بغیر ہاتھ سے ذخیروں کو ترتیب دیے۔