শিক্ষকদের জন্য মিনিটেই প্রশ্ন র‍্যান্ডমাইজেশন পরীক্ষা চালু করুন

শিক্ষকদের জন্য মিনিটেই প্রশ্ন র‍্যান্ডমাইজেশন পরীক্ষা চালু করুন

প্রশ্ন র‍্যান্ডমাইজেশন পরীক্ষা প্রতিটি শিক্ষার্থীর কাছে ভিন্ন প্রশ্নক্রম, উত্তরের ধারা বা আইটেম সেট উপস্থাপন করে, ফলে উত্তরপত্র নকল করা বা পাশের জনের স্ক্রিনে উঁকি মারা আর কাজে আসে না। এর মূল সুবিধা হলো অননুমোদিত তথ্য ভাগাভাগির সুযোগ কমে আসে, তবে কৌশলটি তখনই ন্যায্য থাকে যখন অন্তর্নিহিত প্রশ্ন পুলগুলো সমতুল্য কঠিনতায় তৈরি এবং পুনরাবৃত্তি এড়ানোর মতো যথেষ্ট গভীর।


TL;DR:

  • র‍্যান্ডমাইজেশন সবচেয়ে ভালো কাজ করে যখন প্রশ্ন পুলগুলো গভীর ও সুষমভাবে ভারসাম্যপূর্ণ হয়, প্রতি ১০টি প্রশ্নের জন্য কমপক্ষে ১০০ থেকে ২০০টি আইটেম থাকলে ওভারল্যাপ কমানো সম্ভব।
  • একাধিক র‍্যান্ডমাইজেশন কৌশল একত্রে প্রয়োগ করলে প্রতারণার কঠিনতা উল্লেখযোগ্যভাবে বাড়ে, বিশেষত যখন প্রশ্ন, উত্তরের বিকল্প এবং পরিবেশন একসাথে বৈচিত্র্যময় করা হয়।
  • সঠিক সেটআপে প্রশ্নগুলোকে ফলাফল ও কঠিনতা অনুযায়ী ট্যাগ করা, সিড দিয়ে প্রিভিউ করা এবং কোন শিক্ষার্থী কোন সংস্করণ পেয়েছে তার বিস্তারিত রেকর্ড রাখা অন্তর্ভুক্ত।
  • অনেকগুলো ছোট সাব-পুল ব্যবহার করা এবং প্রশ্ন-থেকে-পুল অনুপাত কম রাখা বড় ক্লাসে ওভারল্যাপ ও পর্যায়ক্রমিক পুনরাবৃত্তি কমাতে কার্যকর বলে প্রমাণিত।
  • Talent Approved-এর মতো স্বয়ংক্রিয় মূল্যায়ন ব্যবস্থা র‍্যান্ডমাইজেশন ও প্রতারণা-বিরোধী ব্যবস্থা সহজ করে, সেটআপের সময় উল্লেখযোগ্যভাবে কমিয়ে ন্যায্যতা ও নিরাপত্তা নিশ্চিত করে।

সূচিপত্র

প্রশ্ন র‍্যান্ডমাইজেশন কী এবং কেন এটি গুরুত্বপূর্ণ

প্রশ্ন র‍্যান্ডমাইজেশন দুটি সম্পর্কিত পদক্ষেপকে অন্তর্ভুক্ত করে: আইটেমগুলো যে ক্রমে উপস্থিত হয় তা এলোমেলো করা, এবং একটি বড় পুল থেকে প্রশ্ন টেনে আনা যাতে বিভিন্ন শিক্ষার্থী সম্পূর্ণ আলাদা উপসেট দেখতে পায়। প্রথমটি কাউকে পাশের জনের স্ক্রিনে তাকিয়ে উত্তরের অবস্থান মেলানো থেকে রক্ষা করে। দ্বিতীয়টি, যা প্রায়ই র‍্যান্ডমলি সিলেক্টেড কোয়েশ্চন এক্সাম (RSQE) নামে পরিচিত, এমন শিক্ষার্থীর বিরুদ্ধে সুরক্ষা দেয় যে গতকাল পরীক্ষা দিয়েছে এবং আজ পরীক্ষা দেওয়া বন্ধুকে উত্তর টেক্সট করছে।

প্রতিষ্ঠানগুলো তিনটি বাস্তব কারণে এটির উপর নির্ভর করে:

  • দূরবর্তী ও অনলাইন পরীক্ষা একজন পরিদর্শকের একটি কক্ষের উপর থাকা শারীরিক নিয়ন্ত্রণ সরিয়ে দিয়েছে।
  • স্বয়ংক্রিয় গ্রেডিং সিস্টেমে কাঠামোগত আইটেম দরকার, তাই র‍্যান্ডমাইজেশন ম্যানুয়াল পর্যালোচনার কাজ না বাড়িয়েই স্কেল করে।
  • বড় কোর্স বিভাগগুলো একাধিক পরীক্ষার সেশনে একই আইটেম ব্যাংক পুনরায় ব্যবহার করে, এবং র‍্যান্ডমাইজেশন সেই পুনর্ব্যবহারকে তথ্য ফাঁসে পরিণত হতে বাধা দেয়।

র‍্যান্ডমাইজেশন পরিদর্শন বা চুরি-শনাক্তকরণের বিকল্প নয়। এটি একটি কাঠামোগত স্তর যা প্রথমেই প্রতারণার পুরস্কার কমিয়ে অন্যান্য সরঞ্জামগুলোকে আরো কার্যকর করে তোলে।

প্রশ্ন র‍্যান্ডমাইজেশনের ধরন ও কৌশল

চারটি কৌশল শিক্ষাবিদদের বেশিরভাগ প্রয়োজন মেটায়, এবং এগুলো একত্রে স্তরিত করা যায়।

  1. প্রশ্নের ক্রম এলোমেলো করুন। একই আইটেম সেট প্রতিটি শিক্ষার্থীর জন্য ভিন্ন ক্রমে উপস্থিত হয়, যা সহজ "উত্তরের অবস্থান তুলনা করা" প্রতারণাকে ব্যর্থ করে।
  2. উত্তরের বিকল্পগুলো এলোমেলো করুন। একটি বহুনির্বাচনী আইটেমের মধ্যে, পছন্দগুলো নিজেই ঘুরতে থাকে, ফলে "উত্তরটি C" এই তথ্য ভাগ করা আর কার্যকর থাকে না।
  3. সাব-পুল থেকে র‍্যান্ডম নির্বাচন। প্রতিটি শিক্ষার্থী একই ৪০টি প্রশ্ন পাওয়ার পরিবর্তে, প্রত্যেকে কয়েক ডজন সমতুল্য সাব-পুল থেকে কিছু প্রশ্ন আঁকে, ফলে কোনো দুটি পরীক্ষাই একরকম দেখায় না।
  4. একটি-প্রশ্ন-একটি-সময়ে পরিবেশন। শিক্ষার্থীরা পরবর্তী আইটেম আসার আগে একটি আইটেম দেখে এবং উত্তর দেয়, যা পুরো পরীক্ষা স্ক্যান করে রিয়েল টাইমে উত্তর সমন্বয় করা আটকায়।

চারটি একত্রে ব্যবহার করলে প্রতারণার খরচ নাটকীয়ভাবে বাড়ে, কারণ একজন শিক্ষার্থীকে শুধু উত্তর নয়, অবস্থান, শব্দ প্রণয়ন এবং গতি সমন্বয় করতে হবে এমন কারো সাথে যে সত্যিই ভিন্ন একটি পরীক্ষা দিচ্ছে। একটি সতর্কতা: কিছু আইটেম এলোমেলো করা উচিত নয়। যদি "উপরের কোনোটিই নয়" এর মতো বিকল্প সর্বদা শেষে থাকে, তাহলে সেই অবস্থান লক করে বাকিগুলো এলোমেলো করলে আইটেমটি যুক্তিসঙ্গত থাকে।

প্রো টিপ: পরীক্ষা প্রকাশ করার আগে প্রিভিউ মোডে একটি এলোমেলো কুইজ চালান। স্থির-উত্তরের বিকল্প যেগুলো দুর্ঘটনাক্রমে এলোমেলো হয়ে গেছে সেগুলো হলো একমাত্র সবচেয়ে সাধারণ র‍্যান্ডমাইজেশন বাগ যা শিক্ষাবিদরা লঞ্চের পরে রিপোর্ট করেন।

LMS বা মূল্যায়ন কর্মপ্রবাহে র‍্যান্ডমাইজেশন কীভাবে সেটআপ করবেন

বেশিরভাগ লার্নিং ম্যানেজমেন্ট সিস্টেম এবং সার্ভে প্ল্যাটফর্মে ইতিমধ্যে আপনার প্রয়োজনীয় নিয়ন্ত্রণ রয়েছে। কাজটি কোনো লুকানো সেটিং খোঁজার চেয়ে কম এবং আপনার কন্টেন্ট এমনভাবে সংগঠিত করার চেয়ে বেশি যাতে সেই সেটিংসগুলো পূর্বানুমানযোগ্যভাবে কাজ করে।

  • লেবেলযুক্ত আইটেম ব্যাংক তৈরি করুন। বিষয় ও কঠিনতা অনুযায়ী প্রশ্ন গুচ্ছ করুন এবং প্রতিটিকে এটি যে শিখন ফলাফল পরিমাপ করে সেটিতে ট্যাগ করুন, যাতে একটি র‍্যান্ডম ড্র এখনও সঠিক উপকরণ কভার করে।
  • ড্র নিয়ম সেট করুন। একটি বিশাল ব্যাংক থেকে টানার পরিবর্তে বিভাগ প্রতি "এই পুল থেকে X প্রশ্ন আঁকুন" কনফিগার করুন এবং যেখানে উপযুক্ত সেখানে উত্তর-পছন্দ এলোমেলো করা চালু করুন।
  • সিড দিয়ে প্রিভিউ করুন। Qualtrics-এর মতো প্ল্যাটফর্ম র‍্যান্ডমাইজ-ব্লক ফিচার ডকুমেন্ট করে যা আপনাকে শিক্ষার্থীরা দেখার আগে একটি পরীক্ষার ড্র তৈরি করে ফলাফল নিশ্চিত করতে দেয়।
  • যা লক করা দরকার তা লক করুন। স্থির-অবস্থানের উত্তর এবং যেকোনো অ্যাকোমোডেশন-সম্পর্কিত সেটিংস (বর্ধিত সময়, স্ক্রিন রিডার) এলোমেলো করার মধ্যেও অক্ষত থাকতে হবে।
  • ম্যাপিং রপ্তানি করুন। কোন সিড বা ড্র কোন সংস্করণ তৈরি করেছে তার রেকর্ড রাখুন, যাতে গ্রেডিং ও আপিল একজন শিক্ষার্থী যে পরীক্ষাটি দিয়েছিল তার সঠিক সংস্করণ উল্লেখ করে।

Canvas এবং অনুরূপ সিস্টেমে আইটেম ব্যাংক ঠিক এই কর্মপ্রবাহের জন্য তৈরি, একটি ভাগ করা ব্যাংক থেকে প্রতি শিক্ষার্থীর জন্য একটি স্বতন্ত্র উপসেট তৈরি করে। RSQE ডিজাইনের একটি মন্টে কার্লো গবেষণায় দেখা গেছে যে সাব-পুলের সংখ্যা এবং ড্র অনুপাত সরাসরি নির্ধারণ করে দুজন শিক্ষার্থী কতবার ওভারল্যাপিং প্রশ্ন পাবে, এই কারণেই পরবর্তী বিভাগে পুলের গভীরতা বিস্তারিতভাবে আলোচনা করা হয়েছে।

র‍্যান্ডমাইজড পরীক্ষা ন্যায্য রাখার ডিজাইন সেরা অনুশীলন

র‍্যান্ডমাইজেশন তখনই কাজ করে যখন এটি যে পুলগুলো থেকে আঁকে সেগুলো ভালোভাবে তৈরি। প্রতি সাব-পুলে পাঁচটি আইটেম সহ একটি অগভীর পুল শাফল অ্যালগরিদম যতই ভালো হোক না কেন, একটি বড় ক্লাসে ক্রমাগত প্রশ্ন পুনরাবৃত্তি করবে।

প্রশ্ন পুল র‍্যান্ডমাইজেশন এবং পুনরাবৃত্তির প্রবাহ

এ বিষয়ে সবচেয়ে শক্তিশালী প্রমাণ আসে ৬০০টি র‍্যান্ডমলি সিলেক্টেড কোয়েশ্চন এক্সামের ২০২২ সালের একটি মন্টে কার্লো বিশ্লেষণ থেকে, যেখানে দেখা গেছে যে অনেক সাব-পুল ব্যবহার করা এবং প্রশ্ন-থেকে-পুল অনুপাত কম রাখা, ৫ থেকে ১০ শতাংশের মধ্যে, শিক্ষার্থীদের মধ্যে পুনরাবৃত্ত ও পর্যায়ক্রমিক-ওভারল্যাপ প্রশ্ন উল্লেখযোগ্যভাবে কমিয়ে দেয়। বাস্তবে, এর মানে হলো একটি ১০-প্রশ্নের পরীক্ষা ৪০টির চেয়ে ১০০ থেকে ২০০টি সাব-পুল আইটেম থেকে আঁকলে ভালো কাজ করে।

শুধু গভীরতাই যথেষ্ট নয়। আরও কিছু নিয়ম সমানভাবে গুরুত্বপূর্ণ:

  • একটি সাব-পুলের প্রতিটি আইটেম মোটামুটি একই কঠিনতায় একই শিখন ফলাফল পরীক্ষা করা উচিত, যাতে কোনো শিক্ষার্থী দৈবক্রমে সহজ বা কঠিন সংস্করণ না পায়।
  • প্রতিটি পরীক্ষার উইন্ডোর পরে পুল অবসর দিন এবং পুনরায় পূরণ করুন, বিশেষত উচ্চ-নথিভুক্তি কোর্সের জন্য যেখানে একই পরীক্ষা একাধিক বিভাগ বা সেমিস্টারে চলে।
  • যদি আপনি টেমপ্লেট থেকে আইটেম তৈরি করেন, তাহলে লাইভ পুলে নতুন আইটেম যোগ করার আগে একটি কঠিনতা পরীক্ষা, ঐতিহাসিক পারফরম্যান্স ডেটা বা একটি সিমুলেটেড আইটেম রেসপন্স থিওরি (IRT) ড্র চালান।

র‍্যান্ডমাইজড বহুনির্বাচনী পরীক্ষার ঐতিহাসিক পরীক্ষানিরীক্ষায় সাধারণত দেখা গেছে যে আইটেমগুলো কঠিনতার জন্য সঠিকভাবে ক্যালিব্রেট করলে গড় পারফরম্যান্সে কোনো পরিমাপযোগ্য হ্রাস নেই। এই ফলাফলটি সম্পূর্ণরূপে আগে ক্যালিব্রেশনের কাজ করার উপর নির্ভর করে।

বাস্তবায়ন চেকলিস্ট: সেটিংস, মেটাডেটা ও পরীক্ষার দিনের যাচাইসমূহ

রোলআউটকে একটি বড় কনফিগারেশন সেশন নয়, বরং তিনটি পর্যায় হিসেবে বিবেচনা করুন।

  1. পরীক্ষার আগে: প্রতিটি আইটেম বিষয়, কঠিনতা ও ফলাফল অনুযায়ী ট্যাগ করুন। কম ড্র অনুপাতে সাব-পুল তৈরি করুন। একটি পাইলট প্রিভিউ চালান এবং নিশ্চিত করুন যে স্থির-উত্তরের অবস্থানগুলো এলোমেলো করার পরেও টিকে আছে।
  2. পরীক্ষার সময়: শিক্ষার্থীরা পরীক্ষার মধ্য দিয়ে কাজ করার সময় সেশন লগ পর্যবেক্ষণ করুন, এবং নিশ্চিত করুন যে অ্যাক্সেসিবিলিটি অ্যাকোমোডেশন, বর্ধিত সময়, স্ক্রিন রিডার সামঞ্জস্যতা, র‍্যান্ডমাইজেশন সেটিংসের মাধ্যমে ওভাররাইড না হয়ে বহন হয়েছে।
  3. পরীক্ষার পরে: পূর্ণ সিড-থেকে-শিক্ষার্থী ম্যাপিং রপ্তানি করুন যাতে আপনি পুনর্গঠন করতে পারেন কোন শিক্ষার্থী ঠিক কোন সংস্করণ পেয়েছে। সব জমার মধ্যে একটি মৌলিক উত্তর-প্যাটার্ন স্ক্যান চালান, এবং পর্যালোচনার জন্য ন্যায্যতার মেট্রিক্স লগ করুন।

প্রো টিপ: সিড-থেকে-শিক্ষার্থী ম্যাপিং পরীক্ষা প্রশাসনের একই দিনে সংরক্ষণ করুন, তিন সপ্তাহ পরে একটি রিগ্রেড অনুরোধ আসলে নয়। একজন শিক্ষার্থী কোন সংস্করণ নিয়েছিল তা পুনর্গঠন করা যত বেশি অপেক্ষা করবেন তত কঠিন হয়ে যায়।

বড় দল পরিচালনাকারী টিমগুলো প্রায়ই এই চেকলিস্টকে একটি বৃহত্তর হাই-ভলিউম মূল্যায়ন কর্মপ্রবাহে অন্তর্ভুক্ত করে যাতে পরীক্ষার দিনের পদক্ষেপগুলো প্রতিটি পরীক্ষার চক্রে এককালীন হুড়োহুড়ির পরিবর্তে নিয়মিত হয়ে ওঠে।

র‍্যান্ডমাইজেশনের সীমাবদ্ধতা ও পরিপূরক সততা-নিশ্চিতকারী সরঞ্জাম

র‍্যান্ডমাইজেশন প্রতারণার সুযোগ সংকুচিত করে। এটি পরে প্রতারণা শনাক্ত করে না, এবং এটি গ্যারান্টি দেয় না যে পরীক্ষার প্রতিটি সংস্করণ সমানভাবে কঠিন।

  • পরিসংখ্যানগত শনাক্তকরণ এখনও গুরুত্বপূর্ণ। একটি র‍্যান্ডমাইজেশন p-মান পরীক্ষা সন্দেহজনকভাবে অনুরূপ শিক্ষার্থীদের মধ্যে উত্তর প্যাটার্ন চিহ্নিত করতে পারে এমনকি যখন প্রশ্নগুলো নিজেই এলোমেলো করা হয়েছিল বা বিভিন্ন সাব-পুল থেকে আঁকা হয়েছিল।
  • পরিদর্শন ও লগের সাথে যুক্ত করুন। সেশন রেকর্ডিং এবং টাইমস্ট্যাম্পযুক্ত অ্যাক্টিভিটি লগ এমন আচরণ ধরে যা র‍্যান্ডমাইজেশন একা পারে না, যেমন পরীক্ষার মাঝখানে ব্রাউজার ট্যাব পরিবর্তন।
  • IRT দিয়ে ন্যায্যতা পরীক্ষা করুন। প্রতি শিক্ষার্থীর জন্য ১০০টি পারমুটেশন এবং ৫০০টি রান জুড়ে আইটেম রেসপন্স থিওরি সিমুলেশন ব্যবহার করে ইলিনয় বিশ্ববিদ্যালয়ের একটি বিশ্লেষণে দেখা গেছে যে বেশিরভাগ র‍্যান্ডমাইজড-পুল পরীক্ষা যুক্তিসঙ্গতভাবে ন্যায্য ছিল, যখন একটি নির্দিষ্ট পুল ড্র খুব সহজ বা কঠিন হয়ে যায় তা চিহ্নিত করতে গড় পরম বিচ্যুতির মতো মেট্রিক্স ব্যবহার করে।

যখন একটি ন্যায্যতা পরীক্ষা কোনো সমস্যা চিহ্নিত করে, সমাধান সাধারণত সাব-পুল পুনর্ডিজাইন করা, র‍্যান্ডমাইজেশন সম্পূর্ণ পরিত্যাগ করা নয়।

ম্যানুয়াল সেটআপ ছাড়াই র‍্যান্ডমাইজড, ভূমিকা-নির্দিষ্ট পরীক্ষা তৈরি করুন

উপরে আলোচিত সবকিছু, আইটেম ট্যাগ করা, সাব-পুল তৈরি করা, স্থির উত্তর লক করা, কোন ব্যক্তি কোন সংস্করণ পেয়েছে তা ট্র্যাক করা, হাতে কনফিগার করতে বাস্তব সময় লাগে। Talent Approved সেই সেটআপ মিনিটে নামিয়ে আনে। এর Magic Create ফিচার একটি চাকরির বিবরণী বা দক্ষতার তালিকা থেকে সরাসরি একটি ভূমিকা-নির্দিষ্ট দক্ষতা মূল্যায়ন তৈরি করে, তারপর পুনর্ব্যবহারযোগ্য প্রশ্ন লাইব্রেরিতে আঁকে যাতে আপনাকে প্রতিবার নিয়োগের সময় খালি পুল থেকে শুরু করতে না হয়।

Talent Approved

প্ল্যাটফর্মের অ্যান্টি-চিট স্তর, স্ক্রিন ও ওয়েবক্যাম মনিটরিং, সেশন রিপ্লে এবং পূর্ণ সিড ম্যাপিং, চেকলিস্টের পরিচালনামূলক দিকটি স্বয়ংক্রিয়ভাবে পরিচালনা করে, এবং AI-জেনারেটেড সারসংক্ষেপের মানে হলো ন্যায্যতা বিচার করতে বা অনিয়ম চিহ্নিত করতে আপনাকে ম্যানুয়ালি প্রতিটি প্রার্থীর কাঁচা উত্তর পর্যালোচনা করতে হচ্ছে না। Talent Approved সাবস্ক্রিপশন ছাড়া প্রতিটি সম্পন্ন প্রার্থী মূল্যায়নে $৫ চার্জ করে, তাই হাই-ভলিউম নিয়োগ রাউন্ড পরিচালনাকারী টিমগুলো এই গাইডে বর্ণিত একই র‍্যান্ডমাইজড, নিরাপদ পরীক্ষা অবকাঠামো পায় বছরে দুবার ব্যবহার করা সফটওয়্যারের জন্য অর্থ পরিশোধ ছাড়াই। একটি মূল্যায়ন তৈরি শুরু করুন এবং দেখুন একটি চাকরির বিবরণী কত দ্রুত একটি লাইভ, ট্যাম্পার-রেজিস্ট্যান্ট পরীক্ষায় পরিণত হয়।

লেখকের দৃষ্টিভঙ্গি: আসলে কী কাজে আসে

বেশিরভাগ টিম শাফল সেটিংসে অতিরিক্ত বিনিয়োগ করে এবং পুলের গভীরতায় কম বিনিয়োগ করে। কম ড্র অনুপাতে একটি প্রশস্ত সাব-পুল যেকোনো শাফলিং টগলের চেয়ে ন্যায্যতার জন্য বেশি করে। উচ্চ-স্তরের মূল্যায়ন প্রয়োজনের চেয়ে বেশি সাব-পুল দিয়ে শুরু করুন, পাইলট করুন, এবং পুল কোথায় খুব পাতলা তা আপনাকে বলতে দিন পরীক্ষা-পরবর্তী ন্যায্যতার ডেটা, অন্তর্দৃষ্টি নয়।

— Jimmie

উৎস

FAQ

র‍্যান্ডমাইজেশন পরীক্ষা কী?

মূল্যায়ন ডিজাইনে, একটি র‍্যান্ডমাইজেশন পরীক্ষা বলতে প্রতিটি পরীক্ষার্থীর কাছে ভিন্ন প্রশ্নক্রম, উত্তরের ধারা বা আইটেম সেট উপস্থাপন করাকে বোঝায়, যা প্রায়ই একটি পরিসংখ্যানগত র‍্যান্ডমাইজেশন p-মান পরীক্ষার সাথে যুক্ত থাকে যা পরে শিক্ষার্থীদের মধ্যে সন্দেহজনক উত্তর-প্যাটার্ন মিল শনাক্ত করতে ব্যবহৃত হয়।

একটি প্রশ্ন র‍্যান্ডমাইজড হওয়া মানে কী?

একটি র‍্যান্ডমাইজড প্রশ্ন হয় প্রতিটি পরীক্ষার্থীর জন্য ভিন্ন অবস্থানে উপস্থিত হয়, এর উত্তরের পছন্দগুলো এলোমেলো করা হয়, অথবা সমতুল্য আইটেমের একটি পুল থেকে আঁকা হয় যাতে বিভিন্ন শিক্ষার্থী একই প্রশ্নটিই না-ও দেখতে পারে।

সবচেয়ে বেশি র‍্যান্ডমাইজ করা পরীক্ষার প্রশ্নের পাঁচটি ধরন কী?

বহুনির্বাচনী, সত্য/মিথ্যা, মিলানো, শূন্যস্থান পূরণ এবং সংক্ষিপ্ত উত্তরের আইটেমগুলো সাধারণত র‍্যান্ডমাইজ করা হয়, যদিও বহুনির্বাচনী সবচেয়ে পরিশীলিত ট্রিটমেন্ট পায় কারণ প্রশ্নের ক্রম এবং উত্তরের বিকল্পের ক্রম উভয়ই স্বাধীনভাবে এলোমেলো হতে পারে।

পরীক্ষা অন্যায্য না করে কীভাবে প্রশ্ন র‍্যান্ডমাইজ করব?

কম প্রশ্ন-থেকে-পুল অনুপাতে, সাধারণত ৫ থেকে ১০ শতাংশ, অনেক সাব-পুল ব্যবহার করুন এবং নিশ্চিত করুন যে সাব-পুলের প্রতিটি আইটেম লাইভ হওয়ার আগে একই কঠিনতায় একই ফলাফল পরীক্ষা করে।

Talent Approved কি স্বয়ংক্রিয়ভাবে মূল্যায়নের প্রশ্ন র‍্যান্ডমাইজ করতে পারে?

হ্যাঁ। Talent Approved-এর পুনর্ব্যবহারযোগ্য প্রশ্ন লাইব্রেরি এবং Magic Create ফিচার নিয়োগকারীদের র‍্যান্ডমাইজড আইটেম নির্বাচন এবং বিল্ট-ইন অ্যান্টি-চিট মনিটরিং সহ ভূমিকা-নির্দিষ্ট মূল্যায়ন তৈরি করতে দেয়, স্ক্র্যাচ থেকে ম্যানুয়ালি পুল কনফিগার না করেই।