این سایت در حال حاضر پشتیبانی نمی شود و امکان دارد داده های نشریات بروز نباشند
مطالعات اندازه گیری و ارزشیابی آموزشی، جلد ۵، شماره ۱۰، صفحات ۱۳۳-۱۷۸
عنوان فارسی طراحی خزانه‌های سؤال بهینه برای سنجش انطباقی کامپیوتری با در نظر گرفتن امنیت آزمون
چکیده فارسی مقاله سنجش انطباقی کامپیوتری به خزانه‌ سؤالی نیاز دارد که به ‌خوبی طراحی شده و برای ساخت آزمون‌های مجزا، تعداد مناسبی سؤال‌ داشته باشد. همچنین شامل سؤال‌هایی باشد که از لحاظ محتوایی متعادل باشد و هزینه‌ ساخت آزمون را کاهش دهد. یکی از روش‌های طراحی خزانه‌ سؤال، روش رِکیس است، که در آن از روش مونت‌کارلو برای تعیین ویژگی‌های یک خزانه‌ سؤال بهینه استفاده می‌شود. در این پژوهش، از این روش برای طراحی خزانه‌هایی که با مدل سه پارامتری لُجستیک مدرج شده‌اند، استفاده شده است. برای کنترل نرخ مواجهه‌ سؤال از روش‌ سیمپسون-هتر و برای شبیه‌سازی سؤال‌های آزمون از سه روش تصادفی (R)، تصادفی آمیخته‌ و پیش‌بینی (MRP) و حداقل آگاهی آزمون (MTI) استفاده شده است. عملکرد خزانه‌های‌ سؤال شبیه‌سازی شده و عملیاتی با در نظر گرفتن مجموعه‌ای از ملاک‌های ارزیابی، با یکدیگر مقایسه شده‌اند. نتایج نشان می‌‌دهد که خزانه‌ MRP نسبت به سایر خزانه‌های بهینه از امنیت و دقت اندازه‌گیری بالاتری برخوردار است و شامل سؤال‌های زیادی با ضریب تشخیص بالا است. نرخ همپوشی آزمون در آن‌ کمتر و درصد کوچکی از سؤال‌های بیش مواجهه و کم مواجهه دارد. در مقابل اندازه خزانه‌ MTI نسبت به سایر خزانه‌های بهینه کوچک‌تر و سؤال‌هایی با ضریب تشخیص پایین‌تر دارد. به‌طور کلی با در نظر گرفتن عامل کنترل مواجهه، خزانه‌های بهینه، بهتر از خزانه عملیاتی عمل می‌کند.
کلیدواژه‌های فارسی مقاله
عنوان انگلیسی Designing Optimal Item Pools for Computerized Adaptive Testing by Considering the Test Security
چکیده انگلیسی مقاله Computerized adaptive testing requires a well-designed item pool containing an appropriate number of items to build individualized tests. An optimal item pool should also contain well-balanced items that will achieve optimal item usage and low cost of item creation. One of the methods for designing the blueprint for an item pool is Reckase’s method, which is a Monte Carlo method to determine the properties of an optimal item pool. This study has been presented by the Reckase’s method for designing item pools calibrated with the three-parameter logistic model. Also, in the present simulation, the Sympson-Hetter procedure has been used to control the item exposure rate. To design simulation test items, three approaches including R, MRT, and MTI have been applied. The performance of the simulated item pools has been compared with the operational item pool by considering some evaluation criteria. The results suggest that the optimal pool designed with MRP performs the best, based on test security and measurement accuracy. It does require more items and some highly discriminating items. Tests assembled from MRP pools have smaller test-retest overlap rates and significantly lower percentages of over- and under-exposed items. The results show that the MTI design generally leads to smaller pools and contain items with lower a-parameters. Overall, Considering the Sympson-Hetter procedure, the optimally designed item pools perform better than the operational pool obtained from operational CAT
کلیدواژه‌های انگلیسی مقاله
نویسندگان مقاله مریم مقدسین |
دانشجوی دوره دکتری سنجش و اندازه گیری دانشگاه علامه طباطبایی
سازمان اصلی تایید شده: دانشگاه علامه طباطبایی (Allameh tabatabaii university)

محمدرضا فلسفی نژاد | mohammad reza
دانشیار دانشکده روانشناسی و علوم تربیتی دانشگاه علامه طباطبایی
سازمان اصلی تایید شده: دانشگاه علامه طباطبایی (Allameh tabatabaii university)

علی دلاور |
استاد دانشکده روانشناسی و علوم تربیتی دانشگاه علامه طباطبایی
سازمان اصلی تایید شده: دانشگاه علامه طباطبایی (Allameh tabatabaii university)

احسان جمالی |
استادیار سازمان سنجش آموزش کشور
سازمان اصلی تایید شده: سازمان سنجش

نورعلی فرخی |
دانشیار دانشکده روانشناسی و علوم تربیتی دانشگاه علامه طباطبایی
سازمان اصلی تایید شده: دانشگاه علامه طباطبایی (Allameh tabatabaii university)

نشانی اینترنتی http://jresearch.sanjesh.org/article_18827_afe1d630dde113cc474b4c884f610b68.pdf
فایل مقاله اشکال در دسترسی به فایل - ./files/site1/rds_journals/1117/article-1117-213210.pdf
کد مقاله (doi)
زبان مقاله منتشر شده fa
موضوعات مقاله منتشر شده
نوع مقاله منتشر شده
برگشت به: صفحه اول پایگاه   |   نسخه مرتبط   |   نشریه مرتبط   |   فهرست نشریات