Item Response Theory and Testlet Test

Authors

  • Pisit Pinitsakul Faculty of Education, Roi Et Rajabhat University
  • Somprasong Senarat Faculty of Education, Roi Et Rajabhat University
  • Benjamaporn Senarat Faculty of Education, Roi Et Rajabhat University

Keywords:

testlet item response theory, item response theory, situation test

Abstract

          This article presented perspectives of testlet response theory which is characteristics of a situation test comprising a set of items for responding one stimulus. This type of test is commonly used in language and social sciences. Items in testlet could guide the answer among items within the testlet which breaks the local assumptions of item response theory. Consequently, there is necessary to reconsider parameter estimation of examinees for testlet response theory model. The researchers have been proposing multiple ways to solve the problem. This paper presented proper issues for estimating parameter of testlet test as well as research examples on parameter estimation of testlet test.

References

จงกล บัวแก้ว, ไพรัตน์ วงษ์นาม และสมพงษ์ ปั้นหุ่น. (2561). การประมาณค่าพารามิเตอร์ของแบบสอบเทสต์เลทตามโมเดลทฤษฎีการตอบสนองข้อสอบและโมเดลทฤษฎีการตอบสนองเทสต์เลท. วารสารราชภัฏสุราษฎร์ธานี, 5(1), 139-155.

Buakaew, J., Wongnam, P., & Panhoon, S. (2018). Estimated parameters of the testlet-test under item response theory and testlet response theory model. Suratthani Rajabhat Journal, 5(1), 139-155. [In Thai].

ศิริชัย กาญจนวาสี. (2555). ทฤษฎีการทดสอบแนวใหม่ (พิมพ์ครั้งที่ 4). กรุงเทพฯ: โรงพิมพ์แห่งจุฬาลงกรณ์มหาวิทยาลัย.

Kanjanawasee, S. (2012). Modern test theory (4th ed). Bangkok: Chulalongkorn University Printing House. [In Thai].

วิรัช วรรณรัตน์. (2558). หลักและวิธีการสอบวัด. วารสารมนุษยศาสตร์และสังคมศาสตร์ มหาวิทยาลัยราชพฤกษ์, 1(2), 1-12.

Wannarat, W. (2015). Principles and measurement methods. Journal of Humanities and Social Sciences, Rajapruk University, 1(2), 1-12. [In Thai].

Albert, J. H., & Chib, S. (1993). Bayesian analysis of binary and polychotomous response data. Journal of the American Statistical Association, 88, 669–679.

Chen, J. (2014). Model selection for IRT equating of Testlet-based tests in the random groups design (Doctoral dissertation). University of Iowa, United States of America.

DeMars, C. (2010). Item response theory: Understanding statistics measurement. Oxford University Press: Oxford.

Eckes, T., & Baghaei P. (2015). Using testlet response theory to examine local dependence in C-Tests. Applied Measurement in Education, 28(2), 85-98.

Fox, J.P., (2010). Bayesian item response modeling: Theory and applications. New York: Springer.

Hambleton, R. K., & Swaminathan, H. (1985). Item response theory: Principles and applications. Boston, MA: Kluwer Academic.

Holzinger, K. J., & Swineford, F. (1937). The bi-factor method. Psychometrika, 2, 41–54.

Joreskog, K. G. (1969). A general approach to confirmatory maximum likelihood factor analysis. Psychometrika, 34, 183–202.

Loken, E. & Rulison, K. L. (2010). Estimation of a 4-parameter Item response theory model.

The British Journal of Mathematical and Statistical Psychology, 63(3), 509-525.

Paap, M. C. S., Glas, C. A. W., & Veldkamp, B. P. (2013). An overview of research on the testlet effect: Associated features, implications for test assembly, and the impact of model choice on ability estimates, in LSAC Research Reports Series (LR 13-03). Newtown, PA: Law School Admission Council.

Reckase, M.D., (2009). Multidimensional item response theory. New York, NY: Springer.

Rosenbaum, P. R. (1988). A note on item bundles. Psychometrika, 53, 349–360.

Senarat, S., Tayraukham, S., Piyapimonsit, C., & Tongkhambanjong, S. (2013). Development of a computerized adaptive testing for diagnosing the cognitive process of grade 7 students in learning algebra, using multidimensional item response theory. Educational Research and Reviews, 8(13), 1009-1021.

Sireci, S.G., Thissen, D., & Wainer, H. (1991). On the Reliability of Testlet-Based Tests. Journal of Educational Measurement, 28(3), 237-247.

Wainer, H., Bradlow, E. T., & Wang, X. (2007). Testlet response theory and its applications.

New York: Cambridge University Press.

Wainer, H., & Wang, X. (2001). Using a new statistical model for testlets to score TOEFL. Journal of Educational, 37(3), 203 – 220.

Wheadon, B. C. (2010). An item response theory approach to the maintenance of standards in public examination in England (Doctoral dissertation). Durham University, England.

Downloads

Published

2020-12-29

How to Cite

Pinitsakul, P., Senarat, S., & Senarat, B. (2020). Item Response Theory and Testlet Test. Ubon Ratchathani Journal of Research and Evaluation, 9(2), 74–84. Retrieved from https://so06.tci-thaijo.org/index.php/ubonreseva/article/view/243461

Issue

Vol. 9 No. 2 (2020): July-December

Section

Academic Article

License

1. บทความที่ตีพิมพ์ในวารสารนี้ได้มีการตรวจสอบการลอกเลียนงานวรรณกรรมแล้ว ไม่เกินร้อยละ 25
2. บทความที่ตีพิมพ์ในวารสารนี้เป็นข้อคิดเห็น ข้อค้นพบของผู้เขียนบทความ โดยผู้เขียนบทความต้องเป็นผู้รับผิดชอบต่อผลทางกฎหมายใด ๆ ที่อาจเกิดขึ้นจากบทความนั้น ๆ
3. บทความ ข้อมูล เนื้อหา รูปภาพ ฯลฯ ที่ได้รับการตีพิมพ์ในวารสารวิจัยและประเมินผลอุบลราชธานี ถือเป็นลิขสิทธิ์ของวารสารวิจัยและประเมินผลอุบลราชธานี หากบุคคลหรือหน่วยงานใดต้องการนำทั้งหมดไปเผยแพร่ต่อหรือเพื่อกระทำการใดๆ จะต้องได้รับอนุญาตเป็นลายลักษณ์อักษรจากวารสารวิจัยและประเมินผลอุบลราชธานีก่อนเท่านั้น และจะต้องมีการอ้างอิงวารสารวิจัยและประเมินผลอุบลราชธานี ฉบับนั้น ๆ ด้วย