EFFECT OF THE NUMBER OF OPTIONS ON THE QUALITY OF EST READING COMPREHENSION MULTIPLE-CHOICE EXAMS

Resumen

This study aims at identifying how the quality of English for Science and Technology (EST)reading comprehension multiple-choice tests is affected by reducing the number of options ineach item from 4 to 3. The literature proposes that 3-option multiple-choice tests have a similarquality to that of 4-option ones, demanding less effort and being more efficient. Items from 2exams administered in 2001 at Universidad Simón Bolívar were modified. The new forms wereadministered in 2002. From a sample of about 25% of the population, descriptive statistics wereobtained: mean difficulty, mean discrimination, and reliability coefficient. Results confirm thepracticality of the 3-option format without affecting the quality of the test. We recommend theadoption of this format for the reading program in question. A subsequent decision will need toaddress either increasing number of items or decreasing administration time.Key words: language testing, multiple-choice tests, test quality, number of options.EFECTO DEL NÚMERO DE OPCIONES EN LA CALIDAD DE LAS PRUEBAS DESELECCIÓN SIMPLE DE COMPRENSIÓN DE LECTURA DE TEXTOS TÉCNICOCIENTÍFICOSEN INGLÉSResumenEste estudio pretende determinar cómo se afecta la calidad de las pruebas de comprensión delectura de textos técnico-científicos en inglés al reducir el número de opciones de 4 a 3 en cadaítem de selección simple. La literatura del área propone que las pruebas de selección simple de 3opciones tienen una calidad similar a las de 4 opciones, al tiempo que exigen menor esfuerzo yson más eficientes. Se modificaron dos exámenes con ítemes de 4 opciones, administrados en el2001 en la Universidad Simón Bolívar (USB). Las nuevas versiones de 3 opciones seadministraron en el 2002. Se obtuvieron estadísticas descriptivas —dificultad media,discriminación media y coeficiente de confiabilidad— de los datos obtenidos en 2001 y 2002 deuna muestra de alrededor del 25% de la población. Los resultados confirmaron la practicidad delformato de 3 opciones y mostraron cambios positivos en cuanto a la confiabilidad. Aspectoscomo validez, autenticidad, interactividad e impacto no se vieron afectados de manera adversa.Recomendamos la adopción de este formato para el programa de lectura de la USB. Comoconsecuencia de esa adopción, se desprende que, o bien se aumenta el número de ítemes, o sedisminuye el tiempo de administración.Palabras clave: evaluación de L2, pruebas de selección simple, calidad de las pruebas, númerode opciones.