Universidad Juárez Autónoma de Tabasco

Taller para elaboración de reactivos del EGEL-Pedagogía

TALLER DE ELABORACIÓN DE REACTIVOS

Erick de Jesús López Morales

Temas a tratar:

• ¿Qué es el Ceneval?• ¿Qué es un EGEL?• ¿Cómo se elabora un EGEL?• Lineamientos para la elaboración de reactivos• Lineamientos para la elaboración de

multirreactivos

OBJETIVO

1.Los docentes elaboran reactivos de opción múltiple con base en la matriz de especificaciones para incrementar los bancos de reactivos, con lo que se garantizará confiabilidad y validez de los EGEL.

2.Obtener por participante 10 reactivos y 3 multirreactivos

¿QUÉ ES EL CENTRO NACIONAL DE EVALUACIÓN PARA LA EDUCACIÓN SUPERIOR, A.C.?

CENEVAL

ANTECEDENTES

o El CENEVAL es una asociación civil sin fines de lucro que se constituyó formalmente en abril de 1994.

o Tiene como fin sustantivo contribuir a mejorar la calidad de la educación media superior y superior mediante evaluaciones externas de los aprendizajes logrados en cualquier etapa de los procesos educativos.

o El Centro obtiene sus ingresos a partir de los servicios que realiza.

1.- Proporcionar instrumentos válidos y confiables.

2.- Aportar elementos de evaluación externa.

3.- Proporcionar asesoría a las Instituciones de Educación Superior.

4.- Establecer parámetros de comparación a nivelregional y nacional.

5.- Establecer estándares decalidad.

Brindar servicios de evaluación a disposición de las instituciones de educación superior.

Objetivo

PRINCIPALES PRODUCTOS

1. Exámenes Generales para el Egreso de la Licenciatura (EGEL)

• 23 carreras

2. Exámenes Nacionales de Ingreso (EXANI)

• I Para la educación media superior• II Para la licenciatura • III Para el posgrado• 3. Exámenes por convenio

Estructura de operación• Dirección General• Direcciones Generales Adjuntas• Coordinaciones de Área

CONSEJO TÉCNICO

¿Qué es el Examen General para el Egreso de la

Licenciatura?• Es un instrumento de evaluación

especializado para cada profesión• Instrumento distinto y complementario a

los instrumentos que utiliza cada IES para realizar la certificación oficial de estudios

• Es un auxiliar de gran valor para las IES: les proporciona información para mejorar la calidad de sus servicios, procedimientos y recursos

¿Cuáles son las características de un

EGEL?• Es un examen extenso, dividido en varias

secciones; cubre distintas áreas de conocimientos y habilidades de la profesión

• Los contenidos y niveles de exigencia coinciden con lo estipulado por la mayoría de los programas de licenciatura

¿Quién elabora el examen?

• El CENEVAL construye y opera cada examen y asume la responsabilidad jurídica por sus servicios.• Pero los contenidos y características de cada examen son determinados por un Consejo Técnico externo y sus comités académicos.

Estructura del EGEL

Evaluación de• Conocimientos: reactivos de opción

múltiple• Habilidades: problemas o casos

(reactivos asociados)

¿Cómo se elabora un EGEL?

Perfilreferencialde validez

Contenido Temático

Identificación conocimientos y habilidadesBanco de

Reactivos

Tabla especificaciones

Distribución y peso de las áreas

Examen

ComitésComitésAcadémicosAcadémicos

FICHA TÉCNICA DE LA PRUEBA• Número de áreas: 3• Número de subáreas: 18• Número de reactivos: 300• Formato de reactivos: opción múltiple• Opciones de respuesta: 4• Aplicación: 2 sesiones de 4 hrs. cada

una

Lineamientos para la elaboración de

reactivos

¿QUÉ ES UN REACTIVO?• Materia prima de una prueba.• Cuestionamiento que se dirige a explorar la presencia o ausencia de un conocimiento, habilidad o actitud determinada.

TIPOS:• Completamiento (respuesta simple o breve)• Respuesta alterna (sí-no, falso-verdadero)• Jerarquización (ordenamiento)• Apareamiento (correspondencia)• Localización (identificación)• Opción múltiple

TIPOS DE REACTIVOS

Según tipo de respuesta CaracterísticasAbierta:

–Ensayo–Respuesta breve–Complementación

•Subjetivos•Difícil calificación e interpretación

Cerrada:–Verdadero-Falso–Correspondencia–Opción múltiple

•Objetivos•Mayor facilidad de calificar•Excento de interpretación

Reactivos de opción múltiple

Están conformados por:

La base es el enunciado que presenta la situación, caso o problema planteado en una pregunta, afirmación o enunciado incompleto.

Las opciones son las posibles respuestas, entre las cuales sólo una responde correctamente y las otras son respuestas incorrectas llamadas distractores.

Reactivo de opción múltiple

¿Quién es el padre de la psicología científica?

A)Sigmund FreudB)B.F. SkinnerC)William JamesD)Wilhem Wundt

Base

Opciones

•Lenguaje apropiado para la asignatura.•Redacción sencilla y correcta.•Proporcionar únicamente la información necesaria.•Manejar sólo un resultado de aprendizaje.•No evaluar el sentido común del sustentante.•Tomar en cuenta el nivel escolar de los examinados.

Lineamientos

•Tomar como punto de partida la tabla de especificaciones

•No aumentar la dificultad del reactivo utilizando tecnicismos o contenidos poco significativos

•No se deberán hacer reactivos con citas textuales del material didáctico o que requieran respuestas memorísticas.

•Cada reactivo debe ser independiente uno de otro

Lineamientos

Base

•Cada enunciado debe presentar únicamente un problema.•Incluir los elementos estrictamente necesarios para comprender el sentido.•Evitar términos que confundan o den claves de la respuesta correcta.•Evitar las formas negativas.

Opciones•Tener concordancia gramatical con la base.•Ser homogéneas gramaticalmente entre ellas.•Pertenecer a un mismo campo semántico.•No repetir opciones, ni con el empleo de sinónimos.•Procurar presentar la misma extensión.•No utilizar:TODAS LAS ANTERIORES, NINGUNA DE LAS ANTERIORES, NO SÉ, NO EXISTE, ni opciones en blanco.

Opciones

•Incluir distractores plausibles.•Utilizar enunciados verosímiles pero incorrectos.•Incluir en los distractores los errores más comunes de los estudiantes.•Evitar que una opción ayude a elegir la respuesta correcta por indicios gramaticales o por plausibilidad.•Justificar el tipo de error que se comete para contestar.

Respuesta correcta

Sólo una respuesta correcta.•La respuesta debe resolver el problema satisfactoriamente.•Se debe justificar el razonamiento de la respuesta correcta en términos de qué tienen que saber y hacer para contestar correctamente.

EJEMPLOS DE ERRORES EN REACTIVOS

Incluya en la base del reactivo la idea lo más completa posible

En las pruebas objetivas, el término objetivas se refiere al método de:

A) calificar la respuesta.B) identificar los resultados de aprendizaje.C) presentar el problema.D) seleccionar el contenido del test.

MEJORADO

Redacción del reactivo

En las pruebas objetivas, el término objetivas:

A) se refiere al método de calificar las respuestas.B) se refiere al método de identificar los resultados de aprendizaje. C) se refiere al método de presentar el problema.D) se refiere al método de seleccionar el contenido del test.

DEFICIENTE

La construcción negativa requiere ser utilizada en la base del reactivo, debidamente enfatizada. La palabra EXCEPTO posibilita menor desgaste cognitivo para el estudiante.

Al elaborar reactivos de opción múltiple todas las siguientes son prácticas deseables, EXCEPTO: A) acortar la base alargando las opcionescortar la base alargando las opciones.B) subrayar ciertas palabras de la base para recalcarlas.C) enunciar la base de manera afirmativa.D) usar una base que pueda funcionar como ítem de respuesta breve.

MEJORADO

Base negativa¿Cuál de las siguientes no es una práctica deseable cuando se preparan ítemes de opción múltiple?

A) Acortar la base alargando las opciones.A) Acortar la base alargando las opciones.B) Subrayar ciertas palabras de la base para recalcarlas.C) Enunciar la base de manera afirmativa.D) Usar una base que pueda funcionar como ítem de respuesta breve.

DEFICIENTE

La palabra investigación que aparece en el pie y en la respuesta correcta puede proporcionar una clave al estudiante

Pistas entre la base y la respuesta correcta

¿Cuál de las siguientes publicaciones consultaría en primer lugar para encontrar artículos de investigación sobre pruebas de aprovechamiento?A) Revista de Investigación Educativa.B) Suplemento de Medición y Educación.C) Suplemento de Consulta Psicologica.D) Suplemento de Pscología Educativa.

Los resultados de aprendizaje son más útiles en la elaboración de pruebas cuando están:

A) claramente enunciados en términos conductuales.claramente enunciados en términos conductuales.B) elaborados por maestros y alumnos en colaboración.C) preparados después de que ha ocurrido la enseñanza.D) enunciados en términos generales.

La palabra que enfatiza CLARAMENTE puede dar la clave de la respuesta correcta.

Enfatizar la opción correcta

La palabra puede es bastante obvia. Observe como las otrasopciones inician de forma distinta. Esta clase de errores, tanto por extensión como el tiempo puede ser una clave para elegir la respuesta correcta.

La falta de atención a los resultados de aprendizaje durante laPreparación de un test:

A) puede producir una prueba menos pertinente con el programa educativo.puede producir una prueba menos pertinente con el programa educativo.B) producirá un mayor uso de las preguntas de ensayo.C) hará más difícil la elaboración de los reactivos.D) disminuirá la calidad técnica de los reactivos.

Falta de homogeneidad en la redacción inicial de la opción A)

¿Cuál de las siguientes características es la más importante enlos resultados de las pruebas de aprovechamiento? A) pertinencia.B) confiabilidad.C) consistencia.D) objetividad.

Las palabras “consistencia” y “confiabilidad” pueden eliminarse, ya que ambas significan lo mismo.

Sinónimos

La obtención de una jerarquía confiable del aprendizaje de losestudiantes es de primordial importancia cuando se usan pruebas de:

A) aprovechamiento general.aprovechamiento general.B) inteligencia.C) habilidad verbal.D) velocidad.

DEFICIENTE

Campo semántico

MEJORADO

La obtención de una jerarquía confiable del aprendizaje de losestudiantes es de primordial importancia cuando se usan:

A) pruebas de aprovechamiento general.A) pruebas de aprovechamiento general.B) descripciones conductuales.C) listas de comprobación.D) cuestionarios.

Formato de reactivos

RESPUESTA CORTA O BREVE

Planteamiento de un problema de forma sencilla, permitiendo hacer cuestionamientos de manera directa.

Recomendaciones:1.- Reducirse al ámbito estrictamente informativo de los contenidos2.- Incorporar a su planteamiento expresiones e instrucciones precisas que no dejen lugar a multiplicidad en la interpretación de la respuesta que se espera

 Acción que le permite determinar cuál es la situación actual de la escuela. a)     Pronósticob)     Diagnósticoc)      Objetivod)     Estrategia 

EJEMPLO RESPUESTA CORTA O BREVE

Enunciado con espacios en blanco que implica completar la expresión eligiendo la palabra o frase correcta.

COMPLETAMIENTO

Recomendaciones:1.- Evite usar más de dos espacios en blanco en un mismo reactivo.2.- Debe anotarse en primer término la orden de elección y posteriormente el párrafo incompleto.

EJEMPLO COMPLETAMIENTO

 El enfoque de sistemas aplicado a las organizaciones, considera a la organización como un sistema __________________ integrado por varios subsistemas. a)     psicosocial abiertob)     sociotécnico abiertoc)      sociotécnico establed)     psicosocial cerrado  

ORDENAMIENTO O JERARQUIZACIÓN

Consisten de una lista de elementos o datos, que tienen que ser ordenados de acuerdo con el criterio que se indica en las instrucciones (cronológico, lógico, evolutivo, por rangos, etc.).

Inician con una instrucción o pregunta y a continuación aparecen las palabras o enunciados que forman parte de la base del reactivo precedidos por un número.  

Recomendaciones:1.- No emplear menos de 4 ni más de 7 cuestiones para ordenar.2.-No mezclar en una misma proposición o enlistado elementos de distinta naturaleza ni distractores.3.-Establecer con claridad el criterio para ordenar o jerarquizar el material.4.-Manejar estos reactivos sólo cuando se trate de explorar objetivos en los que la conducta correspondiente se refiera a discriminar posiciones, ordenar, jerarquizar, etc.

ORDENAMIENTO O JERARQUIZACIÓN

 Las siguientes son categorías del campo afectivo propuestas por Bloom en su taxonomía para la elaboración de objetivos conductuales. Seleccione la opción que las ordena correctamente.1. respuesta2. organización3. recepción4. valorización5. caracterización por un valor A) 3, 1, 4, 2, 5B) 1, 4, 2, 5, 3C) 4, 2, 5, 3, 1D) 2, 5, 3, 1, 4

EJ. ORDENAMIENTO O JERARQUIZACIÓN

SELECCIÓN DE ELEMENTOS EN UN LISTADO

Para este formato se presenta una pregunta o instrucción la cual es seguida de una serie de elementos que la responde, sin embargo no todos los elementos corresponden a la respuesta correcta, por lo que hay que seleccionar solamente aquellos correctos.Recomendaciones: 1.- Se sugiere no emplear menos de 4 ni más de 7 cuestiones.2.- No mezclar en una misma proposición o enlistado elementos de distinta naturaleza ni distractores.3.- Manejar estos reactivos sólo cuando se trate de explorar objetivos en los que la conducta correspondiente se refiera a discriminar aprendizajes.

SELECCIÓN DE ELEMENTOS EN UN LISTADO

A continuación se presenta una lista de características que debe tener la evaluación curricular, según diferentes enfoques. Elija las que correspondan a la tecnología educativa: Características1.       Totalizadora2.       Objetiva3.       Confiable4.       Histórica5.       Válida6.       Transformadora Seleccione aquella opción que considere correcta.

 A)     2, 4, 6B)     1, 3, 4C)      2, 3, 5D)     1, 3, 5 

RELACIÓN DE COLUMNAS, APAREAMIENTO Y/O CORRESPONDENCIA

Se caracterizan por pedir el establecimiento de relaciones entre elementos de dos grupos o series. Son precedidos de un enunciado que incluye la instrucción de selección o relación.

Recomendaciones:1.- Debe contener instrucciones claras y precisas con el fin de orientar sobre el criterio para establecer relaciones.

2.- Sirve para evaluar objetivos en donde se tengan que llevar a cabo actividades como: relacionar, vincular, clasificar, aplicar principios, inferir, etc.

Recomendaciones:

3.- Construir grupos en que los elementos y relaciones sean, en cada uno, del mismo tipo y naturaleza.

4.- Se puede optar por poner el mismo número de opciones en ambas columnas, así como una de ellas puede contener un menor número de elementos donde se realicen categorías más generales. En una de las columnas se recomienda poner números y en la otra letras.

RELACIÓN DE COLUMNAS, APAREAMIENTO Y/O CORRESPONDENCIA

 

Relacione correctamente las fases de desarrollo psicosexual, según Freud, con su edad de aparición en el ser humano. Fases Edad de aparición   1. Latencia

a) 0-18 meses 2. Anal

b) 18 meses -3 años 3. Oral

c) 3-6 años 4. Fálica

d) 6-12 años     A)1d, 2b, 3a, 4c.B)1c, 2a, 3b, 4dC)1b, 2c, 3d, 4aD)1a, 2c, 3a, 4c 

RELACIÓN DE COLUMNAS, APAREAMIENTO Y/O CORRESPONDENCIA

El sujeto debe seleccionar la opción que

corresponde al fin, objetivo o propósito

indicado en la base. Se usan expresiones

como: para qué, con qué objetivo.

PROPÓSITO

¿Para qué es útil la estadística inferencial?   A) Describir la distribución de la población B) Generalizar resultados C) Estudiar el efecto de una variable D) Analizar los resultados

PROPÓSITO

X

Se cuestiona acerca de las causas de un

hecho o fenómeno. Se usan expresiones

como: por qué, cuál es la causa o razón, cuál

es el origen.

CAUSA

Una persona sufre un accidente en el cuál se golpea fuertemente en la cabeza. Después del accidente, tiene problemas para tomar decisiones, planear a futuro y es incapaz de comportarse de acuerdo a las convenciones sociales. El origen de estos problemas es una lesión en el lóbulo ________.

A) temporal

B) occipital

C) frontal

D) parietal

CAUSA

X

Contrario al anterior, cuestiona acerca de los

efectos o consecuencias de un hecho o

fenómeno. Se usan expresiones como: qué

sucede cuando..., cuál es el efecto, qué

provoca; si X entonces Y.

EFECTO

La administración de 0.25 mg/kg de cipionato de estradiol en perras provoca en seis días:

 X A) Pancitopenia aplástica B) Estro fértil C) Piometra D) Estro anovulatorio

EFECTO

X

Se refiere a la relación entre dos hechos o

fenómenos. Se usan expresiones como:

qué sucede cuando..., cómo se relaciona X

con Y.

ASOCIACIÓN

La esquizofrenia está asociada con:

A) Disminución en serotoninaB) Aumento en serotoninaC) Disminución en dopaminaD) Aumento en dopamina

ASOCIACIÓN

X

En una situación específica planteada en la

base del reactivo, el sujeto debe identificar

el principio que se ha olvidado, el tipo de

error que se ha cometido.

IDENTIFICACIÓN DEL ERROR

Unos cerdos han sido tratados con penicilina (22,000 U.I. vía intramuscular) y oxitetraciclina en el alimento (200 g/tonelada) desde hace 6 días sin que haya respuesta ¿Cuál considera que sea la causa de falta de respuesta al tratamiento? A) El tratamiento está equivocadoB) Incorrecta vía de administración de antibióticosC) No son las dosis adecuadas para la edad de los animalesX D) Se debe esperar más tiempo para valorar la respuesta al tratamiento

IDENTIFICACIÓN DEL ERROR

El sujeto debe elaborar un juicio acerca de la

opción más adecuada para un planteamiento

o condición específica, considerando las

ventajas y desventajas. Se usan expresiones

como: a partir de los datos considera que, lo

más adecuado es, lo ideal es.

VALORACIÓN

En un terreno de aluvión , de 20 Ha con: ligera tendencia a la sodicidad; fertilidad en N baja, drenaje bueno, rico en potasio, pobre en fósforo, con contenido de materia orgánica bajo, ¿qué tipo de fertilizante es el más adecuado?  A) Nitrato de amonio B) Nitrato de sodioX C) Sulfato de amonio D) Amoniaco anhidro

VALORACIÓN

Lineamientos para elaboración de multireactivos

Multirreactivos

• Propósito:

Evaluar las habilidades del recién egresado para analizar e interpretar información, tomar de decisiones y elaborar juicios de valor, ante problemas específicos

Multirreactivos

Conformados por:• Un planteamiento inicial (material

introductorio) un párrafo, una tabla, una gráfica, un mapa o un dibujo

• Reactivos de opción múltiple vinculados con la situación planteada

Estructura del Multirreactivo

Planteamiento

Reactivo1

Reactivo2

Reactivo3

Reactivo 4

Reactivo5

Reactivo6

Lineamientos

• Tener como referencia situaciones que usted considere que un alumno enfrentará en el ámbito laboral inmediato a su egreso.

Lineamientos

Proporcionar suficiente información, implícita o explícitamente, que permita comprender el sentido correcto del problema y la solución del caso.

Evitar dar detalles innecesarios

• Cuide que la redacción sea precisa, asimismo evite

utilizar términos que confundan o den claves para

encontrar la respuesta correcta de algún reactivo.

Lineamientos

• Puede incluir más información sobre el caso

insertándola entre los reactivos a fin de dar una

secuencia lógica a la resolución del caso

Lineamientos

• Los reactivos o preguntas se hacen a partir de la

información presentada en el planteamiento del

problema.

Lineamientos: Reactivos asociados

• Los reactivos deben ser independientes entre sí, evitando que al responder uno, se dé la clave para contestar otro.

• Evite que un reactivo apoye la elección de la respuesta

correcta de otros reactivos.

Lineamientos: Reactivos asociados

Defecto: reactivos del tema pero se responden sin leer el plantemiento

Planteamiento

Reactivo1

Reactivo2

Reactivo3

Reactivo 4

Reactivo5

Reactivo6

Defecto: reactivos se contesten entre sí:

Planteamiento

Reactivo1

Reactivo2

Reactivo3

Reactivo 4

Reactivo5

Reactivo6

• Los reactivos exploran habilidades para la aplicación o

análisis de la información no son de reconocimiento o

identificación.

• No incluya reactivos sobre conocimiento de términos,

conceptos o definiciones.

Lineamientos: Reactivos asociados

• Las respuestas a los reactivos no deben aparecer, de

manera explícita, en el texto de la escena o planteamiento

(no deben ser preguntas de lectura de comprensión).

Lineamientos: Reactivos asociados

• Plantee la situación inicial: Escriba la descripción de la situación inicial

incluyendo todos los datos necesarios para que el problema sea reconocido por el recién egresado como si fuera real.

Recomendaciones

En el planteamiento del problema verifique:

• ¿Incluyó sólo los elementos necesarios?

• ¿El planteamiento es demasiado extenso

o muy corto?

• ¿Es lo suficientemente claro que se

entiende sin leer las preguntas?

Recomendaciones

• Para elaborar los reactivos: 1° Escriba las preguntas de manera abierta:

¿Cuál sería el primer paso....? Usted considera que lo primero que se debe realizar es...¿Cuál sería el paso más adecuado...? ¿Cómo considera el uso de...?¿De acuerdo con la información usted decide...? ¿Usted considera que...? ¿Qué sugiere...? ¿Usted recomendaría...?

¿Usted concluye que...?

Recomendaciones

• Convierta las preguntas abiertas a

reactivos de opción múltiple

• Marque la respuesta correcta.

Recomendaciones

Después de elaborar todas las

preguntas, organícelas

considerando una secuencia lógica

Recomendaciones

Al redactar los reactivos verifique:¿Se ordenaron siguiendo una secuencia

lógica? ¿Se evitaron los reactivos de conocimiento

de términos, conceptos o definiciones? ¿Ningún reactivo ayuda a contestar otro?

Recomendaciones

MULTIRREACTIVO

Una pareja de esposos asiste a terapia por constantes discusiones acerca de los desacuerdos para realizar las labores del hogar. El terapeuta les pide que realicen una lista de todas las labores domésticas y que les asignen un valor en puntos según el tiempo que se necesitara para realizarlas. Posteriormente, les pide que dividan las labores en partes iguales comprometiéndose por escrito a realizarlas. Si alguno de ellos dejara de realizar las tareas estaría obligado a depositar $5 en el fondo que la otra persona está autorizada a gastar. También les pide que se recompensen verbalmente por haber realizado una tarea.

 

Ejemplo 1

MULTIRREACTIVO

Reactivo Asociado 1

1. ¿Qué tipo de técnica es utilizada en este caso?  A) Reforzamiento aversivoB) Reforzamiento negativoC) Costo de respuestaD) Extinción

Reactivo Asociado 2

2. ¿Qué tipo de modificación de conducta se está utilizando?  A) Mantenimiento de la respuestaB) ExtinciónC) Aumento de frecuenciaD) Adquisición

MULTIRREACTIVO

MULTIRREACTIVO

Reactivo Asociado 3

3. ¿Desde qué perspectiva teórica se aborda este caso?A) PsicoanálisisB) Cognitivo-conductualC) ConductualD) Gestalt

Observe la siguiente gráfica

0

50

100

150

200

250

300

1990 1992 1994 1996 1998 2000

MULTIRREACTIVO Ejemplo 2

Reactivo 1

El nombre de la gráfica anterior es:

A) dispersión. B) polígono.C) histograma.D) pastel.

¿Cuál es la media de ingresos entre los años 1999 y 2000

A) 150B) 200C) 250D) 300

De acuerdo a los datos de la gráfica ¿cuál es la moda?

A) 150 B) 200C) 250D) 300

Reactivo 2

Reactivo 3

Análisis de reactivos

ANÁLISIS DE REACTIVOS• CUALITATIVA

– Jueceo• Vigencia• Pertinencia

• CUANTITATIVA– Dificultad y discriminación (modelo clásico)– Punto biserial (coeficiente de correlación)

• Global• Áreas y subáreas

– Dificultad y discriminación logística (modelo logístico)

– Análisis de distractores

Grado de dificultad

Es la proporción de personas que Es la proporción de personas que responden correctamente un reactivo, y responden correctamente un reactivo, y los reactivos adecuados deben ubicarse los reactivos adecuados deben ubicarse entre el 20% y el 80% de respuestas entre el 20% y el 80% de respuestas correctas.correctas.

Grado de dificultad Ejemplo:Ejemplo:

Si a un grupo de 40 estudiantes se le Si a un grupo de 40 estudiantes se le aplica una prueba, en cuya primera aplica una prueba, en cuya primera pregunta sólo responden correctamente 18 pregunta sólo responden correctamente 18 personas, el grado de dificultad se obtiene personas, el grado de dificultad se obtiene de la siguiente manera:de la siguiente manera:

El 45% se encuentra entre el 20% y el 80%El 45% se encuentra entre el 20% y el 80%

45%1000.451004018100

NRCGD

Poder de discriminación

Nos permite determinar si el reactivo lo Nos permite determinar si el reactivo lo contestan correctamente con más contestan correctamente con más frecuencia los buenos estudiantes (alto frecuencia los buenos estudiantes (alto desempeño) que los malos estudiantes desempeño) que los malos estudiantes (bajo desempeño).(bajo desempeño).

Los valores obtenidos pueden ser:Los valores obtenidos pueden ser:

+ = el reactivo discrimina en el grupo de + = el reactivo discrimina en el grupo de AD AD - = el reactivo discrimina en el grupo de - = el reactivo discrimina en el grupo de BDBD0 = el reactivo no discrimina0 = el reactivo no discrimina

Poder de discriminación

Con el ejemplo anterior, de los 40 sujetos, se Con el ejemplo anterior, de los 40 sujetos, se ordenan de mayor a menor por la calificación ordenan de mayor a menor por la calificación total de la prueba y se dividen en dos grupos a total de la prueba y se dividen en dos grupos a partir de la medianapartir de la mediana

alto 13

mediana

5bajo

SELECCIÓN DE REACTIVOS

1. Elaboración de reactivos2. Revisión (autor-coordinación)3. Selección por jueceo (Consejo Técnico)4. Revisión de estilo5. Piloteo y calibración:

• Parámetros estadísticos6. Selección de un reactivo (validación-

calidad)

Criterios mínimos para evaluar el instrumento

Toda prueba tiene un componente de varianza Toda prueba tiene un componente de varianza de error adjudicable al evaluador y no al de error adjudicable al evaluador y no al estudiante; por esto debemos verificar si la estudiante; por esto debemos verificar si la prueba es pertinente al grupo de estudiantes al prueba es pertinente al grupo de estudiantes al que está siendo aplicada.que está siendo aplicada.

Las pruebas tienen dos indicadores clásicos para Las pruebas tienen dos indicadores clásicos para determinar su calidad: determinar su calidad:

ValidezValidez

ConfiabilidadConfiabilidad

ValidezValidez

Consiste en que la prueba mida lo que pretende medir.Entre los tipos de validez que existen podemos mencionar los siguientes:

Validez de constructo Validez de contenido Validez predictiva

ConfiabilidadConfiabilidad

Se refiere a la precisión o permanencia con la que podemos obtener la misma medición en diferentes condiciones:

Estabilidad temporal Equivalencia Consistencia interna