UNIVERSIDAD NACIONAL ABIERTA Y A DISTANCIA UNAD
ESCUELA CIENCIAS DE LA EDUCACIÓN
FASE 4:
ANALISIS DE RESULTADOS
ELABORADO POR:
DAVID JIMÉNEZ
CINDY JIMÉNEZ
GRUPO COLABORATIVO:
401304_18
TUTOR:
DIGNORA PÁEZ
MAYO 2020
INTRODUCCIÓN
A continuación, encontrará los resultados obtenidos de un instrumento de evaluación
elaborado por este grupo colaborativo, utilizado para medir las características del aprendizaje de
los estudiantes luego de un proceso formativo.
Inicialmente se realizó la aplicación de la prueba, una vez obtenido los resultados, estos
fueron registrados en una plantilla TCT de Excel, la cual hallará como anexo en otro documento.
Posteriormente, realizamos un informe con los resultados, haciendo un análisis a cada uno de los
ítems de la misma, obteniendo así sus indicadores de calidad e índices de calidad de los ítems,
para la construcción de un plan de mejoramiento que nos permita garantizar la calidad de la
misma.
OBJETIVOS
Analizar, valorar y estudiar los resultados obtenidos de un instrumento de evaluación
Medir las características del aprendizaje y su aprehensión luego del proceso formativo
Aprender a elaborar planes de mejoramiento sobre un instrumento de evaluación.
INFORME DE LOS RESULTADOS PRUEBA APLICADA
Esta prueba se llevó a cabo a veintidós estudiantes de décimo grado, donde se evaluaron los
temas: simple past y present perfect previamente enseñados en el aula.
La prueba constó de veinte preguntas cerradas, con única respuesta de la cual se obtuvieron
los siguientes resultados:
ESTUDIANTE 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20
1 B A B B A B B A A A C B A C B B A B D A
2 C C B A C D B D A A D B A A A B A A C C
3 C C B A C D B A A B D B A A A B A A C C
4 B C A D A D B D A A B B A C A B A A D D
5 C C B A C D B D A A D B A A A B A A C C
6 C C B A C D B D A A C B A C A B A A D C
7 C C B A C D B D A A C A A A A B A A D C
8 A C A B C B B C D A B B B B B C A A A C
9 C C B A C D B D A A D B A A A B A A C C
10 C C B A C C B D A A D C D C A B A A D C
11 C C B A C C B D A A D B A A A B A A C C
12 C C B A C D B D A A D B A D A B A A D C
13 C C B A C D B D A A D B A D A B A A D C
14 B C A B B D B A B A A A C A C A D B D C
15 A C D A B D B D A A C D A A B B D A D D
16 B C B A C D B D A A D B A C A B B A D C
17 B C C B B A D B A B C A D C A A C D A C
18 C C B A A D B C C A C A B A A C B A D C
19 C C B A C B B D B A B B A C A B B A D C
20 C A A B C B B A D B B C C A A B C A B A
21 C C B C B B B A C A D C C C A B C A D C
22 C D B A C D B D A A D B A C A B C A D C
N° Criterio Cantidad
1 Exámenes o pruebas aprobadas 14
2 Exámenes o pruebas no aprobadas 7
3 Exámenes o pruebas con nota mínima aprobatoria 1
ANÁLISIS DE LA PRUEBA Y DE LOS ÍTEMS
N° Indice de Indice de Varianza Alfa de Error de
dificultad discriminación Cronbach medida
1 340,909090 0,58139922 5,68181818
9 2 0,86704883 0,3646247
2 409,090909 0,24050039 1,31578947
1 5
3 318,181818 0,76958415 5,11695906
2 8
4 318,181818 0,79621821 5,11695906
2 8
5 295,454545 0,76888972 5,70175439
5 4
6 295,454545 0,36518942 5,70175439
5
7 409,090909 0,50311577 1,31578947
1
8 295,454545 0,79412099 5,70175439
5 3
9 340,909090 0,49814189 4,38596491
9 4
1 386,363636 0,31176333 2,48538012
0 4 2
1 204,545454 0,67623690 6,57894737
1 5 2
1 295,454545 0,51657703 5,70175439
2 5 4
1 318,181818 0,68968197 5,11695906
3 2 8
1 159,090909 0,07422003 6,14035088
4 1 3
1 340,909090 0,67075033 4,38596491
5 9 1
1 340,909090 0,81459069 4,38596491
6 9 5
1 295,454545 0,51657703 5,70175439
7 5 4
1 363,636363 0,73130058 3,50877193
8 6 8
1 272,727272 0,04990657 6,14035088
9 7 4
2 363,636363 0,28100902 3,50877193
0 6 2
531,432749
INDICADORES DE CALIDAD DEL ÍTEM
Resultado El alfa de Cronbach de nuestro instrumento
nos arrojó un porcentaje de 0,86. De acuerdo a
los coeficientes del alfa de Cronbach, si el
0,86 % resultado es mayor o igual a 0,8, se considera
ALFA DE CRONBACH un instrumento fiable y sus ítems pueden
conservarse. Sin embargo, es necesario
realizar algunas verificaciones para lograr la
excelencia del mismo.
Interpretación de resultados
ERROR DE MEDIDA 0,3646247
ÍNDICE DE DIFICULTAD Resultado
1 340,9090909
Ítems mayores al 20% muy difíciles 0 2 409,0909091
3 318,1818182
Ítems mayores al 80% muy fáciles 7 4 318,1818182
5 295,4545455
Ítems adecuado entre el 20% y 80% 13 6 295,4545455
7 409,0909091
8 295,4545455
Los resultados del índice de dificultad de este instrumento, nos
9 340,9090909
revelaron que 7 ítems de la prueba los números 2, 7, 10 386,3636364
10,15,16,18 y 20 deben verificarse pues su porcentaje fue 11 204,5454545
12 295,4545455
mayor al 80%, lo cual indica que estos son muy fáciles.
13 318,1818182
También podemos identificar que 13 de sus ítems se
Respuesta % 14 159,0909091
encuentran dentro del rango adecuado para su aplicación
s pues 15 340,9090909
se encuentran entre el 20% y el 80%. 16 340,9090909
17 295,4545455
18 363,6363636
Los resultados de la prueba no evidencian ítems muy difíciles. 19 272,7272727
20 363,6363636
INDICE DE DISCRIMINACIÓN
0,80 a 1,00 Muy alto (conservar el ítem para otras pruebas)
0,60 a 0,79 Alto (conservar el ítem para otras pruebas)
Pregunta %
0,40 a 0,59 Adecuado (conservar el ítem para otras pruebas)
s
1 0,20 a 0,39 Bajo (descartar o revisar ítem para otras pruebas)
0,581399222
2 0,240500395
0,1 a 0,19 Muy Bajo (descartar definitivamente el ítem)
3 0,769584158
4 0,796218218
5 0,768889724
6 0,36518942 El índice de discriminación nos muestra la validez del
ítem, en este caso podemos denotar que 9 ítems de la
7 0,50311577
prueba (3,4,5,8,11,13,15,16 y18) tienen un índice de
8 0,794120993 discriminación alto, pues su porcentaje se encuentra
9 0,498141894 entre el 0,60 al 0,79 lo cual recomienda conservar el
10 0,311763332 ítem)
11 0,676236902
12 0,516577034 Los ítems 1, 7,9,12 y 17 se catalogan adecuados
porque su porcentaje oscila entre 0,40 a 0,59
13 0,689681978
14 0,074220033 Los ítems 2,6,10 y 20 serán catalogados como bajos y
15 0,670750331 deben descartarse o revisar su contenidos para otro
16 0,814590695 tipos de pruebas pues su porcentaje de discriminación
17 0,516577034 fue entre 0,20 a 0,39.
18 0,731300588 Los ítems 14 y 19 deben descartarse definitivamente
19 0,049906574 pues su índice es muy bajo ya que oscila entre 0,1 a
20 0,281009022 0,19.
ANALISIS DE CADA UNO DE LOS ITEMS
De acuerdo a los resultados del índice de dificultad y de discriminación las siguientes
preguntas son consideradas como muy fáciles o bajos y deben ser verificadas y/o remplazadas de
la prueba para que esta pueda adquirir validez.
Pregunta # 2: Se utiliza para hablar de una acción que concluyó en un tiempo anterior al
actual. El anterior concepto corresponde a:
A. Present participle.
B. to have.
C. Simple past.
D. Present Prefect.
Análisis:
Esta pregunta fue elaborada para medir el nivel de conocimiento cognitivo, sin embargo,
consideramos que obtuvo este porcentaje ya que la pregunta número 1 es muy similar a esta y al
contestarla inmediatamente deduces el resultado de la pregunta dos. Por ende, queda la
incertidumbre de si el estudiante realmente identifica el tiempo gramatical.
Se considera fiable la necesidad de cambio o modificación de la misma, ya que tanto el
resultado del índice de discriminación y de dificultad así lo sugieren.
Pregunta #6: Choose the correct answer: Did she _____ korean food?
A. has
B. eating
C. ate
D. eat
Análisis:
De acuerdo al índice de dificultad esta pregunta se encuentra en un rango adecuado, no
obstante, el índice de discriminación nos sugiere verificar su contenido y/o utilizarla para otro
tipo de prueba ya que su porcentaje fue bajo.
No esperábamos que esta pregunta tuviera dicho resultado pues considerábamos que estaba
bien elaborada, sin embargo y teniendo en cuenta su resultado positivo en el índice de dificultad
podemos hacerle unas mejoras que se incluirán en el plan de mejoramiento.
Pregunta # 7: Choose the correct answer: You have not _______ the lesson.
A. student
B. studied
C. used
D. studying
Análisis:
De acuerdo al índice de dificultad esta pregunta es considerada como muy fácil, sin embargo,
el índice de discriminación la cataloga como aceptable para su aplicación, por ende, buscaremos
hallar el balance en la misma para que permanezca dentro de la prueba haciendo las mejoras
correspondientes. Consideramos que la mejora debe realizarse en las respuestas, ya que son muy
predecibles.
Pregunta #10: Choose the simple past of theses verbs: walk, run, win, sing:
A. Walked, ran, won, sang
B. Walking, run, win, sing
C. Wlak, ran, won, sung
D. Walked, rant, won,sang
Análisis:
Tanto el índice de discriminación como de dificultad sugieren hacer una evaluación o corrección
de la misma, pues las opciones de respuestas evidencian cual es la correcta, haciéndolo un ítem
muy fácil de resolver, también puede sugerirse el cambio de los verbos, por unos menos
predecibles.
Pregunta #14.
Has the Lion forgiven to the Little mouse?
A. I don’t kwon.
B. No, he don’t.
C. Yes, it has.
D. yes, he it
Análisis: En esta pregunta el resultado en el índice de discriminación fue muy bajo, por ende,
sugiere eliminarse de la prueba, no obstante, el índice de dificultad nos arrojó una respuesta
aceptable para su aplicación.
Analizando la pregunta de manera detenida, notamos que esta es muy sencilla y que no cumple
con los objetivos de la prueba.
Pregunta # 19
Did the human forgive the cat?
A. No, he didn’t
B. yes, he does
C. no, he did
D. Yes, he did.
Análisis: el índice de discriminación sugiere que esta pregunta sea eliminada de test ya que
obtuvo porcentajes muy bajos en la medición. Si analizamos la estructura de las respuestas
notaremos que es muy similar al contenido de la numero 14, dejando en evidencia que
efectivamente no cumple con el objetivo de su medición.
Pregunta #20.
Choose the correct adjective in the following sentence:
I had an _________ appointment this morning.
A. fresh
B. thick
C. important
D. refreshing
Análisis: esta pregunta esta correctamente diseñada, sin embargo, es considerada por ambos
índices tanto de discriminación y dificultad como bajos, inicialmente por que es muy fácil
escoger una respuesta y segundo porque el ítem no logra demostrar que alumno conoce como
usar los adjetivos, ya que solo existe un solo ítem evaluando este contenido.
PLAN DE MEJORAMIENTO
Curso: English___ Grado: 10____ Fecha: 05-05-2020
Objetivo:
Evaluar e identificar los errores cometidos en la elaboración de la prueba
Mejorar los ítems de la prueba para alcanzar la eficiencia de la misma
N Ítem (1). Relación con el Revisión de la Revisión de la Revisión del Revisión de la Validez de la
o objetivo que se construcción longitud de vocabulario coherencia entre clave como
desea medir gramatical y cada una de (5). enunciado y cada respuesta cierta
(2). semántica del las opciones de una de las opciones (7)
enunciado (3). respuesta (4). de respuesta (6).
1 Pregunta #2.
Se utiliza para
hablar de una
acción que Se desea medir Debido a que la Las respuestas La respuesta La respuesta La respuesta es la
concluyó en el nivel de pregunta uno es son correcta es coincide con el única que coincide
un tiempo conocimiento similar a esta, el predecibles, obvia enunciado. con la pregunta
anterior al cognitivo, están estudiante pudo demasiado fácil comparada
actual. El relacionado. haberla tomar la con las demás
anterior contestado por correcta
concepto descarte.
corresponde a:
A. Present
participle.
B. to have.
C. Simple
past.
D. Present
Prefect.
2
Pregunta #6: La pregunta es El ítem es claro, Consideramos La longitud Aunque el La respuesta es la
Choose the acorde al conciso y que el error de la enunciado es única y verdadera
correct objetivo a coherente estuvo en las respuesta era consecuente con las en el ítem
answer: Did medir, creemos respuestas ya acorde a la respuestas, estas
she _____ que se obtuvo que las pregunta y no pudieron ser menos
korean food? este resultado opciones dadas insinuaba su obvias a la vista del
A. has por lo sencillo la hacían muy validez por la estudiante sin que
B. eating del tema fácil de misma. fuera confuso
C. ate responder
D. eat
3
Pregunta # 7: La pregunta es El ítem es claro y La longitud de Las
Choose the consecuente al especifico en lo las respuestas respuestas El enunciado es La clave correcta
correct objetivo a que pregunta es correcta y no tienen similar coherente con el es la única
answer: You medir. afecta la vocabulario y resultado. respuesta acertada
have not elección de la terminan por en el ítem.
_______ the misma evidenciar
lesson. cuales son
A. student incorrectas
B. studied
C. used
D. studying
Pregunta#10: Buscamos El ítem es claro La longitud de El error El enunciado La respuesta
Choose the medir los conciso y las respuestas estuvo en la coincide con las correcta es la única
4 simple past of conocimientos coherente con las es acorde a las elaboración respuestas y no posible en el ítem.
theses verbs: vistos a través respuestas preguntas de las genera confusión
walk, run, de ejercicios de respuestas para su realización
win, sing: memorización, pues se
A. Walked, el ítem cumple escriben de
ran, won, sang el mismo. manera
B. similar y/o
Walking, run, sus opciones
win, sing de respuestas
C. Wlak, evidencian la
ran, won, sung correcta
D. Walked,
rant, won,sang
5 Pregunta #14.
Has the Lion La pregunta no El ítem es La longitud de La respuesta Enunciado y La respuesta
forgiven to the cumple con el coherente con las las respuestas A no es respuesta se correcta es la única
Little mouse? objetivo de respuestas en esta acorde a las complementan. posible en el ítem
A. I don’t medir la pregunta no demás
kwon. capacidad de interviene en su respuestas
B. No, he interpretación escogencia
don’t.
C. Yes, it has.
D. yes, he it
6 Pregunta #19.
Did the human La pregunta El ítem es La longitud en Todas las Enunciado y El ítem tiene una
forgive the cumple con el coherente este ítem no respuestas respuesta se única respuesta
cat? objetivo de semánticamente cambia su tienen similar complementan posible, sin
A. No, he interpretación y pero no está resultado vocabulario embargo las demás
didn’t comprensión de alineado al son muy similares.
B. yes, he la historia objetivo
does
C. no, he did
D. Yes, he did.
7 Pregunta #20.
Choose the Cumple con el El ítem es claro y No se tuvo en El Enunciado y La respuesta es la
correct objetivo, sin conciso, es cuenta la vocabulario respuesta hacen una única posible en el
adjective in embargo, la coherente con la longitud en el coincide con frase completa y ítem.
the following respuesta es pregunta espacio de la el tópico que coherente
sentence: muy obvia y respuesta se intenta
I had an debimos incluir durante la evaluar
_________ mas preguntas elaboración
appointment que evaluaran
this morning. el mismo
A. fresh contenido
B. thick
C. important
D. refreshing
* Indicaciones para diligenciar el formato
(1) Coloque la pregunta a la que realizará plan de mejoramiento.
(2) Describa si la pregunta responde o no al objetivo o competencia a medir.
(3) Señale si el ítem es claro, conciso y coherente.
(4) Señale si hay similar longitud, esto es que la respuesta correcta no sea siempre la más larga y completa.
(5) Revise exista similar vocabulario, es decir que la respuesta correcta no sea la única que utiliza términos técnicos.
(6) Debe ser gramatical y semántica, es decir enunciado y opción de respuesta hacen una frase completa.
(7) Confirme si la respuesta realmente es la única y verdadera opción que corresponde al ítem.
CONCLUSIÓN
Al finalizar la elaboración de la prueba de medición para los estudiantes de decimo grado, la
percibimos eficiente, valida y confiable para su aplicación, sin embargo, en cada una de las fases
nos dimos cuenta que era necesario realizar cambios a la misma o profundizar en su contenido
pues aún no cumplía con los estándares requeridos. En esta cuarta fase, tuvimos la posibilidad de
familiarizarnos con un instrumento capaz de evaluar la fiabilidad de nuestro test de medición y
adicionalmente de crear nuestra propia plantilla TCT para la profundización en futuros escenarios
de investigación lo cual, fue muy enriquecedor pues nos permitió adentrarnos en su contenido y
determinar si efectivamente cada uno de los ítems de nuestra prueba cumplían con los objetivos
inicialmente planteados.
Toda esta experiencia y reconocimiento de los diferentes factores de incidencia en la creación
de la prueba, nos permitió llegar a la conclusión de que son muchos los puntos que deben tenerse
en cuenta al momento de diseñar una prueba y que una vez completada debe revisarse su
contenido las veces que sean necesarias para que al momento de su aplicación los estudiantes
obtengan un producto coherente, acorde al vocabulario técnico estudiado, con ítems claros y
concisos, donde estos se sientan cómodos y más que examinados por el docente, sea una
experiencia personal que les permita autoevaluarse.
Como futuros docentes necesitamos adquirir la capacidad de reinventarnos constantemente,
esto incluye no solo a nuestras acciones, sino también planes de área, diseños de currículo y
demás actividades que intervengan en el proceso educativo, con el fin de crecer profesionalmente
y de brindar a nuestros alumnos las mejores oportunidades para desarrollarse de manera integral
en su vida escolar.
REFERENCIAS
Muñiz, José; (2010). Las Teorías de los Tests: Teoría Clásica y Teoría de Respuesta a los Ítems.
Papeles del Psicólogo, Enero-Abril, 57-66. Recuperado
de http://www.papelesdelpsicologo.es/pdf/1796.pdf
Fernández–Pampillón, A. M., Domínguez, R. R., y de Armas, R. I. (2012). Herramientas de
evaluación de la calidad de Objetos de Aprendizaje (herramienta COdA). Guía para la
producción y evaluación de materiales didácticos digitales (Versión 1.1). Madrid:
Universidad Complutense de Madrid. Recuperado
de http://eprints.ucm.es/12533/1/COdAv1_1_07jul2012.pdf