0% encontró este documento útil (0 votos)
64 vistas5 páginas

Imputación de Item

El documento resume la respuesta del operador del concurso docente a una solicitud de información sobre los procedimientos matemáticos y estadísticos utilizados para calificar las pruebas escritas. El operador informa que utiliza la Teoría Clásica de los Tests, la cual asume que la puntuación observada se compone de la puntuación verdadera más el error de medición. Los ítems que no cumplan con los parámetros psicométricos esperados son analizados para determinar si aportan a la evaluación de competencias. Sin embargo, no
Derechos de autor
© © All Rights Reserved
Nos tomamos en serio los derechos de los contenidos. Si sospechas que se trata de tu contenido, reclámalo aquí.
Formatos disponibles
Descarga como PDF, TXT o lee en línea desde Scribd
0% encontró este documento útil (0 votos)
64 vistas5 páginas

Imputación de Item

El documento resume la respuesta del operador del concurso docente a una solicitud de información sobre los procedimientos matemáticos y estadísticos utilizados para calificar las pruebas escritas. El operador informa que utiliza la Teoría Clásica de los Tests, la cual asume que la puntuación observada se compone de la puntuación verdadera más el error de medición. Los ítems que no cumplan con los parámetros psicométricos esperados son analizados para determinar si aportan a la evaluación de competencias. Sin embargo, no
Derechos de autor
© © All Rights Reserved
Nos tomamos en serio los derechos de los contenidos. Si sospechas que se trata de tu contenido, reclámalo aquí.
Formatos disponibles
Descarga como PDF, TXT o lee en línea desde Scribd

Bogotá D.C.

, 27 de octubre de 2022

Señor

C.C.
Correo:

ASUNTO: Respuesta a petición interpuesta a través de correo electrónico, con


ocasión a la aplicación de pruebas escritas, en el marco del Proceso de
Selección No. 2150 a 2237 de 2021, 2316, 2406 de 2022 y 601 de 2018.

RADICADO CNSC:

Respetado señor Jiménez,

En atención a la petición interpuesta a través de correo electrónico, el 18 de octubre de 2022, en


la cual manifiesta:

“(…)

HECHOS

PRIMERO: El operador del Concurso (CNSC) publicó la Guía de orientación al aspirante


para la presentación de las pruebas de conocimientos específicos y pedagógicos (contexto
rural) Aptitudes y Competencias básicas (Contexto no rural) y la prueba psicotécnica el 26
de agosto de 2022.

SEGUNDO: Revisada la Guía de orientación, en la pagina 34, se responde la pregunta <<


¿Cómo se califican las pruebas>> de la siguiente manera

La Prueba de Conocimientos Específicos y pedagógicos para el contexto rural, la Prueba


de Aptitudes y Competencias Básicas para el Contexto No Rural y la Prueba Psicotécnica
para ambos contextos, serán calificadas conforme a los parámetros establecidos en los
Acuerdos del Proceso de Selección.

La calificación de estas pruebas se realizará por grupo de referencia y el resultado de cada


una se notificará en una escala de cero (0.00) a cien (100.00) puntos con dos cifras
decimales truncadas, por ejemplo, si la puntuación con cinco decimales es igual a 98,45989,
al truncarla, para que solamente queden dos decimales, la calificación sería 98,45.
Para efectos de procesar las respuestas durante la calificación, se aplicarán procedimientos
matemáticos y estadísticos utilizados en pruebas con características similares, como
puntuación directa o puntuación directa ajustada. Los ítems que no cumplan con los
parámetros psicométricos no se incluirán en la calificación.

Además, los resultados obtenidos por los concursantes en cada una de estas pruebas se
ponderarán por el respectivo peso porcentual establecido en el Acuerdo de Convocatoria.

En el tercer párrafo dice que se aplicaran procedimientos matemáticos y estadísticos para


procesar las respuestas durante la calificación y no dan a conocer explícitamente los
procedimientos, Además afirman que los ítems que no cumplan con los parámetros
psicotécnicos no se incluirán en la calificación y no quedan claros los criterios que tendrán
en cuenta para determinar que un ítem cumple o no con los parámetros.

TERCERO: El domingo 25 de septiembre se llevó a cabo la realización de la prueba escrita


del concurso docente para zona rural y no rural. Durante la presentación pude constatar
que algunas preguntas podrán no cumplir con los parámetros psicométricos bien sea por
errores de forma y/o contenido. Además, las siguientes fases del proceso de selección
corresponden a la publicación de los resultados preliminares, las reclamaciones y
publicaciones de resultados definitivos.

CUARTO: Por la razón anterior, considero necesario y justificado, solicita a ustedes la


información sobre los procedimientos matemáticos y estadísticos aplicados para calificar la
prueba escrita eliminatoria. Pues esta información me permitirá revisar y constatar que

1. La puntuación que se publique en SIMO sobre mis resultados de la prueba escrita


eliminatoria sea consecuencia de los procedimientos matemáticos y estadísticos
utilizados para la calificación de la misma.
2. En el eventual proceso de reclamación ante el resultado de las pruebas escritas,
conocer los criterios por los cuales un ítem no cumple con los parámetros psicométricos
me permitirá refutar o aceptar la eliminación o no de un ítem.

CUARTO: Téngase en cuenta que, la publicación realizada el 26 de agosto de 2022,


constituye un acto administrativo que expide la Universidad Libre quien actúa en calidad de
administrativo según el contrato o convenio interadministrativo suscrito con la CNSC, y en
tal sentido, frente a la decisión allí informada deberá garantizarse al suscrito de Derecho
Material de Defensa, así como la garantía Constitucional de Aporte y Contradicción de los
medios de prueba valorados por el operador de concurso durante el acto de calificación de
la prueba escrita eliminatoria y posterior publicación de los resultados.

El no acatamiento de tal garantía procesal y constitucional, constituye una flagrante


violación al Derecho de Defensa y al Derecho de Aportar y Controvertir Medios de Prueba;
Garantías Fundamentales que forman parte de los principios que se consagran en el
articulo 29 Constitucional bajo el Denominado Derecho al Debido Proceso de Raigambre
Constitucional, que NUNCA PUEDE SER DESCONOCIDO por ninguna autoridad
administrativa o judicial de la Nación, o por los particulares cuando desempeñen con arreglo
a la Ley, las mismas, como en el presente caso.

En virtud de lo anterior, me permito solicitar a ustedes, como operadores del concurso e


instancias contratantes del mismo, dispongan el despacho favorable de las siguientes

PETICIONES

PRIMERA: Dar a conocer al suscrito la metodología de Evaluación aplicada a las pruebas


escritas eliminatorias realizada el domingo 25 de septiembre de 2022, tales como
procedimientos matemáticos y estadísticos utilizados, del proceso de selección Concurso
Docente para zonas rurales y no rurales 2022.

SEGUNDA: Dar a conocer al suscrito los criterios que tendrá en cuenta la Universidad Libre
para no incluir en la calificación de la prueba escrita eliminatoria los ítems que no cumplan
con los parámetros psicométricos.

Lo anterior, por cuanto no es posible realizar sustentación de debida forma de la


potencial reclamación ante la próxima publicación de resultados de la prueba escrita
eliminatoria del concurso docente para zonas rurales y no rurales, ya que no se tiene
acceso a la información necesaria para realizar los actos materiales de Defensa y
Contradicción; para, de esta manera, proceder en debida forma a controvertir los
resultados que se publiquen, si hay lugar a ello. (…)”

De manera atenta le informamos que, la Universidad Libre como operador del Proceso de
Selección No. 2150 a 2237 de 2021 y 2136, 2406 de 2022 Directivos Docentes y Docntes, es el
competente para adelantar la Prueba de Aptitudes y Competencias Básicas y la Prueba de
Conocimientos Específicos y Pedagógicos, según sea el contexto rural o no rural; así como, la
prueba Psicotécnica en los dos contextos.

Ahora bien, verificado el escrito de su petición, no se evidencia documento anexo, no obstante,


con el fin de atender su solicitud de información respecto al modelo psicométrico empleado para
el análisis de los ítems y posterior calificación de las pruebas, le informamos que se utiliza la
Teoría Clásica de los Tests (TCT), desde la cual se asume que la puntuación observada es el
resultado de la sumatoria entre la puntuación verdadera del evaluado y el error de medición. Por
esta razón, los ítems que se incluyen en la calificación deben mostrar en los indicadores
psicométricos un comportamiento acorde con el esperado para minimizar el error de medición.

Cabe mencionar que, el enfoque de la Teoría Clásica de los Test es el método comúnmente
utilizado para la validación de pruebas de evaluación psicológica.
Así mismo, frente a los índices psicométricos de los ítems de la prueba, la Universidad suministra
la información suficiente para dar claridad frente al proceso que garantiza la idoneidad de la
construcción, validación y análisis psicométrico de los ítems que fueron aprobados sin exponer
información que no pertenece de manera única al aspirante.

Posterior a la aplicación de las pruebas, en la etapa de procesamiento, calificación y generación


de resultados de las pruebas escritas, se realiza un análisis psicométrico donde se calculan los
índices psicométricos de los ítems, para ser analizados bajo la Teoría Clásica de los Test, desde
la cual se asume que la puntuación observada es el resultado de la sumatoria entre la puntuación
verdadera del evaluado y el error de medición.

Acorde a este modelo, los resultados en estos índices no dependen únicamente de las
características propias de los ítems o la prueba, pues también se ven influenciados por variables
del grupo como la cantidad de personas que realizaron la prueba, el nivel de desempeño de los
aspirantes y posibles respuestas aleatorias. Adicionalmente, la presente prueba no puede ser
analizada de la misma manera que los test estandarizados ya que, ante la naturaleza del
concurso, los aspirantes no son una muestra homogénea y no es posible realizar un pilotaje
anterior a la aplicación de las pruebas por su carácter confidencial, como quiera que el inciso 3º
del Numeral 3º del Artículo 31 de la Ley 909 de 2004, reglamenta que:

“(…) Las pruebas aplicadas o a utilizarse en los procesos de selección tienen el carácter
reservado, solo serán de conocimiento de las personas que indique la Comisión Nacional
del Servicio Civil en desarrollo de los procesos de reclamación”.

Por todo lo anterior, no se realizan juicios sobre la calidad de los ítems o la prueba con base
únicamente a los índices psicométricos. En consecuencia, los valores en los índices se utilizan
únicamente para detectar alarmas en el funcionamiento de los ítems, donde, los ítems que no
cumplen los parámetros esperados pasan por un proceso de análisis de contenido realizado por
profesionales capacitados que, junto a expertos en el tema, establecen bajo un análisis técnico
cuáles ítems deben ser imputados en la prueba, toda vez que no permiten o no aportan a la
evaluación objetiva de la competencia laboral que se pretende medir.

Por otro lado, teniendo en cuenta que los valores de los índices psicométricos son calculados a
partir de las respuestas de todos los aspirantes que presentaron la prueba, esta información no
le pertenece únicamente al aspirante, sino a todo el grupo.

Ahora bien, respecto a la segunda solicitud cabe señalar que la CNSC entregó a la Universidad
las estructuras de perfiles de competencias construidos por la entidad territorial certificada en
educación que forma parte del presente Proceso de Selección, con lo cual se adelanta el ejercicio
de verificación frente al Manual de funciones, requisitos y competencias para los cargos de
directivos docentes y docentes.
Posteriormente, la Universidad generó la identificación, verificación, agrupación y consolidación
de las estructuras de perfiles de competencias entregados por la CNSC, realizando sugerencias
justificadas técnicamente a la CNSC para la modificación de estas en los casos que las
definiciones y las funciones de los empleos lo ameritaran y dejando intactas aquellas estructuras
en donde no se observara la necesidad de generar cambios desde un punto de vista técnico.

En suma, la CNSC y el MEN aprobaron los cambios, con el fin de asegurar que las estructuras
de las pruebas a aplicar para cada uno de los empleos estuvieran acordes con las necesidades
de estas. Una vez aprobado el informe final de las actividades de verificación, agrupación y
consolidación de los ejes temáticos, se inició la elaboración de las pruebas.

En consecuencia, se evidencia que los ejes temáticos incluidos en las pruebas planteadas
incluyeron las habilidades y capacidades mínimas requeridas y pactadas con la entidad que forma
parte del proceso de selección.

Luego de la aplicación de las pruebas, la información obtenida de las respuestas de los aspirantes
(aciertos y desaciertos) en el proceso de calificación, se lleva a cabo el análisis de los ítems
observando que los patrones de respuesta cumplian con criterios estadísticos de calidad
previamente establecidos. En esta etapa del proceso se analizan, entre otras cosas, cuál fue el
porcentaje de personas que acertaron para cada ítem, cuál fue la relación entre el porcentaje de
acierto del ítem y los porcentajes de acierto de toda la prueba, si los ítems tuvieron algún problema
de redacción, si algún(os) ítem(s) no era pertinente(s) para el perfil que se evaluó, etc. Los análisis
mencionados anteriormente se llevaron a cabo con un equipo de expertos, entre los que se
encuentran los constructores de los ítems, la coordinadora de pruebas, el psicómetra y el analista
de datos.

Adicional a lo anterior y para profundizar un poco más en el análisis, se realiza la revisión


cualitativa de los ítems que no cumplien con los criterios estadísticos o que fueron reportados en
el formato de preguntas dudosas, para determinar si es necesario imputar (dar el acierto a todos
los aspirantes) a algún ítem que no cumpla con los criterios de calidad, de ahí que la calificación
definitiva se obtiene después de determinar los ítems imputados.

Cordialmente,

MARÍA VICTORIA DELGADO RAMOS


Coordinadora General Convocatoria Directivos Docentes y Docentes
UNIVERSIDAD LIBRE

También podría gustarte