TEST DE INTERPRETACION SELECTIVA DE DATOS N. Seisdedos MANUAL PUBLICACIONES DE PSICOLOGIA APLICADA Serie menor n® 214 TEA Ediciones, S.A. Madrid, 1996INDICE INTRODUCCION 1, DESCRIPCION GENERAL . 1.1. Ficha técnica . poceoesnoce 1.2. Fundamentacién y descripcién de la prueba . }. Material para la aplicacién . 2. NORMAS PARA LA UTILIZACION. . . . 2.1. Normas generales .... oe 2.2. Instrucciones especificas para la aplicacién . 2.3. Normas de correccién y puntuacién 3. JUSTIFICACION ESTADISTICA ......... 3.1, Estudio experimental para su construccién . 3.2. Analisis de elementos... 3.3, Fiabilidad ...... 3.4. Validez ree 3.5. Correlaciones con otras variables . 3.6. Andlisis factoriales 4, NORMAS PARA LA INTERPRETACION 4.1, Muestras de tipificacién. 4.2. Tabla de conversién BAREMOS .......... ae Pagina oxyINTRODUCCION El "Test de Interpretacién Selectiva de Datos" (TISD) que ahora se ofrece es el resultado de la acumulaci6n de muy diferentes fuentes, porque para su construccién nos hemos apoyado en las ideas de otros instrumentos. Al examinar el contenido del TISD el lector puede tener la impresién de “haber visto antes algo paretido”. Como cuando en el pasado el profesional tenfa en sus manos un test "6mnibus", compuesto por elementos que pulsaban varios rasgos aptitudinales con material de contenido cultural; el esquema se repetia en los distintos tests "émnibus" Por tanto, el TISD no pretende ser una presentacién original de unos elementos muy especificos para evaluar unos rasgos intelectuales de los examinandos. Tal vez su valor psicométrico venga dado porque sus 40 elementos han acumulado durante algu- nos aflos una exhaustiva informacién psicométrica en muy diferentes muestras y con diversas situa- ciones de aplicacién Esos 40 elementos ponen en ejercicio la capacidad necesaria para captar y asimilar informacion presentada de modo impreso mediante tablas y gréficos, algo parecido al formato a que nos tiene acostumbrados la prensa diaria. La evaluacién de los rasgos aptitudinales necesarios para tener éxito en esta tarea puede servir para aquellas ocasiones en que el profesional que trabaja en psicologia aplicada quiere medir estos aspectos de la conducta, porque considera que la asimilacién y el pro- cesamiento de los datos de tablas y gréficos estn muy relacionados con una actividad especifica (por ejemplo, la de vendedores, gestores administrativos, mandos, gerentes, etc.). Ese profesional intuye que para tener éxito en eStas actividades es necesario poser unas aptitudes concretas (como la verbal, la numérica o el razonamiento) que el TISD pone en ejercicio. El instrumento no pretende ser un "traje a la medida” para la evaluaci6n de los rasgos concretos de una determinada actividad profesional; para ese supuesto caso, la prueba deberfa reunir conduc- tas y materiales muy préximos a los del puesto de trabajo (lo que en la literatura anglosajona se cono- ce como el "job replica"); en este supuesto, el instrumento tendrfa ademés una validez aparente que podria apreciar el examinando. ‘Como hipétesis aprioristica de trabajo, a la hora de elaborar la ficha técnica del instrumento, se sugirié una significacién psicolégica para la variable o variables a medir. Los resultados obtenidos en los anélisis estadisticos realizados con varios miles de casos parecen corroborarlo. Sin embargo, seré necesario esperar a que el profesional que trabaja "a pie de obra" vaya vali- dando el instrumento en sus aplicaciones profesionales. Por eso, al presentar ahora el instrumento, tenemos la esperanza de que su pronta aplicacién pueda resultar valiosa, tanto en la labor practica de psicodiagnéstico como en las de investigacién. Estas aplicaciones nos dirdn en el futuro si la variable o variables medidas son congruentes con nuestra hipétesis y si los resultados confirman los que ofrece el presente Manual.En a tarea de recogida de muestras, hemos contado con la valiosa colaboracién de nuestro com- pafiero Javier Minguijén Martinez en la tarea de acumulacién de datos de diversos procesos de correccién mecanizada, as{ como con la cesién de datos directos recogidos por "La Caixa”, Jordi Brunet Llobet (Caixa de d'Estalvis de Sabadell), Gloria Séez Lorenzo (REPSOL) y M* Paz Velasco Ruiz y Eduardo Villarrubia Espinosa (TEA CEGOS). Queremos agradecer estas aportaciones, asi como aprovechar la ocasién para pedir y agradecer de antemano cualquier colaboracién que nos pue- dan prestar aquellas personas que en el futuro apliquen la prueba; los datos serfan recogidos e incor- porados en la préxima edicién de este Manual. N. Seisdedos Cubero1. DESCRIPCION GENERAL 1.1. FICHA TECNICA TISD, Test de Interpretacién Selectiva de Datos. Nicolds Seisdedos Cubero. Dpt? I + D de TEA Ediciones, S.A., Madrid (1996). Individual y colectiva. 20 6 30 minutos. Aplicacién: —_Adolescentes y adultos. Significacién: Evaluacién de los aspectos culturales de la inteligencia gene- ral o capacidad mental superior. Tipificacién: — Baremos en centiles y puntuaciones tipicas en muestras de la poblacién general de adultos. 1.2, FUNDAMENTACION Y DESCRIPCION DE LA PRUEBA. En el apartado de Significacién de la ficha técnica se ha indicado que el TISD mide una capacidad mental superior implicada en los aspectos culturales de la inteligencia general. Normalmente, cuando se construye un test de inteligencia se pretende eludir los contenidos muy relacionados con la cultura, con la espe- ranza de evaluar sin sesgos esa dimensién esencial que hace que una persona destaque de las dems en la "resolucién de problemas” (entrecomillado que podria definir la esencia de lo que se conoce como inteligencia general). Por otra parte, generalmente se admite que la funcién medida por los tests de inteligencia esté asociada con el aprendizaje, pero no sélo con la capacidad o facilidad de aprendizaje sino también con el nivel 0 complejidad del mismo. No obstante, en el proceso de "absorber", aprender o integrar el conjunto de experien- cias (de tipo cotidiano o de tipo académico), el sujeto puede acudir a una comprensién de los fenémenos y sus interrelaciones o a una memorizacién de los datos recibidos. Obviamente, las personas difieren en su capacidad para aprender por comprensin y aprender por memorizacién, y normalmente tienden a inclinarse por el uso de una de las, dos capacidades. Por otra parte, cuando per- sonas con dotacién superior tienen que seguir cursos de formacién, aquellas en las que pre- domine la capacidad de comprensién tendrén ‘una mayor facilidad para recibir y asimilar los nuevos aprendizajes. La comprensién y 1a memorizacién pue- den estar presentes en el TISD con igual o distinta preponderancia; no obstante, cuando los sujetos ya poseen una formacién superior, el predominio es de la variable comprensién, porque estos sujetos se igualan, normalmen- te, en la memorizacién de datos ya asimila- dos. Esa comprensién les facilita una visién répida (inteligente) de 1a realidad para tomar decisiones o resolver los "problemas" que les plantea la realidad. Los elementos del TISD incluyen compo- nentes verbales, numéricos y graficos; es nor- mal, la cultura y 1a actividad humana, escolar © profesional, tienen también esos compo-nentes, Aunque pueda parecer que son muy ificativas las dotes numéricas en el TISD (porque es necesario realizar algunas opera- ciones), los célculos exigidos son muy sim- ples y la principal dificultad no esté en esos cAlculos sino en captar selectivamente la ubi- cacién de los datos y las relaciones existentes entre ellos para llegar a la "solucién a los pe- quefios problemas” que plantean los ejercicios. Cuando existe una dotacién basica sufi- ciente, parece que las habilidades necesarias para tener éxito en la prueba tienen que ver con una comprensién inteligente del conjun- to de los datos (verbales, numéricos y gréfi- cos), porque dicha comprensién esta subya- cente en la obtencién de una puntuacién ele- vada en la prueba. En definitiva, se trata de una variable 0 conjunto aptitudinal que, por su posicién ele- vada o general en una estructura piramidal de la conducta, puede tener aplicacién en muy diferentes comportamientos. En resumen el instrumento intenta apreciar en cada ejercicio tres aspectos que el sujeto debe poseer de modo arménico para aplicarlos en muy dife- rentes actividades; esos aspectos son los siguientes: “la captaci6n del problema a resolver, “la biisqueda de la fuente (tabla o grifico) en la que encontrar los datos pertinentes, y las capacidades verbal y numérica para encontrar la solucién correcta. Es muy probable que estas variables estén subyacentes en muchas actividades humanas ¥ que tengan que ver con la inteligencia gene- ral, porque exigen la puesta eit ejercicio de algunos de sus factores mentales primarios. En cierto modo, esto puede estar condiciona- do, a su vez, por el material empleado para la medida de las variables o por el grado de escolarizacién que posee el examinando. En la mayorfa de las ocasiones, la actividad 0 conducta que se pretende predecir da por supuesto un nivel indispensable de la dota- cién aptitudinal y un grado de escolarizacién. 8 Finalmente, también interviene una varia- ble consustancial con las aplicaciones de tests. de papel y Iépiz: el tiempo de duracién de la prueba. La mayorfa de las personas serfan capaces de hacerla mejor si dispusieran de tiempo suficiente. Pero como ocurre en cual- quier actividad profesional, las tareas se eje- cutan con muy distinta eficacia cuando la solucién de los problemas o la toma de deci- siones hay que hacerlas bajo la premura del tiempo. En la fase experimental de construc- cién del instrumento se ha podido analizar en los resultados el efecto de dos tiempos de aplicacin bastante diferentes, 20 y 30 minu- tos de trabajo efectivo. En conjunto, los andlisis que se describen en el capitulo 3 de este Manual apuntan a unas variables de tipo superior en la estructu- ra de la inteligencia. No obstante, no se trata de la misma inteligencia o factor "g”, sino de uno de sus principales componentes (el de tipo cristalizado o cultural, que dirfa R. B. Cattell, para diferenciarlo del de tipo fluido 0 hereditario). Los elementos del TISD no tienen un pro- gresivo aumento de dificultad; el test no se ha construido con ese criterio; en su presenta- cidn los elementos solicitan solucionar un problema referido a una de las tablas o gréfi- Cos, y la eleccién de éstos ha sido aleatoria, para que el sujeto tenga que atender, a priori, a todas esas fuentes de datos. La prueba se presenta en un triptico con tres hojas y seis paginas: la I* para el titular, las dos siguientes (2* y 3") para la fase de entrenamiento y las otras tres para la prueba efectiva. En la fase de entrenamiento el examinan- do tiene a la vista cuatro tablas de datos (una con los cambios de divisas de siete paises) y dos grificos (unos histogramas circulares de unas distribuciones de gastos); contienen tunos datos con los que el sujeto puede resol- ver cinco ejercicios de préctica En la fase de prueba real (abierto el tripti- co en toda su extensi6n) el examinando tiene, a su izquierda, la pégina 4* con seis tablas de datos y tres gréficos (histogramas, circularesy de barras); entre las primeras se encuentra la misma tabla de cambios de divisas de la fase de entrenamiento; a la derecha, en las paginas S* y 6*, se presentan 40 elementos, para cuya solucién es necesario acudir a una © varias fuentes de datos de la pagina 4". Como se ha indicado anteriormente, la prueba tiene un tiempo limitado para su eje- cucién. Su disefio es propio de los tests de rapidez, y el examinador debe estar atento al cronémetro, pues un tiempo diferente invali- darfa la posible comparacién con los baremos elaborados. Durante la primera época de la fase experimental se han recogido varios miles de casos para los que el tiempo conce- dido ha sido de 30 minutos; en una fase pos- terior, se considerd y probs el uso de un tiem- po mds reducido (20 minutos) y se recogieron otros miles de casos. En el capitulo destinado a la justificacién estadistica se han analizado comparativamen- te los resultados de ambos tiempos de aplica- cién; a modo de resumen se puede indicar que los dos tiempos ofrecen unos resultados fiables, discriminativos y vélidos, pero tienen una mejor calidad psicométrica los obtenidos con 30 minutos, porque favorecen que el sujeto manifieste su dotaciGn aptitudinal Sea cual fuere la decisién que tome el pro- fesional sobre el tiempo de aplicacién, dispo- ne de una baremacién independiente para cada uno de ellos; si este profesional lo con- siderase conveniente, puede pobrar otro tiem- po de aplicacién y elaborar una tipificacién distinta de la que presenta este Manual. Finalmente, dentro de esta descripcién general del instrumento, hay que afiadir que para la determinacién de la puntuacién direc- ta no se han tenido en cuenta los errores: los resultados de los andlisis no sugieren que, en este tipo de tarea, el sujeto se incline a con- testar al azar para conseguir mas puntos en la prueba y sea necesario penalizarle por ese tipo de conducta. 1.3. MATERIAL PARA LA APLICACION Aparte del presente Manual (con las bases te6ricas, descripcién, justificacién estadfstica y normas de aplicacién e interpretaciGn), es necesario el siguiente material -Cuadernillo de la prueba, Hoja de respuestas; puede servir cual- quiera de las de correccién mecanizada del fondo de distribucién de TEA Edi- ciones que tenga en columna, al menos, espacio para 40 ejercicios con cinco alternativas de respuesta (A aE), y ~Plantilla de correccién. Es posible incluir la mecanizacién en los procesos de correcci6n, puntuacién y norma- lizacién de los resultados (y asi se ha hecho en todas las aplicaciones experimentales para la tipificacién).. NORMAS PARA LA UTILIZACION 2.1. NORMAS GENERALES ‘Aunque, en principio, la prueba TISD puede autoaplicarse sin que sea necesaria la presencia de tun técnico o personal cualificado, éste resulta normalmente valioso para una mejor comprensién de las instrucciones y el adecuado uso de la Hoja de respuestas. La prueba puede ser de aplicacién individual 0 colectiva, con 20 6 30 minutos de tiempo real (ademas del necesario para el periodo de entrenamiento), y exige que cada examinando disponga del material necesario. Enel caso de una aplicacién colectiva y numerosa, en cada aula o aulas de examen habré al menos tun responsable y un auxiliar. El responsable lo sera de toda la aplicaci6n. Por tanto, serd él quien imparta todas las instrucciones, se dirija al grupo de examinandos para la normativa del desarrollo y eve el control del tiempo de aplicacién. Es necesario personarse en el aula con anterioridad al comienzo del examen, para comprobar sus condiciones (luminosidad, mobiliario, encerado, etc.), la existencia de los impresos necesarios para la prueba y estudiar la distribucién de los sujetos. En el caso de alguna deficiencia en relacién con el examen procuraré que se solucione antes de la entrada de los examinandos. A la hora de distribuir a los candidatos en el aula, debe seguirse una determinada estrategia de manera que queden separadas las personas. Se utilizar el encerado del aula para ilustrar cémo se cumplimenta la Hoja de respuestas, sobre todo cuando se usen impresos especiales para su mecani- zaci6n. Esta fase es crucial para la posterior lectura ¢ interpretaci6n de los resultados mediante lec- tora dptica. Para ello es conveniente reproducir en el encerado los correspondientes recuadros de Ia cabecera de la Hoja para ejemplificar su cumplimentaciGn cuando se entregue dicha Hoja. Una vez terminada la aplicacién de la prueba se recogerdn primero las Hojas de respuestas y a continuacién los Cuademillos y el material auxiliar. 2.2, INSTRUCCIONES ESPECIFICAS PARA LA APLICACION Una vez distribuidos los examinandos en el aula de examen, el examinador comenzard la sesién con unas palabras introductorias; podrfan ser las siguientes "Buenos dias. Van a realizar Vdes. una prueba que trata de evaluar cierto tipo de aptitudes y destrezas que tienen que ver con su actividad futura. Se les entregard, sucesivamente, una Hoja de respuestas (MOSTRAR), un Cuadernillo (MOSTRAR) y una hoja de papel en blanco. Les ruego que presten especial atencién a las instrucciones y ejemplos que explicaré para que todos sepan exactamente la tarea que tienen que llevar a cabo y la forma de dar sus con- testaciones. Para un mejor desarrollo de la prueba, deben seguir estrictamente las normas e indicaciones que yo vaya dando. Durante la prueba no podran utilizar ningiin otro material, tinicamente el lapi- cero, la goma de borrar y una hoja de papel en blanco que yo les entregaré. uLa prueba tiene un tiempo prefijado y muchas personas no alcanzan el final. Esto no debe preocuparles, ya que es normal; es mas importante que los ejercicios que hagan los resuelvan de modo correcto. Como durante la prueba hay que guardar silencio y ya no se puede contestar a ninguna duda, presten ahora atencién a las instrucciones y a los ejemplos de entrenamiento y pidan las aclaraciones necesarias s6lo en este momento. Procuren estar seguros de la tarea a realizar antes de que se dé la seal de comienzo. Vamos a empezar dejando sobre las mesas la Hoja colocada boca abajo. Déjenla sobre la mesa hasta yo lo indique y puedan comenzar todos a la vez." En el caso de usar la Hoja de respuestas para correccién manual no es necesario presentar las instrucciones que vienen en el recuadro siguiente. "Este es un impreso especial que recogerd su identificacién y respuestas, y luego serd procesado mediante maquinas de lectura éptica dutomatizada. Por eso es necesaria la utilizacién de un lapicero, pues esas mdquinas slo pueden leer las marcas hechas con lapicero. No pueden utilizar boligrafo, ni pluma de tinta, ni rotulador. Unicamente puede escribirse con lapicero, y por eso es necesario que, cuando quieran cambiar una contestacién, borren cui- dadosamente la marca errénea antes de sefalar la nueva respuesta, pues la ‘mdquina podria leer una respuesta doble y lo recogeria como error. Es importante que esta Hoja se conserve intacta del principio al final de la prueba. No la doblen ni sefalen marcas fuera de los lugares indicados. Si algu- na muestra defectos de impresiin o doblez, indiquenlo antes de comenzar y le entregaré otra. Ast mismo, observen su mesa o pupitre para evitar que alguna irregularidad pueda dafar la Hoja al hacer anotaciones o escribir sobre ella.” En este momento, el responsable y el auxiliar depositardn sobre las mesas, y boca abajo, la Hoja de respuestas. En aquellas aulas en que haya salientes delanteros en la mesa, se les indicaré cémo pueden sor- tearlos (escribiendo de lado, haciendo sobresalir la Hoja sobre el saliente si no hay als etc.). Si el aula tiene "sillas de paleta” se les indicaré que pueden situar la Hoja sobre la "paleta” y el Cuademnillo sobre las rodillas o cubriendo parcialmente la Hoja. A continuacién se dird : 12 _"En este examen van .a estar identificados por ... (INDICAR EL MODO: NUMERO DE ORDEN, NUMERO DE DNI, O APELLIDOS/NOMBRE) y ten- drén que anotarlo de manera que les mostraré a continuacién. En la parte superior de esa Hoja hay unos recuadros para anotar algunos datos (INDICAR COMO CUMPLIMENTAR EL/LOS DATOS NECESARIOS. EN EL CASO DE HOJA PARA CORRECCION MECANIZADA, EJEMPLIFICARLO SOBRE EL ENCERADO Y RECORDAR LAS EXIGENCIAS DEL PROCESO: LAPICERO, MARCADO ESPECIAL Y BORRADO CUIDADOSO)". Si se cree necesario, utilfcese el encerado para ilustrar todo esto. iguien delante,‘Terminada esta fase se reparten los Ejemplares del test dejandolos sobre las mesas con el anver- so (pag. 1* encabezada con el titular) hacia arriba y una hoja de papel en blanco, a la vez que se dice: "Dejen este impreso sobre la mesa, no le den la vuelta todavia. Ahora les expli- caré como utilizarlo para responder a los ejercicios." Al terminar el reparto se continta diciendo : “Este impreso tiene tres hojas. Despliéguento de esta forma (MOSTRAR) y déjenlo sobre la mesa, de modo que queden hacia arriba las paginas con los n° i, 2y3. En la parte central (pdg. 2*) ven unos cuadros y gréficos. Cada uno se refie re a un tema distinto y presenta informacién sobre unos hechos. Fljense en los titu- ares: Escolares en la regiGn, Tabla de cambio de divisas, Distribucién de los gas- tos de una empresa, Calidad de los productos de varias marcas y Poblacién fores- tal por zonas (PAUSA). Ahora, fijense en la pagina 3°, Vamos a leer las Instrucciones para comprender la tarea (PAUSA). Vayan leyendo esas instrucciones mientras yo lo hago en voz alta (SE LEEN LOS TRES PRIMEROS PARRAFOS). A continuacién hay 5 ejemplos de ejercicios en los que se hace una pregunta 0 se pide un dato que puede deducirse de la informacién existente en la pag. 2° Lean atentamente la cuestin, busquen el dato en la pagina de al lado y den sus res- puestas (INDICAR EL MODO DE HACERLO DEPENDIENDO DEL TIPO DE HOJA UTILIZADA. SI EN LA HOJA NO HUBIERA ESPACIO PARA LOS EJEMPLOS SE LES INDICARA QUE ANOTEN LAS RESPUESTAS EN LA HOJA DE PAPEL EN BLANCO). Al terminar no den la vuelta al impreso; esperen a que todos terminen; enton- ces yo daré la orden y todos comenzardn a la vez.” _ Se concede tiempo sufiente para que todos hagan los ejemplos de entrenamiento. Entonces se dice: "|ATENCION! Habrén observado que en las tablas hay muchos datos y los ejercicios slo han pedido algunos. En el primer ejemplo la respuesta correcta es Ia D, porque los 3 productos deficientes de la marca IV representan un porcenta- Je menor (el 7,5%) que los 3 de la marca III (el 10%). En el segundo ejemplo la respuesta correcta es la C, porque en la zona canté- brica hay 210 millares de drboles (62 + 148, las dos primeras filas de la tiltima tabla, en el éngulo inferior derecha). En el tercero no es posible conocer la cantidad exacta gastada "en viajes al extranjero", porque en el gréfico central no se especifican los "viajes" en distintos apartados (nacionales o extranjeros). La respuesta debe ser E. 1BEn el cuarto ejercicio la respuesta es A, porque 9 délares es lo mds préximo a S veces el valor 1,77 délares de un billete de 10 francos. Finalmente, en el quinto la respuesta correcta es B; reducidos a millares los datos, en centros privados hay 24 (11 + 13) que es el 40% del total de los 60 (24 + 36) matriculados. (SE LEEN LOS DOS PARRAFOS FINALES DE LA PAGINA 3* DEL EJEM- PLAR), éTienen alguna duda sobre estos ejercicios? (SE RESUELVEN LAS DUDAS) Habrén observado que no es necesario hacer muchas ni grandes operaciones. Cuando tengan necesidad de hacer alguna operacién utilicen la hoja de papel en blanco, En a prueba que van a hacer verén ejercicios como los que han resuelto. Todos tienen una solucién, aunque es probable que algunos les resulten algo més difici- les. Para resolverlos tendrdn que consultar otras tablas y gréficos que hay al dorso del impreso. Cuando encuentren la respuesta entre las alternativas que se proponen, fijense en la letra que tiene delante y marquen en la Hoja el espacio de esa letra. No den mds de una respuesta a cada ejercicio, y si dejan algiin ejercicio ssin contestar dejen también en blanco la linea correspondiente en la Hoja, de ‘modo que el niimero en la Hoja coincida siempre con el niimero que tiene el ejer- cicio en este impreso. Si alguien se equivoca, debe borrar totalmente con la goma la marca hecha y sefialar la que considere correcta. Han comprendido la tarea?. ;Tienen alguna duda? (PAUSA, Y SE RESUEL- VEN LAS DUDAS QUE SURJAN ...). Cuando yo lo indique darén vuelta al impreso e irdn contestando a los ejercicios de la prueba. No se detengan al final de la primera pagina, y si terminan antes de que yo diga ;BASTAI, repasen sus contestaciones y esperen a que la prueba se dé por terminada. ;Preparados Den yuelta al impreso y... COMIENCEN!" En este momento se pone en marcha el cronémetro para contar el tiempo que se haya conside- rado conveniente para esta aplicacién: 20 6 30 minutos En los primeros momentos es cdnveniente pasear entre las mesas de los examinandos para com- probar (sin que esto sea una fiscalizacién molesta para el sujeto que esté trabajando) que: 14 se han anotado los datos de identificacién, se han codificado (en el caso de usar una Hoja de respuestas para correccién mecanizada) los datos necesarios en los lugares apropiados, y las respuestas a los ejercicios se van dando de modo adecuado y siguiendo la secuencia numé- rica. Una vez transcurridos los 20/30 minutos, se lamaré la atencién de los sujetos diciendo:"|ATENCION!... ;BASTA! Dejen el lapicero sobre la mesa, doblen el impreso -y déjenlo en la mesa con la pégina 1 hacia arriba. Vamos a recoger el material." Se recoge el material de modo ordenado, comenzando por las Hojas, luego los Cuadernillos y finalmente el material prestado (lapiceros y gomas), a la vez que se comprueba la inexistencia de anomalias importantes que pudieran invalidar los resultados. 2.3. NORMAS DE CORRECCION Y PUNTUACION En primer lugar, conviene examinar previamente el material utilizado para comprobar que no se han hecho anotaciones inapropiadas (por ejemplo, marcar varias alternativas en un elemento); si las hubiere, el examinador deberfa hacer las correcciones oportunas o invalidar la aplicacién. Todo elemento contestado correctamente recibe un punto; el total de los puntos conseguidos es la puntuacién directa (PD); ésta es igual al nimero de aciertos (A); por tanto, PD = A. No se tienen en ‘cuenta los errores ni las omisiones. Las contestaciones dadas por el sujeto pueden ser puntuadas manualmente 0 mediante un proceso de mecanizacién. En el primer caso es necesaria la utilizacién de la Plantilla de correccién para obtener el ntimero de aciertos. Cuando el proceso se haga manualmente y se haya usado uno de los campos de una Hoja de correccién mecanizada, se colocaré la Plantilla sobre el lugar destinado a las respuestas y se conta- 14 un acierto cada vez que la contestacién del sujeto aparezca debajo de los pequefios circulitos impresos en la Plantilla. Si el proceso es mecanizado, y se han seguido las exigencias del mismo (utilizacién de Hoja espe- cial, marcas con lépiz, cumplimentaci6n de los c6digos de identificacién, etc.), la méquina realizara todo el proceso hasta obtener la puntuacién directa, la derivada o cualquiera de las salidas existen- tes en dicho proceso. 153, JUSTIFICACION ESTADISTICA Los apartados de este capitulo pretenden aportar informacién sobre los andlisis y resul- tados obtenidos en la construccién y tipifica- ci6n de la prueba, ¢ incluyen estadisticos que fundamentan las caracteristicas psicométricas de este instrumento. 3.1. ESTUDIO EXPERIMENTAL PARA LA CONSTRUCCION DEL TISD En la Introduccién y en la Descripcién general de este Manual ya se han indicado el punto de partida y la intencién en la elabora- cién de la prueba. La técnica bésica ha con- sistido en partir de un constructo (capacidad general para interpretar selectivamente la informacién de unas tablas y gréficos) y ope- rativizarlo mediante las siguientes fases del proceso: 1. Disefiar unos pocos elementos con los que ilustrar la tarea a realizar; en princi- pio se tratarfa de unas tablas y gréficos que fueran independientes de los que se van a usar en la prueba real. 2, Elaborar varias tablas y grificos que, como conjunto, presenten una suficien- te complejidad que dificulte su consulta si ésta no se hace con un determinado método y orden. 3. Construir un miimero suficiente de ele- mentos que pongan en ejercicio el cons- tructo a partir de las tablas y gréficos elaborados. 4, Presentar altemnativas erréneas que sean plausibles y ayuden a una mejor discri- minacién de las variables implicadas. 5. Aplicar la prueba a grupos pequefios para determinar un tiempo ejecucién que permita una buena dispersién de los resultados. 6. Aplicar la prueba (con 30 minutos de tiempo real) a varias muestras grandes en una situacién de seleccién de perso- nal y dentro de unas baterfas de aptitu- des 'y rasgos de personalidad, de modo que los resultados permitan anélisis cru- zados de las variables. 7. Analizar y tipificar los resultados obte- nidos. Fruto de los resultados que se fueron obte- niendo, se consideré la posibilidad de un tiempo més reducido (20 minutos), y se reco- gieron y analizaron nuevas muestras de suje- tos en procesos de seleccién. En los apartados y tablas que vienen a continuacién se van pre- sentando en paralelo los resultados encontra- dos con ambos tiempos de aplicacién. 3.2. ANALISIS DE ELEMENTOS En primer lugar se realiz6 un estudio de las respuestas obtenidas en la reunién de varias muestras (varios miles de casos). En estos andlisis se recogieron las frecuencias absolutas y relativas de las respuestas dadas a las alternativas correctas y a las de tipo dis- tractivo. Como era de esperar en una prueba de rapidez con estas caracteristicas, se observan diversos indices de dificultad (que en reali- dad son porcentajes de respuestas correctas), tanto los de tipo bajo que sefialan elementos muy faciles o féciles (indices comprendidos entre 70 y 95), como los de tipo medio (entre 30 y 70) y tipo alto propio de elementos difi- cilés (indices inferiores a 25). En la parte final del TISD, estos porcenta- jes de respuestas correctas no deben ser trata- dos como verdaderos indices de la dificultad © de discriminacién de los respectivos ele- ‘mentos; més bien son el reflejo de la variable tiempo. Un porcentaje pequefio de respuestas 7correctas en la parte final del instrumento viene a indicar la existencia de un porcentaje elevado de sujetos que dejaron el elemento en blanco porque no les dio tiempo para inten- tarlo. Atendiendo a las razones dadas en los dos parrafos anteriores, y a la vista de los peque- fios porcentajes de errores encontrados en los andlisis de elementos (en ningdn caso se supera el valor del 10%), se tomé la decisién de no considerar necesaria una penalizacién por los errores en la obtencién de la puntua- cién directa (PD); la formula es PD = A (aciertos). El pequefio porcentaje de errores encontrados parece tinicamente aludir a falta de atencién y equivocaciones en el momento de marcar una respuesta. Los principales estadisticos del andlisis de elementos vienen resumidos en la tabla 1; en la mitad izquierda de la misma estén’ los resultados de la aplicacién con 30 minutos y en la de la derecha los de la aplicacién con 20 minutos; en la base se encuentran algunos estadisticos descriptivos de las muestras. En ambos tipos de aplicacién (con 30 y con 20 minutos) se ha empleado una muestra de poblacién general (reunién de todas las muestras recogidas existentes), compuesta por mas de cuatro mil casos de adultos jve- hes que contestaron al TISD en procesos de seleccién. Las medias y desviaciones tipicas (Dt) vienen dadas en puntuaciones directas. En la tabla, y para cada uno de los ele- mentos E1 a E40, la primera columna presen- ta los indices de dificultad (ID, expresados en la forma porcentajes de aciertos), y en la base, en la fila encabezada con el nombre del test (TISD), se encuentra la media de estos indices. En las demds columnas de esta tabla se incluyen otros indices que sé comentarén en los parrafos siguientes. El indice de homogeneidad (IH) viene a expresar el grado de relacién que tiene cada elemento con lo que miden todos los demés; se obtiene mediante la correlacién de Pearson de la puntuacién (acierto o error) en el ele- mento con la puntuacién obtenida en toda la prueba. En la tabla 1, los indices IH ocupan la segunda columna de cada tipo de aplicacién 18 (30 y 20 minutos), y en la base, en la fila encabezada con el nombre del test (TISD), se encuentra el promedio de los 40 indices, obtenido a través de la "2" de Fisher. Estos indices IH tienen un componente de correlacién espdria, porque la puntuacion obtenida en el elemento entra también en la obtencién de la puntuacién directa en el test. Por esto mismo se han calculado los indices de homogeneidad corregida (IHic); son los indices de correlacién de cada elemento con el total obtenido en el test en los 39 elemen- tos restantes, es decir, sin que el elemento intervenga en la puntuacién total. En la base, en la fila destinada al conjunto del test (TISD) se encuentra el promedio obtenido a través de la "2" de Fisher. Para el conjunto del test (ila TISD), el promedio de los indices de dificultad es de un ID de 50 en una aplicacién de 30 minutos y un ID de 46 en una aplicacién de 20 minutos. Parece que los 30 minutos es mejor tiempo de aplicaciGn, pues puede permitir mayor discri- minacién; los indices de dificultad se extien- den a ambos lados del punto teérico medio de dificultad (un ID=50). En el caso de una apli- cacién con 20 minutos, la prueba resulta un poco més dificil pero su capacidad discrimi- nativa sigue siendo buena. Si se forman tres categorfas de dificultad, la distribucién de los. indices en cada tipo de aplicacién es la siguiente: 30min, 20 min, Indices féciles (75-99) 10 Indices medios (25-74) 16 Indices dificiles (0-24) 14 Totales 40 40 9 1 1 2 9 El lector habrd observado que el indice de dificultad de un elemento, tal como se viene tratando aqui, no es un valor absoluto rela- cionado s6lo con el contenido del mismo ele- mento; en pruebas del tipo del TISD y con un tiempo limitado, el indice esté muy relacio- nado con el tipo de muestra empleada y el tiempo concedido. En el caso de una apiica- cién con 20, el ntimero de elementos féciles ha permanecido casi igual, pero ha disminui-Tabla 1. Andlisis de los elementos del TISD Aplicacién con 30 min. Aplicacion con 20 min. Etemento | 10 H tte Rp 0 a tHe op e1 87 20 20 28 86 21 24 27 E2 79 27 16 23 78 24 15 23 E3 76 26 19 28 76 29 7 25 4 31 24 20 27 90 28 21 26 ES 87 26 21 28 86 22 19 25 Ee 47 31 20 21 44 28 14 23 E7 50 26 25 27 48 26 19 28 Es 86 35 21 27 85 29 19 26 Eg 57 19 27 31 53 28 22 31 E10 31 26 18 24 89 31 20 25 En 92 29 24 29 90 30 25 30, E12 52 43 24 34 49 42 23 32 E13 44 34 35, 39 39 41 33 40 E14 80 49 31 40 76 48 34 4 E15 50 58 41 49 45 56 42 50 E16 50 48 49 56 43 52 49 56 E7 76 58 43 51 69 58 47 53 E18 60 87 52 60 52 58 54 60 E19 67 60 51 58 59 62 53 59 E20 35 51 58 59 25 48 54 60 E21 26 64 47 48 18 64 44 50 E22 44 64 60 62 31 57 87 62 E23 34 59 59 58 24 54 53 59 E24 20 66 57 52 1 59 48 52 E25 36 71 60 57 23 60 52 57 E26 36 65 66 60 22 51 55 61 E27 22 63 60 50 10 45 46 50 E28 24 59 60 48 10 43 44 48 E29 25 60 55 43 13 45 38 44 E30 19 51 57 44 8 24 39 43 E31 8 29 46 29 2 12 25 27 E92 4 45 32 14 1 10 13 15 £33 4 41 38 18 1 24 15 7 E34 8 45 39 22 2 7 18 21 E35 7 45 43 27 2 238 20 23 E36 8 42 42 26 | 9 19 21 E37 5 29 36 14 1 7 10 11 E38 1 rs] 4 o 12 4 5 E39 3 19 31 20 1 13 15 16 E40 2 96 24 5 ° 95 4 5 TISD 50 48 40 37 46 40 31 37 Alfa 89 84 Pox 92 88 N 4416 4.530 Media 16,91 14,64 Di. 677 541do el mimero de indices de dificultad media (de 16 a 11) y ha aumentado muy significati- vamente el de elementos dificiles (desde 14 a 20). El lector habré observado también, a partir de los ID de la tabla 1, que no hay un aumen- to progresivo de la dificultad. Al ir contestan- do a la prueba, los sujetos de ambos tipos de aplicacién se han encontrado con algiin ele- mento que les ha resultado bastante mds diff- cil que el recientemente contestado; es el ‘caso de los elementos 6° (calculo de porcen- tajes), 9° (célculo de porcentajes) y (13° (cambio de divisas). Los casi nueve mil casos de la muestra han tropezado con ese aumento de dificultad en el elemento 6°. Esto puede haber afectado a la bondad del elemento dentro del conjunto que forman en el TISD. Para conocer esto se ha realizado un andlisis de consistencia interna, para conocer el grado de relacién de cada elemento con el conjunto y en qué medida cada uno estd midiendo lo que mide la mayorfa; esto puede apreciarse mediante la correlacién de cada elemento con el total (la PD) de la prueba, y se tratan como indices de homogeneidad (IH). En el caso de un test de rasgo latente unitario, habria que esperar indices 1H eleva- dos. En las columnas encabezadas con la sigla TH se presentan las correlaciones de Pearson de cada elemento (puntuado como 1/0, acier- toferror) con el valor de puntuacién directa (PD) obtenido en todo el test; vienen expre- sadas en centésimas, sin el cero ni la coma decimales. En la base de las columnas, en la fila TISD, se encuentran las medias de los 40 indices (a través de las "2" de Fisher); en el conjunto, los indices promedio son bastante sustanciales: 0,48 para una aplicacién con 30 minutos y 0,40 en el caso de 20 minutos. Estos promedios son el resultado de haber obtenido algunos indices bastante elevados (principalmente situados en la parte central del test) y otros relativamente bajos; estos segundos estén situados al principio del test (elementos menos discriminativos porque son acertados por la mayoria de los sujetos) y al final de la prueba (elementos poco discri- 20 minativos porque pocos sujetos legan a intentarlos). El esquema general de este andlisis de consistencia interna es bastante satisfactorio, y los componentes del test resultan bastante congruentes con el conjunto aptitudinal que intentan medi. Tal como se ha indicado anteriormente, estos indices TH tienen algtin componente espirio; estén contaminados por el hecho de que se ha correlacionado una parte con un total del que participa esa misma parte. Por eso, son preferibles los indices de homoge- neidad corregidos ([Hc), hallados mediante la correlacién de un elemento con Ia puntuacin (PD) obtenida con los otros 39 elementos del test. Realizado este tipo de andlisis con las muestras recogidas con los dos tiempos de aplicacién, los indices IHc se encuentran en Ja tabla 1, en las columnas contiguas a las anteriores. En general, los indices IH des- cienden en relacién con los indices IH, pero el conjunto sigue siendo satisfactorio. Atendiendo a los indices medios de la base (fila TISD), en la prueba con 30 minutos los elementos presentan una correlacién de 0,40 con el total del test, y el valor desciende a 0,31 en la aplicacién con 20 minutos. Los {indices de la parte final de la prueba no deben ser tenidos muy en cuenta porque han sido calculados con submuestras muy pequefias de sujetos que llegaron a contestarlos. Tal vez fuera preferible emplear otro pro- cedimiento para conocer el grado en que un elemento discrimina satisfactoriamente a los sujetos en las variables que intenta medir la prueba. Este procedimiento se apoya en los indices de correlacién biserial puntual (Rbp), y tiene muy en cuenta la dotacién aptitudinal de los sujetos que contestan acertadamente un elemento. La l6gica del procedimiento es la siguiente: quienes eligen la respuesta correcta de un elemento obtienen en el test una PD significativamente superior a los que sefialan la respuesta errdnea, y en la tabla de contingencia resultante (2 x 2), se puede hallar la correlacién biserial puntual.En las muestras de ambos tiempos de apli- cacién se analizaron con este procedimiento todas las alternativas (acertadas y erréneas) del TISD, y se calcularon los Rbp de las alter- nativas acertadas. Estos Rbp ocupan en la tabla 1 las columnas contiguas a las de los indices [He comentados en los parrafos ante- riores. Los promedios de la base vienen a indicar igual capacidad discriminativa (0,37) para ambos tiempo de aplicacin; y los mejo- res indices se encuentran en la zona central de la prueba, entre los elementos 10° y 30°, en la que parece dilucidarse la dotaci6n aptitudinal de la gran mayorfa de los sujetos. Para confirmar todos los andlisis anterio- res sobre la validez de los elementos, se ha aplicado a los resultados de ambos tiempos de duracién la técnica del modelo Rasch, que analiza los indices de dificultad y determina la capacidad exigida para ir obteniendo pun- tuaciones superiores mediante ajustes iterati- vos. Los resultados de ambos andlisis (datos obtenidos con 30 y con 20 minutos) se han proyectado al grafico de la figura 1. En el eje de las abcisas estén las puntuaciones 1 a 39 y en el eje de las ordenadas la capacidad exigi- da para obtener dichas puntuaciones; esta capacidad viene dada en una escala de 12 puntos distribuida alrededor de un valor cen- tral 0; un indice de capacidad positiva impli- ca una dotacién aptitudinal superior a la media de la poblaci6n estudiada. El gréfico de la figura 1 muestra que ambos tipos de aplicacién tienen una exigencia de capacidad muy similar, pero es mas extrema (con valores més alejados del promedio 0) en el caso de una aplicacién con 20 minutos. En ambos tipos de aplicacién el aumento de la capacidad exigida es constante a lo largo del test y muy siméirico alrededor del promedio. Figura 1 Aplicacién del modelo Rasch a los resultados del TISD 213.3. FIABILIDAD El coeficiente de fiabilidad es un estadisti- co que indica la precisién o estabilidad de los resultados; sefiala la cuantfa en que las medi- das de la prueba estén libres de errores casua- les. Este coeficiente viene a indicar la pro- porcidn de la varianza de la prueba que se debe a la auténtica medida. Los tests psicolégicos deben poseer una razonable fiabilidad si se pretende que sean tiles, tanto cuando se emplean con fines de investigacién como cuando se aplican con un propésito préctico. Existen varios tipos de fiabilidad y diferentes métodos para su obten- cién (entre ellos el test-retest, la consistencia interna 0 coeficiente alfa de Cronbach y la fiabilidad dos mitades). Todo indice de fiabiliad debe interpretarse en funcién de la muestra y procedimiento escogido; por tanto, una prueba no tiene un solo coeficiente de fiabilidad, sino muchos; cada muestra puede tener uno diferente, y depende, entre otras cosas, de la homogenei- dad del grupo examinado con respecto a las aptitudes 0 rasgos apreciados. En los procesos de seleccién de personal (fuente para ta obtencién de las muestras del estudio del test TISD), no es fécil aplicar el procedimiento test-retest para la determinacién de la fiabilidad o estabilidad de la medi malmente los sujetos se dispersan y no es posi- ble una segunda aplicacién de la prueba. Por tanto, se ha optado por la obtencién de los coeficientes alfa y de las dos mitades (ele- mentos pares y elementos impares de los 40 existentes). Para su célculo se ha tomado la totalidad de las muestras experimentales existentes (con 30 y 20 minutos de aplicacién aludidas en el apartado anterior). El coeficiente alfa se apoya en la variabi- lidad de los elementos y del total de la prue- ba, y los indices obtenidos en las dos mues- tras generales han sido, respectivamente, de 0,89 y 0,84; estos indices no son muy eleva- dos, pero satisfactorios en una prueba de tiempo limitado; los resultados se han incor- porado al final de la tabla 1. Para aplicar el procedimiento de las dos mitades, en cada sujeto se han obtenido las puntuaciones en los elementos pares y las puntuaciones en los elementos impares; luego, se ha calculado la correlacién de Pearson entre ellas. Finalmente, este indice se ha corregido para un test de longitud doble (dos mitades juntas) segin la formula de Spearman-Brown y el resultado offece unos coeficientes de fiabilidad de 0,92 y 0,88 para ambos tiempos de aplicaci6n; estos indices (Rxx) se han afiadido también al final de la tabla 1, para que ésta presente una visién glo- bal de las propiedades psicométricas de los componentes del TISD. En el caso de la aplicacién con 30 minu- tos, el coeficiente obtenido sugiere que, en la muestra y condiciones utilizadas, el 92 por ciento de la variabilidad del TISD se debe a la verdadera medida y s6lo el 8 por 100 a errores aleatorios. Como resumen de todos los anélisis reali- zados para estimar la fiabilidad y consisten- cia interna (apartado anterior), sé puede afir- mar que los coeficientes obtenidos en el TISD parecen apropiados y satisfactorios en un test de rapidez. Aunque en todos los andli- sis resulta mejor la aplicacién con 30 minu- tos, ambos tiempos offecen resultados discri- minativos. 3.4. VALIDEZ La definiciGn bésica de un indice de vali- dez es el grado en que el instrumento mide lo que dice medir; en el caso de un test apti- tudinal o de conocimientos esa apreciacin puede ser fécil si se determina con claridad 22 un criterio objetivo. Sin embargo, de acuer- do con la intencionalidad general de esta prueba (medida de una capacidad mental superior de tipo cultural), no ha sido posible hasta el momento definir y evaluar un crite-rio objetivo que apunte con claridad a este constructo, Desde un punto de vista general, existen varias interpretaciones del concepto'de vali- dez (que implicarfan distintos procedimientos de célculo). Aplicadas a la medida que inten- tael TISD, podrian ser las siguientes: ~validez de constructo, o grado en que la prueba mide una variable o conjunto de ‘conductas definidas por el investigador, ~validez predictiva, o grado en que con la ‘medida alcanzada se pueden estimar con- ductas futuras del sujeto, © s[a ee oe flare quote nh _o @» c :f_ sc Me [uf e co « a gee ah Oc o si sc p uo @ o sl mec op © ah @c o sf sc @e als § co rh @c po € xh @ co e€ sip coe alse 9 o so @ > ec alo go 4 sc p ec al @c o € uf ie po « | ule c pe uh @ co € ula_o go ola 6 @ ob ec alas c @ & ups c @ © ula_e go up ie go c alec pe uh Bec o € alps go uh pc ge xls 8 @ 0 wh 2 go alps co @ wjA_poc P & ula_ep_ic @ € she poe wah sco @