Evaluación en Intervención Social
Evaluación en Intervención Social
LA EVALUACIÓN EN LA
INTERVENCIÓN SOCIAL.
CURSO 2017/18
ÍNDICE
1.- Concepto de evaluación. ............................................................................................3
2.- Características de la evaluación en intervención social. .............................................4
3.- Funciones de la evaluación. .......................................................................................6
4.- Ejes de la evaluación..................................................................................................7
5.- Principios de la evaluación. ........................................................................................8
6.- Tipos de evaluación. ................................................................................................ 10
6.1.- Según el sujeto...................................................................................................... 11
6.2.- Según el momento. ...............................................................................................12
6.3.- Según la extensión. ...............................................................................................14
6.4.- Según la metodología. ...........................................................................................15
6.5.- Según diseño metodológico. .................................................................................17
7.- Modelos de evaluación. ............................................................................................ 18
7.1.- Experimentales. .....................................................................................................19
7.2.- Alternativos............................................................................................................21
8.- Planificación de la evaluación................................................................................... 22
8.1.- Fases de la evaluación (I)......................................................................................24
8.1.1.- Fases de la evaluación (II).................................................................................. 25
8.2.- Contenidos de la evaluación. ................................................................................. 27
8.3.- Organización de los recursos y actividades de evaluación. ...................................28
9.- Elaboración de informes y memorias........................................................................ 31
9.1.- Contenido de los informes. ....................................................................................32
9.2.- Características de los informes..............................................................................33
9.3.- Partes de un informe. ............................................................................................35
9.4.- Comunicación de resultados. ................................................................................36
10.- Los soportes informáticos en el tratamiento y organización de la información. ....... 37
11.- La gestión de la calidad en la evaluación de los proyectos de intervención social. . 39
12.- Evaluación y seguimiento en las intervenciones para impulsar la igualdad entre
hombres y mujeres. .......................................................................................................41
1.- CONCEPTO DE EVALUACIÓN.
Caso práctico
Antonio, Teresa, Roberto y Alicia saben de la utilidad e
importancia de la evaluación pero necesitan ampliar sus
conocimientos con respecto a esta. Comprenden que no sólo se
evalúan los resultados, si han conseguido o no los objetivos que se han marcado, sino
que también deben saber en qué medida se han conseguido y si no se han conseguido
saber las razones que han conducido a ello. También se dan cuenta que cuando
realizamos cualquier acción siempre tendemos a valorar su resultado y si este ha estado
en consonancia o no con los objetivos que inicialmente nos habíamos propuesto. Si no
se consiguen, recapacitamos sobre los pasos que hemos dado para enmendar los
errores cometidos y poder subsanarlos. Por ello, deben ser conscientes que en todo este
proceso han estado evaluando. Lo comentan con otros compañeros del grupo y llegan
a la conclusión que es necesario tener claro que la evaluación en intervención social
tiene unas características y unas funciones determinadas, que existen distintos tipos de
evaluación y que se realiza a lo largo de todo el proceso, es decir a lo largo de todas la
fases del mismo. En los siguientes apartados encontrarán respuesta a todos los aspectos
que deben conocer, para realizar convenientemente la evaluación de sus proyectos.
En intervención social la evaluación forma parte del proceso planificador, debe estar
presente en todas las etapas del proyecto, de forma que nos ayude a comprobar si
nuestra planificación de la intervención es correcta o no. En cuanto a las acepciones que
encontramos del término evaluación, podemos decir que las más frecuentes se refieren
a la medición, seguimiento, estimación, control y también al de valoración.
Existen muchas definiciones del concepto de evaluación, según los diversos autores y
según el campo de aplicación de la misma. En nuestro caso, lo importante es saber qué
es y qué supone la evaluación en las tareas a desarrollar en la profesión del Integrador
Social.
Para ello veremos algunas definiciones de diferentes autores:
Según X. Úcar la evaluación es “la recogida y análisis sistemático de toda aquella
información necesaria para determinar el valor o mérito de las acciones realizadas o en
proceso de realización. Se trata, por tanto de emitir juicios de valor, de calibrar la
asignación de sentido a las acciones, procesos, productos, realidades, etc. Toda
evaluación es algo más que una mera descripción o un análisis; es, fundamentalmente
una comparación entre lo que hay y lo que creemos que debería haber”
Otra definición es la de M. Espinoza que indica que “evaluar es comparar en un instante
determinado, lo que se ha alcanzado mediante una acción, con lo que se debería haber
alcanzado de acuerdo con una programación previa.”
Mª José Aguilar y E. Ander-Egg definen la evaluación “como una forma de investigación
social aplicada, sistemática, planificada y dirigida; encaminada a identificar, obtener y
proporcionar de manera válida y fiable, datos e información suficiente y relevante en
dónde apoyar un juicio acerca del mérito y el valor de los diferentes componentes de
un programa.”
J. M. de Ketele afirma que evaluar “es examinar el grado de adecuación entre un
conjunto de informaciones y un conjunto de criterios apropiados al objetivo fijado, con
objeto de tomar una decisión.”
A. Medina y L. M. Villar, teniendo en cuenta los efectos de la evaluación, consideran que
“ la evaluación de programas es un proceso sistemático, diseñado intencional y
técnicamente, de recogida de información rigurosa, orientado a valorar tanto la calidad
y los logros de un programa, como del personal implicado y de modo indirecto, del
cuerpo social en que se encuentra inmerso.”
La toma de decisiones que conlleva la evaluación se dirige a la consecución de nuevas
posibilidades de mejora; así Cembranos concibe la evaluación” como un proceso en el
cual se recoge y analiza sistemáticamente una información sobre un programa, actividad
o intervención con la intención de utilizar ese análisis en la mejora del programa,
actividad o intervención.”
Caso práctico
Después de haber compartido las diferentes definiciones de la
evaluación Roberto y Teresa se plantean realizar un pequeño debate sobre las
características de la misma y se preguntan qué aspectos deben contemplarse para que
esta pueda ser útil y eficaz. Quizá en el siguiente apartado obtengan una respuesta a su
pregunta...
Según Gloria Pérez Serrano y siguiendo a Pérez Gómez (1983) podemos distinguir dos
tipos de características, las referidas a la evaluación cuantitativa y las referidas a la
evaluación cualitativa.
Caso práctico
Cuando evaluamos pretendemos dar solución a una serie de necesidades que se han
detectado previamente. En este contexto, Antonio, Teresa, Roberto y Alicia se
preguntan para que utilizamos la evaluación, que funciones cumple en cada momento
del proceso planificador, de manera que facilite una respuesta o solución a estas
necesidades. Les animamos a encontrar una respuesta en el siguiente apartado.
Reflexiona
¿Has pensado alguna vez, qué tipo de función desempeña la evaluación cuando estás
valorando los resultados obtenidos en la realización de alguna actividad, con el fin de
lograr unos objetivos o solucionar una determinada situación?
4.- EJES DE LA EVALUACIÓN.
Caso práctico
Roberto, Teresa y Antonio necesitan planificar bien su
evaluación. Comentan que para ello es necesario conocer
todas las dimensiones que implica la evaluación. Se plantean
que es importante saber cómo se puede medir el logro de
los objetivos planteados y también cómo se organizan y se pueden mejorar las
intervenciones. En el siguiente apartado conocerán estos aspectos que les ayudará a
resolver sus dudas.
En intervención social podemos considerar tres
dimensiones importantes de la evaluación:
La evaluación como instrumento de organización y
gestión: Esta dimensión nos permite saber si los
pasos que estamos dando nos conducirán a la
mejora de la situación de partida.
Gestión (IS_MIS05)
La gestión de proyectos, es la disciplina que se encarga de organizar y de
administrar los recursos de manera tal que se pueda concretar todo el trabajo
requerido por un proyecto dentro del tiempo y del presupuesto definido.
Pronóstico (IS_MIS05)
Prognosis, el conocimiento anticipado de algún suceso.
Indicador (IS_MIS05)
Unidad que permiten medir el grado de aproximación a un objetivo.
La evaluación como medida del grado de
consecución de los objetivos: Esta dimensión
nos da información acerca de la aproximación
de los resultados y del proceso de la
intervención, en relación a los resultados que
los distintos agentes plantean como deseables.
Es importante la evaluación en el progreso de la
intervención social, ya que esta tiene que ver con el grado de consecución de los
objetivos que nos hemos marcado.
La evaluación es necesaria porque podemos valorar muy bien la intervención, en
la medida en que las actividades previstas han estado bien organizadas y
desarrolladas, y sin embargo, puede que no hayamos conseguido los objetivos
planteados en el programa o proyecto. Esto significa que podemos haber sido
muy eficientes pero poco eficaces.
El proceso de la intervención social requiere una evaluación previa en la que se
determinen las necesidades, los recursos y averiguar si ha habido otros
programas previos; pero además de la evaluación previa, existen otras
evaluaciones durante la fase de diagnóstico, la fase de diseño la fase de
implantación, la fase de ejecución y en la fase final, aunque se pueden evaluar
muchas más cosas o siguiendo otros criterios.
Diseño (IS_MIS05)
Todas estas evaluaciones permiten analizar tanto los logros como los errores del
programa, ya que éste es el procedimiento mediante el cual se diseñan, seleccionan y
ordenan las acciones que se realizarán en la propia intervención social.
Caso práctico
Juan y Teresa se reúnen para buscar información acerca de los
principios de la evaluación, pues aún no tienen claro cómo garantizar
su objetividad, cuando deben realizarla, como deben utilizar los
instrumentos para obtener resultados adecuados, que recursos utilizar... por ello les
ofrecemos la información que buscan en el siguiente apartado.
La evaluación debe cumplir una serie de principios básicos encaminados a conseguir que
esta evaluación sea útil y eficaz. La evaluación que debe aplicarse a los proyectos
sociales debe contemplar estos principios con la finalidad de garantizar su objetividad.
También debe ser participativa, continua, abierta, sistemática y flexible, y debe
realizarse como una parte de dicho proyecto.
Las características que debe tener en cuenta la evaluación son las siguientes:
Objetividad: la realidad debe ser medida, analizada, captada a través de
procedimientos que eviten las ideas preconcebidas e intereses que afecten a los
resultados de la evaluación. Los hechos deben presentarse tal como acontecen
en la realidad y la evaluación debe estar libre de influencias acerca de la forma
de sentir y pensar de la persona que realiza la evaluación.
Información suficiente: no tenemos que tener toda la información. Debe
mantenerse un equilibrio entre la que consideramos ideal y aquella que
podemos obtener de forma viable.
Oportunidad: debe realizarse en el momento adecuado para no generar
distorsiones en aquello que se mide, como producto del transcurso del tiempo.
Fiabilidad: hace referencia a la estabilidad de las mediciones, a la obtención de
resultados constantes en diferentes ocasiones o por evaluadores diferentes.
Podríamos decir que una evaluación es fiable cuando se obtienen los mismos
resultados, utilizando los mismos instrumentos de recogida de información, en
situaciones similares.
Validez: hace referencia al grado de precisión con que un instrumento satisface
las exigencias para las que fue creado, es decir, cuando mide aquello que tiene
que medir.
Practicidad: la evaluación debe ajustarse al tiempo y recursos de los que
dispone. Se dará prioridad en la valoración a aquellos aspectos más relevantes
en función de los recursos que tenemos para realizarla.
Flexibilidad: estaremos abiertos a todas las posibilidades metodológicas que nos
ayuden en la recogida de información. Debemos elegir el método e instrumento
más adecuado para cada momento y situación.
Continuidad: en función de los resultados es conveniente que la evaluación
complemente lo que se va haciendo con el fin de mejorar la intervención.
Participación: es importante la participación de todos los sectores implicados en
la intervención con la finalidad de obtener todas las aportaciones posibles.
Sensibilidad: debemos tener en cuenta que las personas o grupos a los que se
evalúa se encuentran en situaciones sociales y personales difíciles, por lo que
debemos ser cuidadosos con la forma de abordarlo.
Autoevaluación
Señala que respuesta no es correcta con respecto a las características de la evaluación:
Verdadera. La evaluación debe ser fiable, válida y práctica.
Falsa. La evaluación debe hacerse rápidamente y debe contener toda la
información.
Incorrecto. Es correcta porque nos indica la estabilidad de las mediciones, el grado de
precisión con que un instrumento mide lo que tiene que medir y el ajuste que debe
realizar en función de los recursos y el tiempo disponible.
Correcto. No es correcta porque debe contener información suficiente pero no toda la
existente y debe realizarse en el tiempo previsto para ello.
Solución:
1. Incorrecto. Incorrecto. Es correcta porque nos indica la estabilidad de las
mediciones, el grado de precisión con que un instrumento mide lo que tiene que
medir y el ajuste que debe realizar en función de los recursos y el tiempo
disponible.
2. Correcto. Correcto. No es correcta porque debe contener información suficiente
pero no toda la existente y debe realizarse en el tiempo previsto para ello.
Caso práctico
Nuestros protagonistas deciden informarse del tipo de
evaluación más conveniente para su proyecto. Realizan una
visita a Soledad, la Integradora Social del departamento de Servicios Sociales del
Ayuntamiento y responsable de programas de intervención con mayores, para que ésta
les cuente el tipo de evaluación realizada en los proyectos que lleva a su cargo, así como
los instrumentos más adecuados en cada caso. Antes de esta visita podríamos
recomendarles la lectura de los siguientes apartados, con la finalidad de que tengan
suficiente información antes de ponerse en marcha...
Técnica (IS_MIS05)
Una técnica es un procedimiento o conjunto de reglas, normas o protocolos, que
tienen como objetivo obtener un resultado determinado, ya sea en el campo de
la ciencia, de la tecnología, del arte, del deporte, de la educación o en cualquier
otra actividad.
Cabrera, ofrece una síntesis de los tipos de decisión, así como de los tipos de evaluación
más importantes en intervención social que resumimos a continuación:
Cuadro de los tipos de decisión y el tipo de evaluación a realizar en intervención
social según Cabrera
Antes y después de la
Tipo de decisión Tipo de evaluación
instrucción
Antes y después de la
Implantación Evaluación de contexto.
instrucción.
Antes y después de la
Planificación Evaluación del diseño.
instrucción.
Certificación, acreditación,
Después de la instrucción. Evaluación sumativa.
selección
Instrucción (IS_MIS05)
La evaluación en la instrucción debe concebirse como un proceso sistemático,
continuo e integral, que permite constatar al instructor y al que aprende hasta
qué grado y de qué manera se logran los objetivos del programa.
En los siguientes apartados podremos ampliar nuestros conocimientos acerca de los
tipos de evaluación más utilizados.
6.1.- SEGÚN EL SUJETO.
Si tenemos en cuenta quién lleva a cabo la evaluación podemos
clasificarla en:
Autoevaluación: se puede definir como aquella
evaluación que alguien hace de si mismo. Para que
pueda realizarse y la persona pueda hacer juicios de sí
misma es necesario que esta conozca el plan, el
proyecto, los objetivos que se han propuesto, recursos,
etc y todo lo que pueda dificultar o facilitar su
desarrollo. Las personas responsables del programa o
proyecto deben contemplar una serie de características
que les faciliten la labor evaluadora: deben tener
suficiente preparación y formación, experiencia, capacidad para establecer
buenas relaciones con los demás que le faciliten la comunicación, así como estar
sensibilizados con las problemáticas sociales y el momento sociopolítico en que
vivimos.
Evaluación interna: es aquella que se realiza por personas del equipo que forma
parte del proyecto o programa y que proceden del interior de la institución.
Estos evaluadores realizarán la evaluación a partir de las informaciones
procedentes de los destinatarios del programa o proyecto, realizando una
evaluación continua que les ofrecerá información sobre distintos aspectos tales
como aciertos, errores, necesidades y carencias y las posibilidades de
modificación pertinente del proyecto que se ha llevado a cabo.
Evaluación externa: es la evaluación realizada por personas externas al
programa o proyecto y a la organización. Realizar evaluaciones de este tipo
requiere mucho esfuerzo y mucho tiempo por lo que son adecuadas solamente
en el caso de que se quieran realizar evaluaciones de conjunto.
Evaluación mixta: es aquella evaluación que se realiza por evaluadores tanto
internos como externos al programa o proyecto.
Autoevaluación
Desde la perspectiva de la persona que realiza la evaluación ¿Cuál de las siguientes
opciones es correcta?.
Una de sus fases es la evaluación del diseño.
Tiene en cuenta la evaluación de los resultados o impactos.
La evaluación desde esta perspectiva puede ser cuantitativa y cualitativa.
La evaluación puede ser realizada por evaluadores internos y externos.
No es correcta, porque la evaluación del diseño es propia de la perspectiva de los
contenidos de la evaluación.
Incorrecta, porque la evaluación de los resultados o impactos es propia de la evaluación
de los contenidos.
No es la respuesta correcta, porque la evaluación cuantitativa y cualitativa atienden a
una perspectiva metodológica de la evaluación.
Correcto. Muy bien. Has captado la idea pues los tipos de evaluación interna y externa
tienen en cuenta a quiénes realizan la evaluación.
Solución:
1. Incorrecto. No es correcta, porque la evaluación del diseño es propia de la
perspectiva de los contenidos de la evaluación.
2. Incorrecto. Incorrecta, porque la evaluación de los resultados o impactos es
propia de la evaluación de los contenidos.
3. Incorrecto. No es la respuesta correcta, porque la evaluación cuantitativa y
cualitativa atienden a una perspectiva metodológica de la evaluación.
4. Correcto. Correcto. Muy bien. Has captado la idea pues los tipos de evaluación
interna y externa tienen en cuenta a quiénes realizan la evaluación.
Los tipos de evaluación según el sujeto que la realiza puede ser: autoevaluación,
evaluación interna, evaluación externa y evaluación mixta.
Evaluación formativa:
Llamada también evaluación continua o de proceso.
Proceso (IS_MIS05)
Un proceso es un conjunto de actividades o eventos, coordinados u organizados,
que se realizan o suceden, alternativa o simultáneamente, bajo ciertas
circunstancias con un fin determinado.
Holístico (IS_MIS05)
Del todo o relativo a él.
Autoevaluación
Desde la perspectiva de la extensión de la evaluación ¿Cuál de las siguientes opciones
es correcta?
La evaluación puede ser realizada por evaluadores internos y externos.
Tiene en cuenta la evaluación de los resultados o impactos.
La evaluación desde esta perspectiva puede ser cuantitativa y cualitativa.
La evaluación puede ser global y parcial.
No es correcta, porque la evaluación interna y externa se incluye en el criterio del sujeto
qué realiza la evaluación.
Incorrecta, porque la evaluación de los resultados o impactos es propia de la evaluación
de los contenidos.
No es la respuesta correcta, porque la evaluación cuantitativa y cualitativa atienden a
una perspectiva metodológica de la evaluación.
Correcto. Muy bien. Has captado la idea pues los tipos de evaluación según la extensión
son estos: global y parcial.
Solución:
1. Incorrecto. No es correcta, porque la evaluación interna y externa se incluye en
el criterio del sujeto qué realiza la evaluación.
2. Incorrecto. Incorrecta, porque la evaluación de los resultados o impactos es
propia de la evaluación de los contenidos.
3. Incorrecto. No es la respuesta correcta, porque la evaluación cuantitativa y
cualitativa atienden a una perspectiva metodológica de la evaluación.
4. Correcto. Correcto. Muy bien. Has captado la idea pues los tipos de evaluación
según la extensión son estos: global y parcial.
Extrapolable (IS_MIS05)
Comparable, similar.
Instrumentalizar (IS_MIS05)
Emplear como instrumento para el logro de un fin.
Estereotipo (IS_MIS05)
Idea o imagen aceptada por la mayoría como patrón o modelo de cualidades o
de conducta.
Los indicadores pueden definirse como unidades que permiten medir el grado de
aproximación a un objetivo. Son verificables y mensurables.
Evaluación cualitativa:
Observa variables que no son medibles directamente de forma númerica. Su objetivo
fundamental no es la objetividad ni los resultados, sino que da importancia a las
opiniones, a los motivos, interpretaciones, aspiraciones, propuestas, a los efectos no
deseados.
Se valora el componente subjetivo, los conocimientos, actitudes y valores. El papel del
entrevistador es muy importante y la recogida de información por parte de este es más
abierta.
También pueden utilizarse indicadores que se crean a partir de la información extraída
del fenómeno que se está evaluando. Muchas veces estos indicadores no dan
información necesaria para evaluar positiva o negativamente los intereses, motivaciones
del grupo, utilizando en este caso un indicador cuantitativo.
Desde el punto de vista de X. Úcar, se puede combinar la evaluación cuantitativa y
cualitativa y cuantificar variables cualitativas y realizar un análisis cualitativo de variables
cuantitativas. Los diseños mixtos se han creado con la finalidad de paliar las deficiencias
de cada una de ellas.
La metodología compleja integra los dos tipos de evaluación. Piensa la realidad como
un todo articulado, donde conviven , en igualdad de condiciones, lo objetivo, lo
perceptivo, lo subjetivo, lo racional, lo imaginario, el azar, la incertidumbre, lo intuitivo.
Lo complejo sólo puede ser abordado desde planteamientos que faciliten su análisis y
valoración.
Metodología (IS_MIS05)
La metodología es una de las etapas específicas de un trabajo o proyecto que
parte de una posición teórica y conlleva a una selección de técnicas concretas o
métodos acerca del procedimiento para realizar las tareas vinculadas con la
investigación, el trabajo o el proyecto.
Reflexiona
¿Te has planteado alguna vez, en qué situaciones has aplicado un tipo de evaluación u
otro en tu vida cotidiana? ¿Cuál es más frecuente en estas situaciones?
6.5.- SEGÚN DISEÑO METODOLÓGICO.
La evaluación puede utilizar diferentes diseños metodológicos.
Podemos distinguir tres clases:
Diseño experimental
Son los diseños experimentales propiamente dichos.
Proporcionan el control adecuado de las posibles fuentes que
atentan contra la validez interna. Se trabaja con grupos
experimentales seleccionados al azar y para su aplicación se
miden las variables de observación antes y después de la
intervención. El diseño experimental es una técnica
experimental que permite identificar y cuantificar las causas
de un efecto dentro de un estudio experimental. En un diseño experimental se
manipulan deliberadamente una o más variables, vinculadas a las causas, para medir el
efecto que tienen en otra variable de interés. El diseño experimental prescribe una serie
de pautas relativas a qué variables hay que manipular, de qué manera, cuántas veces
hay que repetir el experimento y en qué orden para poder establecer con un grado de
confianza predefinido la necesidad de una presunta relación de causa-efecto.
Variable (IS_MIS05)
Una variable es una característica que al ser medida en diferentes individuos es
susceptible de adoptar diferentes valores.
Aleatorización (IS_MIS05)
La aleatorización es el proceso, en estudios experimentales, por el cual los
sujetos son asignados al azar a los grupos de tratamiento y control.
Hipótesis (IS_MIS05)
Es una proposición aceptable que ha sido formulada a través de la recolección de
información y datos, aunque no esté confirmada, sirve para responder de forma
tentativa a un problema con base científica.
Por lo tanto, es un tipo de investigación que comparte gran parte de las características
de un experimento, pero las comparaciones en la respuesta de los sujetos se realizan
entre grupos no equivalentes, es decir, grupos que se pueden diferenciar en muchos
otros aspectos además de la respuesta. La principal dificultad será llegar a diferenciar los
efectos específicos de la respuesta, de aquellos efectos inespecíficos que se derivan de
la falta de comparabilidad de los grupos al inicio y durante el estudio, lo que
compromete la validez interna del estudio. En el caso de que no exista grupo control, no
se podrá asegurar que los cambios aparecidos sean debidos a la propia intervención, o a
otras intervenciones o factores no controlados.
Diseño no experimental
Es la que se realiza sin manipular deliberadamente las variables. En una investigación no
experimental se observan fenómenos tal como se dan en su contexto natural para
después analizarlos. No hay condiciones ni estímulos a los que se expongan los sujetos
de estudio. Son observados en su ambiente natural, en su realidad, no interviene el
investigador. En un estudio no experimental los sujetos ya pertenecen a un grupo o nivel
determinado de la variable independiente por autoselección. Los cambios que se
producen después de realizar la intervención no son atribuibles a esta, pues no existe un
control exhaustivo de las variables.
El integrador social debe decidir en cada momento que tipo de evaluación utilizar de
acuerdo a lo que se pretenda evaluar. Ningún modelo es mejor ni peor, depende del que
resulte más adecuado para la situación concreta que vayamos a evaluar. Para
comprobar cuál es el que mejor se ajusta a nuestros propósitos debemos hacernos las
preguntas. ¿Qué se quiere evaluar? ¿Cuál es el propósito, el fin de la evaluación?
Caso práctico
El grupo ya conoce los distintos tipos de evaluación que
pueden utilizar en intervención social. Ahora tendrán que
conocer los modelos que sustentan estos tipos de
evaluación. Ahora se dan cuenta lo importante que es
conocer las teorías para poder aplicar el tipo de
evaluación correcto a cada caso.
Por ello, deciden buscar apoyo y se reúnen en la biblioteca para buscar información
teórica pero también piensan solicitar información a Soledad de cómo se pueden aplicar
en la práctica estos modelos. También nosotros les ayudaremos con los siguientes
apartados dónde podrán encontrar la información que necesitan.
Sistematizar (IS_MIS05)
Organizar un conjunto de elementos dándoles un orden determinado y lógico.
Estos modelos responden a las preguntas qué se evalúa y para qué se evalúa y atienden
a múltiples factores: a los objetivos, a los tipos de evaluación, a los criterios, a las
funciones formativas o sumativas.
Estos modelos pueden clasificarse en dos grandes grupos aunque hay autores que han
enumerado hasta diez. Así, podemos encontrarnos con los modelos clásicos o basados
en el paradigma experimental y los modelos alternativos o basados en el paradigma
cualitativo. Los primeros son los modelos clásicos de evaluación y se centran en el
grado o medida de consecución de los objetivos, para estos es importante determinar el
grado de concordancia entre la ejecución y el logro de los objetivos y los segundos se
basan en el paradigma cualitativo, que prescinden, en gran medida, de los objetivos e
implican a los ciudadanos participantes en el proceso de evaluación.
Paradigma (IS_MIS05)
El concepto paradigma significa ejemplo o modelo. En principio, se aplicaba a la
gramática y a la retórica. A partir de la década del 60, comenzó a utilizarse para
definir a un modelo o patrón en cualquier disciplina científica o contexto
epistemológico.
Reflexiona
Las evaluaciones que hacemos sobre nuestras acciones cotidianas se encuadran dentro
de esta clasificación. ¿Podrías explicar la evaluación realizada a alguna actividad diaria y
encuadrarla dentro de alguno de estos modelos?
7.1.- EXPERIMENTALES.
Estrategia (IS_MIS05)
Una estrategia es un conjunto de acciones planificadas sistemáticamente en el
tiempo que se llevan a cabo para lograr un determinado fin.
La evaluación del proceso servirá para identificar los errores cometidos en el diseño y
ejecución del programa o proyecto y solucionarlos a lo largo del proceso. Sirve de guía
para la aplicación del programa o proyecto y nos da información acerca de la ejecución
de las actividades y procedimientos metodológicos utilizados.
La evaluación del producto nos ayudará a medir y conocer los logros que hemos
obtenido a lo largo del proceso y al final del mismo. Los métodos que podemos utilizar
son los análisis cualitativos y cuantitativos recopilados. Esta evaluación nos servirá de
guía para la finalización, modificación y continuación del programa o proyecto.
Modelo C.S.E. o de atención a las necesidades de los que toman decisiones. Para este
modelo la evaluación permite seleccionar, recoger y analizar la información necesaria
para las personas que toman las decisiones a lo largo del proceso y los productos que se
van obteniendo. Se desarrolla en cinco fases:
Valoración de necesidades. Se valora la diferencia entre lo que se pretendía
alcanzar y lo que se ha alcanzado.
Planificación del programa o selección del programa más idóneo.
Instrumentalización o concordancia del desarrollo del programa con el diseño
realizado.
Evaluación de progresos , establecer si se consiguen los objetivos, éxitos o
fracasos para subsanar errores.
Evaluación de resultados o información de los resultados obtenidos con el
programa para continuarlo, modificarlo o eliminarlo si fuera necesario.
Modelo de discrepancia: atiende a las discrepancias entre las pautas preestablecidas
y la ejecución real. Este modelo facilita información, igualmente que los anteriores, para
la toma de decisiones. Se desarrolla en cinco fases: diseño, implantación, proceso,
producto y comparación del programa.
Discrepancia (IS_MIS02)
1. Diferencia, desigualdad que resulta de la comparación de las cosas entre sí. 2.
Disentimiento personal en opiniones o en conducta.
7.2.- ALTERNATIVOS
Autoevaluación
Señala que respuesta es correcta con respecto a los modelos de evaluación:
Falsa. En los modelos alternativos la evaluación está orientada hacia los objetivos.
Verdadera. La evaluación basada en modelos alternativos prescinde, en gran
medida, de los objetivos.
Es incorrecta, porque en los modelos alternativos la evaluación no está orientada hacia
los objetivos, es en la evaluación basada en el paradigma experimental dónde los
resultados se analizan estadísticamente para comparar resultados reales y los previstos,
en función de los objetivos.
Es correcta, porque en estos modelos se tienen en cuenta otro tipo de datos y se
preocupan por evaluar el contexto y que los implicados comprendan la evaluación que
se desarrolla.
Solución:
1. Incorrecto. Es incorrecta, porque en los modelos alternativos la evaluación no
está orientada hacia los objetivos, es en la evaluación basada en el paradigma
experimental dónde los resultados se analizan estadísticamente para comparar
resultados reales y los previstos, en función de los objetivos.
2. Correcto. Es correcta, porque en estos modelos se tienen en cuenta otro tipo de
datos y se preocupan por evaluar el contexto y que los implicados comprendan la
evaluación que se desarrolla.
Caso práctico
Ya nuestros protagonistas están es disposición de
comenzar a planificar la evaluación, pues ya conocen los
distintos modelos y los tipos de evaluación. En este
momento ya saben que, para elegir un determinado
modelo de evaluación deben hacerlo de forma reflexiva,
centrándose en una planificación acorde a la situación que se presenta ¿ pero por dónde
empezar?. Tendrán que responder a las preguntas que
deben hacerse en todo proceso planificador y a conocer
sus fases y contenidos. Les ayudaremos en los siguientes
apartados a encontrar el camino adecuado para su
realización.
Cuándo realizamos la planificación del proceso
evaluador debemos responder a una serie de preguntas
que nos indicarán los pasos a seguir en el mismo.
Debemos preguntarnos:
¿Por qué se evalúa? La respuesta a esta pregunta nos indicará el fundamento de la
evaluación.
¿Para qué se evalúa? Determinará los objetivos de la evaluación.
¿Qué se evalúa? Se refiere a los contenidos de la misma.
¿Cómo se evalúa? Esta pregunta hace referencia a la metodología que aplicaremos.
¿Quién y cuándo se evalúa? Tendremos en cuenta el calendario y los recursos humanos.
¿Con qué se evalúa? Haremos referencia a los recursos.
El porqué evaluamos hace referencia a la fundamentación de la evaluación y a los
beneficios que obtenemos con esta. Es importante conocer y analizar la realidad y
detectar las necesidades existentes, así como poder comprobar el grado de
cumplimiento de los objetivos que nos hemos marcado en relación a los resultados
obtenidos.
Por otra parte, cualquier actuación que realicemos nos dará una
retroalimentación que nos ayudará a mejorar las intervenciones y a corregir los errores
o desajustes que se produzcan durante la ejecución del proyecto. Así podremos tomar
decisiones acerca de los cambios necesarios en la intervención, para continuarla si es
adecuada o para suprimirla si no es correcta. Igualmente podremos informar de cómo
hemos gastado los fondos que han sustentado el proyecto y si hemos sido responsables
en la utilización de los mismos.
Retroalimentación (IS_MIS02)
Conjunto de reacciones o respuestas que manifiesta un receptor respecto a la
actuación del emisor, lo que es tenido en cuenta por este para cambiar o
modificar su mensaje. La retroalimentación o realimentación, también
denominada feedback, significa 'ida y vuelta' y es, desde el punto de vista social
y psicológico, el proceso de compartir observaciones, preocupaciones y
sugerencias, con la intención de recabar información, a nivel individual o
colectivo, para intentar mejorar el funcionamiento de una organización o de
cualquier grupo formado por seres humanos.
Cuándo nos planteamos los objetivos de la evaluación, es decir, el para qué se evalúa
debemos considerar unos objetivos concretos, sobre lo que queremos obtener con el
proceso de evaluación. Cada proyecto tendrá unos objetivos concretos y bien definidos
pero en general debemos poder medir la adecuación, eficiencia y eficacia del proyecto,
así como tener en cuenta si han existido consecuencias no previstas y en qué medida se
han producido. Tomaremos decisiones para mejorar la intervención y facilitar el análisis
prospectivo para intervenciones en el futuro.
Prospectiva (IS_MIS02)
1. Conjunto de análisis y estudios realizados con el fin de explorar o de predecir
el futuro, en una determinada materia. 2. La prospectiva es una disciplina que
nos permite visualizar el futuro y actuar en el presente. La prospectiva no
pretende adivinar la ocurrencia de un hecho, óptimo o pésimo, sino que busca
reducir notablemente la incertidumbre en torno a su ocurrencia, anticipando con
ello las acciones que se deben tomar en el presente. La prospectiva, por lo tanto,
no sólo pretende conocer el futuro de manera anticipada sino,
fundamentalmente, diseñarlo y construirlo colectivamente en forma participativa.
Citas para pensar
Somos lo que hacemos, pero somos, principalmente, lo que hacemos para cambiar lo
que somos.
1. Cualidad de viable.
2. Condición del camino o vía por donde se puede transitar.
Factibilidad (IS_MIS05)
Se refiere a la disponibilidad de los recursos necesarios para llevar a cabo los
objetivos o metas señalados. Generalmente la factibilidad se determina sobre un
proyecto.
Impacto (IS_MIS05)
Conjunto de consecuencias provocadas por un hecho o actuación que afecta a un
entorno o ambiente social o natural.
La evaluación del proceso: A lo largo del desarrollo del proyecto vamos comprobando a
través de la evaluación cómo la situación problemática se va modificando con la
intervención que se lleva a cabo, facilitando la toma de decisiones sobre la necesidad o
no de realizar cambios en la intervención. A través de la observación, análisis y pruebas
aplicadas podemos determinar qué aspectos se han desarrollado correctamente y
cuáles no. Con los datos extraídos de las actividades realizadas en la intervención
podemos comprobar los siguientes aspectos:
Coherencia entre los objetivos planteados y las estrategias metodológicas
utilizadas.
Si la metodología ha sido la adecuada para la resolución del problema.
La temporalización, recursos utilizados, coherencia y adecuación de las
actividades seleccionadas.
Previsión de la evaluación y datos obtenidos, apoyo de los grupos implicados,
modificaciones metodológicas para la mejora de los resultados.
En esta fase es importante evaluar la ejecución de la intervención, utilización de los
recursos y métodos de control en el desarrollo del proyecto.
La evaluación final: se realiza al finalizar el proceso y se analizan los resultados
obtenidos en función de los objetivos previstos. También se analiza el impacto y los
efectos en los beneficiarios. Se utizarán indicadores que muestren lo que se ha
conseguido con la intervención.
Se evaluarán los siguientes aspectos:
Los resultados en relación a costes y beneficios obtenidos, es decir, se valoran
los gastos que se han realizado en función de la eficacia de la intervención que se
ha llevado a cabo.
El impacto tanto en la institución o entidad como en la comunidad.
Se pueden utilizar matrices de datos conteniendo los registros realizados a lo largo
del proceso, de acuerdo a las previsiones de la evaluación que se quiere realizar.
Matriz (IS_MIS05)
Es una tabla bidimensional de números consistente en cantidades abstractas que
pueden sumarse y multiplicarse.
Autoevaluación
En la fase diagnóstica de la evaluación ¿Cuál de los siguientes elementos debemos
tener en cuenta? Señala la respuesta correcta.
En esta fase se tiene en cuenta si la metodología ha sido la adecuada para la solución del
problema.
Solución:
1. Incorrecto. No es correcta, pues si la metodología seguida ha sido adecuada, es
un elemento a tener en cuenta en la evaluación del proceso.
2. Incorrecto. Incorrecta, porque la estructura de las actividades es un elemento a
tener en cuenta en el diseño de la evaluación.
3. Correcto. Correcto. Muy bien. Has entendido los elementos de la fase
diagnóstica. Es necesario conocer las causas que han dado lugar al problema
antes de iniciar la fase de evaluación del diseño.
4. Incorrecto. No es la respuesta correcta, pues el impacto en la institución o en la
comunidad es un elemento a tener en cuenta en la evaluación final o de
resultados.
Coyuntural (IS_MIS05)
Infraestructura (IS_MIS05)
Es la base material de la sociedad que determina la estructura social y el
desarrollo y cambio social. Incluye las fuerzas productivas y las relaciones de
producción. De ella depende la superestructura, es decir, el conjunto de
elementos de la vida social dependientes de la infraestructura. Los aspectos
estructurales se refieren a la organización misma de la sociedad, las reglas que
vinculan a sus miembros, y el modo de organizar la producción de bienes.
Motivación (IS_MIS05)
La motivación puede definirse como el señalamiento o énfasis que se descubre
en una persona hacia un determinado medio de satisfacer una necesidad,
creando o aumentando con ello el impulso necesario para que ponga en obra ese
medio o esa acción, o bien para que deje de hacerlo. La motivación es un estado
interno que activa, dirige y mantiene la conducta.
Dinamización (IS_MIS05)
Imprimir rapidez e intensidad a un proceso.
Longitudinal (IS_MIS05)
Un estudio longitudinal, es un estudio de investigación que involucra a las
observaciones repetidas de las mismas cosas durante largos períodos de tiempo,
a menudo muchas décadas.
Explícita: observación sistemática, observación provocada y análisis de contenido
(Longitudinal).
Observación provocada, entrevista centrada en los objetivos, estrategia centrada
en losobjetivos, análisis de contenido ( Puntual)
Garanto Alós divide las técnicas utilizadas en tres grupos:
Estrategias descriptivas: importantes al inicio y final de la investigación. Estas
son: El método observacional, estudios de campo, análisis de contenido.
Estrategias correlacionales: se pueden establecer correlaciones entre los
acontecimientos o fenómenos que se produzcan. Entre estas podemos
encontrar: Estudios relacionales, estudios predictivos, estudios factoriales.
Correlacional (IS_MIS05)
La correlación, implica la manipulación de variables específicas pero no
directamente, sino mediante un procedimiento de selección. Por manipulación de
una variable se entiende el disponer la aparición de diferentes cantidades o
valores de la variable.
Estrategias manipulativas: se manipulan variables independientes para estudiar
los efectos producidos en la variable dependiente, manteniendo controladas
todas las variables extrañas que pueden interferir en el proceso. Entre estas
podemos citar: Los cuestionarios, la observación, la entrevista, las técnicas
sociométricas y las pruebas de rendimiento.
Caso práctico
Nuestro grupo ya ha aprendido cuáles son las fases de la
evaluación y sus contenidos así como la organización de
los recursos y las actividades de evaluación. Han entendido
que la evaluación es un proceso amplio y complicado que
no debe confundirse con la tarea final de medir los resultados obtenidos. Han podido
observar que la evaluación es un proceso dinámico y que son muchos los aspectos a
tener en cuenta, tales como las funciones, criterios y tipos de evaluación, quién y qué es
evaluado, quién evalúa, los destinatarios, los enfoques metodológicos, las actividades y
tareas así como las técnicas...Ya han recorrido un largo camino pero aún necesitan saber
como se realizan los informes y memorias de sus proyectos, como organizar su
contenido, sus características, sus partes y la comunicación de resultados logrados en la
ejecución de su proyecto. En los siguientes apartados tendrán la información que
necesitan para desarrollar bien su tarea y podrán tener una visión de conjunto de la
evaluación realizada.
Solución:
1. Incorrecto. No es correcta, pues el informe recuerda los datos generales de la
presentación y evalúa los resultados de la fundamentación en la presentación y
justificación.
2. Incorrecto. Incorrecta, porque la valoración de cumplimiento de los objetivos se
incluye en los contenidos sobre los objetivos.
3. Correcto. Correcto. Muy bien. Has entendido los aspectos que tiene en cuenta el
contenido del informe en cuanto a la metodología.
4. Incorrecto. No es la respuesta correcta, pues la evaluación del grado de
responsabilidad y coordinación de los recursos en el informe final son tenidos en
cuenta en los recursos humanos.
Difusión (IS_MIS05)
Proceso de propagación o divulgación de
conocimientos, información, noticias, actitudes,
costumbres, modas, etc.
Autoevaluación
Señala que respuesta es correcta con respecto a las características de los informes:
No contienen recomendaciones de actuación.
Los gráficos que se utilicen deben facilitar la comprensión del contenido y no a
aumentar la dificultad y complejidad del mismo.
Es incorrecta, porque los informes deben contener recomendaciones sobre las
actuaciones a llevar a cabo.
Es correcta, porque los gráficos son una ayuda para facilitar la comprensión del
contenido.
Solución:
1. Incorrecto. Es incorrecta, porque los informes deben contener recomendaciones
sobre las actuaciones a llevar a cabo.
2. Correcto. Es correcta, porque los gráficos son una ayuda para facilitar la
comprensión del contenido.
Reflexiona
¿Cuándo has leído algún informe, te has parado a pensar si cumple o no las
características enumeradas anteriormente? ¿ Son importantes los aspectos éticos a la
hora de hacer un informe? ¿Por qué?
Citas para pensar
"Los imposibles de hoy serán posibles mañana."
Konstantin Tsiolkovsky (1857-1935), científico ruso
Autoevaluación
Señala que respuesta es correcta, con respecto a los siguientes items, atendiendo a las
partes de las que consta un informe:
Es incorrecta, porque los informes deben realizar un estudio valorativo de los datos
extraídos de la evaluación en todas sus fases y no sólo en la final.
Es correcta, porque en un informe siempre se darán recomendaciones para la
modificación de aspectos en los que los resultados así lo indiquen o por el contrario para
prever y mejorar intervenciones futuras.
Solución:
1. Incorrecto. Es incorrecta, porque los informes deben realizar un estudio
valorativo de los datos extraídos de la evaluación en todas sus fases y no sólo en
la final.
2. Correcto. Es correcta, porque en un informe siempre se darán recomendaciones
para la modificación de aspectos en los que los resultados así lo indiquen o por el
contrario para prever y mejorar intervenciones futuras.
Explícito (IS_MIS05)
Es aquello que expresa una cosa con claridad y determinación. Cuando algo es
explícito, puede ser apreciado o advertido de manera evidente, sin lugar a
dudas.
Percepción (IS_MIS05)
La percepción es un proceso nervioso superior que permite al organismo, a
través de los sentidos , recibir, elaborar e interpretar la información proveniente
de su entorno y de uno mismo.
Globalización (IS_MIS05)
Tendencia de los mercados y de las empresas a extenderse, alcanzando una
dimensión mundial que sobrepasa las fronteras nacionales.
Tecnología (IS_MIS05)
Tecnología es el conjunto de conocimientos técnicos, ordenados científicamente,
que permiten diseñar y crear bienes y servicios que facilitan la adaptación al
medio ambiente y satisfacer tanto las necesidades esenciales como los deseos de
las personas.
Caso práctico
Teresa y Alicia comentan que es necesario debatir en el grupo la
gestión de la calidad en la evaluación del proyecto de
intervención. Para ello deciden reunirse e intentar encontrar la
información que deberán aportar al grupo. Piensan en lo que
habrán encontrado sus compañeros y como ordenarán los distintos elementos
encontrados que les facilite tener claros los conceptos. En el siguiente apartado tendrán
una explicación que puede ayudarles a realizar la tarea.
Sostenibilidad (IS_MIS05)
La sostenibilidad consiste en satisfacer las necesidades de la actual generación
sin sacrificar la capacidad de futuras generaciones de satisfacer sus propias
necesidades.
Focalización (IS_MIS05)
Este término corresponde a la información que obtenemos por el conocimiento
del material dramático que nos transmite un personaje. Pertenece al registro del
"saber". Existen diferentes grados de focalización: focalización externa,
focalización interna y focalización espectatorial.
Monitoreo (IS_MIS05)
El monitoreo, a rasgos generales, consiste en la observación del curso de uno o
más parámetros para detectar eventuales anomalías.
Caso práctico
Teresa, Roberto y Antonio han contemplado en el diseño de su
proyecto la perspectiva de género y la igualdad de oportunidades y
ahora comprueban con los indicadores de evaluación si lo han conseguido. Depende de
este análisis el reformular los objetivos de su proyecto en el futuro.
Pertinencia (IS_MIS02)
Cualidad de pertinente.
Estereotipo (IS_MIS05)
Idea o imagen aceptada por la mayoría como patrón o modelo de cualidades o
de conducta.