Carolina G.R.
Curso 2015/2016
ESQUEMA TEMA 6- EVALUACIÓN DE LA
INTERVENCIÓN SOCIOEDUCATIVA
(Rojo: examen)
1. LA EVALUACIÓN EN IS
La INTERVENCIÓN SOCIOEDUCATIVA (IS) parte de un proyecto que
planifica las acciones a realizar y le aporta eficacia y carácter científico.
La EVALUACIÓN es una parte importante en el proceso de diseño y ejecución
del proyecto, y nos va a permitir explicar y valorar tanto el proceso de
ejecución como los resultados de las acciones realizadas, dando respuesta a las
preguntas: ¿hemos logrado cambios?, ¿qué hemos logrado?, ¿en qué medida? No
es posible una buena evaluación si no se ha realizado un diseño adecuado que
prevea una evaluación de todos sus elementos.
Para SPINOZA (1986), evaluar es comparar en un instante determinado lo que
se ha alcanzado mediante una acción con lo que se debería haber alcanzado de
acuerdo a una programación previa.
La evaluación puede ser realizada por:
El propio equipo que ha diseñado y ejecutado el proyecto (EVALUACIÓN
INTERNA) o
Un equipo profesional externo y ajeno al diseño y a la ejecución del
proyecto (EVALUACIÓN EXTERNA).
IMPORTANCIA DE LA EVALUACIÓN.
La EVALUACIÓN es un momento importante en el diseño y ejecución del
proyecto, se incluye en la planificación y su finalidad es comprobar, durante la
ejecución del proyecto (EVALUACION PROCESUAL) si su desarrollo es el
adecuado y esperado, y al finalizar el proyecto (EVALUACIÓN FINAL) si se
han conseguido los objetivos propuestos, es decir, su eficacia. Se pueden utilizar
técnicas que se aplican al contexto, la planificación, el proceso de desarrollo, los
resultados. Es un proceso de mejora que permite tomar las decisiones adecuadas
y pertinentes durante la ejecución del proyecto y una vez finalizado el mismo.
La evaluación nos va a permitir: (5)
Emitir juicios sobre el proyecto.
Determinar la calidad del proyecto.
Proponer alternativas para mejorar el proyecto.
Proporcionar información sobre el proyecto.
Proporcionar elementos para la planificación de acciones.
2. CRITERIOS E INDICADORES EN LA EVALUACIÓN DE
PROYECTOS DE INTERVENCIÓN SOCIOEDUCATIVA
Al diseñar un proyecto es necesario tener en cuenta unos CRITERIOS que nos
servirán de guía en el diseño del mismo y nos facilitarán la evaluación: (5)
a) Para el contexto: aplicabilidad y viabilidad. Que sea viable en ese contexto.
b) Para la planificación: coherencia, pertinencia y adecuación. Que haya coherencia entre
los distintos elementos del proyecto.
1
c) Para la ejecución: eficiencia, ajuste y satisfacción. Que el proceso se muestre eficaz para
los objetivos perseguidos y satisfactorio para los usuarios.
d) Para los resultados: eficacia, efectividad y satisfacción. Que los resultados muestren el
logro de los objetivos.
e) Evaluación diferida: repercusión, permanencia y proyección. Que los resultados permitan
la extrapolación del proyecto o su continuidad.
VALORACIÓN FINAL DEL PROYECTO: INDICADORES:
Hay que tener en cuenta dos fases: (2)
EVALUACIÓN DE LOS RESULTADOS: Cuyos criterios son eficacia, efectividad y
satisfacción.
EVALUACIÓN DIFERIDA: Repercución, permanencia y proyección o su continuidad.
3. PROCEDIMIENTOS, TÉCNICAS E INSTRUMENTOS PARA LA
EVALUACIÓN DE LA INTERVENCIÓN SOCIOEDUCATIVA
Los TRES ELEMENTOS BÁSICOS en la evaluación son:
PROCEDIMIENTO: conjunto de pasos y pautas a seguir para recabar la información
necesaria para la evaluación de un proyecto, determinando las técnicas e instrumentos
requeridos. Nos indica el modo, el momento y con qué medio vamos a obtener la
información requerida para la evaluación del proyecto.
TÉCNICA: conjunto de saberes prácticos para obtener el resultado deseado. Puede ser
aplicada en cualquier ámbito humano. Requiere destreza manual o intelectual, y cada
persona la adapta a sus necesidades. Es la forma y la pericia para obtener la información
utilizando instrumentos adecuados. Cada técnica requiere unos instrumentos concretos.
INSTRUMENTO: herramienta utilizada para conseguir un fin. Debe ser adecuado al fin
propuesto. Está al servicio de una estrategia de intervención para alcanzar los objetivos.
Se adecuará al proyecto, la técnica responderá al procedimiento diseñado, y los
instrumentos serán los adecuados a la técnica.
TÉCNICAS E INSTRUMENTOS MÁS USUALES
La selección de las técnicas y los instrumentos es una decisión de la que depende el éxito
y la fiabilidad de la evaluación.
TÉCNICAS PARA LA RECOGIDA DE DATOS.
LA OBSERVACIÓN
Tanto la OBSERVACIÓN DIRECTA como la OBSERVACIÓN INDIRECTA, aportan
gran cantidad de información que permite el estudio del individuo en su propio medio,
recoge datos de la realidad y de comportamientos del sujeto.
La recogida de datos se realiza con instrumentos muy variados, como rejillas de
observación, fichas de registro, etc. Permite observar y analizar situaciones reales de las
que obtenemos información in situ sobre el sujeto y diversas facetas referidas a su
relación con su medio ecológico.
Podemos establecer DOS TIPOS DE OBSERVACIÓN:
PARTICIPANTE: el observador se implica y participa en el proceso que está
observando, formando parte del ámbito y contexto. El inconveniente es que el sujeto se
sienta observado y no actúe con naturalidad, en cuyo caso la información podría no ser
fiable.
NO PARTICIPANTE: el observador mantiene la distancia con el observado y no se
establece ningún tipo de relación entre ellos. En ocasiones se recoge la observación con
una cámara.
2
Las conductas observadas pueden ser de diversos tipos:
CONDUCTAS VERBALES: mensajes verbales, sintaxis y léxico utilizado, entonación,
volumen.
CONDUCTAS NO VERBALES: expresión corporal, movimientos corporales, expresión
facial, gesticulación, movimientos posturales.
CONDUCTAS RELACIONALES: modos y formas de relacionarse con su entorno.
El procedimiento a seguir en la observación seguirá los siguientes PASOS:
1. Delimitar el sujeto/objeto de estudio. Una vez acotado, se procederá a unas sesiones de
observación para establecer que parámetros nos interesa observar y si la observación va a ser
participante o no participante. Estas sesiones contribuirán a establecer el marco teórico que va a
servir de fundamento al proceso y análisis de los datos.
2. Decisión sobre el instrumento de registro. Quizá podemos utilizar un instrumento
estandarizado, pero en la mayoría de las ocasiones será necesario elaborar un instrumento que se
ajuste a nuestras necesidades. Debemos someterlo a prueba para cerciorarnos de su adecuación a la
información que deseamos obtener.
3. Recogida de datos. Elaborado y probado el instrumento, comienza la recogida de datos,
que debe ser precisa y sistematizada, recogiendo sólo aquella información preestablecida.
Previamente habremos establecido la periodicidad de las observaciones y registros de datos y la
temporalización de la recogida de datos.
4. Interpretación de los resultados. Consiste en relacionarlos con el punto de partida de la
observación y con el sujeto/objeto de la misma.
Según la metodología, podemos establecer DOS MODOS DE OBSERVACIÓN:
SISTEMÁTICA: todo el proceso está rigurosamente sistematizado,
estableciendo sistemas de categorías para la observación que garantizan su
fiabilidad y validez. Instrumentos: listas de control y escalas de estimación.
NO SISTEMÁTICA: no existe tanto control, pero resulta muy útil registrar la
conducta espontánea: el diario, las notas de campo, los registros anecdóticos, etc.
LA INTERROGACIÓN
LA ENCUESTA. Técnica de recogida de información grupal caracterizada porque la
información la proporciona directamente el sujeto, se puede aplicar masivamente y obtener
cantidad de información de numerosos sujetos, y ofrece la posibilidad de obtener datos subjetivos,
como opiniones o creencias, difíciles de obtener con otras técnicas. El inconveniente es que el
sujeto puede responder según la imagen socialmente deseable.
- Se debe dirigir a todos los agentes implicados en el proyecto, beneficiarios, familias,
educadores, etc. El procedimiento es el siguiente:
Definir los objetivos. A partir del planteamiento del problema se definirán con claridad y
precisión los objetivos generales de la evaluación, que suelen ser una declaración de
intenciones que es necesario desglosar en objetivos específicos operativos.
Determinar la población y la muestra objeto de estudio. Debe reflejar con precisión la
población diana objeto de estudio y la muestra representativa.
Elaborar el cuestionario. Es necesario convertir los objetivos específicos en preguntas. Es
la parte más compleja de la encuesta y requiere una formulación cuidadosa de las preguntas.
Hay que poner especial cuidado en que sean comprensibles, objetivas (que no condicionen
la respuesta), con una formulación neutra, y redactadas en forma personal para implicar
directamente al sujeto.
- Las PREGUNTAS pueden estar formuladas de diversas formas: dicotómicas, cuando sólo
permiten dos respuestas alternativas y excluyentes; categóricas, con respuestas categorizadas; y
abiertas, cuando la respuesta es de libre elección del sujeto.
LA ENTREVISTA. Se basa en la relación directa y el diálogo intencional entre
entrevistador y entrevistado, con una finalidad preestablecida y asumida por ambos. Se utiliza con
muchas finalidades en los ámbitos educativos y socioeducativos, y tiene DISTINTAS
MODALIDADES, según la finalidad:
3
Entrevista estructurada. La formulación y secuencia de las preguntas está
prefijada y las respuestas son dirigidas.
Entrevista semiestructurada. No tienen una estructura tan rígida ni las
respuestas están dirigidas.
Entrevista abierta: aunque tienen una finalidad determinada, no se establecen
previamente las preguntas, permitiendo libertad en las respuestas.
- Responde al esquema del cuestionario:
1. Fase de elaboración y preparación de la entrevista: se decide el tipo de entrevista y la finalidad.
2. Fase de inicio de la entrevista: se expone al entrevistado la finalidad, se garantiza la confidencialidad
de la información, se expone la colaboración que se espera del entrevistado.
3. Fase de desarrollo de la entrevista: comenzar por aspectos poco comprometidos, hacer referencia a
información anterior, seguir una secuencia lógica de lo genérico a lo específico, y finalizar con un
resumen de la información expuesta.
LAS TÉCNICAS SOCIOMÉTRICAS.
Permiten estudiar la relación del individuo en su medio, nos ofrecen información del
grado de socialización del sujeto, de su relación con el medio, de su integración social,
etc. Son útiles para prevenir y evaluar sujetos o colectivos en riesgo de exclusión social. Su
aplicación es frecuente en los centros educativos para valorar las interacciones dentro del
aula. En la evaluación de proyectos pueden ser útiles cuando los objetivos del proyecto iban
dirigidos a una finalidad integradora o de prevención de la exclusión social. Nos permiten
evaluar en qué grado han mejorado las interacciones de un grupo si partimos de una
evaluación inicial.
Es el de mayor aplicación y el más adecuado para estudiar los sistemas de interacciones
afectivas que se dan en un grupo, las relaciones interpersonales y las comunicaciones.
Consiste en formular determinadas preguntas a todos los miembros del grupo para que
elijan aquellos a los cuales más desearía y menos desearía tener como compañeros para
hacer una actividad.
Los estudios sociométricos revelan que ciertas personas son elegidas para todas las
situaciones como esas, pero, con mayor frecuencia, diferentes personas son elegidas para
cada tipo de actividad. Con las respuestas se elabora una MATRIZ SOCIOMÉTRICA, y a
partir del análisis de los resultados podemos elaborar el sociograma que nos da una visión
de las interacciones del grupo.
TÉCNICAS PARA EL ANÁLISIS DE DATOS
La selección de la técnica vendrá determinada por el tipo de datos que hemos obtenido. Las
más usuales son: (3)
ANÁLISIS DE CONTENIDOS: es la más usual para el análisis de documentos escritos,
historias de vida, biografías, diarios, etc. Técnica muy depurada y precisa que se basa en el
análisis a partir de unos parámetros previamente establecidos.
TESTS ESTANDARIZADOS: permiten estudiar determinadas dimensiones humanas
abstractas que no es posible estudiar de forma directa, como la inteligencia, las aptitudes, la
personalidad. Los procedimientos para evaluar estas dimensiones se basan en la utilización
de instrumentos que permitan cuantificar sus manifestaciones. Permiten una descripción
cuantitativa del comportamiento de un individuo ante una situación específica, tomando
como referencia el comportamiento de los individuos de un grupo definido. Herramienta
importante para la evaluación normativa.
En la evaluación de un proyecto tienen utilidad cuando se utiliza la evaluación inicial, que
nos sirve de marco de referencia para evaluar la eficacia del proyecto. Generalmente se
utilizan Instrumentos estandarizados.
LAS TÉCNICAS DE GRUPO: se pueden utilizar técnicas de grupo como el Philips 6x6,
la discusión de grupo, el brainstorming, etc.
4. TIPOS DE EVALUACIÓN
4
Al diseñar un proyecto es necesario prever EL MOMENTO Y LA FORMA en que
se pueda comprobar el funcionamiento del proyecto y la forma y criterios en que
vamos a comprobar su eficacia. Dependiendo de esos criterios, diseñaremos la
forma de evaluar. Una clasificación a tener en cuenta sería el modelo (orientada a
contenidos o a valores). Otra clasificación sería según la función de la evaluación
(optimizadora, sistematizadora, motivadora, etc.).
La clasificación más común es la consideración del momento de la evaluació n:
EVALUACIÓN Tiene una finalidad diagnóstica, y es el punto de partida de un proyecto
de intervención. Se realiza como diagnóstico previo para determinar las
INICIAL
necesidades de intervención. Se recogen datos de todo tipo para tener un
conocimiento de todos los elementos, diseñar las estrategias y acciones
adecuadas y justificar la necesidad de un proyecto. Contribuye a tomar
decisiones fundamentadas, en función de los datos sobre el estudio de
necesidades reales. Debe comprender:
Análisis y valoración del contexto, utilizando
instrumentos adecuados al caso.
Análisis de la población diana: nivel socioeducativo,
dificultades, problemas, etc.
Detección de necesidades.
El resultado se reflejará en un INFORME DE EVALUACIÓN, que
servirá para diseñar el proyecto en función de las necesidades
detectadas.
EL CONTENIDO DEL INFORME responderá a estos aspectos:(7)
Justificación de la intervención.
Procedimiento de recogida de información.
Necesidades detectadas.
Propuesta de intervención.
Población diana.
Propuestas y sugerencias.
Conclusiones.
EVALUACIÓN Tiene un carácter formativo, y su finalidad es analizar y evaluar el
PROCESUAL proyecto de intervención en distintos momentos de la ejecución del
proyecto, con el fin de detectar posibles deficiencias y poder introducir
los cambios necesarios. Sirve como estrategia de mejora, ya que nos
permite conocer los puntos débiles del proyecto.
La evaluación procesual tiene un carácter de provisionalidad y de progreso.
Conviene realizar un informe de cada evaluación procesual. En estos
informes se recogerá:(4)
- Análisis de la situación actual del proyecto en relación a la situación de partida.
- Análisis de los problemas que surjan para buscar las soluciones adecuadas.
- Análisis y control del seguimiento del proyecto para comprobar si se está
desarrollando con los mismos planteamientos y criterios iniciales.
- Regulación del proceso introduciendo los cambios o modificaciones
necesarios.
EVALUACIÓN Tiene carácter sumativo y es la resultante de las distintas evaluaciones
FINAL realizadas a lo largo del proceso de intervención.
Aporta información de los resultados obtenidos, del logro de los objetivos y
en qué nivel se lograron, de la adecuación de las acciones realizadas, de
la adecuación y suficiencia de los recursos, etc. Los resultados pueden ser
el punto de arranque de la evaluación inicial del siguiente proyecto. El
carácter de esos resultados puede determinar su extrapolación y su
5
repercusión.
Si se trata de un proceso de asesoramiento, el procedimiento es el mismo,
aunque la evaluación estará integrada en el proceso colaborativo, tanto las
evaluaciones procesuales como la evaluación final.
El informe final recoge los siguientes ASPECTOS:
INTRODUCCIÓN:
Finalidad del informe.
Estructura el informe, especificando los apartados.
CARACTERÍSTICAS DEL PROCESO DE EVALUACIÓN:
Contextualización.
Metodología.
Destinatarios.
Finalidad.
Momento de la evaluación.
DISEÑO DE LA EVALUACIÓN:
Objetivos.
Procedimientos y técnicas de recogida de datos.
Informes de evaluación procesual
Temporalización de las actividades.
RESULTADOS:
Presentación y comentario de los resultados.
CONCLUSIONES:
Interpretación de los resultados obtenidos.
Recomendaciones para la toma de decisiones.
VALORACIÓN DE LA EVALUACIÓN REALIZADA:
Resumen de puntos fuertes y débiles.
Limitaciones.
PERSPECTIVAS DE FUTURO:
Propuestas de mejora.