Tema 7: El proceso evaluador: fases, agentes y problemas habituales.

Estrategias de
evaluación: técnicas e instrumentos; clasificación, descripción y pautas de aplicación.
Metodología de investigación-acción. Evaluación en ocio y tiempo libre.

1. Ubicación.

Este tema trata de nuestra familia profesional de SSC y lo ubicamos por tanto el en CFGS de
ASCYT y más concretamente en el módulo impartido por el PTSC de AOYTL cuyas UC acreditadas
son:

- UC1868_2: Emplear técnicas y recursos educativos de animación en el tiempo libre.

- UC1869_3: Planificar, organizar, gestionar y evaluar proyectos de tiempo libre

educativos.

De igual manera, este tema podría relacionarse con el módulo impartido por el profesorado de
IS de Metodología de la Intervención Social cuyas UC son:

- UC1022_3: Dinamizar la planificación, desarrollo y evaluación de intervenciones y

proyectos comunitarios y de participación ciudadana que se desarrollen entre los
diferentes agentes que configuran una comunidad o zona territorial.

- UC1024_3: Establecer estrategias de comunicación y difusión de los diferentes

proyectos y actuaciones comunitarias.

- UC1026_3: Incorporar la perspectiva de género en los proyectos de integración social.

2. Introducción.

¿Por qué evaluamos? ¿Qué sentido tiene el acto evaluador? La importancia recae en que la
evaluación es una fase de la planificación de la intervención social. Es tan importante que la
evaluación está presente en todo el proceso, desde el análisis de la realidad, pasando por la
elaboración de objetivos, el desarrollo de actividades hasta el resultado final del proceso.
Evaluamos porque solo a través de la evaluación podemos retroalimentar el proceso.

Una vez que hemos destacado la importancia del proceso evaluador, comenzaremos el tema
explicando…

1
 3. Proceso evaluador: fases, agentes y problemas habituales.

¿Qué es evaluar? Siguiendo a Espinoza Vergara, la evaluación es un proceso de reflexión que

sirve para explicar, valorar y comparar, en un instante determinado, lo que se ha alcanzado
mediante una acción con lo que se debería haber alcanzado de acuerdo a una planificación
previa. Según Santos Guerra, evaluar consiste en: “observar para conocer, conocer para
comprender y comprender para evaluar”.

Carol H. Weiss nos dice que el objetivo de la evaluación es medir los efectos de un programa
por comparación con las metas que se propuso alcanzar, a fin de contribuir a la toma de
decisiones subsiguientes acerca del programa y para mejorar programaciones futuras.

Pero, ¿qué objetivos persigue la evaluación?

1. Medir el grado de pertinencia: idoneidad, eficacia, eficiencia y efectividad.

2. Facilitar el proceso de toma de decisiones para mejorar y/o modifica un proyecto.
3. Establecer en qué grado se han producido otras consecuencias imprevistas.
4. Fomentar un análisis sobre los resultados y cómo deben ser las intervenciones futuras.
Fases de la evaluación.

En cada una de las fases de la evaluación se medirán una serie de ingredientes que permitirán
dar conformidad para el avance a la fase siguiente:

1. Fase de evaluación del diagnóstico de la realidad social.

- Evaluación de las investigaciones.
- Identificación de la situación problema: percepción social.
- Desarrollo y selección de instrumentos y procedimientos.
- Diseño, interpretación, análisis y consecuencias.

2. Fase de evaluación de la programación. Evaluación de diseño.

- Relación entre el proyecto y las necesidades detectadas.
- Posibilidades reales de alcanzar las metas.
- Formulación de objetivos y metas.
- Suficiencia o no de recursos.
- Respaldo real al proyecto por parte de técnicos y ejecutores.
- Relación entre objetivos y relaciones macro.

2
3. Fase de la implementación (todo lo necesario que se hace para desarrollar el
proyecto).
- Motivación tanto en la comunidad como en el técnico responsable de la ejecución del
proyecto.
- Realización de tareas y actividades organizativas.
- Disponibilidad de recursos: materiales y humanos.
- Situación financiera del proyecto.
- Preparativos para la puesta en acción.

4. Evaluación de la ejecución (Puesta en marcha del proyecto).

- Propiedad del proyecto: si realmente está incidiendo en la superación del problema.
- Idoneidad de las actividades para alcanzar objetivos y metas.
- Eficacia y eficiencia del proyecto.

5. Evaluación de resultados.
- Resultados inesperados.
- Funcionamiento del equipo base de trabajo.
- Efectos: son respuestas al proyecto: lo positivo y lo negativo.

Pero, ¿quién evalúa? Agentes.

a) Autoevaluación: evaluación que se hace así mismo. Para que pueda ser realizada debe
conocer perfectamente el proyecto.
b) Evaluación interna: llevada a cabo por personas implicadas en el proyecto que pueden
proporcionar información continua y realizar las modificaciones necesarias.
c) Evaluación externa: se realiza por agentes externos a la institución ejecutora. Se trata
de una evaluación sumativa o de producto.
d) Evaluación mixta: la que se realiza tanto por agentes externos como internos a la
institución ejecutora del proyecto.
e) Evaluación participante: análisis hecho conjuntamente tanto por promotores como
beneficiarios.

3
 Problemas habituales:
- Miedo a la evaluación porque puede significar asumir lagunas, desorientación,
decepción, fallos…
- Percibir la realidad no como un desafío sino como un obstáculo justificando los fracasos
por trampas de la realidad.
- Subjetividad: evaluar a las personas y no a procesos de intervención.
- Afán por la cuantificación.
- No comunicar los resultados de la evaluación a los interesados, privatizándoles en una
sola dirección.
- Evaluar por cubrir expediente.

Todo este proceso de evaluación, sólo es posible, a través de unas determinadas estrategias de
evaluación.

4. Estrategias de evaluación: técnicas e instrumentos, clasificación, descripción y pautas de

aplicación.

Utilizaremos dos mecanismos para llevar a cabo la evaluación, que se van a articular y
complementar.

- Cuantitativo: utilización de datos de actividades y resultados.

- Cualitativo: valoraciones de las personas implicadas.

Estos datos y estas valoraciones se recogerán a través de técnicas e instrumentos:

a) Cuestionarios: son una serie de preguntas que los individuos contestan por escribo. Es
una técnica de observación. Se puede realizar de forma individual o colectiva. Existen 3
tipos: abiertos (respuesta libre), cerrados (si o no, o una opción de las tres), mixtas
(combinación de las dos anteriores).
b) Entrevistas: Conversación entre dos personas iniciadas por el entrevistador que desea
obtener información relevante sobre un contenido específico. Es una técnica de
investigación cualitativa.

Elementos:

▪ El entrevistador: la persona que dirige y estimula la entrevista.

▪ El entrevistado: la persona que proporciona o recibe la información.
▪ Relación entre entrevistado-entrevistador: es el núcleo de la entrevista.

4
Tipos:

▪ Entrevista estructurada: el entrevistador sigue el orden y preguntas marcadas. Se debe

acotar al guión.
▪ Entrevista semiestructurada: también se fija de antemano el tipo de información que
se requiérete y se establece un guión. Se puede saltar de preguntas e incorporar alguna
nueva.
▪ Entrevista no estructurada: aquella que se realiza sin un guión previo. Sigue un modelo
de conversación entre iguales.

c) Observación: Es el método básico para la investigación social. Sirve para recoger datos,
emitir juicios, tomar decisiones y para transformar la realidad social.

¿Qué garantías tiene la observación?

1. Tiene valor científico: es fiable, válida y exacta.

2. Controla las diferentes fuentes de error.

Tipos de observación.

a) Planificada:
▪ Sistemática: responde a una planificación.
▪ Ocasional: no somete a ningún tiempo, lugar ni situación.
b) Realización:
▪ Directa: la observación la hace el propio investigador.
▪ Indirecta: la observación la realizan otras personas o medios tecnológicos.
c) Número de sujetos:
▪ Colectiva.
▪ Individual.
d) Implicación del observador:
▪ No participante.
▪ Participante: el investigador se mezcla con el grupo observado y participa en las
actividades.

5
 d) Recopilación y análisis documental: Es uno de los pasos más importantes en la
investigación, familiarizándose con los documentos del área de estudio y con cada uno
de los trabajadores de investigación anterior que tratan nuestro tema. ¿Por qué? Nos
dan información sobre el estado actual del problema y sobre éxitos y fracasos anteriores
evitando caer en los mismos errores. Los documentos son: escritos, estadísticos,
imágenes, sonidos, objetos…
e) Grupos de discusión: es la estrategia cualitativa por excelencia. Nos interesa saber el
discurso social latente. El grupo discute sobre un tema y luego analiza el discurso.
f) Indicadores de evaluación: unidad que permite medir el alcance de una meta o grado
de consecución de un objetivo.
g) Diario de campo: en los libros de registro se va anotando día a día distintos datos e
informaciones de interés sobre la marcha del proyecto.
h) Encuesta: Es la información recibida desde una entrevista o un cuestionario de personas
que han sido seleccionadas para una muestra.
i) Las encuestas nos proporcionan cinco tipos de información: características o hechos
básicos de las personas, percepciones, opiniones, actitudes, informes de
comportamientos.
j) Otras técnicas de grupo: debate, tormenta de ideas, philips 6x6.

Clasificación, descripción y pautas de aplicación.

Dependiendo de la naturaleza, alcance e intensidad de la evaluación podemos diferenciar unos

tipos de evaluación determinados.

- Según el instante en que se aplica:

a) Evaluación inicial: diagnóstica.
b) Evaluación formativa o continua: durante el desarrollo de un proyecto y sirve
para retroalimentar.
c) Evaluación final o sumativa: se realiza al final de un proyecto y sirve para
determinar futuras acciones.

- Según la procedencia de los evaluadores: interna, externa y mixta. (explicadas

anteriormente).

6
 - Según la naturaleza:
a) Evaluación de cobertura: destinatarios.
b) Evaluación de inputs: se refiere a metas y objetivos.
c) Evaluación outputs: se refiere a los resultados, consecución de los objetivos.
d) Evaluación económica: se refiere al coste- efectividad y coste-beneficio.
e) Evaluación de implementación y proceso.

El proceso de evaluación no solo es posible a través de unas determinadas técnicas e

instrumentos, sino que también hay que tener en cuenta una serie de factores y pautas de
aplicación que forman parte del proceso evaluativo. Podemos diferenciar las siguientes pautas
de aplicación:

1. Diagnóstico del marco de referencia.

2. Definición del tipo de evaluación que es.
3. Implementación de la evaluación.
4. Aplicación de mediciones.
5. Formulación de conclusiones.
6. Adopción de las medidas de retroalimentación.
7. Introducción de medidas en el proceso.

Hasta aquí hemos detallado el proceso de evaluación y entre otras muchas ideas hemos
introducido la retroalimentación como acción. Esto constituye la base de una nueva
investigación. Por ello consideramos fundamental analizar brevemente la metodología de
investigación-acción.

5. Metodología de investigación-acción.

El término investigación-acción fue usado por Kart Lewin (1994) para descubrir aquellas
investigaciones psicosociológicas tendentes a transformar la realidad (comportamientos,
costumbres y reglas).

A diferencia de otros modelos de investigación, la investigación acción se ocupa de los

problemas prácticos cotidianos que viven los profesionales, en lugar de los problemas teóricos
definidos por los investigadores puros dentro del ámbito de una disciplina del saber.

Puede efectuarse por profesionales implicados en la práctica o bien por alguien a quien éstos
deleguen o encomienden realizarla.

7
De todo esto, podemos deducir la naturaleza de la investigación-acción. ¿Cómo debe ser la
investigación-acción?

- Informativa: Porque permite conocer el estado de avance de la acción y de su incidencia

en el cumplimiento del plan.
- Formativa: porque la ejecución de las tareas de evaluación, conlleva el necesario
aprendizaje que permite un conocimiento correcto del estado de avance de la acción.
- Operativa: porque es un medio de optimización de la acción. Permite tomar decisiones
oportunas.
- Participativa: porque supone una implicación.

Pero, ¿cuáles son las fases de un proceso de I-A-P? Según Pérez Serrano (2000):

- Diagnosticar o descubrir una preocupación temática “problema”. (Observación).

- Construcción de un plan de acción. (Planificación).
- Propuesta práctica del plan y observación de cómo funciona. (Acción).
- Reflexión, interpretación e integración de resultados. Replanificación. (Reflexión).

¿Por qué se utiliza la investigación-acción?

1. Aumenta y contrasta conocimientos: la investigación-acción hace posible la búsqueda

de conocimientos a través de la experiencia activa y pensar sobre ella.
2. Favorece la toma de conciencia por parte de las poblaciones de su realidad.
3. El aprendizaje: son mucho más formadores. Los conocimientos que un individuo/grupo
genera son mucho más enriquecedores y profundos que los que consumen. La
investigación-acción es un instrumento muy útil para adquirir información sobre la
acción y métodos de investigación, análisis y de animación.
4. El esfuerzo y la ampliación de redes de relaciones: dado los contactos que necesita y
promueve la investigación-acción, las redes de información, intercambio y presión son
esenciales para lograr las mejoras sociales.
5. La movilización colectiva porque parte de la acción y la impulsa y porque reconstruye
la historia colectiva, favoreciendo la toma de decisiones y la imaginación colectiva hacia
nuevas metas.

Las técnicas e instrumentos de evaluación en investigación-acción son: diarios, análisis de

documentos, fotografías, grabaciones, entrevistas, comentarios en vivo, cuestionarios,
participación de un observador externo…

8
Como ya hemos dicho, la evaluación o el proceso evaluador se da en todos los niveles de
concreción. Una vez analizado el proceso, desde una perspectiva general, veamos un ejemplo
práctico en la evaluación dentro de un proyecto de ocio y tiempo libre.

6. Evaluación en el ocio y tiempo libre.

Para poder evaluar en proyectos que se ubican en el ocio y en el tiempo libre, debemos entender
en primer lugar, que significan estos conceptos.

El tiempo libre se define como el conjunto de actividades que realiza el sujeto durante su tiempo
disponible, después de haber satisfecho sus necesidades vitales fisiológicas (comer, dormir),
laborales/escolares (trabajar, estudiar), derivadas (cuidar a hijos o personas mayores).

El ocio es cuando una persona tiene control sobre su tiempo libre. En este tiempo el individuo
se siente libre en un doble aspecto: libre para y libre de. Es precisamente en esta libertad donde
comienza el sentido de la palabra ocio que se caracteriza por: libertad, satisfacción y formación.

Dumazedier define ocio como conjunto de ocupaciones a las que el individuo puede entregarse
de forma voluntaria para descansar, divertirse y desarrollar su formación o información
desinteresada, su participación social voluntaria, tras haberse liberado de sus obligaciones
familiares, sociales y laborales.

Trilla nos dice que el tiempo libre no es sinónimo de ocio, sino que es una parte de él. Para que
el tiempo libre se convierta en ocio, necesitamos que las actividades sean de libre acción y
elección.

La evaluación en ocio y tiempo libre no difiere sustancialmente de cualquier otra evaluación

referida al campo de la intervención sociocultural.

Como sabemos que la evaluación se da en todo el proyecto, será conveniente evaluar el

cumplimiento de los principios metodológicos de la ASC, base del proyecto de OYTL:

Principios metodológicos de la ASC:

- Carácter activo y participativo: condición indispensable para el disfrute del ocio y tiempo
libre es la participación activa de las personas en las actividades.
- No directiva: el animador no debe ser autoritario, sino que coordinará las actividades
como una figura de apoyo.
- Tiene que fomentar la autonomía, autoestima, toma de conciencia y compromiso.

9
Además de todo esto, para elaborar un proyecto de ocio y tiempo libre, no sólo nos basamos en
estos principios, sino que además debe de haber unas orientaciones metodológicas, las cuáles
también deben ser evaluadas.

Orientaciones metodológicas:
- Adecuación a objetivos, actividades, métodos a las características de las personas a las
que va dirigido.
- Flexibilidad en los objetivos y la planificación, teniendo en cuenta los objetivos de un
proyecto de estas características: descanso, desarrollo y diversión.
- Los objetivos se centran en el proceso, es decir, los objetivos se deben de conseguir en
el desarrollo de la actividad sin esperar a los resultados de la misma.
- Desde un punto de vista metodológico: tendrá gran importancia el enfoque que el
educador de a su trabajo. El educador se integrará en el grupo dejando a este todo su
protagonismo.

Por último, no nos podemos olvidar evaluar las funciones que debe de desempeñar el TSASCYT:

- Programar, evaluar, organizar y coordinar cualquier programa de intervención social

- Gestionar recursos sociocomunitarios.
- Se encarga de la investigación social y cultural.
- Fomentar la participación e implicación en las actividades.
- Dinamizador grupal.
- Identificador y diagnosticador de necesidades socioculturales.

Es importante que la evaluación sea participativa, que incorpore a los destinatarios al diseño y
realización de la misma. Los instrumentos de recogida de información han de ser fáciles de
utilizar. Además, de evaluar los proyectos hay que evaluar a los animadores y los centros.

En la mayoría de los casos, la evaluación de un proyecto de ocio y tiempo libre se concluye con
la redacción de una memoria o informe final. Esta consiste en sistematizar o describir todo el
proceso que hemos llevado a cabo. En este informe, conviene destacar no solo los resultados
positivos, sino los inconvenientes, errores o limitaciones que se hayan podido cometer a lo largo
de las diferentes etapas.

Los resultados de la evaluación, se presente esta mediante el informe u otro formato, deben
hacerse llegar a las personas implicadas en el proyecto, en calidad de técnicos, colaboradores,
voluntarios... o personas usuarias.

10
 7. Conclusión:

En un primer momento del tema hemos explicado el proceso evaluador en general, pasando en
un segundo momento a una perspectiva más práctica con la investigación-acción y la evaluación
en el ocio y tiempo libre. Uno de los profesionales capacitados para elaborar estos procesos de
evaluación es el TSACYT tal y como se establece en su RD 1684/2011 de 18 de noviembre y su
competencia general: “Programar, organizar, implementar y evaluar intervenciones de ASCYT,
promoviendo la participación activa de las personas y grupos destinatarios y coordinando las
actuaciones de los profesionales y voluntarios a su cargo”. Y su Decreto 242/2014 de 11 de
noviembre por el que se establece el currículo de TSACYT en la CCAA de Extremadura.

8. Bibliografía.
✓ Cembranos Fernando; Montesino David, H. (2006): La ASC: una propuesta metodológica
(Promoción cultural). Editorial: Popular. Edición 13. Madrid.
✓ Quintana, JM. (1993): Fundamentos de la ASC. Editorial: Narcea. Madrid.
✓ Trilla, Jaume (1998). La ASC: teorías, programas y ámbitos. Editorial: Ariel. Barcelona.
✓ Fernández Garrido y Vélez Valero (2003). SSC: ASC. Editorial: Mad. Madrid.
✓ Caballo, V.E (2005). Manual de evaluación y entrenamiento de las habilidades sociales.
Siglo XXI de España Editores.
✓ Ander-Egg, E (1985). Evaluación de programas de trabajo social. Editorial: Humanitas.
✓ Elliott, J. (1990). La investigación-acción en educación. Madrid, España: Morata.

11