TEMARIO F.P.

SERVICIOS A LA COMUNIDAD

TEMA 7

EL PROCESO EVALUADOR: FASES, AGENTES, PROBLEMAS HABITUALES.

ESTRATEGIAS DE EVALUACIÓN: TÉCNICAS E INSTRUMENTOS.

CLASIFICACIÓN, DESCRIPCIÓN Y PAUTAS DE APLICACIÓN. METODOLOGÍA

DE LA INVESTIGACIÓN-ACCIÓN. EVALUACIÓN EN OCIO Y TIEMPO LIBRE.

0. INTRODUCCIÓN.

1. EL PROCESO EVALUADOR: FASES, AGENTES, PROBLEMAS

HABITUALES.

1.1. Concepto de evaluación, características, funciones y objetivos del

proceso evaluador.

1.2. Fases del proceso de evaluación y pautas de aplicación en la

evaluación.

1.3. Agentes que participan en la evaluación.

1.4. Problemas y dificultades en el proceso evaluador.

2. ESTRATEGIAS DE EVALUACIÓN: TÉCNICAS E INSTRUMENTOS.

CLASIFICACIÓN, DESCRIPCIÓN Y PAUTAS DE APLICACIÓN.

2.1. Estrategias de evaluación: tipos de evaluación.

2.2. Técnicas e instrumentos de evaluación: clasificación.

A) Técnicas para la recogida de datos.

B) Técnicas para el análisis de datos.

2.3. Descripción de algunas técnicas de recogida de datos y pautas de

aplicación.

3. METODOLOGÍA DE LA INVESTIGACIÓN-ACCIÓN.

__________________________________________________________________
Maestre Ediciones -1-
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

3.1. Concepto y objetivos de la Investigación-Acción-Participativa.

3.2. Metodología de la IAP.

4. EVALUACIÓN EN OCIO Y TIEMPO LIBRE.

__________________________________________________________________
Maestre Ediciones -2-
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

0. INTRODUCCIÓN.

Como investigadores sociales tenemos la necesidad de conocer y asumir con

responsabilidad el paradigma epistemológico desde el cual hablamos y decimos lo que

decimos acerca de lo que conocemos. De esta manera no basta declarar que nos

encontramos haciendo ciencia o explicando fenómenos desde el paradigma de la post-

modernidad sin efectivamente incorporar los principios y enfoques que dicho

paradigma implican. Tampoco es suficiente asumir que la realidad no existe de manera

independiente del observador y que ésta se define a partir de los propios sistemas

que la observan y pretenden explicar, sin indagar acerca de los procesos y condiciones

que posibilitan lo anterior.

Si tal desafío es fundamental para cualquier tipo de investigación, lo es aún más en el

caso de la evaluación de proyectos sociales en donde los investigadores-evaluadores

emiten juicios acerca del éxito o fracaso de intervenciones sociales. Interrogantes

como ¿cuáles son los criterios que orientan la evaluación social?, ¿qué grado o nivel de

objetividad se alcanza en ella? o ¿cómo evaluar acertadamente?; se deben aclarar

para orientar de mejor manera las prácticas de los evaluadores sociales.

1. EL PROCESO EVALUADOR: FASES, AGENTES,

PROBLEMAS HABITUALES.

1.1. Concepto de evaluación, características, funciones y objetivos del

proceso evaluador.

Podemos definir la evaluación como el proceso riguroso y sistemático de

recogida de datos e información, incorporado a cualquier proceso de intervención

__________________________________________________________________
Maestre Ediciones -3-
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

social, desde su comienzo, de manera que sea posible disponer de una información

continua y significativa para conocer la situación, formar juicios de valor respecto a

ella y tomar las decisiones adecuadas para proseguir la actividad a fin de que ésta

vaya siendo mejorada progresivamente.

En el proceso general de la intervención social se pueden distinguir cuatro grandes

fases, íntimamente relacionadas, siendo una de ella la evaluación:

 Primera fase: de diagnóstico o análisis de la realidad social, también llamada

evaluación inicial o diagnóstica.

 Segunda fase: de planificación o diseño programático.

 Tercera fase: de intervención (implementación o desarrollo de lo planificado).

 Cuarta fase: de evaluación.

Aunque estas cuatro fases en teoría se suceden según un orden no es realmente así en

cuanto a la evaluación, ya que ésta tiene que estar recorriendo todo el proceso de

intervención desde su inicio. Por tanto, todas las fases son susceptibles de evaluación,

incluso el propio proceso de evaluación. Todo ello a fin de poder ir retroalimentando el

proceso para poder tomar decisiones de mejora respecto a él.

En cuanto a las características de la evaluación, hemos de resaltar las siguientes:

A) Procesual: hace referencia a la evaluación como un proceso continuo en el

que se distinguen tres momentos: inicio, desarrollo y fin.

__________________________________________________________________
Maestre Ediciones -4-
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

B) Sistemática: alude a la necesidad de plantear la evaluación de acuerdo con

un plan previamente trazado que deberá llevarse a cabo con rigor.

C) Carácter comparativo: la evaluación en sí misma es la comparación de datos

obtenidos con los resultados previstos. Se mide “cómo es” y se valora “cómo

debería ser”.

D) Carácter comprensivo: porque está comprometida con el hecho de

suministrar información sobre la marcha del proyecto social (necesidades,

colectivos, programas, recursos, etc.).

En cuanto las funciones, varias son las que desempeña la evaluación dentro del

proyecto de intervención social:

1) Función diagnóstica: aparece al comienzo del proceso de planificación

social. El diagnóstico de las necesidades sociales y su conocimiento nos

permite un diseño más completo de la intervención social.

2) Función predictiva: el conocimiento del contexto nos permite predecir

con garantías de éxito la viabilidad de la intervención según los recursos

disponibles.

3) Función de control: es inherente a la evaluación. Consiste en medir

periódicamente los resultados obtenidos y compararlos con los resultados

programados e introducir las rectificaciones necesarias (retroalimentación).

4) Función participativa: motiva a la participación, en todos los momentos

del proyecto de intervención social, a las personas o colectivos que estén

implicados en su realización.

5) Función identificativa: permite profundizar en los signos de identidad

de la realidad concreta que se somete a evaluación.

__________________________________________________________________
Maestre Ediciones -5-
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

6) Función ética y grupal: se debe garantizar el acceso a los beneficiarios

del proyecto de intervención social y se tendrá en cuenta la confidencialidad

de los usuarios e instituciones que reciben la intervención.

En cuanto a los objetivos de la evaluación, Carol H. Weis señala que “el objetivo de la

evaluación es medir los efectos de un programa por comparación con las metas que se

propuso alcanzar, a fin de contribuir a la toma de decisiones subsiguientes acerca del

programa y para mejorar la programación futura”. De acuerdo con esta interpretación

de las conclusiones a que se llega mediante la evaluación, siempre debe desprenderse

un conjunto de medidas que influyen en la marcha de un programa. La evaluación es

parte, en consecuencia, del proceso racional de toma de decisiones.

Según Espinoza Vergara, la evaluación persigue dos finalidades u objetivos:

1) Medir el grado de idoneidad, eficacia y eficiencia de un proyecto:

o Idoneidad: capacidad que tiene el proyecto para resolver el problema

que lo originó.

o Eficacia: capacidad que tienen las actividades y tareas del proyecto

para alcanzar los objetivos y metas que el mismo define.

o Eficiencia: el índice de productividad del proyecto, o sea, la relación

entre los bienes y servicios finales y los costes requeridos.

2) Facilitar el proceso de toma de decisiones, como:

- Continuar o interrumpir el proyecto que se evalúa.

- Mejorar sus prácticas o procedimientos.

- Establecer proyectos semejantes en realidades similares, etc.

__________________________________________________________________
Maestre Ediciones -6-
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

Algunos elementos fundamentales de la evaluación social.

Para fundamentar la opinión sobre las diferentes etapas y componentes de un

proyecto, el evaluador recurre a ciertos criterios y a un marco de referencia que le

permite contrastar, comparar e interpretar los resultados observados en función de

patrones explícitos o implícitos. Para tal efecto utiliza una serie de criterios básicos,

estos son:

Coherencia: este criterio se refiere al análisis en función del grado de integración

lógica de los distintos componentes del proyecto (objetivos, resultados, actividades y

recursos): evaluación de la coherencia interna de un proyecto.

Pertinencia: análisis de la capacidad para dar respuestas a las necesidades reales de

los grupos y sujetos involucrados. Esta capacidad debe considerar los recursos

disponibles para lograr lo planificado.

Relevancia: análisis del grado de significatividad de las acciones y resultados para los

sujetos directamente involucrados en el proyecto. Se entiende así que un proyecto es

relevante cuando resulta ser significativo para las personas hacia quienes están

dirigidas las acciones del cambio.

Evaluar de acuerdo a estos criterios básicos es asumir una perspectiva teórica en la

cual la población beneficiaria ya no es un objeto o ente pasivo, sino que emerge como

un actor o "grupo de interés" que interactúa con determinados equipos o instituciones

que intervienen en los problemas que les afecta.

Costo-beneficio: basado en un principio económico que, en términos generales,

sostiene que un proyecto es exitoso si el beneficio que genera la inversión en un

período determinado es mayor que la que se puede obtener con otra alternativa

__________________________________________________________________
Maestre Ediciones -7-
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

durante el mismo período. Por otra parte, considera que un proyecto es más efectivo

cuando logra sus productos con un menor costo y los beneficios sociales obtenidos son

mayores que la inversión realizada.

Eficiencia: la evaluación de la eficiencia de los proyectos tiene como objeto el análisis

de los recursos o insumos utilizados para realizar las actividades y obtener los

resultados o productos esperados. Un proyecto es eficiente si ha tenido un adecuado

gasto y no ha producido déficit en su operación. Es decir, si ha optimizado el uso de

los recursos materiales y humanos de los que dispone.

En los procesos evaluativos actuales se utilizan de manera conjunta criterios

cualitativos y cuantitativos de análisis de información.

1.2. Fases del proceso evaluador y pautas de aplicación de la evaluación.

Al evaluar la planificación del programa o proyecto, en un principio, obtenemos

dos grandes fases:

1. La evaluación del proyecto de intervención sobre el papel.

2. La evaluación del proyecto de intervención sobre la realidad.

Desde un punto de vista metodológico, cuando se evalúa hay que pasar por diferentes

fases que van determinadas por las siguientes preguntas:

¿Por qué evaluar? Al responder se deben explicitar los fines de la evaluación.

¿Qué se va a evaluar? Se debe saber exactamente qué se quiere evaluar y remitirlo a

un marco de referencia, esto es, un criterio sobre el que podemos valorar.

__________________________________________________________________
Maestre Ediciones -8-
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

¿Cómo se va a evaluar? Se debe disponer de las fuentes de información y de las

técnicas e instrumentos que se van a utilizar para recopilar la información, clasificarla

y analizarla.

¿Cuándo se va a evaluar? Se debe concretar en qué momentos del proceso se va a

realizar.

¿Quién va a evaluar? Se tiene que determinar si van a realizarla agentes externos o

agentes internos.

Y una vez realizada la evaluación, la última fase es tomar decisiones oportunas.

Vamos a centrarnos en el qué evaluar, para determinar cuáles son los distintos

aspectos del ciclo de la intervención que se pueden evaluar. Así, tendremos la

evaluación de:

a) El proceso de análisis de la realidad o fase de diagnóstico:

Se trata de analizar con qué rigor se ha realizado este proceso de identificación

de necesidades. Así se enjuiciará la pertinencia o idoneidad del proyecto.

Por ejemplo, ¿hay diferencias entre el discurso aparente y el discurso latente

sobre la realidad estudiada?

b) Evaluación del diseño o fase de planificación:

En esta fase se va a evaluar, fundamentalmente:

- Los objetivos.

- La conceptualización o coherencia del proyecto.

Su objetivo es determinar que el producto de la formulación responde a las

necesidades que lo originaron, que las acciones que se emprenderán para cambiar

positivamente una situación-problema tienen posibilidades razonables de éxito y

__________________________________________________________________
Maestre Ediciones -9-
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

que los medios de que dispone para emprender esas acciones son los adecuados

para su ejecución.

c) Evaluación de la implementación:

La fase de implementación de un proyecto es el período durante el cual se

realizan las gestiones necesarias para poner en marcha el mismo. Al término de

esta fase se debe evaluar lo siguiente:

- La motivación o grado de interés de actores y beneficiarios.

- La realización de tareas y actividades organizativas programadas

para su puesta en marcha.

- La disponibilidad de los recursos humanos, materiales y financieros

que se han presupuestado para la ejecución del proyecto.

- Los preparativos para el establecimiento del proyecto en terreno.

d) Evaluación de la ejecución:

La evaluación durante la fase de ejecución deberá referirse a la:

 Propiedad: como la capacidad real que tiene un proyecto de

modificar la situación-problema que le dio origen.

 Idoneidad: como la confiabilidad de que las acciones que han

puesto el proyecto en ejecución lograrán alcanzar los objetivos y metas

propuestos.

 Efectividad: que medirá el grado en que los objetivos y metas han

sido alcanzados y la medida en que se han logrado en vista de las

acciones emprendidas por el proyecto.

 Eficiencia: medirá la cantidad de esfuerzos en términos económicos,

materiales y humanos, que se han invertido en la producción de cada

unidad que conforman las metas del proyecto.

__________________________________________________________________
Maestre Ediciones - 10 -
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

e) Evaluación de resultados:

En cuanto a los resultados obtenidos en un proyecto de intervención, se

realizarán las siguientes evaluaciones:

- Evaluación de resultados (propiamente dicha): analiza los

resultados obtenidos en relación con los objetivos formulados sobre la

población a la que va dirigida (población diana).

- Evaluación del desempeño: mide la forma en que se está

comportando un proyecto.

- Evaluación del impacto: mide las consecuencias no previstas en los

objetivos, más allá de la población a la que va dirigida.

Pautas de aplicación en la evaluación.

La evaluación de un proyecto es un proceso que se inicia en su fase de

diagnóstico y concluye en el momento en que, terminada su ejecución, se realiza una

medición final de sus logros, se analizan esos logros y se extraen las conclusiones

finales.

El marco teórico de la evaluación comprende las siguientes fases:

1. Definición del marco de referencia:

El marco de referencia está constituido por los dos pasos iniciales del proceso de

programación: el diagnóstico y la formulación del proyecto.

 A través del diagnóstico es posible obtener un exacto informe de la

situación que se quiere modificar.

 Con la formulación del proyecto se definen las variables que servirán

para medir su grado de éxito.

__________________________________________________________________
Maestre Ediciones - 11 -
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

2. Definición del tipo de evaluación que se quiere realizar:

Que supone:

1.- La determinación de los objetivos de la evaluación y la elección del modelo de

evaluación: estos objetivos pueden centrarse, por ejemplo, en continuar o no el

proyecto a evaluar.

2.- La determinación de las variables a medir, es decir, identificar los aspectos que

serán sometidos a evaluación, como puede ser el grado de obtención de meta en

cuanto a cantidad, calidad y tiempo.

3.- Definición de las unidades de medida: supone asignar números a criterios de

acuerdo con ciertas normas.

4.- Definición de la periodicidad de los cortes evaluativos: a fin de determinar cuando

se realizarán las mediciones.

Es recomendable aplicar cortes evaluativos al término de la investigación del proyecto,

del proceso de formulación, de la fase de implementación, además de un número

suficiente de cortes evaluativos durante la ejecución y al término de la ejecución total

del proyecto.

5.- Elección de instrumentos de evaluación: entrevistas, cuestionarios, etc.

6.- Determinación de recursos necesarios para la realización de la evaluación:

humanos, materiales y financieros para la evaluación.

3. Implementación de la evaluación.

Referida a todo el proceso organizativo que es necesario desarrollar antes de

iniciar la ejecución propiamente dicha de la evaluación.

4. Aplicación de las mediciones.

En esta fase se procede a poner en aplicación los diferentes instrumentos que se

prepararon. Es importante señalar que cada corte evaluativo tiene un tiempo de

duración que debe ser respetado.

__________________________________________________________________
Maestre Ediciones - 12 -
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

5. Análisis de los resultados.

Obtenida la información, el equipo de evaluación procede a clasificarla y analizarla.

6. Formulación de conclusiones.

Del análisis de la información obtenida debe extraerse un conjunto de conclusiones

sobre el comportamiento del proyecto.

7. Adopción de medidas de retroalimentación.

El proceso de evaluación debe llevar consigo la retroalimentación, que supone

introducir medidas de corrección en el funcionamiento de un proyecto como

producto del análisis evaluativo de su comportamiento.

Si en algún momento de la ejecución del proyecto se evalúa el comportamiento y se

determina que existe una desviación que impedirá alcanzar los objetivos y metas

previstas, se introducen entonces medidas de corrección para colocar nuevamente

el proyecto dentro del comportamiento deseado.

La retroalimentación forma parte del proceso continuo de programación y

reprogramación, a lo que se le conoce con el nombre de control.

8. Introducción de las medidas en proceso.

El último paso consiste en poner en ejecución las medidas de retroalimentación que

ha sugerido el grupo evaluador y que han sido adoptadas por el nivel de dirección

del proyecto.

1.3. Agentes que participan en la evaluación.

Ya hemos visto que la evaluación puede ser llevada a cabo por las mismas

personas o colectivo que han propuesto o aplicado el proyecto, o bien, por personas o

__________________________________________________________________
Maestre Ediciones - 13 -
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

instituciones ajenas al mismo. Esto no puede ser incompatible con el hecho de que la

información básica recogida provenga, principalmente, de los destinatarios del

programa o proyecto, teniendo en cuenta que uno de los requisitos esenciales de los

programas de intervención social es buscar la implicación de sus destinatarios a través

de la participación en todo lo que se realice.

Por tanto, en este sentido podemos distinguir entre:

A.- Evaluación interna: es la llevada a cabo por los integrantes de un programa.

Presenta diferentes alternativas en su realización:

Autoevaluacion: en la que los agentes sociales evalúan sus propias actuaciones.

Heteroevaluación: es la que un agente o colectivo de destinatarios realiza a otro.

Coevaluación: supone la evaluación conjunta de actuaciones.

B.- Evaluación externa: es la realizada por instituciones o personas ajenas al

proyecto (técnicos, administración, etc.). Se caracteriza porque es temporal.

C.- Evaluación mixta: se realiza por un equipo de evaluadores internos y externos a la

institución ejecutora del proyecto.

La evaluación adquiere su dimensión más valiosa cuando considera elemento activo en

su gestión a la comunidad beneficiaria del proyecto. Por ello, actualmente se habla de

evaluación-participante, considerada como una técnica que permite la intervención de

la comunidad organizada en el análisis cuantitativo y cualitativo de los logros y

fracasos que se obtienen en la realización de una acción programada, la cual

abordaremos detenidamente en el tercer apartado del tema.

¿Qué utilizan los agentes de la evaluación para realizar juicios de valor válidos?

La evaluación para que sea válida, además de formar parte del proceso de planificación

de la intervención, debe ser planificada en sí misma, utilizar métodos y técnicas

__________________________________________________________________
Maestre Ediciones - 14 -
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

adecuadas para recoger la información. Los agentes o los que la vayan a realizar

necesitan utilizar criterios o indicadores que les sirvan de guía en el proceso.

Como criterios que se pueden utilizar mencionamos a modo de ejemplo los siguientes:

 Según una evaluación por objetivos, ¿están los objetivos del programa

operativizados, es decir, concretados hasta poder ser medibles? ¿Se han

logrado los objetivos?

 Según una evaluación sobre la formulación del proyecto, adecuación de los

objetivos a las necesidades detectadas, claridad en su formulación, etc.

Otro referente para la evaluación son los indicadores, los cuales son unidades de

información que nos señalan si un cierto criterio de evaluación se ha verificado o no.

Por ejemplo: si un criterio es “el grado de participación en el programa”, unos

indicadores (en este caso cuantitativos) podrían ser “el número de asistentes” y el

“número de intervenciones”, mientras que los indicadores cualitativos serían, por

ejemplo, “ha habido propuestas constructivas para el grupo”…

1.4. Problemas y dificultades en el proceso evaluador.

Cembranos y otros autores, señalan, junto a la escasa práctica de la evaluación de

programas, los siguientes problemas:

1. Percepción de la realidad equivocadamente, por tanto, será también equivocado

el proceso de evaluación.

2. La subjetividad inoperante: el resultado de la evaluación depende de la

valoración subjetiva de quien la realiza.

3. Unidireccionalidad o la evaluación como legitimación de unos pocos.

4. Valoraciones apasionadas o, en el otro extremo, análisis superficiales de la

realidad social o de cualquiera de los elementos que se sometan a evaluación.

__________________________________________________________________
Maestre Ediciones - 15 -
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

5. La diferencia en la interpretación de criterios a la hora de evaluar.

6. La sacralización del número o la necesidad de cuantificarlo todo, de tal forma

que parece que lo que no es cuantificable no es evaluable.

7. La confusión en los niveles de evaluación o “todo en el mismo saco”, mezclando

los diferentes niveles de evaluación, por ejemplo, la evaluación de la institución

con la evaluación del programa.

2. ESTRATEGIAS DE EVALUACIÓN: TÉCNICAS E

INSTRUMENTOS.

2.1. Estrategias de evaluación: tipos de evaluación.

Según la tipología de evaluación que puede realizarse tenemos la siguiente

clasificación:

1.- Según su finalidad:

 Formativa: pretende mejorar un proceso o diseño de planificación en su fase de

desarrollo, de tal manera que ofrece datos sobre el mismo. La evaluación

formativa tiene la misión de regular el proceso de intervención.

 Sumativa: conlleva dos finalidades:

- Descubrir el producto del proyecto social.

- Indicar en qué grado los objetivos diseñados han sido

conseguidos.

La evaluación sumativa se sitúa siempre al final del proceso y nos permite tomar

una decisión.

2.- Según su normotipo o referente que se tome para evaluar.

__________________________________________________________________
Maestre Ediciones - 16 -
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

 Nomotética: utiliza un referente externo y dependiendo del mismo, a su vez,

puede ser:

 Normativa: si el referente se sitúa en el grupo (dentro del colectivo objeto

de intervención, por ejemplo).

 Criterial: si se realiza mediante criterios marcados de antemano.

 Idiográfica: si utiliza un referente interno.

3.- Por la procedencia de los agentes evaluadores: evaluación interna, externa y

mixta, que anteriormente se han descrito.

4.- Según la naturaleza de lo que se evalúa:

 Evaluación de las necesidades: se corresponde con el diagnóstico de la

situación-problema.

 Evaluación del diseño: se aplica inmediatamente después de formulado un

proyecto.

 Evaluación del desempeño: mide la forma en que se está comportando un

proyecto.

 Evaluación del impacto: mide las consecuencias no previstas en los objetivos,

más allá de la población a la que va dirigido

También podemos añadir otra clasificación atendiendo a la finalidad que persigue la

evaluación:

 Evaluación proactiva: cuando lo que se pretende es tomar decisiones sobre el

programa para su mejora.

 Evaluación retroactiva: lo que se pretende es la contabilidad del programa y

su justificación.

__________________________________________________________________
Maestre Ediciones - 17 -
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

2.2. Técnicas e instrumentos de evaluación: clasificación.1

En este apartado se va a hablar sobre las técnicas, que son los procedimientos

concretos de actuación que cabe utilizar para llevar a efecto los tres momentos

esenciales del método: observación, clasificación y análisis.

Las técnicas a utilizar en cualquiera de los tres momentos descritos deben haberse

previsto con tiempo, en el diseño realizado sobre la investigación que se va a llevar a

cabo.

De la elección de las técnicas saldrá cuáles van a ser las herramientas o instrumentos

que se van a utilizar para la recogida de datos y el análisis.

Vamos a ver qué criterios de selección de técnicas de recogida de datos se pueden

manejar:

a) La mejor técnica no es la más compleja, sino la más apropiada según lo que

se investiga.

b) Debe facilitar el contraste de datos.

c) Conviene utilizar técnicas diversas que equilibren lo cuantitativo y lo

cualitativo.

d) En el enfoque cualitativo interesan técnicas que permitan el contacto

directo con los destinatarios.

e) Finalmente, es conveniente sopesar la utilidad y el coste de las técnicas,

buscando compatibilidad entre eficacia y eficiencia.

También hay que tener en cuenta qué condiciones esenciales deben verificar las

técnicas para ser consideradas científicas:

1
Ya tratado en el tema 2.

__________________________________________________________________
Maestre Ediciones - 18 -
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

 Fiabilidad: proporciona datos comparables cuando se repite su aplicación, es

decir, el grado en que las respuestas dadas a una prueba son independientes de

las circunstancias accidentales de la investigación.

 Validez: si mide lo que realmente dice medir. Hay validez si en una prueba la

respuesta se interpreta de forma correcta.

La validez puede medirse mediante:

- La triangulación: control cruzado entre diferentes fuentes de datos.

- La saturación: revisar el proceso y repetir el estudio para comprobar si los

datos se mantienen.

- Validación: contrastar los resultados obtenidos por un observador o

investigador con los obtenidos por otras personas, que directa o

indirectamente están implicadas en la investigación.

La fiabilidad es una característica fácil de comprobar en las técnicas cuantitativas, no

así en las cualitativas, donde será su grado de validez lo que aporte la fiabilidad.

A) Técnicas de recogida de datos.

Se pueden distinguir entre dos grandes bloques:

 Técnicas cuantitativas:

Recogen los datos de la observación realizada de manera que implica en sí misma la

clasificación y codificación numérica de esos datos. Por ejemplo, la encuesta, las

entrevistas con cuestionarios, etc.

Son propias de la observación indirecta.

 Técnicas cualitativas:

__________________________________________________________________
Maestre Ediciones - 19 -
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

Recogen datos tal cual son los fenómenos sociales observados, dado que los datos no

son cuantificables. En los grupos de discusión, las entrevistas abiertas, etc.

Son propias de la observación directa.

Otra forma de clasificar las técnicas de recogida de datos es según de lo que

informan:

1. Distributivas: referencian el nivel de elementos o individuos. Un ejemplo es

la encuesta estadística.

2. Estructurales: hacen referencia al nivel de las relaciones entre elementos.

Ej. el grupo de discusión.

3. Dialécticas: referencian el nivel de las relaciones entre las relaciones -no

analizan sólo lo que se dice sino también lo que se hace-. Como por ejemplo el

socioanálisis.

4. Integrales: se centran en el análisis global de una situación específica: la

observación participante, las historias de vida, etc.

B) Técnicas de análisis.

Una vez aplicadas las técnicas e instrumentos de recogida de datos para llevar a cabo

la evaluación, y después de clasificados, tenemos que plantearnos cómo vamos a

realizar el análisis de esos datos, que constituye el tercer y último momento de la

investigación e implica trabajar con ellos, recopilarlos, organizarlos en unidades

manejables y descubrir qué es importante.

El análisis se trata, por tanto, de una operación importante que remata y culmina todo

el proceso de investigación.

Ahora bien, a la hora de proceder a la evaluación de los datos nos podemos encontrar

con dos problemas fundamentales:

__________________________________________________________________
Maestre Ediciones - 20 -
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

 Abundancia de datos: para hacer frente a este problema se puede

recurrir al análisis arbóreo que permite una síntesis progresiva a fin de tener

una visión global de todos los datos recogidos.

 Heterogeneidad de la información: con el fin de evitar visiones y

análisis sesgados o distorsionados de la realidad, que cada persona o grupo

pueda realizar, se recurre a la triangulación multimodal.

La triangulación

Se entiende por triangulación un proceso que posibilita la contemplación reflexiva de

la realidad desde tres vertientes diferenciadas.

Pueden realizarse diferentes tipos:

1) Triangulación de métodos:

Una vez realizados los informes de la observación, entrevistas y

contestaciones a cuestionarios, el evaluador debe contrastar las diferencias en

la descripción y valoración de la realidad, efectuadas a través de los distintos

métodos.

En este contraste aparecerán discrepancias, contradicciones, omisiones

significativas, que necesitarán un análisis más complejo y fiable de la realidad.

De la triangulación de métodos surgirá un nuevo informe que podrá ser

sometido al análisis posterior de las diferentes personas o grupos con quienes

interese trabajar.

2) Triangulación de las personas:

Se trata de contrastar los puntos de vista de las personas de la exploración,

de los grupos o miembros del contexto social determinado.

__________________________________________________________________
Maestre Ediciones - 21 -
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

3) Triangulación de momentos o temporal:

Un hecho grupal, un acontecimiento en el contexto social, puede ser explorado

desde 3 ángulos temporales.

Antes -----durante-----después

Son tres momentos que permiten contemplar un fenómeno desde ópticas

complementarias.

4) Triangulación de expertos:

Una vez redactado el informe obtenido, a través de las triangulaciones

metodológicas y personales, el resultado se somete al análisis contrastado de

expertos formado por:

o 1 persona del equipo evaluador.

o 1 experto ajeno al proceso de evaluación.

o 1 miembro del grupo o del contexto.

El resultado de la triangulación será un nuevo informe en el que se incorporan las

sugerencias aportadas por el grupo de análisis.

2.3. Descripción de algunas técnicas de recogida de datos y pautas de

aplicación.

1) La observación:

La realización de la observación implica los siguientes elementos:

Sujeto --- Estímulo --- Objeto --- Respuesta --- Percepción --- Registro

__________________________________________________________________
Maestre Ediciones - 22 -
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

La observación se puede clasificar en:

 Observación directa: por medio de los sentidos, especialmente la vista, con o

sin ayuda de instrumentos técnicos, de hechos o realidades sociales presentes, que

supone que se planifique con antelación y se haga con sistematización y, previniendo si

fuera necesario, medios que confirmen su validez (por ej. contrastación de

resultados).

Si estos hechos se producen de forma natural y espontánea estamos ante la

observación simple. Pero si su efectividad es provocada artificialmente por el

observador, o si existe una cierta preparación y control del fenómeno observado, se

trata de observación experimental.

Dentro de la observación directa simple:

o Cabe distinguir la observación directa participante de la no

participante, según el observador se mezcle con el grupo observado y

participe en sus actividades o no.

o La observación directa simple se mueve en una línea que va de mayor a

menor sistematización, según se utilice técnicas e instrumentos que

supongan mayor o menor sistematización en la recogida de datos. Entre las

de mayor sistematización se encuentran la observación realizada con listas

de datos, que acotan el campo de la observación, o las notas de campo,

donde el campo de observación es tan amplio como quiera el observador.

 Observación indirecta: por medio de documentos (observación documental) o

cuestionarios, entrevistas, escalas (observación mediante encuesta), que en todos los

casos no recogen los fenómenos sociales directamente a través de los sentidos del

__________________________________________________________________
Maestre Ediciones - 23 -
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

observador, sino a través de manifestaciones de los sujetos que forman la realidad

social determinada.

2) Historia de vida:

La historia de vida nos permite obtener un relato completo de los hechos que

secuencian la vida de las personas con el fin de obtener un perfil de la misma a lo largo

del tiempo. La metodología que se utiliza se fundamenta en que el investigador

interviene directamente en el relato formulando preguntas y recogiendo en notas los

datos significativos.

3) Bibliografía:

Recoge los datos sobre la vida de una persona en un determinado contexto.

Proporciona a la investigación social un relato vivo del desarrollo de la persona dentro

de un contexto social concreto.

4) Autobiografía:

Consiste en la narración de una persona acerca de sus experiencias y vivencias. El

relato autobiográfico presupone cierta proyección hacia el pasado.

5) Anecdotario o incidente crítico:

Consiste en un registro de lo que se ve u oye sin hacer ningún enunciado interpretativo

sobre lo que se está registrando. Es un relato descriptivo de episodios o anécdotas

significativas vinculadas a algún aspecto de la conducta de la persona o grupo

observado.

6) Notas de campo:

Son similares a los registros anecdóticos pero incluyen además impresiones o

interpretaciones subjetivas que pueden utilizarse para una investigación posterior.

__________________________________________________________________
Maestre Ediciones - 24 -
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

7) Muestreo de tiempo:

Son descripciones narrativas de conductas o sucesos. La esencia de las muestras de

tiempo radica en que la observación es intermitente, no continua.

8) Entrevista:

Es un método de recogida de datos y de descubrimiento mediante un proceso de un

hábil interrogatorio. Puede desempeñar diferentes funciones: obtener información,

influir sobre ciertos aspectos de la conducta, ejercer un efecto terapéutico, etc. La

entrevista puede ser:

- Estructurada: cuando las preguntas se formulan en el mismo orden y en los

mismos términos.

- No estructurada: cuando deja iniciativa a la persona entrevistada.

9) Cuestionarios:

Son repertorios de preguntas formuladas por escrito, generalmente en forma de test,

referidas a datos personales, opiniones, intereses, etc. Deben formularse de forma

clara y garantizar el anonimato.

10) Grupos de discusión:

La técnica consiste en discutir sobre un tema y después analizar el discurso. Se

obtiene información con un nivel mayor de profundización al detectar necesidades o

problemas con distintos colectivos implicados y para conocer el discurso social

latente.

11) Medidas no intrusivas:

__________________________________________________________________
Maestre Ediciones - 25 -
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

Se le llama medida no intrusiva a cualquier manera de recopilar información sin que

suponga intervenir directamente. Pueden utilizarse con apoyo de otras técnicas y

normalmente no suponen un esfuerzo grande adicional. Por ejemplo: número de

personas que acudan a una institución demandando un servicio diariamente.

3. METODOLOGÍA DE LA INVESTIGACIÓN-ACCIÓN.

3.1. Concepto y objetivos de la Investigación-Acción-Participativa

(IAP).

La Investigación-Acción-Participativa es una manera particular de análisis de la

realidad (investigación inicial), es decir, de una investigación social instrumental para

la acción social, pues frente a otros estudios cuya finalidad es el conocimiento de la

realidad en sí misma, aquí la finalidad es que dicha información sirva para actuar en la

realidad desde el primer momento que se toma contacto con ella.

El término Investigación-acción fue utilizado por Kurt Lewin para descubrir aquellas

investigaciones tendentes a transformar la realidad desde los comportamientos, las

costumbres, hasta incluso, modificar reglas institucionales.

En la IAP, el conocimiento objetivo de la realidad que pretende no es un fin sino un

medio:

- Para la acción.

- Para transformar el medio en que vivimos.

- Construido con la participación de los propios interesados.

- Inteligible para el colectivo que se estudia. Accesible a la comunidad que

genera la información.

__________________________________________________________________
Maestre Ediciones - 26 -
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

- Supone una puesta en marcha de la comunidad o colectivo, un acercamiento

crítico de los grupos a su propia realidad.

- Es un tipo de investigación crítico de los grupos a su propia creatividad, donde

sea posible diseñar el tipo de realidad que se pretende vivir.

Los objetivos que persigue la IAP, según Paloma López Ceballos, son

fundamentalmente tres:

1. Ligar la investigación a la acción: la acción aparece en primer lugar y se

encuentra de nuevo en la incógnita que hay que resolver, las hipótesis

seleccionadas, etc.

2. Asegurar la coherencia, de tal manera que cada uno de los términos debe

determinarse en función de los otros.

3. Lograr un esquema de investigación sencillo, utilizable por grupos de base.

Todos los grupos consiguen en una o más asambleas determinar una acción para la

cual necesitan una investigación.

3.2. Metodología de la IAP.

Cuando se realiza una IAP se determina con los colectivos lo que se quiere hacer

descubriendo “entre todos” la percepción de los problemas, elaborando códigos para lo

que surge, descodificando esos códigos y recodificando alternativas y soluciones

creativas.

Pero esto siempre se tiene que hacer siguiendo un esquema de base de

estructuración metodológica que aporte sistematización y control al proceso. Según

López Ceballos, es el siguiente:

1. Acción: finalidad que se desea alcanzar.

__________________________________________________________________
Maestre Ediciones - 27 -
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

2. Pregunta: incógnita fundamental para seguir la acción.

3. El tercer paso estará integrado por:

a) Hipótesis: intento de respuesta a la pregunta, es decir,

suposición de un dato que todavía no está probado y en el que se basa

en razonamiento.

b) Variables: factores que hacen cambiar la respuesta a la

pregunta.

4. Indicadores: datos que hay que verificar para invalidar o confirmar las

hipótesis y responder a las preguntas.

5. Instrumentación: medios teóricos y prácticos para estudiar y

medir los indicadores.

6. Teoría: organización de los conceptos de base que determinan la

orientación de la investigación.

Por tanto, la metodología de la IAP se basa en que el proceso y la manera de

abordarlo es en espiral y continuo, de modo que se fundamenta en la acción-reflexión

y acción y vuelta a la acción para ir profundizando cada vez más en los niveles de

reflexión, hasta lograr un grado de concientización y de acción para la transformación.

Las fases que conforman este proceso son:

FASE 1ª: ANÁLISIS Y REFLEXIÓN TEÓRICA.

En ella es necesario realizar una reseña histórica porque no hay realidad sin historia y

para que los sujetos de la acción conozcan cómo ha evolucionado la institución, cómo se

han transformado las ideas, las costumbres, valores, etc.

FASE 2ª. ACERCAMIENTO A LA REALIDAD.

__________________________________________________________________
Maestre Ediciones - 28 -
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

Este acercamiento se realiza con el fin de obtener la información, organizarla y

sistematizarla.

FASE 3ª. ACCIÓN.

Se inicia la acción mediante:

a) Un proceso de sensibilización, a través de contactos, reuniones de

información, etc.

b) Una devolución sistemática o retorno de la información obtenida al

grupo mediante la técnica de la asamblea.

FASE 4ª. ACCIÓN REFLEXIÓN

Acción Reflexión Devolución

sistemática

Replanificación

4. EVALUACIÓN EN OCIO Y TIEMPO LIBRE.

La evaluación de proyectos de ocio y tiempo libre plantea una serie de

especialidades respecto al resto de proyectos de la ASC; esto es así porque las

actividades de ocio y tiempo libre requieren que cumplan con los requisitos de

autonomía, autotelismo y placer, que suponen que el objetivo del proyecto de ocio y

tiempo libre radique en la misma actividad y no en el desarrollo del proyecto en su

conjunto.

__________________________________________________________________
Maestre Ediciones - 29 -
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

Para ello, la evaluación ha de ser fundamentalmente formativa y estar recorriendo

todo el proceso con el fin de retroalimentarlo y poder introducir medidas de

retroalimentación en cualquier momento en que se detecte que las actividades no

cumplen los objetivos previstos.

Como indicadores de que se están produciendo algunas dificultades en la educación

para el tiempo libre podemos encontrar:

a) El dirigismo: el dirigismo se opone al clima de libertad inherente al ocio.

La sociedad está haciendo una manipulación cada vez mayor del tiempo libre, de

forma que el hacer algo por sí mismo está dejando paso al dejarse hacer; esto

hace que en ocasiones se confunda el simple asesoramiento con la imposición.

Por ello, frente a esta postura, la pedagogía del ocio ha de saber crear un

ambiente de libertad e independencia siempre de acuerdo con la edad del

educando.

b) El utilitarismo: según una concepción utilitarista las actividades de

tiempo libre han de ser algo útil y aprovechable.

La pedagogía debe hacer ver la importancia de lo lúdico, la plenitud de lo

artístico, la vivencia de lo bello y la felicidad ante el bienestar desinteresado.

c) La excesiva planificación y organización del tiempo libre: dificultad que

está muy relacionada con la pretensión anterior de “aprovechar el tiempo”. Por

ello, cualquier criterio pedagógico del tiempo libre ha de respetar y robustecer

la propia iniciativa del individuo, por lo que el tiempo libre debe actuar como

compensación y equilibrio frente a las insuficiencias, fracasos y debilidades de la

vida ordinaria.

__________________________________________________________________
Maestre Ediciones - 30 -
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

El individuo ha de sentirse feliz haciendo aquello que le guste, por lo que la

educación del tiempo libre creará situaciones donde sea posible tanto la acción

como la contemplación.

Como criterios de evaluación de proyectos de ocio y tiempo libre siempre deben estar

presentes las tres “D” de la pedagogía del ocio de Dumazedier:

 Descanso: las actividades deben permitir que el sujeto se relaje tanto

física como mentalmente.

 Diversión: las actividades deben estar enfocadas hacia el placer por la

realización de las mismas, evasión de los problemas cotidianos y liberación

de tensiones.

 Desarrollo: como referencia de orden claramente educativo subrayando la

importancia de la educación integral del hombre, tanto en sus aspectos

éticos (recreación y creación) como físicos (salud corporal).

Además se deben tener en cuenta a la hora de evaluar las actividades las siguientes

características:

a) Libertad: que no hayan sido impuestas.

b) Satisfacción: que hagan a los destinatarios sentirse satisfechos

personalmente.

c) Formativa: que le estén proporcionando enriquecimiento.

__________________________________________________________________
Maestre Ediciones - 31 -
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

Finalmente, la evaluación de proyectos de ocio y tiempo libre se realizará globalmente

atendiendo a los aspectos organizativos del proyecto de ocio y tiempo libre, en el que

someterán a evaluación:

a) El espacio: más adecuado para la actividad programada. Deben ser espacios

amplios y seguros y que no favorezcan la dispersión.

b) Los materiales: deben responder a las necesidades del juego o actividad. Es

importante la educación en el orden y respeto al material.

c) Tiempo de duración de la actividad: es importante que la actividad se inicie y

termine en el mismo bloque de tiempo, sin interrupciones, para evitar la

desmotivación hacia ella.

d) La formación de grupos: es un momento idóneo para trabajar la integración y

solidaridad, favoreciendo que acepten y participen con otros que no son de su

grupo espontáneo.

CONCLUSIONES.

La conciencia de la necesidad de la evaluación en procesos de intervención

social y educativa, y sobre todo, el desarrollo de la misma, son fenómenos

relativamente nuevos en España. En la actualidad se podría decir que existe ya el

discurso de la necesidad, sin embargo, queda en una mera declaración de intenciones,

ya que no se corresponde con su ejecución.

La tendencia actual es que los programas se sometan a procesos de evaluación, tanto

interna como externa, con una finalidad tanto formativa como sumativa.

__________________________________________________________________
Maestre Ediciones - 32 -
 TEMARIO F.P. SERVICIOS A LA COMUNIDAD

BIBLIOGRAFÍA

ALVIRA MARTÍN, F. (1991): Metodología de la evaluación de programas. CIS, Madrid.

ESPINOZA VERGARA, M. (1983): Evaluación de proyectos sociales. Ed. Humanitas,

Buenos Aires.

PÉREZ YUSTE y GARCÍA RAMOS, J.M (1989): Diagnóstico, evaluación y toma de

decisiones. Rialp, Madrid.

__________________________________________________________________
Maestre Ediciones - 33 -