Osvaldo feinstein Evaluacin pragmtica de las polticas pblicas.
-la evaluacin pragmtica de polticas pblicas no se limita a preconizar la utilizacin de un solo mtodo o enfoque; rechaza el fundamentalismo metodolgico buscando, en cambio, el mtodo adecuado las circunstancias, alinendose con el principio del rigor apropiado. Tambin es pragmtica por que enfatiza el uso de la evaluacin, sin darlo por descontado y adoptando un papel activo para promover la difusin y aplicacin de las evaluaciones de polticas pblicas.
Conclusiones: La evaluacin bien realizada y adecuadamente utilizada permite aprender de las experiencias, extrayendo lecciones sobre las polticas que han funcionado bien y las que han fallado, y las razones de xitos y fracasos, propios y ajenos.
Los criterios de evaluacin (relevancia, efectividad y eficiencia, y algunos otros como equidad, que pueden incluirse en funcin de las demandas de los polticos) permiten considerar sistemticamente (y extraer lecciones de diversos tipos de polticas pblicas. Dado que las polticas pblicas que se evalan se implementan en un contexto complejo en el que operan mltiples factores, es importante evitar un enfoque ingenuo de la atribucin que no reconoce la existencia de otros factores que no sea la propia poltica pblica que se evala. Para las polticas pblicas en la que los grupos de control o comparacin sean factibles, es recomendable realizar evaluaciones utilizando dichos grupos de control. Cuando no sea factible utilizar grupos de control, es importante considerar hiptesis rivales plausibles, y utilizar evidencias para determinar cul es la hiptesis ms solida, es importante complementar evaluaciones de resultados con evaluaciones de procesos. Con el propsito de hacer frente a la falta de fondos para las evaluaciones, es til considerar la creacin de un fondo para evaluaciones que puede contribuirse con un pequeo porcentaje del total de fondos dedicados a polticas y programas pblicos. La formacin en evaluacin puede complementarse mediante la creacin de oportunidades para el aprendizaje haciendo, viabilizadas por un programa de becas para tesis y tesinas sobre evaluacin.
Es importante desarrollar un enfoque metodolgico pragmtico, utilizando diferentes mtodos para realizar las evaluaciones en funcin de los tipos de polticas pblicas y de la informacin disponible. Los evaluadores y los gestores de las evaluaciones deben ocuparse no solamente de la produccin sin no ambiente la postproduccin de evaluaciones. Los incentivos principales para que las evaluaciones sirvan como instrumento de aprendizaje estn dados por la demanda de evaluacin que hagan los polticos y la poblacin.
PROPOSITOS PRINCIPALES DE LA EVALUACION Existen dos: 1.-Evaluacion formativa: para aprender de la experiencia, extrayendo lecciones que puedan aplicarse con el fin de mejorar el diseo y la implementacin de polticas pblicas (y/o programas y proyectos). 2.- evaluacin sumativa: formulacin de juicio de valor sobre lo evaluado; para la rendicin de cuentas al pblico y/o a quienes han aportado los recursos utilizados, y en algunos casos al parlamento.
*SEGN EL MOMENTO EN QUE SE REALIZAB LAS EVALUACIONES (suelen utilizarse para aportar elementos de juicio a la hora de decidir sobre la continuacin de una poltica) 1.- evaluacin ex ante: corresponde al proceso de diseo de las polticas pblicas (u otras intervenciones), y que consiste en una consideracin de la relevancia o pertinencia de la intervencin y de una estimacin de sus posibles efectos. 2.- evaluacin ex- post: las evaluaciones se hacen despus de la fecha de terminacin de una poltica pblica. 3.- evaluacin intermedia: tiene lugar despus del inicio de la implementacin pero antes de su conclusin.
DISEO DE POLITICAS PBLICAS CON BASE EN EVIDENCIAS. *la evaluacin como fuente de evidencia: ni toda la evidencia surge de las evaluaciones, ni toda evaluacin genera evidencias.
La evidencia no es la nica base sobre la cual se disean polticas pblicas, si bien son un insumo importante, existen factores polticos que tambin tienen una fuerte influencia en el proceso de diseo. *LA EVALUACION PERMITE APRENDER DE LA EXPERIENCIA EXTRAYENDO LECCIONES SOBRE QUE HA FUNCIONADO BIEN Y LO QUE HA FALLADO. Hay diferentes tipos de evaluaciones (segn criterio de logros de objetivos) Evaluacin de procesos: focaliza la atencin en los mecanismos en instrumentos a travs de los cuales se ha intentado alcanzar determinados objetivos. Evaluacin de impacto: que se centran en los resultados ltimos de las polticas pblicas. En el mundo real las polticas no siempre pueden implementarse conforme a las intenciones, y los planes no siempre se cumplen. O se cumplen parcialmente.
No es posible determinar de modo inequvoco cual ha sido el efecto atribuible a determinadas intervenciones, y por ello es importante complementar el anlisis de impacto con el anlisis de proceso. La evaluacin lleva a considerar sistemticamente varios factores, los cuales a veces se presentan como , principios o criterios de evaluacin :
RELEVANCIA: de una intervencin, se establece relacionando sus objetivos con la estrategia del pas, sector organizacin o instituciones que haya diseado dicha intervencin. -EFICACIA: o efectividad, es el grado en el que se alcanzan los objetivos de una intervencin / el juicio acerca de la eficiencia incluye la sostenibilidad de los resultados en las intervenciones. -EFICIENCIA: relacin costo- beneficio. El uso optimo de los recursos.
*la relacin entre relevancia, eficacia y eficiencia: La RELEVANCIA examina los objetivos a la luz de la estrategia, la EFICACIA corresponde al grado de logro de los objetivos, y la EFIC IENCIA es la relacin entre los niveles de logros alcanzados y los recursos utilizados.
ATRIBUCION *varios factores que operan simultneamente; existe mltiples causas y no causas nicas.
Se sostiene que, en lugar de ocuparse y preocuparse en la atribucin de resultados a determinadas intervenciones, lo importante es establecer la contribucin de determinada intervencin a los resultados,
Como abordarlo? Una forma de hacerlos es a traves de grupos de control. De un diseo de la evaluacin que permita establecer comparaciones entre dos grupos. El de aquellos que han sido objeto de la intervencin y otros cuyos integrantes difieren de primero solo en que no han sido afectados por la intervencin.
En algunos casos y para cierto tipo de intervenciones, es posible y conveniente realizar una evaluacin con grupos de control.
Cundo la implementacin se realiza usando procedimientos aleatorios, para racionalizar recursos limitados, las condiciones son particularmente propicias para realizar evaluacin de grupo de control
Este tipo de evaluaciones no es factible en el caso de evaluacin de polticas globales m como una poltica monetaria, o en el caso de los programas nacionales en los cuales toda la poblacin sea objetivo del tratamiento y la estrategia de implementacin.
Las evaluaciones de procesos pueden complementar las evaluaciones de resultados
FORMAS DE CONCEBIR LAS POLITICAS PBLICAS. TRATAMIENTOS: cuya unidad de referencia son programas o proyectos. La literatura sobre los efectos de tratamiento, investiga una clase de intervenciones con cobertura parcial (que no incluyen a toda la poblacin), o sea que no son universales .de modo tal que hay
un grupo de tratamiento y otro de control, y se reconoce que no es til para evaluar intervenciones aplicadas universalmente en una sociedad.
-INTERVENCIONES: plantean marco normativo La poltica podra fracasar aun si los programas y proyectos con ella relacionados hubieran sido exitosos, pues sucede a veces que los programas y proyectos alcanzan sus objetivos de modo eficiente , y dichos objetivos son relevantes , pero algunos de los aspectos del marco normativo que son constituye la poltica en cuestin ,pueden no haberse concretado en los absoluto. -para evaluar las polticas pblicas es importante primero aclarar su marco orientativo o normativo. Adems de aplicar los criterios de evaluacin tpicos (relevancia, eficiencia y eficacia) tambin es til cuando se evalan polticas pblicas considerar su efecto sobre los incentivos que generan. DIFICULTADES MAS IMPORTANTES PARA QUE LA EVALUACION SE CONSTITUYA EN UN INSTRUMENTO DE APRENDIZAJE : 1. Falta de fondos: 2. Capacidades limitadas: brecha entre la demanda de instituciones y expertos en evaluacin y la oferta existente. 3. Cuestiones metodolgicas: prcticamente todos los mtodos tienen limitaciones y es importante desarrollar un enfoque pragmtico, empleando diferentes mtodos. 4. Falta de incentivos: la evaluacin suele ser percibida como una amenaza. Esto se ha llevado a que en algunos casos se reemplace el trmino evaluacin por el de revisin lo que no resuelve el problema. La dificultad tiene que ver, en parte con el uso anticipado de la rendicin de cuentas. una perspectiva alternativa tiene que tiene ms sentido es q1ue la funcin de rendicin de cuentas complementa el papel de la evaluacin como instrumento de aprendizaje, ya que la rendicin de cuentas puede constituirse en un incentivo para aprender puesto que se trata tambin de rendir cuentas del aprendizaje realizado.
