Tarea 4 Mdulo 4
1.1 Concepto de evaluacin
Instrumento o herramienta que permite tener informacin que debe conocer
aquel que debe decidir o no realizar una inversin. Creo que este concepto no
se relaciona mucho con tu proyecto, este tipo de definicin es mas bien para un
trabajo de tipo diagnostico
1.2 Tipo de evaluacin:
La Evaluacin ser tanto Cuantitativa como Cualitativa, con aspectos de ambos
tipos.
La evaluacin consistir en un anlisis principalmente cualitativo con algunos
elementos cuantitativos sobre tres criterios de evaluacin; diseo, proceso y
resultados.
1.3 Fundamentos de la propuesta de evaluacin
Las evaluaciones finales son de naturaleza recapitulativa y tienen por objeto:
Establecer en qu medida el PMSAS ha ejecutado plenamente sus actividades,
obtenido los resultados y entregado los productos, en particular midiendo los
resultados para el desarrollo.
Generar conocimientos empricos sustantivos sobre proyectos con el Banco
Mundial, o ms, identificando las mejores prcticas y la experiencia adquirida
que podra ser til para otras intervenciones de desarrollo a nivel nacional
(aumento de escala) y a nivel internacional (duplicacin).
1.4 Objetivos de la evaluacin
a. Objetivos de la evaluacin En la Estrategia de Seguimiento y Evaluacin
Aprender para mejorar (no queda claro si la evaluacin que vas a realizar es
un diagnostico (definicin), una evaluacin final (punto 1.3.) o una evaluacin
de seguimiento.
b. Existen otros objetivos como el fortalecimiento institucional,
empoderamiento del gobierno, articulacin de la cooperacin para el desarrollo
Formatted: Highlight
(Declaracin de Paris). Los ODM no engloban todos los objetivos de desarrollo,
solo se refieren a objetivos especficamente medibles y priorizados. Por
ejemplo, el acceso al agua ODM 7 se limita a Reducir a la mitad para 2015 la
proporcin de personas sin acceso sostenible al agua potable. (es el objetivo
de la evaluacin o del proyecto?)
Los objetivos especficos son:
1. Medir el grado en que el PMSAS ha contribuido a abordar las necesidades y
los problemas determinados en el anlisis inicial articulado en la fase de diseo
de la propuesta presentada en el documento del proyecto.
2. Medir el grado de ejecucin, eficiencia y calidad de los resultados obtenidos
y productos entregados por el PMSAS respecto de los planificados inicialmente
o las revisiones oficiales posteriores.
3. Medir el alcance de los impactos y efectos positivos del PMSAS en las vidas
de la poblacin destinataria, las y los titulares de derechos y participantes
previstos, ya sea particulares, comunidades o instituciones, segn los
propsitos del PMSAS.
4. Medir la contribucin del PMSAS a los objetivos establecidos
5. Detectar y documentar la experiencia sustantiva adquirida y las mejores
prcticas en relacin con los temas concretos, los ODM, con el objeto de
justificar la sostenibilidad del PMSAS o de algunos de sus componentes.
1.5. Objetivos:
El Objetivo de Desarrollo del Proyecto (ODP) es incrementar la eficiencia, co
bertura y sostenibilidad de los servicios de provisin de agua y saneamiento en
el Paraguay al (a) mejorar la gobernabilidad del sector, (b) mejorar los servicios
de agua e incrementar el acceso a los servicios de alcantarillado sanitario en el
rea metropolitana de Asuncin e (c) incrementar el acceso a los servicios
sostenibles de agua y saneamiento en las reas rurales. Los objetivos del
proyecto determinan temas que debemos tener en cuenta en el momento de
disear la evaluacin
1.6. Tipo de iniciativa:
Formatted: Highlight
Formatted: Highlight
Formatted: Highlight
Iniciativa publica: El Gobierno de Paraguay est interesado en poner en
marcha una estrategia de modernizacin para el sector y en mejorar la
cobertura de servicio de una forma sostenible. Se espera que los principales
elementos de este proceso de modernizacin sean: (a) definicin de la
estructura de mercado de ESSAP, favoreciendo la creacin de unidades
comerciales sostenibles a nivel regional; (b) fortalecimiento del sector financiero
a travs de una mayor eficiencia y polticas claras para el uso de recursos y
subsidios pblicos y (c) el fortalecimiento de los marcos regulatorio,
institucional y legal a la vez que se abre la posibilidad de introducir
asociaciones con el sector privado local para aumentar la eficiencia operativa y
comercial. Se espera que este proceso genere un ambiente adecuado para la
inversin sostenible en el sector con el objeto de incrementar en forma
significativa el acceso a los servicios de Agua y Saneamiento en el Paraguay.
(estos puntos son los productos que debes evaluar)
1.7. Marco Conceptual:
El proyecto propuesto apoya los siguientes pilares de la Estrategia de
Asistencia para el Pas : (a) mejorar la gobernabilidad y transparencia en la
administracin pblica al reformar la empresa de servicios sanitarios (ESSAP),
mejorar la rendicin de cuentas y la eficiencia y establecer una disciplina
financiera y fortalecer a otros actores del sector como SENASA y ERSSAN y
(b) promover la inclusin social e incrementar la cobertura y mejorar la
eficiencia de los servicios sociales bsicos para coadyuvar a que Paraguay
cumpla con los Objetivos de desarrollo del milenio (ODM) a travs de la
modernizacin del sector, lo cual crear al ambiente propicio para las
inversiones sostenibles en agua y saneamiento en las reas urbanas y rurales
del Paraguay. El actual gobierno tambin ha identificado al proyecto como una
prioridad para apoyar a su Estrategia de Reduccin de la Pobreza y as se
espera que sea una prioridad dentro de la estrategia de trabajo del Banco con
el Paraguay. Adems, en el paquete que el Gobierno del Paraguay est
preparando como respuesta a la crisis financiera global se incluye este
Proyecto, el cual se present al Congreso en Abril de 2009. El Banco es una de
las pocas instituciones financieras que est involucrada activamente en el
sector. Desde la dcada de 1970, el Banco Internacional de Reconstruccin y
Fomento (BIRF) ha finan- ciado proyectos rurales dedicados al Sector de Agua
y Saneamiento en Paraguay y est en una posicin nica para apoyar el
programa del Gobierno del Paraguay. Primero, el Banco es un socio natural,
dadas las conexiones del proyecto con el recientemente cerrado Cuarto
Proyecto Rural de Suministro de Agua y Saneamiento (BIRF IV) y el apoyo del
Banco a auditoras in- dependientes de ESSAP y a la asistencia tcnica
provista para el desarrollo de un plan de negocios para ESSAP. Segundo, el
Banco est bien posicionado para responder rpidamente al pedido del
Gobierno Paraguayo en el apoyo a la puesta en marcha del proceso de
modernizacin, proporcionado consejo tcnico y credibilidad a cualesquiera de
los potenciales socios privados. Tercero, el Proyecto est en consonancia con
el futuro Prstamo de Polticas de Desarrollo (PPD), el cual incluye la
modernizacin del estado y un mejor manejo de las em- presas de propiedad
del estado. Cuarto, el Banco goza de la confianza del Gobierno del Paraguay y
tiene poder de convocatoria, dado su continuo y profundo trabajo con el sector
y la flexibilidad de su actual enfoque, como se demostr en el dilogo de alto
nivel sobre poltica del sector en el pas. Finalmente, el nuevo gobierno ha
pedido esta operacin lo ms pronto posible y ha verbalizado su fuerte
compromiso con la asistencia del Banco Mundial en el sector y su aprecio por
el mismo.
Consta el proyecto de 3 componentes:
Componente 1: Apoyo a la modernizacin del sectorgobernabilidad y
fortalecimiento institucional (US$4 millones financiados con un prstamo del
Banco). Este componente est diseado para con- solidar institucionalmente al
sector de PAS a travs de las siguientes acciones: (a) apoyo al MOPC en el
fortalecimiento de la recientemente creada Unidad de los Servicios de Agua
Potable y Alcantarillado Sanitario(Hoy DAPSAN), la cual desempear las
funciones relacionadas con la Agencia Lder del Sector (Titular del Servicio) de
acuerdo con la Ley 1614/00, incluyendo la elaboracin y puesta en marcha de
la planificacin estratgica del sector, definicin de una poltica financiera para
el sector, regularizacin de la provisin de servicios en el pas, vigilancia y
puesta en marcha de la Estrategia de Buena Gobernabilidad para el sector y la
puesta en marcha de un sistema de informacin del sector; (b) fortalecimiento
de ERSSAN para regular eficazmente el sector y (c) apoyo a la Secretara del
Ambiente (SEAM) al fortalecer las Direcciones de Licencia de Recursos de
Agua y Medio Ambiente, clasificando las diferentes cuencas por estndares de
descarga y mejorando el proceso de licenciamiento ambiental para inversiones
en el sector Agua y Saneamiento. Componente 2: Provisin de agua y
saneamiento urbanoy fortalecimiento institucional de ESSAP (US$65,5
millones, de los cuales US$50,5 millones sern financiados con un prstamo
del Banco).
Este componente se enfoca tanto en la modernizacin de ESSAP como en el
financiamiento de inversiones en Agua y Saneamiento que se necesitan con
urgencia a travs de dos sub- componentes: (a) Fortalecimiento institucional y
gobernabilidad corporativa de ESSAP al: (i) poner en marcha las actividades
corporativas de gobernabilidad relacionadas con ESSAP, tales como el
establecimiento de un Directorio, la puesta en marcha de la Estrategia de
Buena Gobernabilidad relacionada a ESSAP, incluyendo actividades de
rendicin de cuentas a nivel social y el fortalecimiento, entre otras cosas, de las
unidades de control interno, auditora y de adquisiciones; (ii) reestructurar
ESSAP a travs del diseo y puesta en marcha de las Unidades de Servicio de
ESSAP S.A. y el mejoramiento de su desempeo operativo y comercial; (iii)
fortalecer la unidad ambiental y social de ESSAP, asegurando la adhesin a
salvaguardas y una adecuada puesta en marcha del Marco de Manejo
Ambiental y Social (MMAS); (iv) apoyo a la estrategia de comunicacin de
ESSAP, incluyendo actividades previstas en la Estrategia de Buena
Gobernabilidad y el MMAS; e (b) inversiones prioritarias en infraestructura de
Agua y Saneamiento entre las que se encuentran: (i) inversiones urgentes que
tiene como meta la reduccin de agua que no es redituable e incremento de la
eficiencia; (ii) rehabilitacin de la infraestructura existente en agua y
alcantarillado sanitario; (iii) expansin priorizada de los sistemas de agua y
alcantarillado sanitario en el rea metropolitana de Asuncin y en el interior y
(iv) expansin de la capacidad de agua potable. Todas las obras seguirn la
metodologa detallada en el MMAS del proyecto. Y se llevarn a cabo despus
de actualizar el Plan Maestro de Alcantarillado Sanitario para el rea
metropolitana de Asuncin, el cual integrar completamente la informacin
bsica tanto ambiental como social y el criterio de evaluacin en la metodologa
total de planificacin. Este estudio proporcionar un anlisis de las alternativas
sobre las cuales el Ministerio de Hacienda, el MOPC y la SEAM priorizarn las
inversiones en el rea metropolitana de Asuncin. Este componente tambin
financiar los diseos finales y las Evaluaciones de Impacto Ambiental
especficas del sitio en obras importantes. Componente 3: Provisin de agua,
saneamiento y educacin en higiene a nivel ruraly fortalecimiento
institucional de ESSAP (US$14 millones, de los cuales US$9,5 millones sern
financiados con un prstamo del Banco). Este componente se sustentar en la
experiencia de proyectos rurales previos de PAS para incrementar y mejorar la
PAS rural, al: (a) fortalecer el Servicio Nacional de Sanea- miento Ambiental
(SENASA) y su gobernabilidad al apoyar el proceso de descentralizacin,
equipamiento y fortalecimiento de sus unidades de manejo ambiental y social.
Tambin incluir la estrategia de comunicacin, mecanismos de rendicin de
cuentas sociales previstos en la Estrategia de Buena Gobernabilidad; (b) mayor
cobertura de Agua y Saneamiento para las comunidades indgenas; (c) mayor
cobertura de Agua y Saneamiento y educacin en higiene en las comunidades
rurales priorizadas de acuerdo con ndices sociales que sern utilizados en el
proceso de consulta de los subproyectos especficos. El proceso de
intervencin social incluir la capacitacin de las juntas en operaciones y
mantenimiento, apoyo a las juntas existentes, a travs del fortalecimiento a las
Asociaciones de Juntas y (d) construccin y/o expansin de servicios en
comunidades rurales utilizando planes mnimos de subsidio. En trminos
generales, como un asunto gua en todos los componentes, el proyecto
buscar promover: (i) la transparencia, a tra- vs de la planificacin y la
programacin de todas las intervenciones basadas en criterios objetivos y
cuantificables; (ii) el desempeo, a travs de la identificacin de metas para
cada intervencin a ser monitoreada y cuya consecucin ser una indicacin
de xito y (iii) la rendicin de cuentas, a travs de la participacin en las
actividades programadas y la publicacin y presentacin de las mismas y los
resultados a los grupos de inters.
1.8. Nombre: Proyecto de Modernizacion del Sector Agua y Saneamiento de la
Repblica del Paraguay (PMSAS) N 7710-PY
Institucin responsable,: hay tres componentes
Componente 1: Unidad del Agua (hoy Dapsan) del MOPC, ERSSAN
(Regulador de A y S) y la SEAM(ambiental)Responsable MOPC,adems del
monitoreo de los otros 2 componentes.
Monto 4millones de U$s
Componente 2:A cargo de la Essap SA Monto 50 millones de U$s .
Componente 3:Senasa con un Monto de 9,5 millones de U$s.
Total 64 millones de Dolares
1.9. Cronograma de la Evaluacin: se prevn 3 meses en total. (faltarian
todas las actividades previas para llegar al informe final, diseo, defincin de
los instrumentos, aplicacin, analisis de los datos) y despus prever una
actividad de socializacion de los resultados
2.0. Recursos necesarios
Informe
Inicial
x x x
Borrador
del
Informe de
Evaluacin
Final
X x X x
Informe de
Evaluacin
Final del
PMSAS
x x x x x
El MOPC como responsable del monitoreo del proyecto ser quien disponga de
los recursos necesarios para llevar a cabo esta evaluacin del PMSAS.
Se estima en 50.000 U$s el costo de esta evaluacin. (precisar el uso de estos
recursos en que rubros necesarios para la evaluacin)
2.1. Diseo de evaluacin
2.2. Fundamentos de la metodologa a aplicar
Los tiempos y recursos establecidos para la evaluacin son limitados pero
suficientes para llevar a cabo un proceso de investigacin riguroso. El enfoque
metodolgico para la evaluacin ser un enfoque mixto donde se vinculara el
trabajo de arribaabajo para analizar la manera como las orientaciones
conceptuales definirn la intervencin de los efectos y sus proyectos. Asimismo
se incluir un anlisis de abajoarriba para verificar que el nivel local haya
concurrido como insumo a los objetivos superiores.
La evaluacin consistir en un anlisis principalmente cualitativo con algunos
elementos cuantitativos sobre tres criterios de evaluacin; diseo, proceso y
resultados del PC. Con el fin de atender las necesidades de informacin la
evaluacin final se bas en mtodos de evaluacin rpida para lo cual se
implementaran instrumentos giles y de bajo costo con el objetivo de obtener
las opiniones y experiencias de los beneficiarios, socios, agencias y otras
partes interesadas.
Falta definir quien realizara la evaluacion y los perfiles de los evaluadores
2.3 IndicadoresCriterios
Indicadores:los indicadores del PMSAS son
1. Pertinencia (no son indicadores son los criterios)
2. Eficiencia
3. Eficacia
4. Implicancia
5. Sostenibilidad
[Link]
El xito del proyecto se medir utilizando los siguientes grupos de indicadores
Unidad de los Servicios de Agua Potable y Alcantarillado Sanitario (hoy
DAPSAN) dentro del MOPC dotada de personal y equipada, definiendo las
polticas del sector. Accesibilidad oportuna a la auditora externa de datos
financieros y de desempeo, publicada a travs del informe anual en la pgina
web de ESSAP. Nmero de beneficiarios adicionales que utilizan los sistemas
de saneamiento en el ao 5 del proyecto, en el rea metropolitana de
Asuncin. Nmero de beneficiarios adicionales que utilizan los sistemas de
agua sostenible en el ao 5 del proyecto, en comunidades rurales identificadas
en el ao 1 del proyecto y los sistemas urbanos se consideraran sostenibles
si (a) los sistemas estn funcionando como se intentaba y entregan los
servicios ya sea en forma continua o regular, dependiendo del nivel de servicio
seleccionado; (b) las tarifas se establecen a un nivel que garantiza la operacin
y el mantenimiento del sistema y se pueden cobrar; (c) los sistemas estn
diseados para asegurar una provisin a largo plazo (adecuadamente
diseados para un rendimiento de la fuente). Los sistemas rurales se
consideran sostenibles si los sistemas cumplen con (a), (b) y (c), y (d) los
comits del agua se renen regularmente. Los sistemas rurales se consideran
sostenibles si los sistemas cumplen con (a), (b) y (c), y (d) los comits del agua
se renen regularmente.
2.4 Instrumentos a utilizar
Cuales son los intrumentos a utilizar: cuestionario, entrevistas, analisis de
documento???
Faltaria disear uno de estos instrumentos
Las preguntas de evaluacin definen la informacin que debe producir el
proceso de evaluacin. Las preguntas se agrupan segn los criterios que se
utilizarn para evaluarlas y responderlas. A su vez, estos criterios se agrupan
segn los tres niveles del programa.
Nivel de diseo: Pertinencia: El grado en que los objetivos de una
intervencin para el desarrollo son coherentes con las necesidades e intereses
de las personas, las necesidades del pas y los Objetivos de Desarrollo del
Milenio.
En qu medida fueron pertinentes el diseo y estrategia de este Proyecto de
Modernizacin del sector Agua y Saneamiento. (Incluyendo pertinencia en
funcin de los ODM, prioridades nacionales, participacin de contrapartes y
apropiacin nacional en el proceso de diseo)?
En qu medida se realizaron conjuntamente el diseo, la ejecucin, la
vigilancia y la evaluacin del PMSAS?Hasta qu punto fue el PMSAS la mejor
opcin para responder a los problemas de desarrollo enunciados en el
documento del proyecto? En qu medida agregaron valor los asociados en la
ejecucin que participaron en el PMSAS para resolver los problemas de
desarrollo enunciados en el documento del Proyecto? Hasta qu punto, y
concretamente cmo, facilit el PMSAS el dilogo directo entre los ciudadanos
y el poder pblico local (gobiernos nacional y locales e instituciones) sobre las
polticas y prcticas relativas a los ODM? En qu medida tuvo el PMSAS una
estrategia de vigilancia y evaluacin til y fiable que contribuyera a lograr
resultados de desarrollo medibles? Hasta qu punto utiliz el PMSAS
mecanismos de promocin, movilizacin social y comunicacin para el
desarrollo a fin de adelantar sus objetivos de poltica? Cont el PMSAS con
una estrategia de promocin y comunicacin til y fiable? En caso de que se
haya modificado el PMSAS, reflej los cambios necesarios? En qu medida
fueron implementadas las recomendaciones de la evaluacin de medio trmino
sobre el diseo del programa?
Nivel de proceso Eficiencia: El grado en que los recursos o insumos (fondos,
tiempo, recursos humanos, etc.) se han traducido en resultados En qu
medida el modelo de gestin del PMSAS (es decir, instrumentos; recursos
econmicos, humanos y tcnicos; estructura institucional; corrientes de
informacin; adopcin de decisiones por la administracin) fue eficiente
respecto de los resultados para el desarrollo obtenidos? Hasta qu punto fue
la ejecucin de una intervencin del PMSAS (grupo de organismos) ms
eficiente respecto de lo que habra sido en caso de la intervencin de un solo
organismo? En qu medida contribuyeron las misiones del Banco Mundial a
la eficiencia y eficacia del PMSAS? Hasta qu punto fueron tiles estas
estructuras de gobernanza para los fines del desarrollo, la implicacin y el
trabajo conjunto como una unidad del sector de Agua y Saneamiento"? En
qu medida y de qu forma aument o redujo el PMSAS la eficiencia en la
obtencin de resultados y la entrega de productos? Qu tipo de metodologas
de trabajo, instrumentos financieros y prcticas institucionales utilizaron los
asociados en la ejecucin para aumentar la eficiencia del PMSAS como "una
Unidad del sector del Agua y saneamiento"? Cul fue el progreso del
programa en trminos financieros (montos comprometidos y ejecutados, total y
por componente, en unidades monetarias y en porcentaje)? En el caso de que
se encontraran grandes discrepancias en el progreso financiero entre agencias,
por favor, analizar y explicar estas diferencias. A qu tipo de obstculos
(administrativos, financieros y de gestin) hizo frente el PMSAS y hasta qu
punto afectaron su eficiencia? En qu medida y de qu forma repercuti el
examen de mitad de perodo en el PMSAS? Fue til? Aplic el PMSAS el
plan de mejora?
Implicacin en el proceso: Ejercicio efectivo de liderazgo por los asociados
nacionales y locales en las intervenciones de desarrollo En qu medida se
apropiaron del PMSAS la poblacin destinataria, los ciudadanos, los
Componentes 1,3 y 3, los participantes y las autoridades locales y nacionales y
se implicaron desempeando un papel activo y eficaz en l? Qu modos de
participacin (liderazgo) impulsaron el proceso? Hasta qu punto y de qu
forma repercuti la implicacin o la falta de esta en la eficiencia y eficacia del
PMSAS?
Nivel de resultados Eficacia: El grado en que se han alcanzado los objetivos
de la intervencin para el desarrollo
Hasta qu punto contribuy el PMSAS al logro de los resultados y productos
del desarrollo previstos inicialmente o enunciados en el documento del
programa? (incluir anlisis detallado de: 1) productos y actividades, 2)
resultados alcanzados). Hasta qu punto y de qu forma contribuy el
PMSAS: Al logro de los Objetivos de Desarrollo del Milenio, a nivel local y
nacional? Al logro de los objetivos establecidos?En qu medida y de qu
forma contribuyeron las recomendaciones de la evaluacin intermedia en el
logro de los resultados esperados? En qu medida tuvieron los resultados y
productos del PMSAS sinergias y coherencia en la obtencin de resultados
para el desarrollo? Qu tipos de resultados se obtuvieron? Hasta qu punto
tuvo el PMSAS efectos en los ciudadanos destinatarios? Se han
determinado buenas prcticas, casos de xito, experiencia adquirida o
ejemplos que pueden duplicarse? Srvase describirlos y documentarlos. Qu
tipos de efectos diferenciados est produciendo el Programa Conjunto segn el
gnero, la raza, el grupo tnico, o el entorno rural o urbano de la poblacin
beneficiaria, y en qu medida? Hasta qu punto contribuy el PMSAS al
adelanto y el progreso del fomento de los procesos y resultados de la
implicacin nacional (el diseo y la aplicacin de los planes nacionales de
desarrollo, las polticas pblicas y los Marcos de Asistencia de las Naciones
Unidas para el Desarrollo, entre otros)? En qu medida ayud el PMSAS a
intensificar el dilogo de los interesados/ciudadanos y/o su participacin en las
esferas de polticas y de desarrollo fundamentales?
Sostenibilidad: Probabilidad de que los beneficios de la intervencin perduren
a largo plazo Hasta qu punto han tomado los rganos de adopcin de
decisiones y los asociados en la ejecucin del PMSAS las decisiones y
medidas necesarias para asegurar la sostenibilidad de los efectos del PMSAS?
A nivel local y nacional: En qu medida apoyaron al PMSAS las instituciones
nacionales y/o locales? Mostraron esas instituciones la capacidad tcnica y el
compromiso de liderazgo para seguir trabajando con el proyecto o para
ampliarlo? Se ha creado y/o reforzado la capacidad operativa de los distintos
componentes? Tuvieron los dems componentes la capacidad financiera
suficiente para mantener a lo largo del tiempo los beneficios generados por el
proyecto? En qu medida aumentaron u oscilaron las asignaciones del
presupuesto nacional al sector concreto abordado por el proyecto? Hasta
qu punto ha contribuido el proyecto a crear mecanismos de dilogo entre los
ciudadanos/la sociedad civil y el Estado que puedan mantenerse despus del
plazo del proyecto? En qu medida se aprueban nuevas polticas o leyes con
el apoyo del PMSAS, financiadas y aplicadas activamente por los gobiernos?
Hasta qu punto se duplicar o ampliar el PMSAS a nivel nacional o local?
En qu medida se ajust el PMSAS a las estrategias nacionales de
desarrollo?