La evaluacin expost.

La evaluacin expost de los programas y proyectos de inversin constituye la ltima de

las etapas del ciclo de los proyectos. A travs de ella, se pretenden varios propsitos:
o Conocer la eficacia del programa o proyecto, es decir, si las metas propuestas se
realizaron en la cantidad y oportunidad con que fueron programadas. Con esta
actividad adems de conocer si el programa ha sido realizado con xito, se verifica la
capacidad de programacin y previsin de la entidad ejecutora.
o Precisar el impacto en el nivel macroeconmico a donde apunte el programa o
proyecto.
o Medir la calidad en el cumplimiento de objetivos.
o Evalar si los grupos beneficiados eran los previstos y si el beneficio alcanz la
dimensin programada.
o Analizar el proceso de toma de decisiones con relacin al programa o proyecto
desde la identificacin hasta el momento de la evaluacin.
o Conocer la capacidad institucional para identificar, llevar a cabo y hacer
seguimiento de sus programas y proyectos
Las fuentes sobre las que se basa un proceso de evaluacin ex post son los informes de
monitoreo, el seguimiento de los indicadores definidos para los niveles de propsito y
resultado, y la informacin externa. La evaluacin ex post puede realizarse en dos
momentos: inmediatamente despus de finalizado el proyecto y/o un tiempo despus de
terminado el proyecto.
Enfoque general y conceptualizacin del proceso de evaluacin.
Antes de iniciar la presentacin del sistema de evaluacin expost, es importante
aclarar los conceptos
monitoreo y evaluacin, en los que se basa sta metodologa.
El monitoreo4, es un procedimiento sistemtico5 empleado para comprobar la
efectividad6 y eficacia7
del proceso de ejecucin de un programa o proyecto para identificar los logros y
debilidades,
recomendar medidas y correctivos para optimizar los resultados deseados.
Es sistemtico puesto que es cuidadosamente planificado y ejecutado y permite:
o Determinar el progreso en la ejecucin de un programa o proyecto.
o Dar retroalimentacin a los involucrados en el programas o proyecto.
o Recomendar acciones correctivas para abordar problemas que afectan al programa
o proyecto.
Se recomienda tener en cuenta lo siguiente para realizar el proceso de evaluacin
expost:
o La utilidad que tiene para otros el producto de la evaluacin.
Significa entender el sistema poltico en el cual opera la evaluacin y entender las
necesidades de informacin de esos actores de la poltica, que son los usuarios de la
evaluacin.
o Abarcar la condiciones polticas bajo las cuales se pueden utilizar los
resultados de la
evaluacin:
Dos de estas condiciones son: a) que la pregunta de poltica formulada debe tener un
inters fundamental para los futuros usuarios y b) que los resultados eventuales de la
evaluacin deben responder dicha pregunta. Es cierto que estas dos condiciones
facultan a quienes toman las decisiones, siempre y cuando cuenten con la discrecin
del evaluador.
o La credibilidad, como condicin poltica para el uso.
Si la evaluacin se efecta con baja calidad metodolgica o en terrenos partidistas,
esto reducir el uso de los resultados.
La temporalidad, como condicin de uso.
Se debe ser cuidadoso en la puntualidad del producto final y la forma en la que la
evaluacin encaja en los ciclos de poltica y los planes de uso de la informacin por los
usuarios de la misma. Es mejor contar con un diseo de evaluacin adecuado que
presente resultados en el tiempo estipulado.
o No hay diseo de evaluacin perfecto.
Los evaluadores deben buscar el equilibrio entre el tiempo, la fuerza metodolgica y el
costo de la evaluacin. A veces es cuestin de prioridades: una metodologa que
duplica el tiempo necesario para realizar una evaluacin sera inaceptable, no importa
cuales sean sus ventajas.
Pero una que incremente el tiempo moderadamente y fortalezca la conclusividad de la
informacin, se puede aceptar con entusiasmo bajo algunas circunstancias polticas.
o Quin pondr en ejecucin las recomendaciones del estudio?.
Es importante tener buenas relaciones entre ejecutor y evaluador si es el caso, ya que
es posible que el sine qua non del uso est en el ltimo.
o El momento ms apropiado para introducir el pensamiento evaluativo.
Debe ser en el foro de la poltica, antes de una nueva propuesta de ley; es importante
desarrollar estudios con proyeccin hacia el futuro, se deben desarrollar nuevas
tcnicas que permitan efectuar el trabajo de evaluacin en un esquema de corto plazo.
o La especializacin de un evaluador en una ampla variedad de mtodos de
evaluacin.
Es importante, no se puede esperar que un solo diseo o mtodo pueda responder a
las diversas preguntas de poltica que puedan surgir de los debates polticos.
o Hacer ndices, referencias y revisiones generales a los borradores de los
informes.
Son actividades que valen su peso en oro; aun cuando el tiempo es importante y esta
revisin se tiene que planear, pues existe el riesgo de que se debilite la credibilidad.
o Fijar un orden de prioridades para los resultados de la evaluacin.
Ya que decirlo todo es equivalente a decir nada. Lo importante es responder a las
preguntas de las polticas tan clara y sencillamente como sea posible, hacer nfasis en
unos pocos datos crticos y sorprendentes y hacer todo esto de tal forma que resalten
aquellos resultados que hagan surgir la accin de las polticas. Se debe dedicar
tiempo a pensar en cmo se van a presentar los resultados de investigacin, de
manera que sean entendibles para las audiencias de las polticas.
o El uso de las evaluaciones se puede ampliar a travs de los estudios que
emplean la meta evaluacin.
La evaluacin secundaria puede ser una herramienta importante para mejorar la
calidad de la informacin que tienen disponible quienes toman decisiones para
ayudarles a comprender los resultados conflictivos.
Caractersticas de un buen proceso de evaluacin.
Un buen proceso de evaluacin8 debe cumplir con los siguientes atributos:
o Imparcialidad.
Supone neutralidad, transparencia a lo largo del procesos de anlisis, conclusiones y
recomendaciones.
o Creble.
Debe incluir la aplicacin de normas respecto de la disciplina relacionada con el
proyecto, confiabilidad y validez de los datos, asegurar el rigor del anlisis de tales
datos y hacer explicita la conexin lgica entre las conclusiones y recomendaciones.
o til.
Esta es una funcin de su efecto sobre personas y organizaciones que aprenden de
dicho procesos, particularmente las entidades ejecutoras del programa o proyecto.
o Participativa.
La prctica contempornea de la evaluacin descansa e la participacin de todos los
involucrados, incluyendo compartir la experiencia entre ellos. Esta evaluacin debe
reflejar los diferentes intereses, necesidades y percepcin de los involucrados.
o Retroalimentar.
La evaluacin debe ser considerada como un proceso que contribuye y retroalimenta
el proceso de toma de decisiones y el aprendizaje organizacional. Por ello, el
encargado de la evaluacin, tiene la responsabilidad especial de la divulgacin
sistemtica de los resultados obtenidos.
o Beneficio justifica todo.
Como inversin institucional, el sistema de evaluacin, debe balancear la relacin
entre las exigencias de rigor y validez de la informacin con la obtencin de un retorno
apropiado.
Esquema de la evaluacin expost.
El ciclo del proyecto no termina cuando se han cumplido las etapas de Preinversin e
inversin;
queda todava una etapa adicional que a su vez es la etapa final del ciclo del proyecto,
denominada
operacin, sobre la cual se debe hacer la evaluacin expost11.
Como evaluacin expost, se entiende la evaluacin de un proyecto a partir del
segundo ao de la
etapa de operacin y/o mantenimiento y consiste en la valoracin exhaustiva y
sistemtica de la
intervencin del estado y sus efectos (positivos o negativos, esperados o no) para
determinar su
relevancia, eficiencia, efectividad, impacto y sostenibilidad, la cual persigue
fundamentalmente los
siguientes objetivos:
_ Derivar acciones correctivas para mejorar los procesos.
_ Verificar el grado de cumplimiento de los objetivos.
_ Determinar los impactos reales del proyecto.
_ Generar memoria para aprender de la experiencia hacia futuros proyectos.
Para concluir el ciclo de vida de los proyectos, es conveniente realizar la evaluacin
expost, en la cual
se anaizan los resultados, beneficiarios, metas obtenidas; es decir se realiza un
anlisis profundo del
proyecto con valorizacin de las metas e indicadores alcanzados.
2.1.1. Alcance de la evaluacin expost.
La evaluacin expost es la revisin que se efecta sobre una iniciativa de inversin,
luego de
terminada su ejecucin y tras haber avanzado un tiempo razonable en su fase de
operacin, con el fin
de analizar sus resultados, tanto sobre el problema que se pretende resolver como de
su entorno.
La evaluacin expost tiene dos dimensiones:
_ La del proyecto mismo la cual esta se efecta dentro del mbito institucional.
_ La del programa o, del cual el proyecto forma parte.
La evaluacin expost, en el nivel de proyectos, es mas bien escasa. No ha sido objeto
de inters para
su aplicacin, dado que las instituciones pblicas no han desarrollado suficientemente
la cultura
gerencial de la evaluacin de resultados y no han tomado la iniciativa para
implementarla, a no ser
por exigencias de la banca multilateral o por autoridades planificadores interesados
recientemente en
verificar resultados de gestin. Los esfuerzos de control escasamente se aplican
durante la ejecucin
lo presente y no se siente la necesidad y menos se tiene la capacidad para
aplicarlos sobre el
pasado.
Es el segundo mbito, el de la evaluacin de programas, el que ms se ha cubierto a
raz de
propsitos deliberados de los organismos multilaterales para verificar la validez de los
programas que
vienen apoyando y que la han establecido como condicin sine-qua-non para financiar
fases
posteriores o nuevos programas afines.
La evaluacin expost persigue fundamentalmente:
_ Investigar el grado de cumplimiento de los objetivos planteados, la validez de las
proyecciones exantes y determinar los resultados de las iniciativas de inversin.
_ Retroaliemntar peridicamente el sistema de evaluacin exante de las iniciativas de
inversin.
_ Derivar acciones correctivas para mejorar los procesos de inversin.
Para lograr xito en la evaluacin expost de una iniciativa de inversin, se requiere:
_ Un buen y completo diagnstico de la situacin inicial.
_ Efectuar un registro sistemtico de informacin en las distintas fases para establecer
los
avances y los logros.
_ Una clara identificacin del problema a resolver, de las acciones requeridas en
trminos de
tiempos y montos involucrados, basado en un registro de datos oportuno y confiable,
as
como los resultados esperados de su ejecucin.
_ Debe comprender el ciclo completo de la iniciativa de inversin e indagar la forma en
que
se ha desarrollado la preinversin, inversin y operacin.