You are on page 1of 31

MINISTERIO DE ECONOMA Y FINANZAS

DIRECCIN GENERAL DE POLTICA DE INVERSIONES

TALLER EVALUACIN EX POST DE PROYECTOS DE INVERSIN PBLICA


07 08 Marzo, 2012
Lugar: Hotel Meli Lima

EVALUACIN DE CULMINACIN

Aldo Fernndez Andrade


Direccin de Normatividad, Metodologas y Capacitacin
DGPI - MEF

FASES DEL SISTEMA NACIONAL DE INVERSIN PBLICA


MOMENTOS DE LA EVALUACIN EX POST

FASE
PREINVERSIN

FASE
INVERSIN

FASE
POSTINVERSIN

EVALUACIN EX POST
(4 MOMENTOS)

Momento 1

Evaluacin de
Culminacin

Momento 2

Momento 3

Momento 4

Seguimiento
Ex-Post

Evaluacin de
Resultados

Estudio de
Impacto

Impactos
Impactos Indirectos
Impactos Directos

Estudio
de
Impacto

Propsito (Objetivo Central)


Operacin y Mantenimiento, Utilizacin

Componentes (Productos)
Ejecucin

Seguimiento
Ex-Post

Evaluacin
de
Culminacin

Evaluacin
de
Resultados

Insumos
Descripcin

Reflejo inmediato de la
ejecucin y anlisis
actualizado de sostenibilidad

Asegurar operacin y
mantenimiento
adecuado.

Evaluacin integral
con los cinco
criterios.

Medir impactos
directores/indirectos y
sostenibilidad.

Tiempo

A la culminacin

1-2 aos despus de


la culminacin

3-5 aos despus


de la culminacin

Depende de las
caractersticas de PIP

Seleccionados segn la
recomendacin por la
Evaluacin de
Culminacin

- PIPs ms de S/. XX
millones; todos.
- PIPs menos de S/.XX
millones; muestras.

OPI

UF a travs de un
Evaluador Ext. Inde.

mbito de
Aplicacin

Competencia

Todos
(De acuerdo a lneas de corte
sectoriales)

UE

Seleccionados
(un o un grupo de PIPs)

OPI a travs de un
Evaluador Ext. Inde.

EVALUACIN DE CULMINACIN
ASPECTOS GENERALES (1)
Consideraciones bsicas
Se realizar tan pronto se haya finalizado la ejecucin fsica del proyecto.
No es condicin indispensable que se haya liquidado las obras.
Se considerar actas de los comits de seguimiento o comits de inversiones (en los casos que
corresponda).
Propsito
Medir la eficiencia en la ejecucin del proyecto, en trminos de tiempos, costos y metas, y obtener
lecciones y recomendaciones respecto a su planeamiento y ejecucin.
Analizar las perspectivas de la sostenibilidad del proyecto, en trminos de la disponibilidad de los
factores necesarios para la operacin y mantenimiento adecuado, que posibiliten la entrega
oportuna del bien o servicio determinado. Determinar a necesidad o no del seguimiento ex post.

EVALUACIN DE CULMINACIN
ASPECTOS GENERALES (2)
Competencia
La Unidad Ejecutora, con el apoyo de los
dems involucrados en el proceso de
ejecucin
mbito de aplicacin
Todos los PIP segn los contenidos
mnimos
PIP cuya inversin se encuentre por
debajo de lnea de corte sectorial,
utilizar Formato Simplificado
Tiempo
Dentro de los 6 primeros meses de
concluida la ejecucin de los
componentes

LNEAS DE CORTE SECTORIALES

(EN MILLONES DE NUEVOS SOLES)


Sectores

Evaluacin de Culminacin
Contenidos mnimos
>3

Formato Simplificado

Salud

<= 3

Energa

> 1,2

< = 1,2

Agricultura

<= 3

Saneamiento

>3

<= 3

Transportes

>3

<= 3

Otros

>3

<= 3

Educacin, Cultura y Deportes

<= 3

EVALUACIN DE CULMINACIN

ASPECTOS GENERALES (3)

Metodologa
La metodologa debe de incluir la recopilacin y el anlisis de documentos
relacionados al proyecto, as como una serie de entrevistas y reuniones
personales y grupales o talleres con quienes intervienen en la ejecucin y la
operacin del proyecto.
La evaluacin de culminacin es un proceso de autoevaluacin participativo,
que puede apoyarse, si el caso lo requiere, con alguna consultora que facilite
el proceso.

EVALUACIN DE CULMINACIN

PASOS EN LA EVALUACIN DE CULMINACIN

Recoleccin de
informacin

Sistematizacin
y anlisis de la
informacin

Discusin y
anlisis de los
resultados
preliminares

Elaboracin del
informe de
evaluacin

EVALUACIN DE CULMINACIN
PASO 1: RECOLECCIN DE DOCUMENTOS Y REGISTROS SOBRE EL PROYECTO
Los documentos y fuentes de informacin son los siguientes:
Estudio de preinversin, incluyendo Trminos de Referencia o Planes de trabajo.
Expediente (s) Tcnico(s), estudio definitivo aprobado, especificaciones tcnicos o similares y, incluyendo
trminos de referencia con los que se contrataron.
Informes de consistencia (Formato SNIP 15)
Registro de variaciones en la fase de inversin (Formato SNIP 16) Contratos.
Planes de trabajo (en caso de modalidad de administracin directa)
Actas de seguimiento
Informe de liquidacin fsica y financiera
Informe final de consultora para la supervisin
Actas de sesin del Comit de Seguimiento (Anexo SNIP 21)
Acta de entrega y recepcin del proyecto
Convenio de transferencia
Entrevistas con personas y agentes relevantes
Talleres y/o reuniones con los beneficiarios que participan en la ejecucin u operacin y mantenimiento.
Encuestas y otras investigaciones de campo.
Otros

EVALUACIN DE CULMINACIN
PASO 2: SISTEMATIZACIN Y ANLISIS DE LA INFORMACIN
Los documentos y fuentes de informacin son los siguientes:
1.

Despus de revisar los documentos recogidos y consultar con los involucrados directos, se desarrolla una
descripcin secuencial de cada uno de los eventos ms importantes ocurridos durante la ejecucin del
Proyecto, realizando una comparacin entre los productos (asociados a los componentes), los costos y
tiempos de ejecucin previstos y reales. Asimismo, se identifican los factores que hayan contribuido o
limitado la ejecucin del PIP, y que merecen analizarse con mayor profundidad.

2.

Este paso va requerir de la asignacin de un profesional que sistematice y analice la informacin y


prepare la evaluacin preliminar.

3.

Producto de la sistematizacin ser una evaluacin preliminar que ser sometida a consideracin de
los involucrados en el PIP.

EVALUACIN DE CULMINACIN
PASO 3: DISCUSIN Y ANLISIS DE LOS RESULTADOS PRELIMINARES (1)

1.

Habiendo identificado a los principales involucrados en la ejecucin del proyecto, se desarrollar un taller
para la discusin y anlisis de la sistematizacin de la informacin recabada anteriormente.

2.

Para ello, es importante contar con la participacin de representantes de la UE, UF, el rgano que declar
la viabilidad (OPI, DGPI u otros), el contratista, supervisor, operador, y otros que se consideren relevantes
para el desarrollo de la evaluacin (en funcin al rol que hayan desempeado en la fase de ejecucin
o que tendrn en la operacin y mantenimiento).
En caso de que los beneficiarios participen en la operacin y mantenimiento del proyecto, ser
necesario contar con su participacin en el taller.

EVALUACIN DE CULMINACIN
PASO 3: DISCUSIN Y ANLISIS DE LOS RESULTADOS PRELIMINARES (2)
4. Se elaborar una agenda de los temas que se analizarn en la reunin, la misma que en lneas generales
puede incluir los siguientes puntos:
Resumen del proyecto
Evaluacin de la eficiencia
Comparacin de los productos ( Componentes ), previstos y reales
Comparacin de los tiempos de ejecucin, previstos y reales.
Comparacin de los costos de inversin previstos y reales. Eficiencia global
Anlisis de los factores positivos y negativos que han incidido en la eficiencia de la ejecucin del PIP
Evaluacin de la Sostenibilidad
Situacin actual de operacin y mantenimiento
Riesgos y problemas para la operacin y mantenimiento
Conclusiones, lecciones y recomendaciones
5. Para facilitar la discusin sobre el proyecto, se entregar a los participantes la evaluacin preliminar, los
que a su vez debern preparar informacin relevante sobre las acciones de su competencia para
presentarla, compartirla y complementar la evaluacin preliminar.

EVALUACIN DE CULMINACIN
PASO 4: PREPARACIN DEL INFORME DE EVALUACIN DE CULMINACIN (1)

CONTENIDO
a)
b)
c)
d)
e)
f)
g)
h)

Resumen Ejecutivo
Resumen del Proyecto
Metodologa utilizada
Proceso de la Ejecucin
Evaluacin de la Eficiencia
Evaluacin de la Sostenibilidad
Lecciones Aprendidas y Recomendaciones
Referencia de la Informacin y Anexos

EVALUACIN DE CULMINACIN
PASO 4: PREPARACIN DEL INFORME DE EVALUACIN DE CULMINACIN (2)
DESCRIPCIN

a) Resumen Ejecutivo
b) Resumen del Proyecto
Caracterizacin del PIP, tal como el Cdigo SNIP, Nombre del PIP, Fecha de declaracin del
viabilidad, monto de la inversin declarada viable, Unidad Ejecutora prevista, plazo de
ejecucin previsto para la implementacin del proyecto.
Describir el objetivo central del proyecto as como los componentes que fueron aprobados en
el estudio de preinversin con el cual se otorg la viabilidad. En caso de existir
modificaciones substanciales o no, indicarlas explicando las causas de las modificaciones
c) Metodologa utilizada
Est referida a la metodologa aplicada especficamente para esta evaluacin de culminacin.

EVALUACIN DE CULMINACIN
PASO 4: PREPARACIN DEL INFORME DE EVALUACIN DE CULMINACIN (3)
DESCRIPCIN
d) Proceso de Ejecucin
Sealar las entidades y organizaciones que han participado en la ejecucin del proyecto,
especificando la funcin que cumpli o cumplir cada una y la relacin entre ellas (acompaar
organigrama).
Elaborar una descripcin secuencial de cada uno de los eventos importantes ocurridos
durante la ejecucin del Proyecto. Incluye las fechas de:
Declaracin de viabilidad
Verificacin de la declaracin de viabilidad (si aplica)
Fecha de suscripcin y trmino real de contratos y/o convenios principales (tanto para
expediente tcnico como para obras fsicas y componentes intangibles)
Transferencia del proyecto (si aplica)
Inicio de operacin
Cambio en la implementacin de la organizacin (si aplica)
Otros
.

EVALUACIN DE CULMINACIN
PASO 4: PREPARACIN DEL INFORME DE EVALUACIN DE CULMINACIN (4)
DESCRIPCIN
e) Evaluacin de la Eficiencia
Anlisis comparativo de los componentes del proyecto previstos en el estudio de preinversin
con el que fue declarado viable, el expediente tcnico o similar y lo realmente ejecutado. Si
existieran diferencias identificar las causas de stas.
La eficiencia se determina a travs de los siguientes tpicos:
Logro de los productos (asociados a Componentes)
Eficiencia en el Tiempo de Ejecucin del Proyecto
Eficiencia en el Costo del Proyecto.
Eficiencia Global y Problemas de Ejecucin

EVALUACIN DE CULMINACIN
PASO 4: PREPARACIN DEL INFORME DE EVALUACIN DE CULMINACIN (5)
DESCRIPCIN
e) Eficiencia:
1. Logro de los productos (asociados a Componentes)
Comparacin entre las metas de productos previstos en el estudio de preinversin declarado
viable, el expediente tcnico o similar y las metas realmente logradas (ejecutadas), para
identificar variaciones tanto cualitativas como cuantitativas.
Se comparar:
(i) Dimensiones fsicas, tales como longitud, reas, etc.;
(ii) La capacidad que suma el proyecto a la prestacin de bienes y servicios;
(iii) Localizacin y lmites del rea de influencia del servicio (dnde es que estos bienes y
servicios provistos por el proyecto se encuentran disponibles);
(iv) La calidad de los productos de acuerdo a los estndares de las especificaciones tcnicas
contemplados en la normatividad competente.
De existir modificaciones significativas al proyecto original (que requirieron de una verificacin
de la viabilidad), se debe comparar: el proyecto original, proyecto modificado y los
resultados reales.

EVALUACIN DE CULMINACIN
PASO 4: PREPARACIN DEL INFORME DE EVALUACIN DE CULMINACIN (6)
DESCRIPCIN
e) Eficiencia:
1. Logro de los productos (asociados a Componentes)
El nivel de componentes ejecutados se define a travs de un indicador (o la combinacin de
indicadores, si fuera necesario) ms apropiado segn la naturaleza del objetivo central del
proyecto. En el caso del uso de un solo indicador, la aplicacin de la formula es directa. Si se
utiliza ms de un indicador, se deber proponer una combinacin adecuada a fin de obtener
un indicador nico que facilite la estimacin que permita juzgar si el ratio es mayor o menor
que la unidad.
Nivel de Ejecucin de Componentes = Componentes Ejecutados (indicador) / Componentes Planificados (indicador)

Ejemplo:
Un proyecto del Sector Educacin cuyo principal componente es Construccin de Aulas.
El estudio de preinversin estim la construccin de una IE de 30 aulas.
Ejecucin 25 aulas.
Aplicando la formula, el Nivel de Ejecucin de Componentes es de 0.83.

EVALUACIN DE CULMINACIN
PASO 4: PREPARACIN DEL INFORME DE EVALUACIN DE CULMINACIN (7)
DESCRIPCIN
e) Eficiencia:
2. Eficiencia en el Tiempo de Ejecucin del Proyecto (1)
Anlisis comparativo entre el tiempo de ejecucin previsto en el estudio de preinversin con el
cual fue declarado viable y el tiempo real empleado a nivel de cada producto, componente o
paquete de contratos, incidiendo en las causas de las diferencias.
Comparacin entre lo previsto en el estudio de preinversin con el que el proyecto fue
declarado viable y el tiempo real en el que se ejecutaron los productos, componentes o
paquete de contratos y/o convenios. Analizando las causas de las diferencias.
Se considerar el mes siete siguiente a la declaratoria de viabilidad, como el inicio de la
ejecucin del proyecto.
Comparar por productos o de ser posible por contratos, el periodo (en meses) de los
procesos de los concursos y de la ejecucin real versus el estudio de preinversin.

EVALUACIN DE CULMINACIN
PASO 4: PREPARACIN DEL INFORME DE EVALUACIN DE CULMINACIN (8)
DESCRIPCIN
e) Eficiencia:
2. Eficiencia en el Tiempo de Ejecucin del Proyecto (2)
Recabar las opiniones de la UF, UE, OPI, contratistas, Supervisor (y rgano Tcnico
Responsable) en relacin a las causas de los retrasos y la factibilidad del plan original para la
ejecucin. Fue posible otra opcin para la ejecucin?
La Eficiencia en el Tiempo de Ejecucin se estima de la siguiente manera:
Eficiencia en el Tiempo de Ejecucin = Nivel de Ejecucin de Componentes x (Periodo Planeado / Periodo Real)

Ejemplo:
Un proyecto del Sector Educacin de acuerdo a su cronograma de ejecucin, en el estudio de
preinversin se estim un tiempo de ejecucin de 12 meses.
Finalmente el proyecto se ejecut en 28 meses.
Nivel de Ejecucin de Componentes 0.83 (dato anterior)
Aplicando la formula, la Eficiencia en el Tiempo de Ejecucin es de 0.36.

EVALUACIN DE CULMINACIN
PASO 4: PREPARACIN DEL INFORME DE EVALUACIN DE CULMINACIN (9)
DESCRIPCIN
e) Eficiencia:
3. Eficiencia en el Costo del Proyecto (1)
Anlisis comparativo entre el costo total de inversin del proyecto previsto en el estudio de
preinversin con el cual fue declarado viable y el costo total del proyecto en su ejecucin (a
precios de mercado), a nivel de cada producto, componente o paquete de contratos.
Identificar y cuantificar las variaciones y sus causas.
En el caso en que la liquidacin no haya sido concluida, se trabajar con una estimacin de
los costos finales de inversin y la evaluacin de culminacin ser preliminar, debindose
ajustar en la evaluacin de resultados.

EVALUACIN DE CULMINACIN
PASO 4: PREPARACIN DEL INFORME DE EVALUACIN DE CULMINACIN (10)
DESCRIPCIN
e) Eficiencia:
3. Eficiencia en el Costo del Proyecto (2)
Recabar las opiniones de la UF, UE, OPI, contratistas, Supervisor (y rgano Tcnico
Responsable) en relacin a las causas de las variaciones en los costos. Fue posible
minimizar costos?
La Eficiencia en el Costo del Proyecto se estima de la siguiente manera:
Eficiencia en el Costo = Nivel de Ejecucin de Componentes x (Costo Planeado / Costo Real)

Ejemplo:
Un proyecto del Sector Educacin de acuerdo al estudio de preinversin se estim un costo
de 7 millones de Nueve Soles (planeado).
El costo real fue de 9 millones de Nuevos Soles.
Nivel de Ejecucin de Componentes 0.83 (dato anterior).
Aplicando la formula, la Eficiencia en el Costo del Proyecto es de 0.65

EVALUACIN DE CULMINACIN
PASO 4: PREPARACIN DEL INFORME DE EVALUACIN DE CULMINACIN (11)
DESCRIPCIN
e) Eficiencia:
4. Eficiencia Global y Problemas de Ejecucin (1)
Evaluacin de la eficiencia en trminos generales del proyecto basada en el nivel del logro de los
productos, los tiempos de ejecucin y los costos de inversin del proyecto.
Tiene 2 opciones, una de manera cuantitativa (A) y otra cualitativa (B)
Opcin (A) :
Eficiencia Global = Nivel de Ejecucin de Componentes x (Periodo Planeado / Periodo Real) x (Costo Planeado / Costo Real)

EVALUACIN DE CULMINACIN
PASO 4: PREPARACIN DEL INFORME DE EVALUACIN DE CULMINACIN (12)
DESCRIPCIN
e) Eficiencia:

Opcin (B) :
Identificar los principales
problemas que afectaron la
eficiencia, as como las
debilidades y limitaciones en
cuanto a la preparacin y
ejecucin del proyecto.

Eficiencia en Tiempo

4. Eficiencia Global y Problemas de Ejecucin (2)

Media

Alta

1.0

Baja

Media

1.0

Eficiencia en el Costo

EVALUACIN DE CULMINACIN
PASO 4: PREPARACIN DEL INFORME DE EVALUACIN DE CULMINACIN (13)
DESCRIPCIN
e) Eficiencia:
4. Eficiencia Global y Problemas de Ejecucin (3)
Lista gua para analizar la variedad de problemas y fuentes de ineficiencias:

Calidad de los estudios de preinversin y del expediente tcnico o estudio definitivo;


planificacin de la ejecucin en aspectos fsicos, tcnicos y financieros.
Gestin del proyecto; recursos humanos, cronograma organizacional, procedimientos, etc.
Modalidad de ejecucin; administracin directa, administracin indirecta (por contrata,
Asociacin Pblica Privado, Ncleo Ejecutor, Obras por impuestos).
En los casos que presenten una participacin comunal significativa, evaluar los trminos de su
participacin y su incidencia en la eficiencia.

EVALUACIN DE CULMINACIN
PASO 4: PREPARACIN DEL INFORME DE EVALUACIN DE CULMINACIN (14)

DESCRIPCIN
e) Eficiencia:
4. Eficiencia Global y Problemas de Ejecucin (4)
Lista gua para analizar la variedad de problemas y fuentes de ineficiencias:
Eficacia de la supervisin de la elaboracin de los expedientes tcnicos as como de la
ejecucin de los componentes del proyecto.
Capacidad de la UE, en trminos de recursos tcnicos, financieros y humanos para el proyecto.
Disponibilidad de materiales de construccin as como de contratistas experimentados.
Condiciones externas: clima, desastres naturales, conflictos sociales, cambios en las polticas
gubernamentales, cambio de autoridades (cambio de prioridades y los equipos tcnicos, etc.)
Otros.

EVALUACIN DE CULMINACIN
PASO 4: PREPARACIN DEL INFORME DE EVALUACIN DE CULMINACIN (15)

DESCRIPCIN
f) Sostenibilidad:
Evaluar los factores sealados en el estudio de preinversin con el que se declar la viabilidad que
garantizan que el proyecto generar los beneficios y resultados esperados a lo largo de su vida
til, y analizar si los mismos se mantienen o presentan variaciones y en qu medida. Especial inters
es la identificacin de problemas ocurridos en el periodo, de ejecucin as como los riesgos
posibles en la operacin y mantenimiento.

La sostenibilidad se analiza, considerando las variaciones en los siguientes aspectos:


Productos, componentes del proyecto
Marco legal y regulaciones especficas. Marco organizacional, recursos humanos, tcnicos,
financieros y logsticos, as como la participacin de los beneficiarios en la operacin y
mantenimiento (de ser el caso).
Riesgos en cuanto a desastres naturales y/o conflictos sociales que puedan afectar la operacin
del proyecto.

EVALUACIN DE CULMINACIN
PASO 4: PREPARACIN DEL INFORME DE EVALUACIN DE CULMINACIN (16)

DESCRIPCIN
f) Lecciones y Recomendaciones: (1)
Como consecuencia del anlisis del proceso de ejecucin del proyecto de inversin pblica, se
determina un conjunto de lecciones aprendidas y se efectan las recomendaciones
correspondientes.
Las lecciones aprendidas pueden desarrollarse en los siguientes niveles y aspectos:
Nivel de polticas.
Nivel del proyecto, en sus 3 fases (preinversin, inversin y post inversin).
Relacin con otros PIP del sector o tipologa
Relacin con otros sectores

EVALUACIN DE CULMINACIN
PASO 4: PREPARACIN DEL INFORME DE EVALUACIN DE CULMINACIN (17)

DESCRIPCIN
f) Lecciones y Recomendaciones: (2)
Como consecuencia del anlisis del proceso de ejecucin del proyecto de inversin pblica, se
determina un conjunto de lecciones aprendidas y se efectan las recomendaciones
correspondientes.
Recomendaciones sobre los siguientes aspectos:
Medidas a tomar para solucionar los problemas relacionados a las deficiencias de la obra,
transferencia, liquidacin formal del PIP.
Medidas a tomar por la entidad encargada de la operacin y mantenimiento.
Determinacin sobre la necesidad de un Seguimiento Ex Post del proyecto.
Actividad de seguimiento a la operacin y mantenimiento del proyecto de parte de la UE, a fin de
asegurar los beneficios correspondientes.
Otras recomendaciones relacionadas con el proyecto.

CASO REAL

COMPARACIN ENTRE COMPONENTES PREVISTOS Y REALES

Anlisis de Componentes del Proyecto


Item

Planificado

Real

% de Ejecucin

Componentes de AGUA POTABLE


Pozo

Se utiliza pozo existente (N3)

Se construye nuevo pozo (N9)

Modificado

Por rebombeo

Por rebombeo

100%

Lnea de impulsin

741 m

1.305 mts

176.10%

Reservorio

500 m3

500 m3

100.00%

Red de distribucin

11.050 m

14.100 m

127.60%

Conex. Domiciliarias

849

830

97.80%

Transmisin

Componente de ALCANTARILLADO
Red 200 mm
Conex. Domiciliarias
Fuente: Empresa del
Agua

7.210 m

5.985 m

83.00%

653

528

80.90%

UBICACIN ESPECFICA

Muchas Gracias

You might also like