Evaluación de Proyectos (Clase Nª 7)

La evaluación de proyectos es la acción que nos permite medir o estimar el grado en que se están logrando o bien se lograron o no los objetivos que nos hemos propuesto con la realización del proyecto. Es un instrumento que nos permite visualizar problemas o dificultades y corregir a tiempo los procesos en marcha.

En primer lugar debemos distinguir 2 tipos de evaluación:

1 - De procesos: También llamada seguimiento, es una evaluación que se hace durante el transcurso o desarrollo del proyecto, su propósito es detectar problemas no detectados originalmente, emergentes u otros que inciden en el cumplimiento de las actividades, influyen en el logro de objetivos y orientan respecto de realizar cambios si ello fuera necesario. Además entrega información para la evaluación final o ex- post.

2 - De resultados: Evaluación final o ex-post, es aquella que se realiza una vez finalizado el proyecto, determina el o los resultados de las actividades desarrolladas en función de los objetivos propuestos originalmente. Debe otorgar criterios para definir respecto de la conveniencia o no de su continuidad, identificando los cambios necesarios de realizar.

Para el caso de una evaluación de procesos hablaremos de resultados intermedios o parciales, y en la evaluación final, de resultados finales también llamados "impacto del proyecto". El concepto de "impacto" se refiere a modificaciones sustantivas, estables y permanentes que se logran con la ejecución del proyecto, respecto del o los problemas.

La evaluación tanto de procesos como de resultados puede ser de orden cualitativo o cuantitativo, lo que dependerá de la naturaleza de aquello que se evalúa.

Por lo tanto un aspecto inicial que es necesario esclarecer es:

- ¿Qué es preciso evaluar?

Naturaleza de la evaluación
Habíamos señalado que la definición del proyecto supone una hipótesis de solución frente a una determinada situación detectada en la realidad. La evaluación del proyecto nos permitirá saber entonces qué tan certera o no fue nuestra estimación inicial respecto a las acciones que concebimos como necesarias de emprender.

La evaluación puede ser entendida como una medición, en toda medición podemos distinguir:

1 - Lo que se va a medir: Es decir procesos o resultados

2 - Con qué se va a medir: El instrumento que utilizaremos para llevar a cabo la medición (encuestas, entrevistas, etc.) que contiene indicadores de carácter cuantitativo o cualitativo.

3 - Cómo se va a medir: La metodología a emplear en la evaluación, este aspecto se definirá en función del tipo de instrumento a utilizar.

4 - Los criterios y sus grados: Los criterios y sus grados de obtención o no, determinarán en definitiva la naturaleza de los indicadores.

Los criterios a considerar pueden ser definidos por:

a - Parámetros o exigencias externas:

- Este tipo de evaluación se realiza según los parámetros y criterios definidos por las fuentes institucionales que financian los proyectos, o bien por una institucionalidad de rango superior que actúa en carácter de supervisión (organismos públicos, Municipalidad, etc.)

b - Criterios propios:

- Cuando es el equipo de proyecto quien define qué se va a evaluar, y en qué grado se considera la obtención o no de los objetivos propuestos.

c - Una combinación de ambos

Criterios en la evaluación
Los criterios a definir en la evaluación del proyecto pueden ser múltiples y diversos y, si no son determinados de manera externa, en buena medida se definirán en función de la naturaleza del proyecto, los objetivos y las acciones. Sin embargo, en términos generales podríamos mencionar algunos de los criterios más utilizados en la evaluación de proyectos:

Población o beneficiarios
Se refiere a la cantidad de personas que directa e indirectamente logran un grado de participación (o beneficio) en el proyecto, se la puede caracterizar en términos demográficos, socio-económicos u otros señalando de qué manera y en qué grado el proyecto significa un beneficio. Bajo este criterio de evaluación, se recomienda indicar el número de personas u organizaciones que participan o bien si estas se crearon con el proyecto, además se puede indicar el grado de participación tanto en la implementación como en la propia evaluación, así como también en la continuidad de los procesos. Con este criterio se relacionan los de cobertura y focalización.

Sustentabilidad
El criterio de sustentabilidad dice relación con la calidad estratégica del proyecto en términos de proyección de sus resultados en el tiempo una vez finalizadas todas las actividades estipuladas. En general, se espera que el resultado del proyecto constituya un mejoramiento sustantivo y perdurable en algunas de las condiciones señaladas que le dieron origen, definieron los objetivos y sus acciones.

En función de la generación de procesos de continuidad, en general se trata de una institución u organización que asume esta tarea una vez que el proyecto haya finalizado. Si esto es así, entonces será necesario documentar debidamente este compromiso.

Eficacia
Se refiere al grado de cumplimento de los objetivos planteados, es decir, en base a este criterio se evalúa en qué medida se lograron los objetivos, determina si con la ejecución de este proyecto se enfrentó adecuadamente o no la situación original que existía.

Eficiencia o análisis costo-beneficio
Este criterio relaciona los resultados con los recursos invertidos y por lo tanto evalúa nuestra capacidad de acción. En otros términos, se refiere a la optimización de los recursos asignados en función de factores que determinan nuestra eficiencia en el logro de los objetivos.

Calidad
El criterio de calidad alude a resultados intermedios o finales y se aplica a bienes, productos o servicios prestados, relaciona el grado en que estos bienes o servicios satisfacen o no las necesidades y señala sus atributos.

GESTIÓN DE PROYECTOS

En gestión de proyectos, la evaluación de proyectos es un proceso por el cual se determina el establecimiento de cambios generados por un proyecto a partir de la comparación entre el estado actual y el estado previsto en su planificación.[1] Es decir, se intenta conocer qué tanto un proyecto ha logrado cumplir sus objetivos o bien qué tanta capacidad poseería para cumplirlos.

En una evaluación de proyectos siempre se produce información para la toma de decisiones, por lo cual también se le puede considerar como una actividad orientada a mejorar la eficacia de los proyectos en relación con sus fines, además de promover mayor eficiencia en la asignación de recursos.[2] En este sentido, cabe precisar que la evaluación no es un fin en sí misma, mas bien es un medio para optimizar la gestión de los proyectos.

Tipos de evaluación

Según el nivel de gestión [editar]La evaluación de proyectos la podemos clasificar de la siguiente manera:

Politica-Estratégica: La parte política verá la parte social y política y su consistencia para trascender en el tiempo y que sea en cierta forma equitativo.
Administrativa: En el caso administrativo, el fin siempre es la mayor racionalización de todos los recursos, el logro de sus planes, objetivos, metas, actividades, programas; expresión de la eficiencia y eficacia en su mayor expresión.
Técnica: Lo técnico es una mezcla de lo anterior y lo propio, ya que incide hoy en día al mejor logro de los dos puntos anteriores, por el avance en los descubrimiento, su rapidez, medición y precisión. Ya dependerá de cada ciencia que enfoque científico y técnico aplicarán.

Según la naturaleza de la evaluación de proyectos puede ser vista de dos ópticas diferentes:

Evaluación privada: Que incluye a la "evaluación económica" que asume que el proyecto está totalmente financiado con capital propio, por lo que no hay que pedir crédito, y por otro lado la "evaluación financiera", que incluye financiamiento externo.

Evaluación social: En la evaluación social, tanto los beneficios como los costos se valoran a precios sombra de eficiencia. Aquí interesa los bienes y servicios reales utilizados y producidos por el proyecto.


Según el momento en que se realiza

La evaluación en el ciclo de proyectosLos distintos tipos de evaluación varían según el momento en que se realicen. Los tipos de evaluación son: ex-ante, de proceso, ex-post y de impacto.[1] [2] [3] [4]

Evaluación ex-ante: Se efectúa antes de la aprobación del proyecto y busca conocer su pertinencia, viabilidad y eficacia potencial. Este tipo de evaluación consiste en seleccionar de entre varias alternativas técnicamente factibles a la que produce el mayor impacto al mínimo costo.[2] Este tipo de evaluación supone la incorporación de ajustes necesarios en el diseño del proyecto, lo cual podría generar incluso el cambio del grupo beneficiario, su jerarquía de objetivos y el presupuesto.

Evaluación de proceso, operativa, de medio término o contínua: Se hace mientras el proyecto se va desarrollando y guarda estrecha relación con el monitoreo del proyecto. Permite conocer en qué medida se viene logrando el logro de los objetivos (Resultados en caso de marco lógico); en relación con esto, una evaluación de este tipo debe buscar aportar al perfeccionamiento del modelo de intervención empleado y a identificar lecciones aprendidas. Las fuentes financieras suelen requerir la realización de este tipo de evaluación para ejecutar los desembolsos periódicos.
Evaluación ex-post, de resultados o de fin de proyecto: Se realiza cuando culmina el proyecto. Se enfoca en indagar el nivel de cumplimiento de los objetivos (Propósito y Resultados en caso de marco lógico) asimismo busca demostrar que los cambios producidos son consecuencia de las actividades del proyecto (exclusivamente o en interacción con otras fuentes); para esto suele recurrir a un diseño experimental.

No solo indaga por cambios positivos, también analiza efectos negativos e inesperados.

Evaluación de impacto: Es la que indaga por los cambios permamentes y las mejoras de la calidad de vida producidos por el proyecto, es decir, se enfoca en conocer la sostenibilidad de los cambios alcanzados y los efectos imprevistos (positivos o negativos). En caso de diseño con marco lógico, se enfoca en la evaluación del Fin de la jerarquía de objetivos. Esta evaluación necesariamente debe ser realizada luego de un tiempo de culminado el proyecto y no inmediatamente éste concluya; el tiempo recomendado para efectuar la evaluación de impacto es de 5 años.

Cabe considerar que las evaluaciones ex-ante y de proceso son consideradas como evaluaciones formativas debido a que se producen mientras se da la preparación y/o ejecución del proyecto y sus conclusiones sirven para optimizar la ejecución del mismo; en tanto que las evaluaciones de resultados y de impacto vienen a ser evaluaciones sumativas que ocurren al culminar el proyecto e incluso un tiempo después de haber culminado, ocurriendo que sus conclusiones servirán para ser transferidas a otras experiencias pero ya no podrán tener una aplicación directa en el proyecto que ha concluído.

Las evaluaciones de resultados y de impacto requieren asumir un diseño específico de investigación, como se verá mas adelante.

Criterios utilizados para evaluar proyectos [editar]La evaluación de proyectos, en sus distintos tipos, contempla una serie de criterios base que permiten establecer sus conclusiones. En función del campo, empresa u organización de que se trate, es que se emplearán una serie de criterios u otros que guarden relación con los objetivos estratégicos que se persigan.

No existen criterios únicos, por lo general los criterios surgenen función de la naturaleza de cada proyecto empero existe cierto consenso en la necesidad de analizar la pertinencia, eficacia, eficiencia y sostenibilidad de los proyectos.

Pertinencia o relevancia: Observa la congruencia entre los objetivos del proyecto y las necesidades identificadas y los intereses de la población e instituciones (consenso social). Se observa especialmente en la evaluación ex-ante pero también en los demás tipos de evaluación.

Eficacia: Es el grado en que se han cumplido los objetivos. Se observa en las evaluciones de tipo contínua y ex-post.

Eficiencia: Indica el modo en que se han organizado y empleado los recursos disponibles en la implementación del proyecto. Este criterio es usual en el análisis costo-beneficio realizado en la evaluación ex-ante.

Sostenibilidad: Establece la medida en que la población y/o las instituciones mantienen vigentes los cambios logrados por el proyecto una vez que este ha finalizado. Suele considerarse en las evaluaciones de impacto.

Requisitos que debe cumplir una buena evaluación de proyectos [editar]Toda evaluación cumpla algunos requisitos metodológicos para garantizar que la información que genere puede ser usada en la toma de decisiones. Así, se espera que todo proceso de evaluación sea:

Objetivo: Debe medirse y analizarse los hechos definidos tal como se presentan.
Imparcial: La generación de conclusiones del proceso de evaluación debe ser neutral, transparente e imparcial. Quienes realizan la evaluación no deben tener intereses personales o conflictos con la unidad ejecutora del proyecto.

Valido: Debe medirse lo que se ha planificado medir, respetando las definiciones establecidas. En caso el objeto de análisis sea demasiado complejo para una medición objetiva, debe realizarse una aproximación cualitativa inicial.

Confiable: Las mediciones y observaciones deben ser registradas adecuadamente, preferentemente recurriendo a verificaciones in-situ.

Creíble:Todas las partes involucradas en el proyecto deben tener confianza en la idoneidad e imparcialidad de los responsables de la evaluación, quienes a su vez deben mantener un política de transparencia y rigor profesional.

Oportuno: Debe realizarse en el momento adecuado, evitando los efectos negativos que produce el paso del tiempo.

Útil: Debe ser útil y elaborarse en un lenguaje conciso y directo, entendible para todos los que accedan a la información elaborada, los resultados de una evaluación no deben dirigirse sólo a quienes tienen tienen altos conocimientos técnicos sino que debe servir para que cualquier involucrado pueda tomar conocimiento de la situación del proyecto.

Participativo:Debe incluirse a todos los involucrados en el proyecto, buscando de reflejar sus experiencias, necesidades, intereses y percepciones.

Retroalimentador:Un proceso de evaluación debe garantizar la diseminación de los hallazgos y su asimilación por parte de los involucrados en el proyecto (desde las altas esferas hasta los beneficiarios), para así foemntar el aprendizaje organizacional.

Costo/eficaz:La evaluación debe establecer una relación positiva entre su costo (económico, de tiempo y recursos) y su contribución en valor agregado para la experiencia de los involucrados en el proyecto.

Diseños de evaluación [editar]En general, cualquier forma de evaluación de proyectos se basa en los conceptos y procedimientos de la metodología de la investigación científica,[8] sin embargo cabe precisar que cuando se efectúa una evaluación de proyectos de tipo de resultado o de impacto es necesario asumir un diseño específico de investigación. Alguno de estos diseños son los siguientes:


Evaluación sólo después [editar]Es un diseño simple que carece de línea de base. Su principal defecto es tener poca capacidad para explicar los efectos alcanzados por un proyecto.

Su esquema es el siguiente:

.......... X .......... A1
Donde:

"X" es la intervención del proyecto
"A1" es la población objetivo del proyecto al final de la intervención

Evaluación simple antes y después [editar]Este diseño permite comparar la situación incial de la población objetivo contra la situación final, es decir luego de realizado el proyecto. La relación causa-efecto entre el proyecto y sus resultados es más clara pero aún no es precisa ya que pueden haber intervenido causas externas no controladas.

Su esquema es el siguiente:

A .......... X .......... A1
Donde:

"X" es la intervención del proyecto
"A" es la línea de base (situación inicial de la población objetivo)
"A1" es la población objetivo del proyecto al final de la intervención

Diseño cuasiexperimental [editar]Este diseño permite realizar una evaluación antes y después de la intervención del proyecto, comparando los hallazgos además con un grupo control para los resultados "después" de la intervención. La precisión de este diseño es mucho mayor que el de los anteriores y por su viabilidad técnica es el más recomendado.

Su esquema es el siguiente:

A .......... X .......... A1
......................... B
Donde:

"X" es la intervención del proyecto
"A" es la línea de base
"A1" es la población objetivo del proyecto al final de la intervención
"B" es un grupo de comparación al finalizar el proyecto, con similares características a la población objetivo y que no ha tenido una intervención similar

Diseño experimental clásico [editar]Este diseño permite también efectuar una comparación antes y después del proyento, pero además también permite efectuar una comparación antes y después en grupos de similares características que no hayan estado influenciados por una intervención similar a la del proyecto. Su capacidad de explicación es bastante alta, pero sus costos y dificultad técnica también se incrementan.

Su esquema es el siguiente:

A .......... X .......... A1
B ....................... B1
Donde:

"X" es la intervención del proyecto
"A" es la línea de base
"A1" es la población objetivo del proyecto al final de la intervención
"B" es un grupo de comparación antes del inicio del proyecto, similar al grupo objetivo con el que se realizó la línea de base
"B1" es un grupo de comparación al finalizar el proyecto

Diseño experimental complejo [editar]Es un diseño muy complicado, además de tener un altísimo costo, por lo que su aplicación merece una fundamentación muy amplia. Con ste tipo de estudios se busca determinar la influencia de cada componente del proyecto, e incluso de la combinación de diversos componentes en un proyecto.

Su esquema es el siguiente:

A .......... X .......... A1
B .......... x1 ......... B1
C .......... x2 ......... C1
Donde:

"X" es la intervención de un componente del proyecto proyecto
"A" es la línea de base del componente correspondiente
"A1" es la población objetivo del proyecto al final de la intervención, independiente de los otros grupos de comparación
"X2" es la intervención de un segundo componente del proyecto
"B" es la línea de base del componente correspondiente
"B1" es un grupo de comparación al finalizar el proyecto, independiente de los otros grupos de comparación
"X3" es la intervención de un tercer componente del proyecto
"C" es la línea de base del componente correspondiente
"C1" es un grupo de comparación al finalizar el proyecto, independiente de los otros grupos de comparación

Dificultades en la evaluación de proyectos [editar]La labor de evaluación de proyectos no es fácil y conlleva múltiples dificultades, muchas de ellas de orden metodológico pero también de orden político.

Falta de disponibilidad de información.
No contar con personal calificado para efectuar el trabajo.
Clientelismo de la población beneficiaria y de los encargados de la ejecución del proyecto.
Carencia de un sistema de evaluación y monitoreo, por lo que no se conoce el proceso desarrollado.
Resistencias de la comunidad. En este caso muchas veces ocurre que la población ha recibido muchas promesas incumplidas por parte de políticos de turno o bien se ha generado una expectativa muy alta frente al proyecto, por lo cual desarrolla una actitud contraria hacia éste; también se presentan resistencias debido a los prejuicios o ignorancia de los beneficiarios.

Bibliografía [editar]Aramburú, Carlos Eduardo (2001). «Diagnóstico, línea basal y población objetivo», Gerencia social. Diseño, monitoreo y evaluación de proyectos sociales. Lima-Perú: Universidad del Pacífico. ISBN 9972-603-32-6.
Banco Interamericano de Desarrollo (BID) (1997). Evaluación: Una herramienta de gestión para mejorar el desempeño de los proyectos. New York, USA: BID.
Bobadilla Díaz, P., Del Águila Rodríguez, L. y Morgan, M. de la L. (1998). Diseño y evaluación de proyectos de desarrollo. Lima-Perú: Pact-USAID.
Juarez C., Socorro. Sistema de Administración Integral para la E.B.R.C.E.B.D.F.
Loli Pineda, Alejandro y López Vega, Ernestina (1999). Participación comunal en la solución de problemas psicosociales. Lima, Perú: Universidad Nacional Mayor de San Marcos.
Miklos, Tomás; Tello, Ma. Elena. Planeación Interactiva.
Medianero Burga, D. (1998). Sistema de diseño de proyectos de cooperación técnica. Lima, Perú: CEMPRO.
Pérez Serrano, G. (1999). Elaboración de proyectos sociales. Casos prácticos. Madrid, España: Narcea. ISBN 84-277-1041-0.
Vásquez, E.; Aramburú, C. E.; Figueroa, C. y Parodi, C. (2001). Gerencia social. Diseño, monitoreo y evaluación de proyectos sociales. Lima-Perú: Universidad del Pacífico. ISBN 9972-603-32-6.

Notas ↑ a b c d Pérez Serrano, 1999.
↑ a b c Vásquez, Aramburú, Figueroa y Parodi, 2001.
↑ a b Bobadilla, Del Águila y Morgan, 1998.
↑ a b c d Medianero, 1998.
↑ a b Arámburú, 2001, p.88
↑ Banco Interamericano de Desarrollo, 1997, p. 4
↑ Banco Interamericano de Desarrollo, 1997, pp. 6-7.
↑ Banco Interamericano de Desarrollo, 1997, pp. 2-3
↑ Loli y López, 1999.