Tipos de evaluación
Según el nivel de gestión
La evaluación de proyectos la podemos clasificar de la siguiente manera:
- Política-Estratégica: La parte política verá la parte social y política, su consistencia para trascender en el tiempo y que sea en cierta forma equitativo.
- Administrativa: En el caso administrativo, el fin siempre es la mayor racionalización de todos los recursos, el logro de sus planes, objetivos, metas, actividades, programas; expresión de la eficiencia y eficacia en su mayor expresión.
- Técnica: Lo técnico es una mezcla de lo anterior y lo propio, ya que incide hoy en día al mejor logro de los dos puntos anteriores, por el avance en los descubrimientos, su rapidez, medición y precisión. Ya dependerá de cada ciencia que enfoque científico y técnico aplicarán.
Según la naturaleza de la evaluación
La evaluación de proyectos puede ser vista de dos ópticas diferentes:
- Evaluación privada: Que incluye a la "evaluación económica" que asume que el proyecto está totalmente financiado con capital propio, por lo que no hay que pedir crédito, y por otro lado la "evaluación financiera", que incluye financiamiento externo.
- Evaluación social: En la evaluación social, tanto los beneficios como los costos se valoran aprecios sombra de eficiencia. Aquí interesa los bienes y servicios reales utilizados y producidos por el proyecto.
esto no quiere decir nada
Según el momento en que se realiza
La evaluación en el ciclo de proyectos.
Los distintos tipos de evaluación varían según el momento en que se realicen. Los tipos de evaluación son: ex-ante, de proceso, ex-post y de impacto.
- Evaluación supervisada: Se efectúa antes de la aprobación del proyecto y busca conocer su pertinencia, viabilidad y eficacia potencial. Este tipo de evaluación consiste en seleccionar de entre varias alternativas técnicamente factibles a la que produce el mayor impacto al mínimo costo. Este tipo de evaluación supone la incorporación de ajustes necesarios en el diseño del proyecto, lo cual podría generar incluso el cambio del grupo beneficiario, su jerarquía de objetivos y el presupuesto.
- Evaluación de proceso, operativa, de medio término o contínua: Se hace mientras el proyecto se va desarrollando y guarda estrecha relación con el monitoreo del proyecto. Permite conocer en qué medida se viene logrando el logro de los objetivos (Resultados en caso de marco lógico); en relación con esto, una evaluación de este tipo debe buscar aportar al perfeccionamiento del modelo de intervención empleado y a identificar lecciones aprendidas. Las fuentes financieras suelen requerir la realización de este tipo de evaluación para ejecutar los desembolsos periódicos.
- Evaluación ex-post, de resultados o de fin de proyecto: Se realiza cuando culmina el proyecto. Se enfoca en indagar el nivel de cumplimiento de los objetivos (Propósito y Resultados en caso demarco lógico) asimismo busca demostrar que los cambios producidos son consecuencia de las actividades del proyecto (exclusivamente o en interacción con otras fuentes); para esto suele recurrir a un diseño experimental. No solo indaga por cambios positivos, también analiza efectos negativos e inesperados.
- Evaluación de impacto: Es la que indaga por los cambios permamentes y las mejoras de la calidad de vida producidos por el proyecto, es decir, se enfoca en conocer la sostenibilidad de los cambios alcanzados y los efectos imprevistos (positivos o negativos). En caso de diseño con marco lógico, se enfoca en la evaluación del Fin de la jerarquía de objetivos. Esta evaluación necesariamente debe ser realizada luego de un tiempo de culminado el proyecto y no inmediatamente éste concluya; el tiempo recomendado para efectuar la evaluación de impacto es de 5 años.
Cabe considerar que las evaluaciones ex-ante y de proceso son consideradas como evaluaciones formativas debido a que se producen mientras se da la preparación y/o ejecución del proyecto y sus conclusiones sirven para optimizar la ejecución del mismo; en tanto que las evaluaciones de resultados yde impacto vienen a ser evaluaciones sumativas que ocurren al culminar el proyecto e incluso un tiempo después de haber culminado, ocurriendo que sus conclusiones servirán para ser transferidas a otras experiencias pero ya no podrán tener una aplicación directa en el proyecto que ha concluído.
Las evaluaciones de resultados y de impacto requieren asumir un diseño específico de investigación, como se verá mas adelante.
Requisitos que debe cumplir una buena evaluación de proyectos
Toda evaluación cumpla algunos requisitos metodológicos para garantizar que la información que genere puede ser usada en la toma de decisiones. Así, se espera que todo proceso de evaluación sea:
- Objetivo: Debe medirse y analizarse los hechos definidos tal como se presentan.
- Imparcial: La generación de conclusiones del proceso de evaluación debe ser neutral, transparente e imparcial. Quienes realizan la evaluación no deben tener intereses personales o conflictos con la unidad ejecutora del proyecto.
- Valido: Debe medirse lo que se ha planificado medir, respetando las definiciones establecidas. En caso el objeto de análisis sea demasiado complejo para una medición objetiva, debe realizarse una aproximación cualitativa inicial.
- Confiable: Las mediciones y observaciones deben ser registradas adecuadamente, preferentemente recurriendo a verificaciones in-situ.
- Creíble:Todas las partes involucradas en el proyecto deben tener confianza en la idoneidad e imparcialidad de los responsables de la evaluación, quienes a su vez deben mantener una política de transparencia y rigor profesional.
- Oportuno: Debe realizarse en el momento adecuado, evitando los efectos negativos que produce el paso del tiempo.
- Útil: Debe ser útil y elaborarse en un lenguaje conciso y directo, entendible para todos los que accedan a la información elaborada, los resultados de una evaluación no deben dirigirse sólo a quienes tienen tienen altos conocimientos técnicos sino que debe servir para que cualquier involucrado pueda tomar conocimiento de la situación del proyecto.
- Participativo:Debe incluirse a todos los involucrados en el proyecto, buscando de reflejar sus experiencias, necesidades, intereses y percepciones.
- Retroalimentador:Un proceso de evaluación debe garantizar la diseminación de los hallazgos y su asimilación por parte de los involucrados en el proyecto (desde las altas esferas hasta los beneficiarios), para así fomentar el aprendizaje organizacional.
- Costo/eficaz:La evaluación debe establecer una relación positiva entre su costo (económico, de tiempo y recursos) y su contribución en valor agregado para la experiencia de los involucrados en el proyecto.
Diseños de evaluación
En general, cualquier forma de evaluación de proyectos se basa en los conceptos y procedimientos de la
metodología de la investigación científica, sin embargo cabe precisar que cuando se efectúa una evaluación de proyectos de tipo
de resultado o
de impacto es necesario asumir un diseño específico de investigación. Alguno de estos diseños son los siguientes:
Evaluación sólo después
Es un diseño simple que carece de
línea de base. Su principal defecto es tener poca capacidad para explicar los efectos alcanzados por un proyecto.
Su esquema es el siguiente:
.......... X .......... A1
- "X" es la intervención del proyecto
- "A1" es la población objetivo del proyecto al final de la intervención
Evaluación simple antes y después
Este diseño permite comparar la situación incial de la población objetivo contra la situación final, es decir luego de realizado el proyecto. La relación causa-efecto entre el proyecto y sus resultados es más clara pero aún no es precisa ya que pueden haber intervenido causas externas no controladas.
Su esquema es el siguiente:
A .......... X .......... A1
- "X" es la intervención del proyecto
- "A" es la línea de base (situación inicial de la población objetivo)
- "A1" es la población objetivo del proyecto al final de la intervención
Diseño cuasiexperimental
Este diseño permite realizar una evaluación antes y después de la intervención del proyecto, comparando los hallazgos además con un grupo control para los resultados "después" de la intervención. La precisión de este diseño es mucho mayor que el de los anteriores y por su viabilidad técnica es el más recomendado.
Su esquema es el siguiente:
A .......... X .......... A1
......................... B
- "X" es la intervención del proyecto
- "A" es la línea de base
- "A1" es la población objetivo del proyecto al final de la intervención
- "B" es un grupo de comparación al finalizar el proyecto, con similares características a la población objetivo y que no ha tenido una intervención similar
Diseño experimental clásico
Este diseño permite también efectuar una comparación antes y después del proyecto, pero además también permite efectuar una comparación antes y después en grupos de similares características que no hayan estado influenciados por una intervención similar a la del proyecto. Su capacidad de explicación es bastante alta, pero sus costos y dificultad técnica también se incrementan.
Su esquema es el siguiente:
A .......... X .......... A1
B ....................... B1
- "X" es la intervención del proyecto
- "A" es la línea de base
- "A1" es la población objetivo del proyecto al final de la intervención
- "B" es un grupo de comparación antes del inicio del proyecto, similar al grupo objetivo con el que se realizó la línea de base
- "B1" es un grupo de comparación al finalizar el proyecto
Diseño experimental complejo
Es un diseño muy complicado, además de tener un altísimo costo, por lo que su aplicación merece una fundamentación muy amplia. Con este tipo de estudios se busca determinar la influencia de cada componente del proyecto, e incluso de la combinación de diversos componentes en un proyecto.
Su esquema es el siguiente:
A .......... X .......... A1
B .......... x1 ......... B1
C .......... x2 ......... C1
"X" es la intervención de un componente del proyecto.
- "A" es la línea de base del componente correspondiente
- "A1" es la población objetivo del proyecto al final de la intervención, independiente de los otros grupos de comparación
"X2" es la intervención de un segundo componente del proyecto
- "B" es la línea de base del componente correspondiente
- "B1" es un grupo de comparación al finalizar el proyecto, independiente de los otros grupos de comparación
"X3" es la intervención de un tercer componente del proyecto
- "C" es la línea de base del componente correspondiente
- "C1" es un grupo de comparación al finalizar el proyecto, independiente de los otros grupos de comparación
Dificultades en la evaluación de proyectos
La labor de evaluación de proyectos no es fácil y conlleva múltiples dificultades, muchas de ellas de orden metodológico pero también de orden político.
- Falta de disponibilidad de información.
- No contar con personal calificado para efectuar el trabajo.
- Clientelismo de la población beneficiaria y de los encargados de la ejecución del proyecto.
- Carencia de un sistema de evaluación y monitoreo, por lo que no se conoce el proceso desarrollado.
- Resistencias de la comunidad. En este caso muchas veces ocurre que la población ha recibido muchas promesas incumplidas por parte de políticos de turno o bien se ha generado una expectativa muy alta frente al proyecto, por lo cual desarrolla una actitud contraria hacia éste; también se presentan resistencias debido a los prejuicios o ignorancia de los beneficiarios.11
Bibliografía
- Aramburú, Carlos Eduardo (2001). «Diagnóstico, línea basal y población objetivo». Gerencia social. Diseño, monitoreo y evaluación de proyectos sociales. Lima-Perú: Universidad del Pacífico. ISBN 9972-603-32-6.
- Banco Interamericano de Desarrollo (BID) (1997). Evaluación: Una herramienta de gestión para mejorar el desempeño de los proyectos. New York, USA: BID.
- Bobadilla Díaz, P., Del Águila Rodríguez, L. y Morgan, M. de la L. (1998). Diseño y evaluación de proyectos de desarrollo. Lima-Perú: Pact-USAID.
- Juarez C., Socorro. Sistema de Administración Integral para la E.B.R.C.E.B.D.F.
- Loli Pineda, Alejandro y López Vega, Ernestina (1999). Participación comunal en la solución de problemas psicosociales. Lima, Perú: Universidad Nacional Mayor de San Marcos.
- Miklos, Tomás; Tello, Ma. Elena. Planeación Interactiva.
- Medianero Burga, D. (1998). Sistema de diseño de proyectos de cooperación técnica. Lima, Perú: CEMPRO.
- Pérez Serrano, G. (1999). Elaboración de proyectos sociales. Casos prácticos. Madrid, España: Narcea. ISBN 84-277-1041-0.
- Roca, Florencia; Rojas Arzú, Jorge (2012). Evaluación de Proyectos para Emprendedores. Amazon Kindle Publishing. ASIN: B00ANAQ1ZU [1].
- Vásquez, E.; Aramburú, C. E.; Figueroa, C. y Parodi, C. (2001). Gerencia social. Diseño, monitoreo y evaluación de proyectos sociales. Lima-Perú: Universidad del Pacífico. ISBN 9972-603-32-6.
EVALUACIONES DE IMPACTO Y EL CICLO DEL PROYECTO
PASOS PARA EVALUAR EL IMPACTO DE UN PROGRAMA SOCIAL
Para las evaluaciones ex-ante, el diseño del grupo de control será representado por la situación actual de pobreza de los beneficiarios del proyecto (el “antes”, línea base o situación sin proyecto), y el grupo de tratamiento corresponderá a la simulación de la situación con proyecto (el “después”). Así, el impacto del proyecto será la diferencia en cualquier variable de resultado antes y después de la ejecución del proyecto.
