Evaluación de Proyectos Socioeducativos

 "Técnicas e instrumentos en la evaluación de un proyecto social"

La metodología, técnica e instrumento utilizar en una evaluación, deben tenerse en cuenta los objetivos de la evaluación, los recursos disponibles y los tiempos establecidos para su desarrollo.

Características de la investigación cuantitativa y cualitativa

El evaluador tiene que seleccionar una metodología y diseñar los instrumentos que utilizará para recolectar la información según los objetivos de su evaluación. Las técnicas de evaluación se clasifican en dos grandes grupos según el tipo de investigación y análisis que se realiza: 

Técnicas cuantitativas:	Técnicas cualitativas:
Se apoyan en la medición objetiva, persiguen obtener resultados extrapolables a un grupo específico de la población, bien mediante la selección de una muestra del mismo, un número estadísticamente significativo de dicha población, o bien mediante el estudio de todo el grupo, censo.	Permiten obtener información significativa e inmediata sobre las percepciones y prioridades de las partes interesadas y las condiciones y procesos que pueden haber afectado el desarrollo de un programa o proyecto, sin embargo se debe tener en cuenta la existencia de limitaciones en su utilidad,

Premisas principales de cualquier investigación social 

El procedimiento básico para el diseño y desarrollo de una evaluación se presenta a continuación:

 1. Clarificar y definir qué información se espera obtener. 

 2. Determinar quiénes serán los sujetos de la encuesta.

3. Elaborar el cuestionario

4. Aplicar el cuestionario.

5. Sistematizar y analizar los resultados.

Técnicas, metodologías e instrumentos de evaluación 

Existen diferentes instrumentos y técnicas que se utilizan para evaluar un proyecto, según se trate de una investigación cuantitativa o cualitativa y algunos autores manejan una tercera clasificación solo por la forma como se ven involucrados los diversos participantes de un proyecto. Se reconocen ampliamente como participativas, porque la participación es una de las premisas básicas para el desarrollo y éxito de los proyectos sociales.

Técnicas cuantitativas

a) Encuestas: está dirigida a obtener información de gran número de personas, en este caso el cuestionario cuenta con un número limitado de preguntas y de opciones de repuesta, este factor facilita la organización de la información pero también puede generar que se pierdan de vista otras posibles respuestas que se obtienen con las preguntas abiertas.

  

b) Medición directa o medición por observación: consiste en recopilar datos de acuerdo a un esquema determinado y es muy utilizada en contextos de proyectos de desarrollo,

Los pasos a seguir en la medición directa son los siguientes:

1.- Definición del objetivo a medir mediante esta técnica.

2.-Delimitación de las propiedades a recopilar. 

3.-Construcción de indicadores de resultados cuantitativos.

4.-Contraste y sistematización de la información (entre dos grupos, entre dos tiempos, en comparación con una línea base, etc.) 

5.-Análisis de los datos. 

 

La medición directa debe ir acompañada por otros modos de análisis más valorativos y cumplir con ciertos criterios entre otros:

1.-Definición estricta y concreta de los comportamientos elegidos para ser observados.

2.-Indicación de las condiciones en las que la observación debe realizarse.

3.-Posibilidad de un tratamiento cuantitativo.

4.-Significado y posible inferencia a efectuar sobre lo observado, es decir; la validez de la observación. 5.-El problema de la estabilidad de las valoraciones, su fiabilidad. 

c) Técnicas de análisis económico (ACE o ACB): 

Existen diversas técnicas para realizar un análisis económico:

• Análisis de costo - efectividad (ACE), adecuado para proyectos de desarrollo social, que no sólo producen bienes y servicios tangibles y expresables en unidades monetarias, sino que además producen otro tipo de beneficios, intangibles y que tienen un mayor grado de dificultad para cuantificar.
•  Análisis de costo beneficio (ACB) que nos permite evaluar la eficiencia de un proyecto y en este sentido nos permite evidenciar los puntos débiles en términos de recursos, sobre los que se hace necesario tomar decisiones para su mejora.

                  El procedimiento general para el ACB incluye:

1.-Confeccionar un flujo de costos.

2.-Transformar los costos para el período de un año.

3.-Construir una matriz de costos reales contra costos programados. 

• El ACE pretende determinar, en la evaluación, hasta qué punto el empleo de los recursos tiene un costo efectivo, se parte de la premisa de que la relación deseable en una circunstancia o condición de pocos recursos y grandes necesidades es alcanzar la mayor efectividad posible, esto implica lograr los resultados y objetivos deseables, con los recursos disponibles o más aún con el menor costo. 

Técnicas cualitativas

a) Estudios de caso: es una investigación de proceso, sistemática y profunda de un caso en concreto, el objetivo es contrastar una serie de hipótesis, establecidas previamente, sobre el programa o proyecto, a través de entrevistas y encuestas y es el “contexto” el concepto fundamental del análisis.  

Los estudios de caso permiten: 

• Investigar fenómenos en los que se busca dar respuesta a cómo y por-qué ocurren.
• Estudiar un tema o múltiples temas a la vez.
• Analizar los fenómenos desde múltiples perspectivas y no desde la in-fluencia de una sola variable.
• Explorar en forma más profunda y obtener un conocimiento más amplio sobre cada fenómeno, lo cual permite la aparición de nuevas señales sobre los temas que emergen. 
• Realizar investigaciones a pequeña escala, en un marco limitado de tiempo, espacio y recursos pero con mayor profundidad.  
• Promover el trabajo cooperativo y la incorporación de distintas ópticas profesionales a través del trabajo interdisciplinario. 

b) Entrevistas individuales: es una forma especial de encuentro directo entre el evaluador y el entrevistado, permite indagar sobre varias áreas de un mismo tema a través de la selección de informantes y mediante preguntas diversas.

Para el diseño e implementación de una entrevista es importante esclarecer qué información se espera obtener:

• Definir quiénes son los actores clave que brindarán la información relevante. Construir la guía de entrevista. La entrevista puede ser dirigida o semidirigida. 
• Aplicar las entrevistas. Para realizar una entrevista, es importante establecer una relación de confianza entre entrevistador y el entrevistado. 
• El entrevistador puede realizar en una jornada de trabajo y que es importante que domine algunas técnicas (capacidad de escucha y empatía) 

c) Grupos focales: se centra en un tema único, a partir del cual se busca profundizar, confrontar y justificar posiciones, además de estimular nuevas ideas. En esta herramienta, el foco está puesto en la interacción y el debate.

Para el diseño e implementación de un grupo foca se recomienda:

1. Seleccionar el tema y los subtemas que iniciarán y guiarán el grupo focal. 

2. Seleccionar y convocar a los actores que participarán. 

 3. Realizar una guía que oriente las intervenciones del moderador. 

4. Implementar el grupo focal. 

 5. Contar con un moderador que guía al grupo y domina, a la vez, los temas y objetivos de la evaluación.

d) Técnica Delphi-panel de expertos: busca respuestas consensuadas a cuestiones específicas, es decir que potencia la generación de acuerdos entre diversas opiniones y percepciones de expertos calificados en los temas a investigar, por eso, la condición sine qua non para que se pueda realizar este proceso es la calidad y pertinencia de los profesionales que se convoca.

Los puntos principales para realizar el método Delphi son: 

• Seleccionar a los expertos. 
• Pactar modelo de trabajo del panel.
• Construir consensos. 

e) Análisis Documental: consiste en la búsqueda de información a través de la revisión de documentos diversos: bibliografía, estadísticas previamente elaboradas, informes varios o cualquier tipo de material no producido directamente por la evaluación.

En general, se recurre al análisis de datos cuantitativos, pero también puede tratarse de datos cualitativos y provienen de diversas fuentes: 

1.-Datos que existen, pero que no están publicados. 

2.-Informes publicados por agencias del gobierno, organismos internacionales, universidades, organizaciones sin fines de lucro o empresas. 

3.-Informes previos del propio programa a evaluar: informes del proyecto, pero también otros documentos (como artículos, actas de reuniones, etc.).

       Para utilizar de forma adecuada la información documental se sugiere: 

 1. Investigar, qué tipo de datos están disponibles y, entre ellos, seleccionar los que más se acercan a la información que se busca recopilar. 

 2. Identificar el objetivo para el cual fue producida la información.

 3. Recolectar y de ser necesario, volver a sistematizar los datos obtenidos para el objetivo que se busca. 4. Considerar la antigüedad de los datos y la escala del análisis. 

 5. El análisis documental es útil para la estimación de la línea de base de un proyecto.

 

Técnicas Participativas

Es una metodología que supone la participación de la población local, los organismos de desarrollo y los encargados de la formulación de políticas, quienes conjuntamente deciden la manera de medir los avances y resultados previstos.

Las ventajas de un proceso de evaluación participativo son:

1. Promueve la definición de parámetros compartidos de resultado y desempeño.
2. Fomenta la corresponsabilidad.
3. Facilita la confianza entre las partes. 
4. Crea compromiso entre los involucrados. 
5. Fomenta el aprendizaje, la gestión y otras capacidades locales de los beneficiarios. 

•  Intervención.
•  Negociación. 
•  Aprendizaje. 
•  Flexibilidad.

Las técnicas participativas pueden fortalecer la autonomía de los beneficiarios de un proyecto ayudándoles a encontrar ámbitos de responsabilidad y proporcionándoles las aptitudes necesarias para realizar su trabajo.