FASE 6. Definir el plan de evaluación

¿Qué pasos debemos completar?

Paso 1: Seleccionar el tipo de la evaluación

ALGUNOS EJEMPLOS DE INDICADORES FRECUENTES DE EVALUACIÓN DE PROCESO

Indicador

Procedimiento de recoleción de datos Resultados, requisitos e interpretación Utilidad

Método e instrumento

Cobertura (o alcance): número o proporción de la población diana y/o de la población intermediaria alcanzada. Instrumento: cuestionarios, entrevistas o registros de observación para recopilar información sobre:

Algunas preguntas sobre cobertura:
¿Cuántas personas han participado en la actividad / tratamiento?
¿A cuántas personas se ha repartido el material de la intervención?
¿Qué características tienen las personas que participan en la actividad / tratamiento?


Información cuantitativa y cualitativa por parte de los aplicadores

  • Se expresa en números absolutos y porcentajes.
  • Se requiere información cualitativa del perfil de participantes.
  • Conocer la población a alcanzar con la intervención (número y características).
  • Marcar un umbral mínimo de cobertura (ej.: llegar al 40% de la población).
  • Saber si hay que ajustar las actuaciones para alcanzar a la población estimada que participará en la intervención.
  • Interpretar los resultados de la intervención según su alcance sobre la población.
Exhaustividad (realización de las acciones): número y tipo de acciones realizadas. Es un indicador de calidad de la intervención. Instrumento: cuestionarios, entrevistas o registros de observación para recopilar información sobre:
  • Número y tipo de actuaciones realizadas.
  • Duración de la actividad / tratamiento.
  • Ubicación de la intervención.
  • Procedimiento y materiales utilizados.
  • Incidencias, etc.

Algunas preguntas sobre realización de las acciones:
¿Qué porcentaje de las actividades se ha desarrollado?
¿Qué actividades se han aplicado en la intervención?
¿Qué procedimientos y materiales se han utilizado?
¿Cuánto han durado las actividades?


Información cuantitativa y cualitativa por parte de los aplicadores

  • Se expresa en números absolutos y porcentajes o se describen las condiciones de aplicación si la información recopilada es cualitativa.
  • Conocer las actuaciones realizadas.
  • Para valorar la calidad: marcar un umbral mínimo de realización y del tipo de actuaciones (ej.: realizar al menos el 70% de las acciones previstas).
  • Conocer el grado de implementación de las actuaciones y/o de la intervención en general.
  • Ajustar las acciones del plan de actuación.
  • Interpretar los resultados de la intervención según el nivel de realización de las acciones.
Fidelidad (adhesión). aplicación de las acciones según el plan previsto Es un indicador de calidad de la intervención. Instrumento: cuestionarios, entrevistas o registros de observación para recopilar información sobre:
  • Número y tipo de actuación realizada.
  • Duración de la actividad.
  • Ubicación de la intervención.
  • Procedimiento y materiales utilizados.

Algunas preguntas sobre fidelidad:
¿El programa se ha implementado según lo establecido en el plan de actuación?
¿Cómo se ha aplicado el plan de actuación?
¿Cuánto han durado las acciones?

Información cuantitativa y cualitativa por parte de los aplicadores
Ejemplo de instrumento para medir la fidelidad al plan de intervención.

  • Se expresa en números absolutos y porcentajes o se describen las condiciones de aplicación si la información recopilada es cualitativa.
  • Se requiere tener un plan de actuación previo.
  • Para valorar la calidad: marcar un umbral mínimo de realización respecto al número de acciones o sesiones y a su tipología (ej.: realizar al menos el 60% de las actuaciones previstas del contenido X).
  • Conocer el nivel de ajuste o discrepancia de la intervención respecto a las actuaciones previstas.
  • Interpretar los resultados de la intervención según el grado de fidelidad al plan previsto.
Adecuación de las actuaciones. Relevancia cultural, comprensión y adecuación de las acciones Es un indicador de calidad de la intervención. Instrumento: cuestionarios, entrevistas o registros de observación para recopilar información sobre:
  • Comprensión y relevancia de los contenidos.
  • Adecuación (cultural) del lenguaje.
  • Adecuación del los materiales / formato / soporte de los mensajes.

Algunas preguntas sobre adecuación:
¿Se comprenden los contenidos de las actividades?
¿La información se transmite en un lenguaje adecuado a las características de la población?
¿El formato de las acciones es adecuado?
¿Cómo se valora la accesibilidad a la intervención?


Información cuantitativa y cualitativa por parte de la población diana, la población intermediaria y los aplicadores.

  • Se expresa en números absolutos y en porcentajes, o se describen las condiciones de adecuación si la información recopilada es cualitativa.
  • Conocer el grado de adecuación de la intervención.
  • Adaptar las actuaciones a las características de la población y de los aplicadores.
  • Modificar o eliminar componentes del plan de actuación que provoquen rechazo en la población diana o los aplicadores.
Satisfacción de los participantes. Agradabilidad de las acciones Es un indicador de calidad de la intervención. Instrumento: cuestionarios, entrevistas o registros de observación para recopilar información sobre:
  • Satisfacción de los usuarios de la intervención (puntuación o escala).
  • Satisfacción de los aplicadores de la intervención al realizarla (puntuación o escala).
  • Descripción de lo que más / menos ha gustado.
Algunas preguntas sobre satisfacción:
¿Cuál es la satisfacción general con el programa?
¿Qué es lo que más y/o menos ha gustado?
¿Recomendaría esta actividad / intervención?
Información cuantitativa y cualitativa por parte de la población diana, la población intermediaria y los aplicadores.
  • Se expresa en números absolutos y en porcentajes, o se describe el grado de satisfacción si la información recopilada es cualitativa.
  • Conocer la satisfacción de los participantes / aplicadores con las actuaciones y/o la intervención en general.
  • Adaptar las actuaciones a las características de la población y los aplicadores.
  • Cambiar componentes del plan de actuación para mejorar la satisfacción.
Implicación de los participantes. Interés y participación en las acciones Es un indicador de calidad de la intervención. Instrumento: cuestionarios, entrevistas o registros de observación para recopilar información sobre:
  • Interés de la población en la intervención.
  • Participación de la población en las actividades.

Algunas preguntas sobre implicación:
¿Cómo se valora el interés de la población en la intervención?
¿En qué medida la población participa en la intervención?

Información cuantitativa y cualitativa por parte de la población diana, la población intermediaria  y los aplicadores. Ejemplo de instrumento para medir la implicación de los participantes en una actividad.

  • Se expresa en números absolutos y en porcentajes, o se describe el nivel de implicación de los participantes si la información recopilada es cualitativa.
  • Conocer la implicación de los participantes / aplicadores con las actuaciones y/o la intervención en general.
  • Adaptar las actuaciones a las características de la población y aplicadores.
  • Cambiar componentes del plan de actuación para aumentar el grado de implicación.

Puede encontrar información adicional sobre la evaluación y los indicadores de calidad de la intervención de proceso en el siguiente enlace.