Evaluación

Por medio del Programa de Monitoreo y Evaluación (M&E), el Instituto para Formación en Operaciones de Paz analiza la eficacia de los programas del Instituto. El staff del POTI recaba datos por un período de nueve meses tanto antes como inmediatamente después de que los estudiantes culminan un curso a través del Instituto, transcurridos tres meses y nueve meses desde la culminación del curso, y por medio de grupos focales de investigación cualitativa.

Elaboración y Diseño Pedagógico de Los Cursos del POTI

El Instituto desarrolla cursos contratando como autores a destacados expertos y asociándose con prestigiosas organizaciones, oficinas y organismos de la ONU y Centros Nacionales de Capacitación en Mantenimiento de la Paz (NPTC por su sigla en inglés). Los cursos que se desarrollan dentro de ese marco de cooperación son tres cursos regionales sobre la resolución 1325 del Consejo de Seguridad y la Agenda de la mujer, la paz y la seguridad, elaborado en colaboración con ONU Mujeres; el curso Ebola Virus Disease: Awareness and Precautions for Peacekeeping Personnel, elaborado en colaboración con la Organización Mundial de la Salud (OMS); Mine Action and Explosive Hazard Management: Humanitarian Impact, Technical Aspects, and Global Initiatives, elaborado en colaboración con el Servicio de Acción contra las Minas de la ONU (UNMAS), el cual es obligatorio para todos los miembros entrantes del personal de UNMAS y UNOPS; Core Pre-deployment Training Materials, elaborado conjuntamente con los NPTC de Australia, Chile, Alemania, Ghana y Suecia; y El papel de la Policía de las Naciones Unidas en las operaciones de paz, elaborado en colaboración con la Policía Federal Australiana.

La mayoría de los estudiantes del POTI provienen de países en vías de desarrollo o actúan en misiones donde no se cuenta con acceso por banda ancha ininterrumpido a Internet, o bien este es poco confiable o costoso. Para salvar tales limitaciones técnicas, el Instituto imparte sus cursos en modalidad “high-tech”/“low-tech”, aprovechando así al máximo la accesibilidad. Para capacitarse a través del POTI, los estudiantes solo necesitan tener acceso a Internet en dos oportunidades: una para inscribirse y descargar el curso en formato PDF, y la otra para dar el Examen final. Ello les permite estudiar el material del curso sin estar conectados a Internet hasta que estén preparados para dar el examen.

Cada lección se inicia con la enumeración de los objetivos; muchos de los cursos incluyen además un video en el que el autor da una introducción y detalla los puntos clave de cada lección. Por otra parte, los estudiantes pueden enviar consultas directamente a los autores a través de su salón de aula virtual en línea. Por lo general, las lecciones tienen de 15 a 25 páginas de extensión y concluyen con un Cuestionario de fin de lección, el cual suele constar de 10 preguntas sobre la información impartida en esa lección. A los estudiantes se les proveen las respuestas correctas para que las cotejen con las suyas, confirmen sus conocimientos y, en caso necesario, repasen aquellas secciones que requieran estudio adicional. Cuando el estudiante ha terminado todas las lecciones de un curso y se siente suficientemente preparado, puede presentarse al Examen Final del curso. El Instituto cuenta con bancos de aproximadamente 100 preguntas para cada curso y extrae 50 preguntas en orden aleatorio cada vez que un estudiante se presenta a un examen. De esa manera, el examen es único para cada estudiante de cualquier parte del mundo. (Dado que el curso sobre el Ébola es más breve, el examen correspondiente tiene menos preguntas.) Los estudiantes deben obtener en el examen final un puntaje mínimo de 75% para obtener el Certificado de Aprobación.


Metodología Para El Monitoreo y La Evaluación

El Instituto lleva adelante un programa de Monitoreo y Evaluación continua tendiente a medir la eficacia de sus programas. Para ser considerados eficaces, los programas del POTI deben tener un impacto positivo y medible en el desempeño de las personas destacadas en operaciones de paz. Aunque el término “M&E” usualmente significa “Monitoreo y evaluación”, el Instituto también lo define como “Medida de la eficacia”, lo cual quiere decir medida de la eficacia de la capacitación y del personal capacitado en el terreno.

El programa de M&E del Instituto abarca ambas definiciones y permite a los estudiantes evaluar su experiencia con el POTI tanto como el POTI evalúa su propio impacto en el alumnado. En nuestra metodología de M&E se emplean siete puntos de recolección de datos:

  1. Prueba preliminar: Antes de iniciar el curso, el alumno hace una prueba preliminar de 10 preguntas. Con esta se determina la base de conocimientos del estudiante antes de comenzar su capacitación, y ello permite comparar su desempeño pre- y pos-curso.
  2. Examen Final del curso: Una vez que el estudiante ha estudiado todas las lecciones y respondido los Cuestionarios de fin de lección, se presenta a un Examen final de 50 preguntas (20 para el curso del Ébola).
  3. Feedback sobre el curso: Luego de que aprueba el Examen final con un puntaje mínimo de 75%, al alumno se le indica que complete un cuestionario de 17 preguntas para que haga su evaluación sobre el curso.
  4. Sistema de revisión del curso de cinco estrellas: Una vez que el estudiante culmina el curso, puede calificarlo por medio de un sistema de calificación de cinco estrellas al que accede a través del sitio web del Instituto. Además, los estudiantes pueden publicar comentarios que otros podrán ver antes de inscribirse. El POTI no edita ni oculta tales comentarios.
  5. Encuesta de seguimiento a los tres meses: Tres meses después de inscribirse en un curso del POTI, el alumno recibe un cuestionario de seguimiento de 13 preguntas. Este incluye preguntas de múltiple opción, de múltiple selección, de respuesta breve y de respuesta extensa.
  6. Encuesta de seguimiento a los nueve meses: Nueve meses después de inscribirse, el alumno recibe una encuesta de seis preguntas.
  7. Grupos focales de investigación cualitativa: Una selección de alumnos participa en un grupo focal dirigido por Skype, y responde nueve preguntas formuladas por el staff del POTI. Las respuestas se registran y analizan para determinar tendencias.

Sistema de Evaluación del Curso de Cinco Estrellas

El Instituto emplea el sistema de calificación del curso para que quienes aspiran a ser sus alumnos se enteren de las opiniones y comentarios escritos de los estudiantes que ya se han capacitado. Una vez que culmina un curso, al alumno se le da la oportunidad de enviar una evaluación de ese curso calificando su experiencia sobre la base de una escala de una a cinco estrellas. También puede enviar un comentario escrito. Tal evaluación es automáticamente publicada en el sitio web del Instituto como evaluación del curso. POTI no censura ni edita estas evaluaciones, pero sí modera su comunidad en línea para evitar el envío de comentarios inapropiados o no pertinentes. A la fecha, todas las calificaciones de los cursos enviadas por los estudiantes han sido aportes razonables y constructivos a nuestra comunidad virtual. Para ver las calificaciones de algún curso, visite página del curso y seleccione el nombre del curso. Las calificaciones promedio en estrellas y todos los comentarios están disponibles en la página específica del curso.