Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación...

40
1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación Proyecto Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Lugar de intervención Mozambique Ciudad de Maputo Período de ejecución evaluado 15/09/2010 a 31/03/2013 Financiación AECID (75%) 10-PR1-0548 Ejecutor Consejo Interhospitalario de Cooperación (CIC) Informe elaborado por: Fernando de los Ríos Martín Maputo Mozambique [email protected] Fecha de la evaluación: Enero -Febrero 2014

Transcript of Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación...

Page 1: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Sector 5 / Fernando de los Ríos Martín Informe de Evaluación

1

VERSIÓN: final de 28/02/2014

Evaluación externa final

Informe de Evaluación Proyecto Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548

Lugar de intervención Mozambique

Ciudad de Maputo

Período de ejecución evaluado 15/09/2010 a 31/03/2013 Financiación AECID (75%) 10-PR1-0548

Ejecutor Consejo Interhospitalario de Cooperación (CIC)

Informe elaborado por:

Fernando de los Ríos Martín Maputo Mozambique [email protected]

Fecha de la evaluación: Enero -Febrero 2014

Page 2: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

i

ÍNDICE INFORME DE EVALUACIÓN ________________________________________________________ 1 0. Resumen Ejecutivo _________________________________________________________________ 1

0.1. Objetivos de la evaluación _________________________________________________ 1 0.2. Contexto ______________________________________________________________ 1 0.3. Conclusiones y recomendaciones ____________________________________________ 2 0.4. Lecciones aprendidas _____________________________________________________ 4

1. Introducción ______________________________________________________________________ 6 1.1. Objetivo e informe de evaluación ____________________________________________ 6 1.2. Preguntas y criterios de evaluación: definición __________________________________ 6 1.3. Equipo de evaluación _____________________________________________________ 8

2. Descripción resumida de la intervención evaluada ________________________________________ 9 2.1. Antecedentes y fase actual _________________________________________________ 9 2.2. Implantación geográfica __________________________________________________ 10 2.3. Organización y gestión ___________________________________________________ 10

3. Metodología _____________________________________________________________________ 10 3.1. Principios metodológicos _________________________________________________ 10 3.2. Fases ________________________________________________________________ 10 3.3. Técnicas aplicadas ______________________________________________________ 11 3.4. Restricciones a la evaluación _______________________________________________ 11

4. Análisis de las informaciones y evidencias recogidas _____________________________________ 11 4.1. Pertinencia ___________________________________________________________ 11 4.2. Eficacia ______________________________________________________________ 12 4.3. Eficiencia _____________________________________________________________ 14 4.4. Impacto ______________________________________________________________ 15 4.5. Viabilidad ____________________________________________________________ 16 4.6. Coherencia ___________________________________________________________ 17 4.7. Alineamiento __________________________________________________________ 18 4.8. Participación __________________________________________________________ 19 4.9. Cobertura ____________________________________________________________ 20

5. Conclusiones y recomendaciones _____________________________________________________ 20 6. Lecciones aprendidas ______________________________________________________________ 24 ANEXOS ______________________________________________________________________ 1 ANEXO1: Términos de Referencia _________________________________________________________ 1 ANEXO2: Agenda de trabajo fase II _______________________________________________________ 2 ANEXO3: Fuentes consultadas ___________________________________________________________ 3 ANEXO4: Formularios enviados a los participantes ___________________________________________ 4

Page 3: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

ii

ACRÓNIMOS

AECID Agencia Española de Cooperación Internacional para el Desarrollo CIC Consejo Interhospitalario de Cooperación

HCM Hospital Central de Maputo MISAU Ministerio de Salud

PARP Plan de Acción para la Reducción de la Pobreza PNAR Programa Nacional de Anestesia PNOT Programa Nacional de Traumatología y Ortopedia

Page 4: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

1

INFORME DE EVALUACIÓN

0. Resumen Ejecutivo

0.1. Objetivos de la evaluación

El presente informe trata sobre la evaluación externa final realizada al proyecto titulado “Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad”, financiado por la Agencia Española de Cooperación Internacional para el Desarrollo a través de la convocatoria de proyectos con el número 10-PR1-0548, e implementado por el Consejo Interhospitalario de Cooperación (CIC). Esta evaluación externa final da respuesta a uno de los requisitos legales de la entidad financiadora para intervenciones de estas características. Por otro lado, se constituye como una herramienta importante de aprendizaje y mejora continua con efectos positivos deseables para la implementación de posteriores intervenciones. La evaluación hace una medida del grado de desempeño y alcance de los resultados, revisa los factores de eficacia y eficiencia de la intervención y del equipo de gestión, y ofrece información sobre las cuestiones relacionadas con otros criterios de evaluación con interés para la entidad ejecutora. A partir del análisis de las cuestiones presentadas, se extraerán las conclusiones y se ofrecerán una serie de recomendaciones para mejorar los puntos débiles de la intervención. Se recogerán también las lecciones aprendidas de esta intervención con aplicación general para toda acción de cooperación al desarrollo.

0.2. Contexto

La intervención titulada “Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad”, forma parte de estas intervenciones en formación técnica especializada para el Hospital Central de Maputo en la cual, además, han sido incorporados otros médicos y personal sanitario de otros hospitales de referencia de Mozambique. Ha sido una intervención financiada de nuevo por la AECID a partir de la convocatoria de proyectos y fue implementada en el periodo de 15/09/2010 a 31/03/2013. La intervención se estructura en un objetivo específico, la mejora de la atención sanitaria del paciente neonatal y el apoyo a la formación especializada para consolidar el desarrollo de las especialidades de cirugía, pediatría, anestesiología, traumatología y otorrinolaringología en el Sistema Nacional de Salud de Mozambique. A través de las acciones a realizar, se espera alcanzar los siguientes resultados: (1) consolidadas las unidades de cirugía torácica y cardiovascular del Hospital Central de Maputo como unidades de referencia y docente a nivel nacional, (2) apoyadas la nueva promoción de médicos residentes en anestesia y las actividades del Programa Nacional de Anestesia del MISAU, (3) mejorada la atención al paciente de trauma con procesos de formación dirigidos a los médicos residentes de trauma y ortopedia, colaborando con las actividades del Programa Nacional de Traumatología y Ortopedia (PNOT) del MISAU, (4) mejorada la formación del los médicos residentes en pediatría e incrementando el acceso de candidatos a la especialización, (5) reducida la morbimortalidad neonatal en los hospitales de Maputo, Cabo Delgado y Nampula mediante la capacitación del personal sanitario que atiende el parto y mejorados los cuidados básicos del recién nacido, y (6) iniciado un programa de capacitación de formación para médicos otorrinolaringólogos dentro del Programa Nacional de Cirugía del MISAU. Las acciones serán desarrolladas casi en su totalidad en el Hospital Central de Maputo. Para algunas actividades de formación, serán incluidas también personas (médicos y personal sanitario) de otros hospitales de referencia de Mozambique. La oficina de representación nacional del CIC en Maputo sirvió de punto de enlace de todos los intervinientes del proyecto. Por un lado, facilitando el trabajo de los médicos españoles que participarán en acciones formativas en Maputo y por otro coordinando el trabajo realizado en España por los médicos mozambiqueños desplazados a este país. Para estas acciones realizadas en España jugará también un papel importante la oficina del CIC en Barcelona y Valencia, así como los propios médicos en los hospitales donde serán llevadas a cabo las acciones. El presupuesto de la intervención asciende a 534.950 EUR, con una participación de la AECID de 399.950 EUR (75%).

Page 5: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

2

0.3. Conclusiones y recomendaciones

Pertinencia La formación de médicos especialistas es una prioridad porque permite la apertura de servicios médicos

únicos en el país.

El proyecto se ha adaptado a necesidades nuevas que han ido surgiendo a lo largo de la intervención y, por lo tanto, ha dado respuesta a las necesidades prioritarias.

Recomendaciones: Necesidad de refuerzo del servicio de pediatría: Uno de los servicios médicos que irían a ser

reforzados según el proyecto inicial era el de pediatría, el cual fue posteriormente eliminado con el objetivo de reforzar otros sectores. Fue realizada posteriormente, además, la identificación de un proyecto relacionado con este servicio, que deberá merecer toda la atención por parte de las agencias donantes dado el carácter prioritario de este servicio en el Sistema Nacional de Salud de Mozambique.

Eficacia Todos los servicios médicos han sido reforzados según lo previsto, a excepción del de anestesia que, por

falta de médicos residentes, no se pudo completar el número de especialistas formados esperado. Las actividades de formación han permitido reforzar los servicios médicos previstos, aunque alguno de

ellos carece de equipamiento o material suficiente para aplicar los conocimientos y capacidades adquiridas.

Los efectos sobre la capacidad de atención y mejora de indicadores sanitarios de actividad no se pueden medir en toda su extensión debido a la falta de fuentes de información adecuadas (Informes del Hospital Central de Maputo).

Recomendaciones: Incluir formación en gestión de equipamientos y material: Dentro de las carencias detectadas en el

Hospital Central de Maputo (y de manera general en todo Mozambique) además de la falta de personal formado, se encuentra la falta de equipamiento y materiales adecuados, muchos de ellos de un solo uso. Frecuentemente el presupuesto de funcionamiento de las unidades sanitarias no permite la adquisición de suficiente stock de estos materiales por lo que su gestión (conservación, mantenimiento, almacenaje, etc.) es de vital importancia para maximizar la capacidad de uso y su disponibilidad. Incluir formaciones relacionadas con estas cuestiones ayudaría a paliar de alguna manera esta deficiencia mientras se espera la mejora de las capacidades financieras del Sistema de Salud.

Mejora del Sistema de Información del Hospital Central de Maputo: Aunque no esté relacionada con la intervención evaluada, se estima procedente realizar una recomendación dirigida a la mejora del sistema de información del Hospital Central de Maputo. Los informes de esta unidad sanitaria siguen el modelo del MISAU, común para todas las unidades sanitarias, y se incluyen datos relacionados con las actividades específicas del Hospital. No obstante no existe una buena herramienta que permita elaborar informes ad-hoc o disponer de esta información de manera rápida y con suficiente calidad. Esto perjudica la capacidad de planificación del Hospital y, en el caso particular de esta intervención, la verificación de los avances alcanzados. Se recomienda, por tanto, mejorar este sistema de información en próximas intervenciones, favoreciendo como está dicho la capacidad de planificación, detección de fragilidades y verificación de logros.

Eficiencia Los gastos han estado ajustados al presupuesto, no detectándose desviaciones importantes. Se ha producido un retraso durante la primera parte de la intervención debido a cambios en la dirección

del Hospital y del MISAU, así como a los cambios realizados en la intervención. Se han hecho, por tanto, dos ampliaciones de la duración del proyecto lo que ha permitido realizar todas las actividades previstas al final del mismo.

Page 6: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

3

La colaboración entre el CIC y el Hospital de Maputo/MISAU es ya de largo recorrido y está consolidada. Esto ha facilitado la ejecución de las actividades y la obtención de todas las autorizaciones y permisos para la incorporación de médicos españoles en Mozambique durante el tiempo de formación y la estancia de médicos mozambiqueños en hospitales españoles.

Gran parte del personal ha sido voluntario (médicos españoles) lo que ha favorecido la eficiencia. La estructura de gestión es mínima, aunque en parte podría delegarse al Hospital Central de Maputo.

Recomendaciones: Gestión delegada al Hospital Central de Maputo: Para mejorar aún más la eficiencia de una

intervención de estas características y reforzar el departamento de administración del Hospital, se recomienda delegar en futuras intervenciones parte de la carga administrativa y de gestión del proyecto en el propio Hospital. Se podría ofrecer asistencia técnica a la persona que llevase el peso de la gestión de la intervención en el Hospital para asegurar que los procedimientos se cumplían de acuerdo con las exigencias del financiador.

Impacto Se ha contribuido de manera importante a la mejora del Sistema de Salud de Mozambique dado que en

estos momentos el Sistema tiene capacidad de ofrecer servicios especializados mejorados. De momento, no obstante, tan sólo aplicables en el Hospital Central de Maputo.

Se han reforzado los planes de formación y la capacidad de docencia para la formación posterior de otros médicos especialistas.

La falta de equipamiento o material fungible puede limitar el impacto de la mejora de las capacidades de los médicos especialistas.

Recomendaciones: Diseminación de las capacidades alcanzadas en el Hospital de Maputo a otros Hospitales: Aunque

ya en la intervención evaluada se han incorporado, como beneficiarios, médicos de otros hospitales fuera de Maputo, la aplicación de las capacidades y conocimientos implicarían la incorporación de equipamiento y el acompañamiento durante el tiempo de implantación de los nuevos servicios o en sus mejoras. De igual forma a como se hace en Maputo, podría realizarse en estos otros hospitales asegurando el impacto a nivel nacional, no solamente restringido al Hospital de Maputo.

Viabilidad Las mejoras alcanzadas en los servicios médicos se mantendrán a lo largo del tiempo dado que el personal

formado permanece en las unidades sanitarias y el esfuerzo financiero necesario es asumible. La continuidad de la formación de nuevos médicos residentes sí podrá verse afectado por la falta de

financiación propia. La falta de presupuesto adecuado para la compra de equipamientos y material fungible podrá, en algunos

casos, comprometer la aplicación de los conocimientos y capacidades. No se establece una relación de dependencia, aunque la formación de médicos residentes con calidad

todavía necesita, en gran medida, financiación externa.

Recomendaciones: Asegurar la existencia de equipamiento y material adecuado: Es un aspecto clave ya mencionado en

otros criterios pues, como se puede ver, afecta a varios de ellos. Para facilitar la planificación y la elaboración de los presupuestos por parte del Hospital Central de Maputo en los que se incluyan este tipo de materiales, se recomienda elaborar una pequeña herramienta para el cálculo de necesidades de material fungible. Esta herramienta servirá para presentar las necesidades de manera más objetiva y ayudará a los gestores a la hora de priorizar las acciones a financiar.

Reforzar la capacidad de implementación de los planes de formación de médicos especialistas: De nuevo, como en la anterior recomendación, los gestores de los Hospitales necesitan tener evidencias de las necesidades presentadas en las que se pueda apreciar el impacto y la urgencia. Con relación a la formación de médicos, CIC podría elaborar en futuras intervenciones un pequeño estudio del impacto de la formación de médicos especialistas con el que justificar la aplicación de fondos para la

Page 7: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

4

continuidad de los programas de formación especializada. Esto ayudaría a obtener financiación, tanto interna, como externa (búsqueda de financiación externa).

Coherencia Coherencia interna adecuada, dirigiéndose las actividades y resultados pretendidos a la resolución de los

problemas detectados. La falta de personal médico especializado y los altos niveles de mortalidad mejoran a partir de las actividades de formación, la realización de prácticas quirúrgicas, tanto en Mozambique como en España, la adquisición de libros y otro material bibliográfico, y la elaboración de protocolos de formación especializada.

La intervención presenta coherencia externa al estar integrada en la estrategia de salud de la Cooperación española y coordinar las acciones con otras entidades presentes en el mismo sector y zona de intervención. En particular se establecen relaciones de sinergia con otros proyectos implementados en el Hospital Central de Maputo.

Alineamiento Alineamiento con el Plan de Reducción de la Pobreza Absoluta (2011-2014) en Mozambique, con el Plan

Estratégico del Sector Salud del MISAU (2007-2012) y con la Estrategia de Salud de la Cooperación española en Mozambique (2010-2013).

Alineamiento con los procedimientos administrativos y de gestión de las autoridades mozambiqueñas.

Participación Delimitación clara de los participantes en el proyecto. Participación de todos los intervinientes según lo esperado a excepción del número total de médicos

residentes del área de anestesia que no son suficientes. La colaboración de largo recorrido entre CIC y el Hospital Central de Maputo ha facilitado la participación

activa de todos los intervinientes. Los encuentros ad-hoc y la comunicación directa entre los médicos han sido mecanismos de participación

suficientes para el mantenimiento de la dinámica de las actividades y consecución de resultados.

Recomendaciones: Elaboración de informes del Hospital sobre la intervención: A pesar de que se verifica una

participación adecuada de todos los intervinientes según lo esperado, la parte de gestión se vería reforzada con la elaboración de informes de actividades y logros por parte de los beneficiarios (responsables de los departamentos del Hospital). Sería una herramienta de seguimiento y verificación importante para futuras intervenciones.

Cobertura Cobertura final menor de la esperada por la eliminación de uno de los resultados (pediatría) y la no

existencia del número esperado de médicos residentes del área de anestesia. Todos los colectivos han sido incorporados: médicos residentes del Hospital Central de Maputo y médicos

de otros hospitales para determinadas acciones de formación. No se detectan problemas de acceso a las actividades por parte de los beneficiarios dado el número

limitado de éstos y la óptima relación de colaboración con el CIC después de varios años de intervenciones conjuntas.

0.4. Lecciones aprendidas

El modelo de colaboración de esta intervención ha producido resultados muy importantes a costes reducidos: el modelo de intervención se basa en la formación de médicos especialistas mozambiqueños a partir de la colaboración desinteresada de médicos españoles de 2 formas. En primer lugar, en Mozambique, con la participación de éstos en acciones de formación y prácticas médicas. En segundo lugar, acompañando a los médicos mozambiqueños en hospitales de España donde completarán su formación durante un período de tiempo. La participación de los médicos, como se dice, es voluntaria por lo que los costes del proyecto son pequeños en relación a los beneficios y la calidad de la formación recibida. Su impacto es enorme ya que se

Page 8: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

5

favorece la apertura de servicios médicos en Mozambique únicos, quedando pendiente la expansión hacia otros hospitales del país.

Colaboración de médicos con elevada experiencia e interés de colaboración: abundando en la anterior lección, cabe destacar que la participación de médicos españoles con elevada experiencia e interés de colaboración, demostrado por el largo recorrido de participación en intervenciones similares, es la clave de la obtención de tan buenos resultados. La experiencia es fundamental para la correcta transmisión de conocimientos y la seguridad a la hora de hacer las prácticas médicas. El interés de colaboración implica una disposición individual adecuada para el trabajo en situaciones de especial dificultad y sin los medios que normalmente están puestos a disposición de los médicos en España.

La colaboración institucional favorece la obtención de resultados: la buena relación de CIC y el Hospital Central de Maputo/MISAU mantenida a lo largo de varias intervenciones similares ha favorecido la incorporación de médicos españoles en el proyecto, pieza clave para la obtención de los resultados esperados. Esta buena relación y la confianza depositada en el CIC ha permitido que se obtengan las autorizaciones necesarias para ejercer la práctica médica en Mozambique por parte de los médicos españoles de manera rápida y sencilla. Si no hubiese existido esta colaboración y buena relación entre ambas instituciones, es muy posible que la mera obtención de estas autorizaciones hubiese necesitado de todo el período previsto de implementación de la intervención.

La necesidad de establecer mecanismos de formación de especialistas es altamente pertinente: las condiciones actuales del Sistema Nacional Sanitario, con graves carencias ya desde el nivel de Atención Primaria y con escasos médicos generales formados todavía, hace de la formación especializada una asignatura pendiente con escasos recursos asignados. Por esta razón, los apoyos a esta área son tan críticos y pertinentes, una vez que permite la creación de servicios médicos al país, eliminando progresivamente la dependencia de los servicios médicos o médicos de países extranjeros.

Las acciones de formación especializada son viables y podrían expandirse a otros servicios y hospitales: se ha podido verificar que la formación especializada en los moldes en los que se ha realizado en esta intervención es viable, esto es, los beneficios perduran en el tiempo una vez concluida la intervención. De manera general, todos los servicios abiertos o mejorados gracias a la intervención mantienen el nivel de acción sin problema de dependencia financiera o de otro tipo. Es cierto que son necesarios equipamientos y materiales en algunos casos que podrían dificultar la expansión de estos servicios a otros hospitales en otras provincias. En cualquier caso, este debería ser el próximo reto a realizar en futuras intervenciones.

Page 9: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

6

1. Introducción

1.1. Objetivo e informe de evaluación

El presente informe trata sobre la evaluación externa final realizada al proyecto titulado “Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad”, financiado por la Agencia Española de Cooperación Internacional para el Desarrollo a través de la convocatoria de proyectos con el número 10-PR1-0548, e implementado por el Consejo Interhospitalario de Cooperación (CIC). Esta evaluación externa final da respuesta a uno de los requisitos legales de la entidad financiadora para intervenciones de estas características. Por otro lado, se constituye como una herramienta importante de aprendizaje y mejora continua con efectos positivos deseables para la implementación de posteriores intervenciones. La evaluación hace una medida del grado de desempeño y alcance de los resultados, revisa los factores de eficacia y eficiencia de la intervención y del equipo de gestión, y ofrece información sobre las cuestiones relacionadas con otros criterios de evaluación con interés para la entidad ejecutora. A partir del análisis de las cuestiones presentadas, se extraerán las conclusiones y se ofrecerán una serie de recomendaciones para mejorar los puntos débiles de la intervención. Se recogerán también las lecciones aprendidas de esta intervención con aplicación general para toda acción de cooperación al desarrollo.

El informe de evaluación consta un Resumen Ejecutivo, donde se recoge la información esencial de todo el trabajo de consultoría aquí presentado. A continuación se incluye la introducción (punto 1) que ofrece el contexto dentro del cual fue llevado a cabo el trabajo, completado por la descripción resumida de la intervención evaluada (punto 2) y la metodología utilizada (punto 3). El punto 4 ofrece un resumen del análisis de las cuestiones planteadas de forma específica en esta evaluación, intentando dar respuesta a cada una de ellas. El punto 5 recoge las conclusiones obtenidas por cada criterio de evaluación a partir del análisis realizado en el punto anterior, indicando los puntos fuertes y los débiles, a partir de las cuales se realizan algunas recomendaciones de utilidad para esta intervención o para próximas intervenciones. Por último, en el punto 6 se recogen las lecciones obtenidas del análisis de la ejecución evaluada.

1.2. Preguntas y criterios de evaluación: definición

Los criterios de evaluación que se siguieron para la realización del trabajo respetaron lo determinado en los Términos de Referencia y desarrollados en la propuesta de trabajo, e inciden en la pertinencia de la intervención, la eficiencia y eficacia de las acciones en la relación al alcance de los resultados, la viabilidad una vez terminada la participación de CIC, la apropiación por parte de las entidades locales, el alineamiento con los intereses de las entidades gubernamentales, la participación de los beneficiarios y socios locales, y la cobertura alcanzada. A partir de estos criterios y las preguntas de evaluación asociadas, se construyó una matriz con indicadores que sirviesen para analizar los datos existentes y para extraer conclusiones. Los criterios, las preguntas clave y sus indicadores se exponen a continuación:

Información a obtener Indicadores a usar Fuentes de verificación

CRITERIOS PRINCIPALES

Pertinencia

1 ¿Se corresponde la intervención con las prioridades y necesidades de la población beneficiaria?

Coincidencia de las prioridades de los beneficiarios (en la identificación y actualmente) con los objetivos del proyecto.

Documentos de formulación e identificación

Documentos de evaluación de fases anteriores

Entrevistas beneficiarios y entidad beneficiaria

2 ¿Se ha adaptado la intervención a los posibles cambios desde el momento de la definición de la intervención y durante la misma?

Los indicadores fueron actualizados o mejorados

Existencia de cambios relevantes que pudieran afectar a la intervención

Informes intermedios Entrevistas beneficiarios y

entidad beneficiaria

Eficiencia 3 ¿Se han respetado los presupuestos

establecidos inicialmente en el documento? Cumplimiento de la planificación propuesta

(presupuesto) Informes de ejecución

financiera

4 ¿Se han respetado los cronogramas y Cumplimiento de la planificación propuesta Informes de ejecución

Page 10: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

7

Información a obtener Indicadores a usar Fuentes de verificación

tiempos previstos? (cronograma)

5 ¿Ha sido eficiente la transformación de los recursos en los resultados?

Relación entre la ejecución presupuestaria y la obtención de resultados.

Existencia de alternativas más eficientes Identificación de actividades no eficientes

Informes de ejecución financiera

Informes de ejecución Entrevistas personal de gestión Entrevistas beneficiarios y

entidad beneficiaria

6 ¿En qué medida la colaboración institucional y los mecanismos de gestión articulados han contribuido a alcanzar los resultados de la intervención?

Existencia de protocolos y Acuerdos de colaboración institucional.

Cumplimiento de los Acuerdos establecidos Adecuación de los mecanismos de gestión a

la realidad de los beneficiarios

Acuerdos de Colaboración Entrevistas beneficiarios y

entidad beneficiaria Entrevistas personal de gestión

del proyecto

7 ¿Los recursos humanos han sido suficientes y con las capacidades adecuadas para la ejecución de la intervención?

Las cargas de trabajo han sido adecuadas La calidad de la ejecución del trabajo (en

relación a los recursos humanos) ha sido la esperada.

Entrevistas personal de gestión del proyecto

Entrevistas beneficiarios y entidad beneficiaria

Eficacia 8 ¿Se han alcanzado los resultados en el plazo

previsto? Revisión de los indicadores previstos para la

medida de la obtención de alcance de los resultados

Adecuación de los indicadores para la correcta medición de los resultados

Fuentes de verificación de los indicadores previstos

9 ¿Cuál es el grado de alcance del objetivo específico de acuerdo con los indicadores definidos?

Revisión de los indicadores previstos para la medida del alcance de los resultados

Adecuación de los indicadores para la correcta medición de los resultados

Fuentes de verificación de los indicadores previstos

10 ¿Se han logrado otros efectos no previstos?, ¿cuáles son las razones?

Resultados no previstos. Causas externas e internas

Entrevistas beneficiarios y entidad beneficiaria

Verificación visual

11 ¿Han encontrado dificultades los destinatarios para acceder a las actividades de la intervención?

Acceso a los servicios por parte de los beneficiarios

Facilidad de gestión de las acciones

Entrevistas beneficiarios y entidad beneficiaria

12 ¿Se están produciendo algunos efectos sobre la equidad de género?

Inclusión de estrategia de género y sus efectos sobre la equidad de género y acceso a los servicios

Entrevistas beneficiarios y entidad beneficiaria

Impacto 13 ¿Se está contribuyendo al alcance del

objetivo general?, ¿En qué medida? Revisión de los indicadores propuestos en el

proyecto Existencia de factores externos que

influencian la evolución de los indicadores

Fuentes de verificación de los indicadores previstos

Entrevistas beneficiarios y entidad beneficiaria

14 ¿Se han producido impactos positivos o negativos no previstos sobre la población beneficiaria? ¿Existen factores externos que dificultan o favorecen el impacto final de la intervención?

Existencia de impacto sobre los beneficiarios, tanto del esperado a partir de la intervención como no, incluyendo posibles impactos negativos.

Acceso de los beneficiarios al impacto general obtenido

Entrevistas beneficiarios y entidad beneficiaria

Verificación visual

Viabilidad 15 ¿Se mantendrán los beneficios de la

intervención una vez retirada la ayuda externa?

Coste de continuidad de los servicios apoyados asumible por los Servicios de Salud

Las nuevas exigencias en gestión y capacidad técnica introducidas durante la intervención están consolidadas y podrán seguir siendo aplicadas

Entrevistas entidad beneficiaria Documentación de gestión

entidad beneficiaria

16 ¿Se siguen generando los recursos necesarios para el mantenimiento de las actividades?

Fuentes de financiación adecuadas Coste de los nuevos servicios adecuados al

nivel de financiación Capacidades de gestión de las actividades

presente

Entrevistas entidad beneficiaria Documentación de gestión

entidad beneficiaria

17 ¿Se ha influido positivamente sobre la capacidad institucional?

Liderazgo de la intervención Los Servicios de Salud asumen nuevas

prácticas o consolidan aquellas que ya estaban en marcha.

Entrevistas entidad beneficiaria

18 ¿Se ha velado por la protección del medio Existencia de impactos medioambientales de Entrevistas personal de gestión

Page 11: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

8

Información a obtener Indicadores a usar Fuentes de verificación

ambiente? las actividades del proyecto Generación de impactos medioambientales a

partir del funcionamiento de realizaciones del proyecto, particularmente de las infraestructuras

Existencia de protocolos de minimización de impactos ambientales

del proyecto Protocolos medioambientales

Coherencia 19 ¿Se corresponden los problemas

identificados con los objetivos propuestos? ¿Son adecuadas las actividades programadas para lograr los objetivos de la intervención?

Adecuación del diseño de la intervención a la Lógica del proyecto

Marco Lógico Árbol de problemas y soluciones

20 ¿Complementa la intervención a otras estrategias o programas aplicados en el mismo territorio, sector o población objetivo por otros agentes de cooperación, donantes y el país socio? ¿Se aprovechan las sinergias que se puedan establecer entre estos programas y la intervención?

Existencia de otras intervenciones en salud. Puntos de completo, coordinación y objetivos

Existencia de Acuerdos de colaboración Existencia de rutina de encuentros de

coordinación e intercambio de información Existencia de solapamiento de actuaciones

Entrevistas entidad financiadora Entrevistas grupos temáticos de

salud en Maputo

CRITERIOS COMPLEMENTARIOS Alineamiento

21 ¿Se han tenido en cuenta las estrategias y programas de desarrollo del país donde se ejecuta el proyecto?

Adecuación de los resultados y objetivos del proyecto a la política nacional de salud, sus procedimientos y sus prioridades.

Políticas y Estrategias nacionales

22 ¿La intervención se adapta a los procedimientos administrativos y de gestión de las entidades locales?

Inclusión de las actividades y presupuesto de la intervención en la Planificación Anual del Hospital Central de Maputo

Existencia de puntos de conflicto o fricciones en relación a los procedimientos de gestión.

Procedimientos administrativos de Mozambique

Entrevistas entidad financiadora

Participación 23 ¿Se ha delimitado claramente quiénes van a

participar en el proyecto, y cómo? ¿Qué actores han participado en cada fase de la intervención?, ¿en qué medida? ¿Han sido eficaces los canales de participación establecidos?

Revisión formulación y cruce con los beneficiarios finales de la intervención.

Revisión de intervinientes en las diferentes fases. Cómo y cuándo.

Comunicación, coordinación e información de las actividades y resultados de acuerdo con las exigencias y necesidades de los intervinientes.

Existencia de canales de comunicación

Informes de ejecución Entrevistas beneficiarios Documentación de

comunicación existente

Cobertura 24 ¿Las actuaciones desarrolladas en la

intervención han alcanzado a todos los colectivos destinatarios? ¿Son diferentes los colectivos atendidos respecto a los identificados durante el diseño de la intervención?

Descripción de los beneficiarios de la intervención, cruce con los previstos en la formulación del proyecto, o aquellos esperados por los socios locales.

Informes de ejecución Entrevistas beneficiarios y

entidad beneficiaria Formulación del proyecto

25 ¿Se han establecido mecanismos para facilitar a los beneficiarios el acceso a los servicios de la intervención?

Existencia de medidas de acceso a los servicios

Uso de los servicios por parte de los destinatarios

Informes de ejecución Entrevistas beneficiarios y

entidad beneficiaria

1.3. Equipo de evaluación

La evaluación ha sido llevada a cabo por Fernando de los Ríos Martín, especialista en evaluación de proyectos, con experiencia en esta área por espacio de más de 12 años y con máster en cooperación al desarrollo. Ha sido jefe de equipo en más de 20 evaluaciones externas de proyectos (intermedias y finales) en los sectores de Agua y Saneamiento, Desarrollo Rural (apoyo a asociaciones de productores), Gobernanza, Salud y Educación. La mayor parte de las evaluaciones fueron realizadas en Mozambique (y en particular en Cabo Delgado), aunque también en Angola, Kenia y Malawi. Algunas de ellas específicamente a proyectos de cooperación financiados por la AECID e implementados por ONGs españolas similares al aquí evaluado. Conoce el contexto del país en profundidad, así como las relaciones con las instituciones gubernamentales, los foros de ONGs y la realidad

Page 12: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

9

local en general. Su papel fue el de conducir todas las fases del trabajo, elaborar las herramientas de recogida de información, realizar el trabajo de campo para la obtención de datos y elaborar el informe de evaluación. A continuación un resumen de su CV:

Fernando de los Ríos Martín

Formación Académica: Master en Cooperación Internacional e Inmigración. Universidad del País Vasco. 2005-2006 Licenciado en Química. Universidad Oviedo. 1991-1996

Conocimientos y experiencia relevantes para este trabajo: Experiencia en evaluación de proyectos de cooperación, durante 12 años en países como Mozambique,

Angola, Malawi y Kenya. Director de equipo de evaluación en trabajos similares Experiencia como coordinador de varios proyectos y programas de cooperación en Mozambique para varias

ONGs. Conocimiento profundo de la realidad africana (más de 15 años de trabajo y residencia en Mozambique) Fluente en español (lengua materna), portugués e inglés.

Nacionalidad: española

Tareas / roles / asignados para este trabajo: Todas las fases del trabajo: diseño, trabajo de campo y elaboración de productos finales

2. Descripción resumida de la intervención evaluada

2.1. Antecedentes y fase actual

Antecedentes: entidad ejecutora, pasos previos El Consejo Interhospitalario de Cooperación (CIC) está presente en Mozambique desde 1996, año en el que empezó a colaborar con el MISAU en la formación de médicos especialistas y técnicos medios especializados con el objetivo de conseguir un sistema nacional de salud más eficaz a partir de la mejora de la calidad y cantidad del personal sanitario. En particular, en el Hospital Central de Maputo, ya son varias las experiencias de colaboración, siempre financiadas por la AECID, a partir de las cuales se ha podido dar un importante impulso al establecimiento y consolidación de servicios y especialidades en esta unidad sanitaria a través de la formación de cuadros mozambiqueños especializados. Proyecto actual La intervención titulada “Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad”, forma parte de estas intervenciones en formación técnica especializada para el Hospital Central de Maputo en la cual, además, han sido incorporados otros médicos y personal sanitario de otros hospitales de referencia de Mozambique. Ha sido una intervención financiada de nuevo por la AECID a partir de la convocatoria de proyectos y fue implementada en el periodo de 15/09/2010 a 31/03/2013. La intervención se estructura en un objetivo específico, la mejora de la atención sanitaria del paciente neonatal y el apoyo a la formación especializada para consolidar el desarrollo de las especialidades de cirugía, pediatría, anestesiología, traumatología y otorrinolaringología en el Sistema Nacional de Salud de Mozambique. A través de las acciones a realizar, se espera alcanzar los siguientes resultados: (1) consolidadas las unidades de cirugía torácica y cardiovascular del Hospital Central de Maputo como unidades de referencia y docente a nivel nacional, (2) apoyadas la nueva promoción de médicos residentes en anestesia y las actividades del Programa Nacional de Anestesia del MISAU, (3) mejorada la atención al paciente de trauma con procesos de formación dirigidos a los médicos residentes de trauma y ortopedia, colaborando con las actividades del Programa Nacional de Traumatología y Ortopedia (PNOT) del MISAU, (4) mejorada la formación del los médicos residentes en pediatría e incrementando el acceso de candidatos a la especialización, (5) reducida la morbimortalidad neonatal en los hospitales de Maputo, Cabo Delgado y Nampula mediante la capacitación del personal sanitario que atiende el parto y mejorados los cuidados básicos del recién nacido, y

Page 13: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

10

(6) iniciado un programa de capacitación de formación para médicos otorrinolaringólogos dentro del Programa Nacional de Cirugía del MISAU.

2.2. Implantación geográfica

Las acciones serán desarrolladas casi en su totalidad en el Hospital Central de Maputo. Para algunas actividades de formación, serán incluidas también personas (médicos y personal sanitario) de otros hospitales de referencia de Mozambique.

2.3. Organización y gestión

La oficina de representación nacional del CIC en Maputo sirvió de punto de enlace de todos los intervinientes del proyecto. Por un lado, facilitando el trabajo de los médicos españoles que participarán en acciones formativas en Maputo y por otro coordinando el trabajo realizado en España por los médicos mozambiqueños desplazados a este país. Para estas acciones realizadas en España jugará también un papel importante la oficina del CIC en Barcelona y Valencia, así como los propios médicos en los hospitales donde serán llevadas a cabo las acciones. El presupuesto de la intervención asciende a 534.950 EUR, con una participación de la AECID de 399.950 EUR (75%).

3. Metodología

3.1. Principios metodológicos

Se han seguido una serie de principios a lo largo de toda la evaluación en sus diferentes fases que se podrían resumir en los siguientes puntos: Objetividad: en la medida de lo posible, todas las conclusiones están basadas en el análisis de evidencias

contrastables. Participación y aprendizaje: los intervinientes se incorporaron a la evaluación en las diferentes fases del

trabajo. Siempre que fue posible, el personal técnico acompañó al equipo de evaluación a las entrevistas, reuniones y visitas, salvo cuando las circunstancias aconsejaban lo contrario.

Alineamiento con lo establecido en los TdR: El trabajo de consultoría siguió las premisas establecidas en los TdR dando respuesta a las necesidades del CIC.

Uso de diferentes herramientas: fueron utilizadas diferentes herramientas para la obtención de los datos necesarios para realizar los análisis correspondientes.

3.2. Fases

El trabajo de evaluación se desarrolló en 3 fases: 1. Fase inicial preparatoria, en la cual el equipo de evaluación tomó contacto con la documentación de la

intervención y preparó las herramientas de evaluación en concordancia con los requerimientos de la entidad solicitante. En esta fase fue también elaborada la agenda final de la fase de obtención de evidencias.

2. Fase de recogida de datos en la zona de la intervención, para tener acceso a la información primaria y secundaria de manera directa y obtener las evidencias de los resultados para posteriormente realizar el cruce con la información documental. Esta recogida de datos fue realizada en Maputo, fundamentalmente en el Hospital Central de Maputo donde fueron entrevistados algunos de los participantes en el proyecto y los órganos de dirección del Hospital Central. También se recogieron informaciones de los médicos españoles participantes en el programa.

3. Fase de elaboración del informe de evaluación, envío de la primera versión, incorporación de comentarios y elaboración del informe definitivo.

Page 14: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

11

3.3. Técnicas aplicadas

Como se menciona en los principios metodológicos, fueron aplicadas diferentes técnicas y herramientas dependiendo de la fase de la evaluación: En la primera fase o de diseño: revisión documental, tanto la documentación de base del proyecto, como

la generada a partir de la ejecución y otra documentación relacionada con el proyecto (Políticas, Estrategias, informes, etc.).

En la fase de campo: revisión de documentos específicos, procedimientos, informes de seguimiento, fuentes de verificación, etc. Se realizaron también entrevistas semiestructuradas con algunos de los participantes en el proyecto, el personal de CIC directamente involucrado en la ejecución de las actividades y médicos españoles con intervención en algunas de las actividades.

En la fase de elaboración del informe: fue realizado el análisis de los datos y la información obtenida a partir de los informantes clave y la observación directa.

3.4. Restricciones a la evaluación

La valoración a los criterios de evaluación se han basado en datos objetivos tomados durante todo el proceso de trabajo, lo cual incluye la revisión de los documentos producidos, otros documentos relacionados con el proyecto producidos por otras instituciones, datos obtenidos durante el trabajo de campo, opiniones extraídas durante las entrevistas mantenidas con personas clave de la implementación y verificación in situ de las actividades realizadas y de los resultados producidos. Todas las opiniones recogidas han sido cruzadas posteriormente con datos objetivos en la medida de lo posible, para minimizar errores provocados por el sesgo de la información dada. Asimismo, las conclusiones relacionan información de los resultados de la valoración de los criterios con datos objetivos. No obstante, la interpretación de ciertos resultados, la visión personal del equipo de evaluación, la falta de información completa y otros factores inherentes a un trabajo de corta duración como este, pueden inducir a conclusiones que necesariamente necesitarán ser contrastadas posteriormente con la inclusión de nuevos datos.

4. Análisis de las informaciones y evidencias recogidas

4.1. Pertinencia

1 ¿Se corresponde la

intervención con las prioridades y

necesidades de la población

beneficiaria?

El Sistema Nacional de Salud en Mozambique es todavía frágil y con una capacidad limitada de prestar servicios de calidad a la mayor parte de la población, siendo todavía numerosos los problemas que quedan por resolver. El proyecto se ha centrado en uno de estos problemas como es la capacitación técnica de personal sanitario en la mayor unidad sanitaria del país, el Hospital Central de Maputo. Esta capacitación técnica ha permitido poner en marcha especialidades como la cirugía torácica y cardiaca, responder a necesidades clave en el ámbito de la otorrinolaringología y fortalecer de manera patente el servicio de anestesia y el departamento del dolor. Son prioridades dado que este tipo de servicios no se presta en ninguna otra unidad sanitaria del país. En estos momentos estas especialidades y servicios sólo se prestan en el Hospital Central de Maputo remediando de alguna manera la falta de capacidades de las unidades sanitarias del país. El MISAU tiene como una de las prioridades la formación y capacitación del personal médico, tanto a nivel básico como en especialidades y subespecialidades. El proyecto ha posibilitado la formación de médicos especialistas con un apoyo importante de médicos voluntarios de CIC en España, los cuales han conducido formaciones en Mozambique y acompañado a diferentes médicos mozambiqueños en programas de formación en hospitales españoles. Este tipo de programas de formación e intercambio de experiencias se presenta como una de las mejores maneras de adquirir conocimientos y ha sido muy bien valorado por los responsables del Hospital Central de Maputo y los propios médicos involucrados en los procesos de formación.

Page 15: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

12

2 ¿Se ha adaptado la intervención a los posibles cambios

desde el momento de la definición de la

intervención y durante la misma?

El plan de intervención ha sufrido algunas alteraciones durante el periodo de implementación del mismo precisamente para adaptar los apoyos a las necesidades que iban siendo definidas como más prioritarias. Así, inicialmente estaba prevista la formación de un técnico en hemodinámica (resultado 1) pero se determinó (por el responsable del departamento de cirugía) que no era necesario priorizar esta cuestión. Por otro lado, la biblioteca del Hospital Central recibió una donación de una enorme cantidad de libros en formato digital (y no en papel como inicialmente previsto) para favorecer la difusión, facilitar la consulta y disminuir la posibilidad de pérdida de los mismos. Las acciones destinadas a la mejora del servicio de pediatría no pudieron ser desarrolladas en toda su extensión dado que fueron priorizadas otras áreas (neonatología). No obstante, será necesario volver a incidir en próximas intervenciones en este departamento dado que constituye una de las prioridades actuales del Hospital Central de Maputo. Hubo, finalmente, otros cambios y alteraciones menos profundas surgidas de la gestión coordinada del proyecto con la intención de orientar el proyecto hacia las reales necesidades o posibilidades.

VALORACIÓN CRITERIO ALTA

4.2. Eficacia

3

¿Se han alcanzado los resultados en el

plazo previsto?

Para determinar el grado de la consecución de resultados se hará un repaso del alcance de los indicadores y las metas propuestas, valorando en algún caso la idoneidad de los indicadores.

Indicadores Resultados

OE1. Mejorar la atención sanitaria del paciente neonatal y apoyar la formación especializada para consolidar el desarrollo de las especialidades de cirugía, pediatría, anestesiología, traumatología y otorrinolaringología en el SNS de Mozambique

Resultados previstos Indicadores Valoración indicadores/Comentarios

R1. Se ha consolidado las unidades de cirugía torácica y cardiovascular del hospital central de Maputo (HCM) como unidades de referencia y docente a nivel nacional

Número de médicos formados para prestar servicios en esta unidad, y con un aumento del 60% en 2012

Todos los médicos formados en este servicio han sido formados a partir del programa desarrollado por CIC

Número de personal sanitario entrenado y su cálculo sobre el porcentaje total del personal sanitario de los servicios

No hay datos relativos a este indicador

Número de intervenciones globales realizadas con incrementos anuales consecutivos del 10%

No hay datos relativos a este indicador

Número de intervenciones realizadas sin dependencia externa, y su porcentaje global

Aunque no hay datos relativos a este indicador, todas las intervenciones actualmente son realizadas sin dependencia externa.

Número de actividades formativas desarrolladas

Todas las formaciones previstas realizadas a excepción de la formación de un perfusionista por recomendación del responsable del servicio

Número de intervenciones de mantenimiento del equipamiento

No hay registros sobre las acciones de mantenimiento del equipamiento

R2. Se ha apoyado la nueva promoción de médicos residentes en anestesia y las actividades del programa nacional de anestesia y las actividades del programa nacional de anestesia (PNAR) del MISAU

Número de médicos residentes que se integran en el programa de formación

2 médicos residentes. No fue posible incorporar más debido a que no había más médicos haciendo esta especialidad

Número de médicos que concluyen la formación y son destinados a hospitales provinciales y porcentaje de incremento supuesto

Todos los médicos permanecen en el Hospital Central de Maputo

6 módulos teóricos realizados por profesores españoles, midiendo el % de residentes asistentes así como el número de contenidos leccionados del programa general de formación

Presentación de temas en Congresos realizados en Maputo (2 Congresos).

Número de médicos mozambiqueños que complementan su formación en hospitales españoles en base a la proporción de residentes

2 médicos residentes van a España. Se incluyen otros profesionales del servicio también (personal de enfermería)

Número de actividades formativas desarrolladas por el PNAR así como el número de publicaciones revisada y editadas para el personal de los hospitales nacionales

Se opta por realizar publicaciones relacionadas con procedimientos en formato gigante para ser expuestas en las zonas de intervención.

R3. Se ha mejorado Número de traumatólogos en Un médico residente en la especialidad de traumatología. No hay

Page 16: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

13

la atención al paciente de trauma con procesos de formación dirigidos a los médicos residentes de trauma y ortopedia colaborando con las actividades del programa nacional de traumatología y ortopedia (PNOT) del MISAU

formación medidos en la base del % de traumatólogos nacionales y número de especialistas en formación

datos para establecer las relaciones.

Número de traumatólogos que terminan la especialidad medidos en la base del % de traumatólogos nacionales totales y el incremento que suponga

Un médico residente en la especialidad de traumatología. No hay datos para establecer las relaciones.

2 periodos formativos con personal especializado español con el cálculo del % de traumatólogos en formación asistentes, el número de lecciones dadas y presentaciones realizadas por los residentes

Realizado con la presencia de médicos españoles

2 médicos mozambiqueños adquieren capacidades en hospitales españoles e indicación sobre el número de intervenciones en las cuales se utilizan los conocimientos y habilidades adquiridos

Sólo un médico residente realiza experiencia en España, actualmente en activo en el Hospital Central de Maputo.

Publicación del manual de traumatología del MISAU

No realizado. Se aduce que ya existía un Manual realizado en fases anteriores y que no había necesidad de elaborar otro.

R4. Se ha reducido la morbimortalidad neonatal en los hospitales de maputo, Cabo Delgado y Nampula mediante la capacitación del personal sanitario que atiende el parto y mejora de los cuidados básicos del recien nacido

Mejorado el número de partos atendido por personal cualificado en cuidados neonatales, en relación al 2009

No hay datos estadísticos relacionados con el indicador.

Mejorada en un 10% el porcentaje de recién nacidos que reciben cuidados en el cordón umbilical (del 17% actual pasa al 27%)

No hay datos estadísticos relacionados con el indicador

Mejorado en un 20% el porcentaje de recién nacidos que reciben cuidados de limpieza y secado al nacer (actualmnete un 20%)

No hay datos estadísticos relacionados con el indicador

Mejorada en un 10% el porcentaje de recién nacidos que reciben vitamina K

No hay datos estadísticos relacionados con el indicador

R5. Se ha iniciado un programa de capacitación de formación de médicos otorrinolaringólogos dentro del Programa Nacional de Cirugía del MISAU

Existencia de un programa de formación para la especialidad en el MISAU y el PNC

Realizado. Incluye organización de programas de residentes, organización del departamento, formación teórico/práctica de médicos residentes.

Establecer la incidencia de la papilomatosis infantil en la provincia de Maputo y crear un programa específico de formación

Creado programa de operación del oído medio para el combate de la papilomatosis.

Una gran parte de los indicadores no han podido ser evaluados de manera objetiva dado el escaso acceso a fuentes de datos estadísticos del Hospital Central de Maputo. Esta unidad sanitaria usa el modelo de informes del MISAU que no incluye la mayor parte de los indicadores aquí expresados por ser actividades muy específicas de esta unidad. La información recogida durante la evaluación da indicación de que las actividades fueron realizadas y que los avances en todos los servicios son evidentes a pesar de no poder ser contrastada de manera objetiva. Se puede destacar los avances obtenidos en los servicios de cirugía, anestesia, traumatología y otorrinolaringología, con presencia de médicos españoles en Mozambique y estancias de médicos residentes mozambiqueños en España. Se ha dado un importante impulso a la formación de médicos especialistas y se ha dejado un poso de conocimientos importante.

4 ¿Cuál es el grado de alcance del objetivo

específico?

El objetivo Específico se define como la mejora de la atención sanitaria del paciente neonatal y el apoyo a la formación especializada para la consolidación del desarrollo de las especialidades de cirugía, pediatría, anestesiología, traumatología y otorrinolaringología en el Sistema Nacional de Salud de Mozambique. Se han dado pasos efectivos en la consecución de estos objetivos a pesar de que se percibe una necesidad todavía mucho mayor y que justificaría la continuidad de acciones similares de apoyo. La mejora de las capacidades del personal sanitario especializado trae consigo una mayor capacidad de atención y respuesta. Sin embargo, las necesidades para la consolidación de las diversas especialidades médica en el Sistema Nacional de Salud son todavía enormes. El

Page 17: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

14

número de especialistas (y médicos en general) es muy deficitario y los equipamientos disponibles escasos. Incluso en el Hospital Central de Maputo, donde se encuentra la mayor parte de los especialistas formados, se nota la falta de equipamientos sencillos necesarios para la aplicación de las técnicas y conocimientos adquiridos. El ritmo de formación de médicos y especialistas, así como los recursos necesarios en inversión (infraestructuras y equipamientos) están todavía muy alejados de las necesidades por lo que, aunque se han dado pasos importantes en esta intervención como se ha mencionado, todavía la fragilidad del sistema de salud es importante, así como la completa consolidación del desarrollo de especialidades y la atención sanitaria al paciente neonatal.

5 ¿Se han logrado otros efectos no

previstos?, ¿cuáles son las razones?

No se detectan efectos diferentes de los esperados. Los cambios realizados en la intervención (a nivel de actividades) que han generado otros resultados han sido adaptaciones a la realidad e interés de los beneficiarios como fue indicado anteriormente. Todos estos cambios han contribuido al alcance de los objetivos como estaba previsto.

6 ¿Han encontrado dificultades los

destinatarios para acceder a las

actividades de la intervención?

La intervención del CIC junto con el Hospital Central de Maputo es ya de largo recorrido (esta es la tercera fase). Esto implica que existe un conocimiento mutuo elevado (entre los beneficiarios y la entidad implementadora) y experiencia de trabajo conjunto, lo que favorece la marcha en general del proyecto. No se recogen evidencias de conflictos o situaciones en las que se ha visto impedido o dificultado el acceso de los beneficiarios a las actividades. Por el contrario, todos los médicos y personal sanitario participante de las acciones de formación manifiestan su satisfacción por las actividades realizadas y el apoyo recibo por los médicos españoles que han colaborado en el proyecto. Aquellos médicos que realizaron prácticas externas en hospitales de España también expresan su satisfacción por el nivel de seguimiento y apoyo recibido por los colaboradores del CIC. Todos los beneficiarios fueron seleccionados por los responsables de los servicios médicos con los que se trabajó por lo que no hubo ninguna injerencia ni imposición por parte del CIC en su participación.

7 ¿Se están produciendo algunos

efectos sobre la equidad de género?

La formación de médicos especialistas depende del número de candidatos/as que exista y, como se ha visto, en muchas ocasiones no se alcanza el número esperado por la ausencia de candidatos como tal. Se han integrado, por tanto, médicos de ambos sexos sin distinción en función de los médicos residentes existentes y de la propia elección de los responsables de los servicios médicos. Por otro lado, los efectos sobre el nivel de atención sanitaria y la mejora de los servicios prestados a los pacientes tampoco van dirigidos expresamente a ninguno de los sexos. No se verifican, por tanto, claros efectos sobre la equidad de género en esta intervención dado el carácter de la misma. Es una intervención destinada a la formación médica y a la mejora de los servicios sanitarios de manera universal independientemente del sexo.

VALORACIÓN CRITERIO ALTA

4.3. Eficiencia

8

¿Se han respetado los presupuestos

establecidos inicialmente en el

documento?

No se verifican diferencias substanciales entre el gasto previsto y el realizado. Todas las partidas presentan un nivel de ejecución muy ajustado a los valores inicialmente previstos. Por las características del proyecto, una de las partidas que más peso tienen en el presupuesto global es la de “viajes y alojamientos”, dado que una parte importante de las actividades (en todos los resultados) se relaciona con viajes de médicos mozambiqueños a España y la colaboración de médicos españoles en Mozambique. Otra partida con un peso específico importante ha sido la de personal. De manera conjunta, ambas partidas suponen casi el 70% del presupuesto global y el nivel de gasto final se ha ajustado al definido inicialmente. En otras partidas se verifican situaciones similares teniendo en cuenta que los desvíos que se pueden producir representan una parte insignificante del presupuesto total.

9

¿Se han respetado los cronogramas y

tiempos previstos?

Han existido atrasos en la primera fase de la intervención que han obligado a pedir 2 ampliaciones sin costes del tiempo de ejecución. Se apuntan como razones de estos atrasos los cambios realizados en la Dirección del Hospital y del MISAU, así como la reorientación que se ha querido dar a alguna de las acciones dentro de la intervención. Algunas de las

Page 18: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

15

actividades de formación se han tenido que adaptar también a los momentos de realización de eventos (congresos, etc.) que han originado algún desvío en relación al cronograma previsto. No obstante, no se detectan actividades sin ejecutar por causa de atraso general de la intervención.

10 ¿Ha sido eficiente la transformación de los recursos en los

resultados?

Para verificar la eficiencia en la transformación de los recursos en resultados se analiza en primer lugar el peso de la estructura administrativa (personal, oficinas, equipos y suministros, costes indirectos) sobre el total del presupuesto. Estas partidas suponen casi el 60% del total, lo que implica una carga muy elevada. No se quiere decir con esto que los recursos que representa este 60% no contribuyan al alcance de los resultados, aunque sí podría suponer una menor carga específica. Se podría pensar en una gestión delegada de la intervención que recaería en la propia dirección del Hospital Central de Maputo, evitando gastos de personal y oficinas. Quizás sí se podría contratar a una persona de administración, que trabajaría junto a la dirección del Hospital (en el propio Hospital) que se encargaría de velar por la aplicación correcta de los fondos y agilizar trámites burocráticos relacionados con los viajes y estancias de los médicos. En resumen, se podría suprimir una importante carga administrativa del proyecto y aplicarla en beneficios directos tales como equipamientos para el hospital, formaciones, etc., lo que aumentaría la eficiencia del proyecto, consiguiendo mayores beneficios y resultados con los mismos recursos.

11 ¿En qué medida la colaboración

institucional y los mecanismos de

gestión articulados han contribuido a

alcanzar los resultados de la

intervención?

La colaboración del CIC y el Hospital Central de Maputo es ya de largo recorrido lo que, sin duda, ayuda a la implementación de las actividades y el cumplimiento de los compromisos. La gestión administrativa llevada a cabo, junto con los importantes procesos logísticos que se realizan (viajes y estancias de médicos mozambiqueños en España y españoles en Mozambique) se realizan de manera adecuada dado que no se registran problemas relacionados con éstos. Esta colaboración es fundamental para el éxito de la intervención, ya que la presencia y actuación de médicos extranjeros en Mozambique es una cuestión bastante sensible y requiere complicados procedimientos de autorización y control. Como se ha mencionado, dado que esta colaboración entre el CIC y el MISAU es ya antigua y existe una relación de confianza importante, la ejecución de actividades que han supuesto la presencia de los médicos españoles en el Hospital de Maputo se ha realizado de manera positiva sin trabas ni problemas, y alcanzando un nivel de satisfacción muy alto. De igual manera, la presencia y realización de prácticas de médicos mozambiqueños en España se ha realizado sin ningún tipo de problema y se ha podido realizar un acompañamiento de estas prácticas por médicos españoles de alta cualificación con total normalidad. Los equipos de gestión del CIC, tanto en Mozambique como en España, han funcionado adecuadamente en su labor de facilitación de ambos procesos críticos para la buena ejecución de las actividades y el alcance de los objetivos.

12 ¿Los recursos humanos han sido

suficientes y con las capacidades

adecuadas para la ejecución de la

intervención?

Los recursos humanos puestos a disposición, fundamentalmente médicos españoles de elevada cualificación y voluntarios, han cumplido las expectativas propuestas con creces. Todos los departamentos del Hospital Central de Maputo en los que se ha trabajado manifiestan una gran satisfacción por la cualificación de los médicos participantes, algunos de ellos con una participación desde el inicio de la colaboración entre las instituciones. Se trata de médicos con una larga trayectoria de trabajo en muchos casos y con experiencias anteriores de colaboración en Mozambique. Además, como se ha dicho, los médicos participan de manera voluntaria y con elevado espíritu de participación y colaboración.

VALORACIÓN CRITERIO ALTA

4.4. Impacto

13 ¿Se está

contribuyendo al alcance del objetivo

general?, ¿En qué medida?

Tomando como referencia el objetivo general de la mejora del Sistema público de Salud en Mozambique, este proyecto ha contribuido a la mejora del nivel cuaternario del mismo (Hospital Central de Maputo) en algunas de sus especialidades. Actualmente el Sistema de Salud posee servicios que han sido abiertos gracias a las intervenciones del CIC y que se realizan de manera exclusiva en el Hospital Central de Maputo. Las intervenciones de cirugía torácica y cardiaca, operaciones del oído medio y servicios de la Unidad del dolor, por

Page 19: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

16

mencionar algunas, han recibido un importante impulso gracias al proyecto llevado a cabo por el CIC. A pesar de que estos servicios no se hacen extensibles a otras unidades sanitarias del mismo nivel en otras zonas de Mozambique de manera general (sí en algunas de las formaciones en las que fueron incluidos médicos de otros Hospitales Centrales), y de que el número de médicos formados todavía es pequeño, se puede decir que la contribución del proyecto a la mejora del Sistema público de Salud es notable. En la mayor parte de las formaciones de médicos especialistas se ha dotado al Sistema de un plan de formación y de herramientas básicas de transmisión de conocimientos (manuales, bibliografía), además de los propios médicos formados que podrán orientar la formación de otros médicos especialistas. Se ha contribuido, por tanto, a la mejora del Sistema y se ha dotado de recursos técnicos para la continuidad del progreso iniciado con la formación de nuevos médicos especialistas y la introducción de nuevas prácticas y servicios médicos.

14 ¿Se han producido impactos positivos o

negativos no previstos sobre la

población beneficiaria?

¿Existen factores externos que

dificultan o favorecen el impacto

final de la intervención?

Todos los impactos obtenidos entran dentro de lo esperado, incluyendo servicios específicos inicialmente no previstos (como las operaciones del oído medio) pero que forman parte de la adaptación de la intervención a la realidad y necesidades observadas durante el tiempo de ejecución. Lo que sí se menciona por parte de los médicos participantes (españoles y mozambiqueños), es la influencia de la escasez de equipamiento y material fungible necesario para la aplicación de determinados procedimientos y prácticas médicas. Esto es más patente en Hospitales de otras provincias en los cuales, los médicos formados y capacitados gracias a esta intervención, no pueden aplicar en toda su amplitud los conocimientos adquiridos. Esta cuestión deberá tenerse en cuenta para próximas intervenciones, no tanto en la adquisición de equipamiento (que ya se realiza en cierta medida) o en mantenimiento del mismo (que también se incluye), sino en la gestión del mismo, el establecimiento de sistemas de cálculo de necesidades y la previsión de adquisición del mismo incorporándola en los procesos de planificación y realización de presupuestos anuales de los Hospitales.

VALORACIÓN CRITERIO MEDIO

4.5. Viabilidad

15 ¿Se mantendrán los

beneficios de la intervención una vez

retirada la ayuda externa?

Todos los médicos formados permanecen en el Sistema público de Salud al término de la intervención y aplican sus conocimientos en los servicios de salud en los que trabajan. La mejora de estos servicios tras la intervención se mantendrá, por tanto, activa. A pesar de las dificultades de algunos de los servicios en aplicar todos los conocimientos adquiridos por la falta de equipamiento (sobre todo en neonatología), los servicios abiertos no sufrirán cualquier alteración una vez terminado el proyecto. Sí se verá afectado, quizás, el plan de formación de nuevos médicos especialistas, una vez que ya no se contará con la participación activa de apoyo por parte de médicos españoles en Mozambique ni la realización de prácticas de formación en hospitales españoles. No existen capacidades financieras actualmente para facilitar estos intercambios por parte del Hospital Central de Maputo, por lo que se tendrá que buscar otras fórmulas (de carácter interno quizás) para la formación de médicos especialistas.

16 ¿Se siguen generando los

recursos necesarios para el

mantenimiento de las actividades?

A excepción de lo dicho con algunos equipamientos, existen los recursos necesarios para la continuidad en la aplicación de los conocimientos adquiridos por los médicos especialistas y, por tanto, con el funcionamiento de los servicios médicos iniciados. Las actividades de formación de especialistas también tendrán su continuidad una vez terminada la intervención, a pesar de que dejará de existir un importante apoyo en relación a la participación de médicos de alta cualificación en los planes de formación. Por otro lado, no parece que sea necesaria una importante fuente de financiación para mantener esta actividad aunque dadas las necesidades del Sistema de Salud y la necesaria priorización que deberá ser realizada, posiblemente no existan fondos para tal.

17 ¿Se ha influido positivamente sobre

la capacidad institucional?

La institución beneficiaria posee actualmente médicos especialistas formados, con experiencia en hospitales españoles de elevada calidad. Se han mejorado los protocolos de asistencia y de formación de especialistas. Y se ha dotado la institución con bibliografía

Page 20: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

17

especializada y otras herramientas de transmisión del conocimiento. Es indudable, por tanto, que se han mejorado las capacidades institucionales del Hospital Central de Maputo, con reflejo en otras unidades sanitarias del país.

18 ¿Se ha velado por la protección del medio

ambiente?

Las actividades realizadas no han generado impactos sobre el medio ambiente sobre los cuales actuar. Todos los procesos de gestión de residuos y otros factores de incidencia sobre el medio ambiente (por ejemplo, los residuos infecciosos generados a partir de intervenciones quirúrgicas) siguen los protocolos establecidos en el Ministerio de Salud de Mozambique.

VALORACIÓN CRITERIO ALTA

4.6. Coherencia

19 ¿Se corresponden los

problemas identificados con los

objetivos propuestos?

¿Son adecuadas las actividades

programadas para lograr los objetivos de la intervención?

Fueron identificados dos aspectos clave en la mejora del Sistema Nacional de Salud: (1) la falta de personal médico especializado que pudiese prestar servicios de referencia a nivel nacional y (2) los altos niveles de mortalidad neonatal. Este último problema está íntimamente relacionado también con el primero, esto es, la falta de personal médico especializado de calidad. A pesar de que la Atención Primaria es y debe ser la prioridad principal del Sistema de Salud en Mozambique, no es menos necesaria la formación de un núcleo de médicos que pueda dar cobertura nacional (en primera instancia) en la curación de determinadas dolencias que requieran de conocimientos o la aplicación de técnicas avanzadas y así, reducir la dependencia externa en relación a médicos o unidades sanitarias. El apoyo a la formación especializada en los campos de la cirugía, anestesiología, traumatología y otorrinolaringología, así como el impulso específico al servicio de neonatología, como objetivos específicos de la intervención, se orientan claramente a la resolución de los problemas enumerados anteriormente. Las actividades de formación (con la participación de médicos españoles en Mozambique), la realización de prácticas médicas en España por parte de médicos especialistas mozambiqueños (tutorados por médicos españoles), la realización de misiones quirúrgicas en Mozambique a cargo de médicos españoles con gran experiencia, la adquisición de libros y la elaboración de manuales y otros elementos formativos, y la elaboración de protocolos de formación para médicos especialistas, sin duda cubren los aspectos críticos para alcanzar los objetivos pretendidos. Todas las actividades definidas y realizadas se orientan a la formación de personal médico especializado y a la puesta en marcha de servicios médicos que favorecerá el aumento de calidad de los servicios prestados por el Sistema de Salud.

20 ¿Complementa la intervención a otras

estrategias o programas aplicados

en el mismo territorio, sector o población objetivo

por otros agentes de cooperación,

donantes y el país socio?

¿Se aprovechan las sinergias que se

puedan establecer entre estos

programas y la intervención?

La presente intervención está integrada en la Estrategia de Salud de la AECID en Mozambique (2010-2013) por lo que complementa los esfuerzos realizados por la Cooperación Española en el área de salud en Mozambique. En especial complementa el área de formación de personal sanitario (médicos especialistas) que es realizado también por otras ONGs españolas en otras zonas del país (en particular en los apoyos realizados a los centros de formación inicial de técnicos de medicina y a la formación continua). Esta acción, en general, contribuye a la ejecución y alcance de la estrategia nacional de salud, financiada tanto por ONGs y Agencias de Cooperación como por el propio Ministerio de Salud. Se integra en esta estrategia permitiendo que la intervención esté orientada a los mismos fines y de acuerdo a las políticas nacionales en salud. Es por tanto a esta estrategia, como marco global, a la que complementa la intervención del CIC (así como las de los otros actores de cooperación del sector). Dentro de la zona de intervención y de forma específica (concretamente en el Hospital Central de Maputo), se establece una relación sinérgica con las acciones desarrolladas por la UCLA University en el servicio de neonatología, por la cual se pudieron organizar de manera coordinada, acciones de formación para instructores en reanimación y cuidados básicos de atención al recién nacido. Esta acción coordinada permitió la participación de personal de diferentes hospitales del país con la coparticipación de los costes por parte de ambas instituciones (UCLA y CIC), evitando duplicidades y sobrecostes, generando, por tanto, una acción sinérgica entre ambas intervenciones.

Page 21: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

18

VALORACIÓN CRITERIO ALTA

4.7. Alineamiento

21 ¿Se han tenido en

cuenta las estrategias y

programas de desarrollo del país

donde se ejecuta el proyecto?

Para el análisis de la adecuación de la intervención a las estrategias nacionales y de la AECID generales y del sector salud se toman en consideración (1) el Plan de Acción de para la reducción de la pobreza 2011-2014, como marco general estratégico de Mozambique, (2) el Plan Estratégico del sector salud del Gobierno de Mozambique para los años 2007-2012 y (3) la estrategia de la Cooperación Española en este sector en Mozambique.

Plan de Acción para la Reducción de la Pobreza 2011-2014 (PARP) Estrategia de medio plazo del Gobierno de Mozambique para la implementación del Programa Quinquenal del Gobierno 2010-2014, focalizada en el combate a la pobreza y la promoción de la cultura del trabajo para el alcance de un crecimiento económico inclusivo y la reducción de la pobreza y vulnerabilidad en el país.

Estrategia/prioridad propuesta Incorporación en la intervención

Mejora de la gestión de los recursos humanos, elevando el nivel de

humanización de los servicios con énfasis en el atendimiento con calidad y en la satisfacción de las necesidades de los

usuarios (Prioridad 1 del Objetivo general 3 – Desarrollo Humano y Social):

Formación de profesionales de salud

La intervención está orientada a la formación especializada de profesionales de salud para la mejora de la calidad de la atención y satisfacción de los usuarios.

Plan Estratégico del Sector Salud 2007-2012 (PESS) Estrategia de Mozambique para el sector salud

Estrategia/prioridad propuesta Incorporación en la intervención

Extender progresivamente los cuidados de salud especializados (Objetivo general

36): Desarrollar un programa de extensión de

los servicios especializados para los niveles provincial y distrital

Equipar debidamente los hospitales provinciales y distritales

Incorporación de médicos de otros Hospitales (generales y provinciales) en las formación realizadas para la mejora de la capacidad de expansión de servicios médicos especializados.

Inclusión de equipamiento médico especializados

Intensificar la formación de Recursos Humanos para la Salud, sobre todo en los

niveles medio y superior (Objetivo general 56)

Intervención orientada a la formación especializada de personal sanitario de nivel superior.

Intensificar los programas de post graduación, tanto en el país como en el

exterior (Objetivo general 57):

Intervención orientada a la formación especializada de personal sanitario de nivel superior con la inclusión de periodos de prácticas en hospitales de España.

Promover, dinamizar y estimular la valiosa participación de los socios internacionales en el proceso del

desarrollo sanitario nacional (Objetivo general 76):

Intervención de cooperación y colaboración de largo recorrido entre el CIC y el MISAU.

Page 22: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

19

Estrategia de Salud de la Cooperación española en Mozambique 2010-2013 Estrategia de la AECID en el sector salud en Mozambique

Estrategia/prioridad propuesta Incorporación en la intervención

Recursos Humanos (Prioridad 1): Crecimiento de la red de formación de

cuadros medios y superiores

Intervención orientada a la formación especializada de personal sanitario de nivel superior.

Se verifica, por tanto, que la intervención está alienada de manera adecuado a las políticas nacionales generales de desarrollo, así como a las del sector salud. Así mismo, se adecúa a la estrategia de salud de la Cooperación española en Mozambique, contribuyendo al alcance de la mejora de los Recursos Humanos del Sistema Nacional de Salud.

22 ¿La intervención se adapta a los

procedimientos administrativos y de

gestión de las entidades locales?

La mayor parte de las actividades de esta intervención se corresponde con acciones de formación especializada realizada por médicos españoles en Mozambique y realización de formaciones de médicos mozambiqueños en España. Todos los procedimientos administrativos para la incorporación puntual de médicos españoles en el Hospital Central de Maputo, así como el envío de médicos mozambiqueños a España han seguido las normas establecidas en el país sin haber generado ningún tipo de conflicto. La colaboración clínica de médicos extranjeros en Mozambique debe seguir unos procedimientos muy rigurosos de autorización. La ausencia de situaciones de conflicto durante la intervención relación a esta actividad prueba que fueron seguidos los procedimientos locales relacionados. De igual forma se puede mencionar la participación de médicos mozambiqueños en España. Dado que esta intervención es ya de largo curso, todos los procedimientos de gestión relacionados con la formación o la compra de equipamientos o materiales eran conocidos y fueron respetados, tanto por parte de las autoridades mozambiqueñas y los beneficiarios, como por parte de la entidad ejecutora.

VALORACIÓN CRITERIO ALTO

4.8. Participación

23 ¿Se ha delimitado

claramente quiénes van a participar en el

proyecto, y cómo? ¿Qué actores han

participado en cada fase de la

intervención?, ¿en qué medida?

¿Han sido eficaces los canales de participación

establecidos?

El proyecto tiene claramente identificados quiénes irían a ser los beneficiarios del mismo: médicos de especialidades y subespecialidades médicas del Hospital Central de Maputo (residentes y responsables). También, como participantes principales del proyecto se incluyen médicos españoles de varias especialidades quienes, de manera voluntaria, participan en las formaciones en Mozambique y acompañan a médicos mozambiqueños en España. Por último, el personal del CIC y del Hospital Central de Maputo son los encargados de la gestión y seguimiento de las actividades. En la identificación hubo participación de todos los actores, especialmente los médicos y responsables del HCM, incluyendo en el documento final las prioridades y necesidades por ellos expresadas. Prueba de esto es la satisfacción final por las actividades realizadas y los sectores en los que se intervino. Por otro lado, los cambios verificados en las actividades (eliminación de la componente de pediatría para dar más énfasis en la neonatología y otorrinolaringología, así como la inclusión de las operaciones del oído medio), como respuesta a necesidades nuevas que fueron surgiendo manifestadas por los propios médicos del HCM participantes del proyecto, dan prueba de que éstos también participaron en el seguimiento de las actividades y en la gestión de las acciones. Los encuentros mantenidos entre el personal de gestión del CIC y los médicos del HCM (realizados según la necesidad) y la comunicación directa entre éstos y los médicos españoles (favorecida por el mutuo conocimiento tras años de colaboración), fueron suficientes para mantener la dinámica de las actividades y el alcance de los resultados sin que se verifiquen fallos o ineficacia en los canales de comunicación establecidos.

VALORACIÓN CRITERIO ALTA

Page 23: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

20

4.9. Cobertura

24 ¿Las actuaciones

desarrolladas en la intervención han

alcanzado a todos los colectivos

destinatarios? ¿Son diferentes los

colectivos atendidos respecto a los

identificados durante el diseño de la intervención?

La cobertura final de las actuaciones desarrolladas ha sido menor de la esperada teniendo en cuenta la eliminación de uno de los resultados inicialmente identificados. No se han realizado actividades dirigidas a los médicos de pediatría, cambio realizado tras la aprobación de la AECID, por lo que este grupo de médicos no se ha visto beneficiados. Tampoco se ha alcanzado el número de médicos formados en el área de anestesia (de 6 previstos a 2), dado que no había suficiente número de médicos residentes en esta especialidad. Todos los colectivos identificados, no obstante, han sido incorporados como estaba previsto, referidos a los médicos residentes en formación en el Hospital Central de Maputo y médicos de otros Hospitales de Mozambique en algunas actividades de formación.

25 ¿Se han establecido mecanismos para

facilitar a los beneficiarios el

acceso a los servicios de la intervención?

No se detectan problemas en cuanto al acceso de los beneficiarios a las actividades de la intervención. Son actividades de formación con un número de participantes limitado que favorece la incorporación de todos ellos en las actividades realizadas. Todos los mecanismos de gestión aplicados, sobre todo para la incorporación de los médicos españoles en las actividades de formación en Mozambique y la estancia de médicos mozambiqueños en España, han permitido que los beneficiarios accedieran a todas las acciones previstas en el proyecto sin problemas que reseñar.

VALORACIÓN CRITERIO MEDIA

5. Conclusiones y recomendaciones La presente intervención es extremadamente pertinente dado que permite la puesta en marcha de servicios y especialidades médicas únicos en Mozambique, promoviendo la formación de médicos especialistas del Sistema Nacional de Salud. Esta es una de las prioridades sectoriales (la formación de médicos) y de desarrollo global en Mozambique, como forma de mejorar la capacidad de prestación de servicios de salud de calidad. Además se ha favorecido la expansión de determinados servicios médicos en otros hospitales del país. Todos los médicos formados permanecen en Hospital de donde provenían y aplican las capacidades adquiridas lo que implican un logro completo de los objetivos pretendidos. No se han realizado acciones, no obstante, en el servicio de pediatría a pesar de la gran necesidad existente, lo cual deberá ser tenido en consideración para futuras intervenciones. Este cambio, así como otras alteraciones de menor importancia fueron presentados por los propios beneficiarios y aprobados por la AECID. Tampoco se ha podido alcanzar el número esperado de médicos formados dada la falta de médicos residentes en determinados servicios (anestesia fundamentalmente). En relación con los efectos de la mejora de las capacidades de los nuevos médicos formados no se han podido medir dadas las escasas fuentes de información del Hospital Central de Maputo. Sin duda, este sector de vital importancia para la planificación de las actividades del Hospital también podría ser objeto de apoyo en futuras intervenciones. Un proyecto de estas características ofrece un alto grado de eficiencia, dado que la estructura de gestión es mínima. Además, dado que la participación de los médicos españoles en tareas de formación y acompañamiento de los médicos mozambiqueños se realiza de manera voluntaria, la mayor parte de los recursos se destinan a los beneficiarios. Se podría, no obstante, delegar en futuras intervenciones la gestión de una parte importante de las actividades al propio Hospital Central, reforzando el nivel de gestión y monitoria del mismo. La intervención ha estado alineada con las políticas y estrategias nacionales de salud. Además presenta una alta viabilidad, dado que la aplicación de los conocimientos y capacidades se produce sin dependencia externa ni necesidades financieras inasumibles. En la siguiente tabla se presenta, por tanto, una relación de las conclusiones por cada criterio de evaluación, basadas en el análisis realizado en el apartado anterior, y recomendaciones de mejora asociadas a cada criterio.

Criterio 1: Pertinencia

Valoración: ALTA

Conclusiones La formación de médicos especialistas es una prioridad porque permite la apertura de

Page 24: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

21

servicios médicos únicos en el país. El proyecto se ha adaptado a necesidades nuevas que han ido surgiendo a lo largo de la

intervención y, por lo tanto, ha dado respuesta a las necesidades prioritarias.

Recomendaciones 1 Necesidad de refuerzo del servicio de pediatría Aplicación: Futuras intervenciones

Dirigida a: CIC / AECID

Uno de los servicios médicos que irían a ser reforzados según el proyecto inicial era el de pediatría, el cual fue posteriormente eliminado con el objetivo de reforzar otros sectores. Fue realizada posteriormente, además, la identificación de un proyecto relacionado con este servicio, que deberá merecer toda la atención por parte de las agencias donantes dado el carácter prioritario de este servicio en el Sistema Nacional de Salud de Mozambique.

Criterio 2: Eficacia

Valoración: ALTA

Conclusiones Todos los servicios médicos han sido reforzados según lo previsto, a excepción del de anestesia que, por falta de médicos residentes, no se pudo completar el número de especialistas formados esperado.

Las actividades de formación han permitido reforzar los servicios médicos previstos, aunque alguno de ellos carece de equipamiento o material suficiente para aplicar los conocimientos y capacidades adquiridas.

Los efectos sobre la capacidad de atención y mejora de indicadores sanitarios de actividad no se pueden medir en toda su extensión debido a la falta de fuentes de información adecuadas (Informes del Hospital Central de Maputo).

Recomendaciones 2 Incluir formación en gestión de equipamientos y material Aplicación: Futuras intervenciones

Dirigida a: CIC / HCM

Dentro de las carencias detectadas en el Hospital Central de Maputo (y de manera general en todo Mozambique) además de la falta de personal formado, se encuentra la falta de equipamiento y materiales adecuados, muchos de ellos de un solo uso. Frecuentemente el presupuesto de funcionamiento de las unidades sanitarias no permite la adquisición de suficiente stock de estos materiales por lo que su gestión (conservación, mantenimiento, almacenaje, etc.) es de vital importancia para maximizar la capacidad de uso y su disponibilidad. Incluir formaciones relacionadas con estas cuestiones ayudaría a paliar de alguna manera esta deficiencia mientras se espera la mejora de las capacidades financieras del Sistema de Salud.

3 Mejora del Sistema de Información del Hospital Central de Maputo Aplicación: Futuras intervenciones

Dirigida a: CIC / HCM

Aunque no esté relacionada con la intervención evaluada, se estima procedente realizar una recomendación dirigida a la mejora del sistema de información del Hospital Central de Maputo. Los informes de esta unidad sanitaria siguen el modelo del MISAU, común para todas las unidades sanitarias, y se incluyen datos relacionados con las actividades específicas del Hospital. No obstante no existe una buena herramienta que permita elaborar informes ad-hoc o disponer de esta información de manera rápida y con suficiente calidad. Esto perjudica la capacidad de planificación del Hospital y, en el caso particular de esta intervención, la verificación de los avances alcanzados. Se recomienda, por tanto, mejorar este sistema de información en próximas intervenciones, favoreciendo como está dicho la capacidad de planificación, detección de fragilidades y verificación de logros.

Criterio 3: Eficiencia

Valoración: ALTA

Conclusiones Los gastos han estado ajustados al presupuesto, no detectándose desviaciones importantes.

Se ha producido un retraso durante la primera parte de la intervención debido a cambios

Page 25: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

22

en la dirección del Hospital y del MISAU, así como a los cambios realizados en la intervención. Se han hecho, por tanto, dos ampliaciones de la duración del proyecto lo que ha permitido realizar todas las actividades previstas al final del mismo.

La colaboración entre el CIC y el Hospital de Maputo/MISAU es ya de largo recorrido y está consolidada. Esto ha facilitado la ejecución de las actividades y la obtención de todas las autorizaciones y permisos para la incorporación de médicos españoles en Mozambique durante el tiempo de formación y la estancia de médicos mozambiqueños en hospitales españoles.

Gran parte del personal ha sido voluntario (médicos españoles) lo que ha favorecido la eficiencia. La estructura de gestión es mínima, aunque en parte podría delegarse al Hospital Central de Maputo.

Recomendaciones 4 Gestión delegada al Hospital Central de Maputo Aplicación: Futuras intervenciones

Dirigida a: CIC

Para mejorar aún más la eficiencia de una intervención de estas características y reforzar el departamento de administración del Hospital, se recomienda delegar en futuras intervenciones parte de la carga administrativa y de gestión del proyecto en el propio Hospital. Se podría ofrecer asistencia técnica a la persona que llevase el peso de la gestión de la intervención en el Hospital para asegurar que los procedimientos se cumplían de acuerdo con las exigencias del financiador.

Criterio 4: Impacto

Valoración: MEDIA

Conclusiones Se ha contribuido de manera importante a la mejora del Sistema de Salud de Mozambique dado que en estos momentos el Sistema tiene capacidad de ofrecer servicios especializados mejorados. De momento, no obstante, tan sólo aplicables en el Hospital Central de Maputo.

Se han reforzado los planes de formación y la capacidad de docencia para la formación posterior de otros médicos especialistas.

La falta de equipamiento o material fungible puede limitar el impacto de la mejora de las capacidades de los médicos especialistas.

Recomendaciones 5 Diseminación de las capacidades alcanzadas en el Hospital de Maputo a otros Hospitales

Aplicación: Futuras intervenciones

Dirigida a: CIC

Aunque ya en la intervención evaluada se han incorporado, como beneficiarios, médicos de otros hospitales fuera de Maputo, la aplicación de las capacidades y conocimientos implicarían la incorporación de equipamiento y el acompañamiento durante el tiempo de implantación de los nuevos servicios o en sus mejoras. De igual forma a como se hace en Maputo, podría realizarse en estos otros hospitales asegurando el impacto a nivel nacional, no solamente restringido al Hospital de Maputo.

Criterio 5: Viabilidad

Valoración: ALTA

Conclusiones Las mejoras alcanzadas en los servicios médicos se mantendrán a lo largo del tiempo dado que el personal formado permanece en las unidades sanitarias y el esfuerzo financiero necesario es asumible.

La continuidad de la formación de nuevos médicos residentes sí podrá verse afectado por la falta de financiación propia.

La falta de presupuesto adecuado para la compra de equipamientos y material fungible podrá, en algunos casos, comprometer la aplicación de los conocimientos y capacidades.

No se establece una relación de dependencia, aunque la formación de médicos residentes con calidad todavía necesita, en gran medida, financiación externa.

Recomendaciones 6 Asegurar la existencia de equipamiento y material adecuado Aplicación: Futuras intervenciones

Page 26: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

23

Dirigida a: CIC

Es un aspecto clave ya mencionado en otros criterios pues, como se puede ver, afecta a varios de ellos. Para facilitar la planificación y la elaboración de los presupuestos por parte del Hospital Central de Maputo en los que se incluyan este tipo de materiales, se recomienda elaborar una pequeña herramienta para el cálculo de necesidades de material fungible. Esta herramienta servirá para presentar las necesidades de manera más objetiva y ayudará a los gestores a la hora de priorizar las acciones a financiar.

7 Reforzar la capacidad de implementación de los planes de formación de médicos especialistas

Aplicación: Futuras intervenciones

Dirigida a: CIC

De nuevo, como en la anterior recomendación, los gestores de los Hospitales necesitan tener evidencias de las necesidades presentadas en las que se pueda apreciar el impacto y la urgencia. Con relación a la formación de médicos, CIC podría elaborar en futuras intervenciones un pequeño estudio del impacto de la formación de médicos especialistas con el que justificar la aplicación de fondos para la continuidad de los programas de formación especializada. Esto ayudaría a obtener financiación, tanto interna, como externa (búsqueda de financiación externa).

Criterio 6: Coherencia

Valoración: ALTA

Conclusiones Coherencia interna adecuada, dirigiéndose las actividades y resultados pretendidos a la resolución de los problemas detectados. La falta de personal médico especializado y los altos niveles de mortalidad mejoran a partir de las actividades de formación, la realización de prácticas quirúrgicas, tanto en Mozambique como en España, la adquisición de libros y otro material bibliográfico, y la elaboración de protocolos de formación especializada.

La intervención presenta coherencia externa al estar integrada en la estrategia de salud de la Cooperación española y coordinar las acciones con otras entidades presentes en el mismo sector y zona de intervención. En particular se establecen relaciones de sinergia con otros proyectos implementados en el Hospital Central de Maputo.

Recomendaciones -

Criterio 7: Alineamiento

Valoración: ALTO

Conclusiones Alineamiento con el Plan de Reducción de la Pobreza Absoluta (2011-2014) en Mozambique, con el Plan Estratégico del Sector Salud del MISAU (2007-2012) y con la Estrategia de Salud de la Cooperación española en Mozambique (2010-2013).

Alineamiento con los procedimientos administrativos y de gestión de las autoridades mozambiqueñas.

Recomendaciones -

Criterio 8: Participación

Valoración: ALTA

Conclusiones Delimitación clara de los participantes en el proyecto. Participación de todos los intervinientes según lo esperado a excepción del número total

de médicos residentes del área de anestesia que no son suficientes. La colaboración de largo recorrido entre CIC y el Hospital Central de Maputo ha facilitado

la participación activa de todos los intervinientes. Los encuentros ad-hoc y la comunicación directa entre los médicos han sido mecanismos

de participación suficientes para el mantenimiento de la dinámica de las actividades y consecución de resultados.

Recomendaciones 8 Elaboración de informes del Hospital sobre la intervención Aplicación: Futuras intervenciones

Dirigida a: CIC

Page 27: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

24

A pesar de que se verifica una participación adecuada de todos los intervinientes según lo esperado, la parte de gestión se vería reforzada con la elaboración de informes de actividades y logros por parte de los beneficiarios (responsables de los departamentos del Hospital). Sería una herramienta de seguimiento y verificación importante para futuras intervenciones.

Criterio 9: Cobertura

Valoración: MEDIA

Conclusiones Cobertura final menor de la esperada por la eliminación de uno de los resultados (pediatría) y la no existencia del número esperado de médicos residentes del área de anestesia.

Todos los colectivos han sido incorporados: médicos residentes del Hospital Central de Maputo y médicos de otros hospitales para determinadas acciones de formación.

No se detectan problemas de acceso a las actividades por parte de los beneficiarios dado el número limitado de éstos y la óptima relación de colaboración con el CIC después de varios años de intervenciones conjuntas.

Recomendaciones -

6. Lecciones aprendidas

El modelo de colaboración de esta intervención ha producido resultados muy importantes a costes reducidos: el modelo de intervención se basa en la formación de médicos especialistas mozambiqueños a partir de la colaboración desinteresada de médicos españoles de 2 formas. En primer lugar, en Mozambique, con la participación de éstos en acciones de formación y prácticas médicas. En segundo lugar, acompañando a los médicos mozambiqueños en hospitales de España donde completarán su formación durante un período de tiempo. La participación de los médicos, como se dice, es voluntaria por lo que los costes del proyecto son pequeños en relación a los beneficios y la calidad de la formación recibida. Su impacto es enorme ya que se favorece la apertura de servicios médicos en Mozambique únicos, quedando pendiente la expansión hacia otros hospitales del país.

Colaboración de médicos con elevada experiencia e interés de colaboración: abundando en la anterior lección, cabe destacar que la participación de médicos españoles con elevada experiencia e interés de colaboración, demostrado por el largo recorrido de participación en intervenciones similares, es la clave de la obtención de tan buenos resultados. La experiencia es fundamental para la correcta transmisión de conocimientos y la seguridad a la hora de hacer las prácticas médicas. El interés de colaboración implica una disposición individual adecuada para el trabajo en situaciones de especial dificultad y sin los medios que normalmente están puestos a disposición de los médicos en España.

La colaboración institucional favorece la obtención de resultados: la buena relación de CIC y el Hospital

Central de Maputo/MISAU mantenida a lo largo de varias intervenciones similares ha favorecido la incorporación de médicos españoles en el proyecto, pieza clave para la obtención de los resultados esperados. Esta buena relación y la confianza depositada en el CIC ha permitido que se obtengan las autorizaciones necesarias para ejercer la práctica médica en Mozambique por parte de los médicos españoles de manera rápida y sencilla. Si no hubiese existido esta colaboración y buena relación entre ambas instituciones, es muy posible que la mera obtención de estas autorizaciones hubiese necesitado de todo el período previsto de implementación de la intervención.

La necesidad de establecer mecanismos de formación de especialistas es altamente pertinente: las condiciones actuales del Sistema Nacional Sanitario, con graves carencias ya desde el nivel de Atención Primaria y con escasos médicos generales formados todavía, hace de la formación especializada una asignatura pendiente con escasos recursos asignados. Por esta razón, los apoyos a esta área son tan críticos y pertinentes,

Page 28: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

25

una vez que permite la creación de servicios médicos al país, eliminando progresivamente la dependencia de los servicios médicos o médicos de países extranjeros.

Las acciones de formación especializada son viables y podrían expandirse a otros servicios y hospitales: se ha podido verificar que la formación especializada en los moldes en los que se ha realizado en esta intervención es viable, esto es, los beneficios perduran en el tiempo una vez concluida la intervención. De manera general, todos los servicios abiertos o mejorados gracias a la intervención mantienen el nivel de acción sin problema de dependencia financiera o de otro tipo. Es cierto que son necesarios equipamientos y materiales en algunos casos que podrían dificultar la expansión de estos servicios a otros hospitales en otras provincias. En cualquier caso, este debería ser el próximo reto a realizar en futuras intervenciones.

Page 29: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

A-1

ANEXOS

ANEXO1: Términos de Referencia (ver documento anexo)

Page 30: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

A-2

ANEXO2: Agenda de trabajo fase II

DÍA LUGAR INSTITUCIÓN QUIEN

20/01/2014 Maputo Hospital Central Dr. Atilio Morais, director departamento Cirugía Cardiaca

Dr. Matchecane Cossa, cirujano torácico

21/01/2014 Maputo Hospital Central Dra. Sonia Bandeiras, directora Neonatología (ausente) Dra. Paula Santos, directora departamento Pediatría Dra. Isabel Ruas, Neonatología

23/01/2014 Maputo CIC Georgina Bonet, representante em funciones

24/01/2014 Maputo Hospital Central Dr. Domingos Diogo, director clínico

28/01/2014 a 10/02/2014

Maputo Hospital Central

Enviados formulários via e-mail: Dr. Atilio Morais, cirugía cardiaca Dr. Matchecane Cossa, cirugía torácica Dr. Porfirio Cambe, anestesiología Dra. Teresa, unidad del dolor Dra. Emilia, anestesiología Dr. Antonio Assis Cossa, traumatología Dr. Paulino Conta, otorrinolaringología Dra. Esther Tembe, audiologia Dr. Pedro Machava, otorrinolaringologia

28/01/2014 a 10/02/2014

España CIC Enviados formulários via e-mail: Dr. Vicente Tarrazona Dr. Rodrigo Miralles Dr. Agustín Molina Dra. Dora Soria Dra. Beatriz Tomás Dr. Francisco Mena Dr. Jorge Basterra

Page 31: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

A-3

ANEXO3: Fuentes consultadas

Fuentes primarias Formulación del proyecto

Informes de ejecución y financieros

Fuentes de Verificación recogidas

Solicitaciones oficiales de cambio de programa y pedidos de apoyo

Reformulaciones y comunicaciones de autorización

Fuentes secundarias Plan Estratégico del Sector Salud 2007-2012. MISAU. Gob Mozambique

Plano Indicativo Estratégico de Desarrollo Regional 2005-2012. SADC

Plan de Acción de Reducción de la Pobreza III (2010-2014). Gobierno de Mozambique

Plan Director Cooperación Española 2009-2012. AECID

Estrategia de salud de la cooperación española en Mozambique, 2010‐2013

Page 32: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

A-4

ANEXO4: Formularios enviados a los participantes

Formulario médicos participantes de Mozambique

Médicos

Moçambicanos 1 Correspondência prioridades beneficiários com objectivos intervenção. Acha que as

actividades realizadas no projecto entram dentro das prioridades do Sistema Nacional de Saúde, do seu serviço ou sua área? Que outras acções poderiam ter sido priorizadas por parte do CIC?

2 Houve alguma situação posterior ao arranque do projecto que poderia ter mudado as prioridades do mesmo? Poder-se-ia ter adaptado o projecto a alguma situação nova ou problema urgente inesperado? Quais?

4 O ritmo de execução foi o esperado? Houve atrasos? Por que razoes?

6 Gestão do programa: De que maneira foi realizada a colaboração institucional entre o CIC e o MISAU/HCM? Houve encontros de seguimento periódicos? Houve troca de informações? Poderia ter sido melhor a colaboração entre as instituições ao longo da execução do projecto?

7 Quem participou no projecto e qual foi o seu papel? (indicar pessoas e função). Da parte do CIC, quem participou segundo a sua experiência ao longo do projecto?

8 Alcance de metas (escrever daquilo que tenha informação ou indique (e anexe se possível) o documento onde se poderia ter a informação desejada) Resultado Indicador Alcançado? Comentários Fonte da informação

R1. Consolidadas as unidades de cirurgia torácica e cardiovascular do HCM como unidades de referencia docente a nível nacional

Número de médicos formados para prestar serviços nesta unidade, e com um aumento de 60% em 2012

Número de pessoal sanitário treinado e aumento da percentagem total do pessoal sanitário dos serviços

Número de intervenções globais realizadas, com incrementos anuais consecutivos de 10%

Número de intervenções realizadas sem dependência externa, e sua percentagem

Page 33: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

A-5

global

Número de actividades formativas desenvolvidas

Número de intervenções de manutenção do equipamento

Actividades Realizadas? Comentários Fonte da informação

Realizar uma estadia em Espanha para completar conhecimentos dos cirurgiões, especializando-se um deles em cirurgia vascular e outro em cirurgia torácica

Trinar um novo perfusionista e formar um novo médico em hemodinâmica

Realizar missões cirúrgicas de formação e acompanhamento nos campos de cirurgia torácica e cardiovascular até conseguir a integração total da equipa moçambicana e a total autonomia

Realizar visitas de formação para a manutenção especializada em electromedicina

Resultado Indicador Alcançado? Comentários Fonte da informaçao

R2.Apoiada a nova promoção de médicos residentes em anestesia e as actividades do programa nacional de anestesia (PNAR) do MISAU.

Número de médicos residentes que se integram no programa de formaçao

Número de médicos que concluem a formação e são destinados a hospitais provinciais, e percentagem de incremento resultante

6 módulos teóricos realizados por profesores espanhois, medindo a % de residentes assistentes assim como número de

Page 34: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

A-6

conteudos lecionados do programa geral de formação

Número de médicos mozambicanos que complementam a sua formação em hospitais espanhois na base da proporçao de residentes

Número de actividades formativas desenvolvidas pelo PNAR, assí como número de publicações revisadas e editadas para o pessoal dos hospitais nacionais

Actividades Realizadas? Comentários Fonte da informaçao

Adquirir livros para os médicos em formaçao na especialidade de anestesiología

Colaborar na elaboraçao de documentos para os módulos teóricos e na publicaçao de novos cadernos de anestesia que possam ser utilizados em todos os hospitais do país

Facilitar clases teóricas seguida de acompanhamento práctico aos médicos residentes em anestesia, e colaborar no seguimento da formaçao de médicos especialistas no Hospital Central de Maputo

Tramitar a tutoría em hospitais espanhois para seis médicos residentes de anestesia para completar a sua formação e fazer seguimento a formaçao dos médicos residentes de anestesia que

Page 35: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

A-7

actualmente completam a sua formaçao em Espanha

Apoiar ao MISAU e ao PNAR na programaçao das novaspromoçoes de residentes em anestesia

Resultado Indicador Alcançado? Comentários Fonte da informaçao

R3.Melhorada a atençao ao paciente de trauma com processos de formaçao dirigidos aos médicos residentes de trauma e ortopedia colaborando com as actividades do programa nacional de traumatología e ortopedia (PNOT) do MISAU

Número de traumatólogos em formaçao medidos na base de % de traumatólogos nacionais e número de especialistas em Formaçao

Número de traumatólogos que terminam a especialidade; medidos na base do % de traumatologos nacionais totais e o aumento que suponha.

2 períodos formativos com pessoal especializado espanhol, com o cálculo da % de traumatólogos em formaçao assistentes, o número de liçoes dadas e apresentaçoes realizadas pelos residentes.

2 médicos moçambicanos adquerem capacidades en hospitales españoles, e indicación sobre el número de intervenciones en las cuales se utilizan los conocimientos y habilidades adquiridos

Publicación del manual de traumatología del MISAU.

Actividades Realizadas? Comentários Fonte da informaçao

Adquirir libros para la biblioteca de ortopedia del hospital central de Maputo,

Page 36: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

A-8

como centro docente de traumatología nacional

Colaborar en las jornadas nacionales de Traumatología y cirugía ortopédica celebradas en Mozambique, y apoyar la divulgación del manual de traumatología del MISAU y otras publicaciones de caracter sanitario

Colaborar en el período y actividades de formación de los médicos especialistas formándose en traumatología en el hospital central de Maputo

Tramitar la tutoría en hospitales españoles para un médico residente de traumatología para completar su formación

Resultado Indicador Alcançado? Comentários Fonte da informaçao

R4. Se ha reducido la morbimortalidad neonatal en los hospitales de Maputo, Cabo Delgado y Nampula mediante la capacitación del personal sanitario que atiende el parto y mejora de los cuidados básicos del recién nacido.

Mejorado el número de partos atendido por personal sanitario cualificado en cuidados neonatales, en relación al 2009.

Mejorada en un 10% el porcentaje de recién nacidos que reciben cuidados en el cordón umbilical (del 17% actual pasa al 27%)

Mejorado en un 20% el porcentaje de recién nacidos que reciben cuidados de limpieza y secado al nacer (actualmente un 20%).

Mejorada en un 10% el porcentaje de recién nacidos que reciben vitamina K (del 23

Page 37: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

A-9

% actual pasa al 33%) al final del proyecto

Mejorada en un 10% el porcentaje de recién nacidos que reciben pomada oftálmica (del 26 % actualpasa al 23%) al final del proyecto

Existencia de tres unidades de formación provinciales para la capacitación en cuidados neonatales con 12 trabajadores sanitarios capacitados como formadores

Formadas 20 personas, en cada una de las provincias, en técnicas de reanimación neonatal y cuidados básicos recién nacido al final del proyecto.

Actividades Realizadas? Comentários Fonte da informaçao

Impartir 2 cursos de formación de instructores en reanimación y cuidados básicos de atención al recién nacido en el Hospital Central de Maputo, Hospital Central de Nampula y Hospital Provincial de Cabo Delgado, respectivamente

Seleccionar al grupo de docentes que integren las unidades formativas de reanimación y cuidados neonatales, en cada uno de los Hospitales (Central de Maputo, Nampula y Provincial de Cabo Delgado), apoyando a la transmisión de la formación al resto

Page 38: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

A-10

del personal de otros hospitales de la provincia a los cuales estas primeras unidades sean referentes, monitorizando y evaluando el resultado final (disminución de la mortalidad neonatal)

Resultado Indicador Alcançado? Comentários Fonte da informaçao

R5. Se ha iniciado un programa de capacitación de formación de médicos otorrinolaringólogos dentro del Programa Nacional de Cirugía del MISAU

Existencia de un programa de formación para la especialidad en el MISAU y el PNC

Establecer la incidencia de la papilomatosis infantil en la provincia de Maputo y crear un programa específico de formación

Actividades Realizadas? Comentários Fonte da informaçao

Preparar un programa de formación a largo plazo para incrementar el número de médicos otorrinos en el intervalo de cinco años, y a corto plazo iniciar un programa de atención a la papilopatosis infantil desde el Hospital Central de Maputo

9 Alcance de objectivo: "Melhorar a atenção do paciente neonatal e apoiar a formação especializada. Consolidação especialidades de cirurgia, pediatria, anestesiologia, traumatologia e otorrinolaringologia.". Que avanços se tem dado em estes dois aspectos?

10 Houve efectos não previstos? (não realização de algumas actividades, melhoras não esperadas…)

11 Os beneficiários tiveram dificuldades para aceder aos benefícios da intervenção?

12 Quantas mulheres e homens foram beneficiados?

13

Foi reforçado o Sistema Nacional de Saúde e a especialização de quadros? A um custo razoável? Haveria outras maneiras mais econômicas segundo o seu ponto de vista?

Page 39: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

A-11

14

Qual é o plano do SNS para continuar com a especialização de quadros? Existem fundos para tal? O nível de formação de quadros permanecerá mais ou menos igual?

17

Los nuevos quadros formados são incorporados aos serviços do HCM? A outras unidades sanitarias do SNS?

20 Há outros programas de apoio similares? Outros programas dentro do HCM?

21

Que estratégias nacionais ou planos foram tidas em consideração?

22

Como foi a gestão dos fundos? Os procedimentos seguiram aqueles que tem o SNS?

23

A participação dos beneficiarias foi definida desde o inicio? Poderiam ter participado outras pessoas e não as que se beneficiaram? Qual era a rotina de participação no programa (definição, balanço, planificação….)?

DOCUMENTOS RELEVANTES A SOLICITAR: 1. PNAR: Programa Nacional de Anestesia 2. PNOT: Programa Nacional de Ortopedia e Traumatologia 3. Relatórios anuais do HCM 4. Relatórios anuais dos PNAR e PNOT 5. Manual de Traumatologia publicado pelo MISAU

Page 40: Informe de Evaluación · Informe de Evaluación 1 VERSIÓN: final de 28/02/2014 Evaluación externa final Informe de Evaluación ... Objetivo e informe de evaluación ... facilitando

Refuerzo del Sistema Nacional de Salud de Mozambique mediante la formación y capacitación de los Recursos Humanos especializados de calidad 10-PR1-0548 Mozambique, ciudad de Maputo Consejo Interhospitalario de Cooperación AECID

Informe de Evaluación externa final Fernando de los Ríos Martín

A-12

Formulario médicos participantes de España

Médicos Españoles 1

¿Cuál ha sido su participación en el proyecto?. Especifique actividades / fechas / lugares / beneficiarios,…

2

¿Ha participado en la fase de identificación, seguimiento o evaluación?, ¿De qué manera?

4

Aspectos más positivos del proyecto. Enumerar

6

Aspectos negativos. ¿Qué se debería mejorar para el próximo proyecto?.

7 ¿Piensa que El Sistema Nacional de Salud de Mozambique se ha reforzado?, ¿De qué manera?