Upload
others
View
3
Download
0
Embed Size (px)
Citation preview
EVALUACIÓN DE DISEÑO DEL
PROGRAMA PRESUPUESTARIO:
SERVICIO MÉDICO ISSSTELEON
PAE 2018
Evaluación de Diseño:
Servicio Médico ISSSTELEON
1
ÍNDICE
RESUMEN EJECUTIVO .............................................................................................................................................. 2
INTRODUCCIÓN ....................................................................................................................................................... 3
DESCRIPCIÓN DEL TIPO DE EVALUACIÓN Y METODOLOGÍA UTILIZADA ................................................................. 5
VALORACIÓN ORDINAL DEL PP ............................................................................................................................... 6
RESULTADOS OBSERVADOS EN EL ANÁLISIS ......................................................................................................... 24
PRINCIPALES FORTALEZAS, OPORTUNIDADES, DEBILIDADES Y AMENAZAS ......................................................... 26
ASPECTOS SUSCEPTIBLES DE MEJORA .................................................................................................................. 29
CONCLUSIONES ..................................................................................................................................................... 31
VALORACIÓN FINAL DEL PP ................................................................................................................................... 34
BIBLIOGRAFÍA ........................................................................................................................................................ 35
ANEXOS ………………………………………………………………………………………………………………………………………………………….36
Evaluación de Diseño:
Servicio Médico ISSSTELEON
2
RESUMEN EJECUTIVO
Este documento presenta la evaluación de Diseño del Programa Presupuestario (Pp) Servicio Médico ISSSTELEON del Instituto de Seguridad y Servicios Sociales para los Trabajadores al Servicio del Estado de Nuevo León (ISSSTELEON) del ejercicio fiscal 2017, con la finalidad de proveer información que retroalimente su diseño, gestión y resultados, lo que permitirá:
• Analizar la justificación de la creación y diseño del Programa.
• Identificar y analizar su vinculación con la planeación estatal.
• Identificar sus poblaciones y mecanismos de atención.
• Analizar el funcionamiento y operación del padrón de beneficiarios y la entrega de apoyos.
• Analizar la consistencia entre su diseño y la normatividad aplicable. Constituye una fuente de información clave que permite identificar la pertinencia o áreas de oportunidad en el diseño del programa. La evaluación cuenta con un total de 18 preguntas, divididas en seis áreas temáticas: i) justificación de la creación y del diseño del programa; ii) contribución a las metas y objetivos estatales; iii) población potencial, objetivo y mecanismos de elegibilidad; iv) padrón de beneficiarios y mecanismos de atención; v) matriz de indicadores para resultados y vi) complementariedades y coincidencias con otros programas. Del total de preguntas, tres se responden de forma abierta y 15 de forma cerrada. Las preguntas cerradas están sujetas a una valoración cualitativa ordinal, en una escala del 0 al 4, por lo que en cada tema se obtiene un puntaje. El análisis realizado con la evidencia documental enviada por el ente público ejecutor del Programa permite concluir que las actividades y los componentes que realiza el Programa presupuestario se encuentran alineados con los bienes y servicios que se establecen en sus documentos normativos. La relevancia de los objetivos del Programa y la pertinencia de los indicadores de fin y propósito revelan que, Prestaciones Sociales ISSSTELEON del Instituto de Seguridad y Servicios Sociales para los Trabajadores al Servicio del Estado de Nuevo León (ISSSTELEON), es satisfactorio y debe continuar operando en los años subsecuentes. De contar con mayores recursos y la certeza de que el presupuesto se irá incrementando en los próximos años, el Programa estaría en condiciones de asumir el compromiso de alcanzar metas más altas en cobertura. La valoración de diseño que obtiene el Programa presupuestario Servicio Médico ISSSTELEON es de 3.20 de un total de 4.00 puntos posibles.
Evaluación de Diseño:
Servicio Médico ISSSTELEON
3
INTRODUCCIÓN
La presente evaluación se realizó con base en los Términos de Referencia1 para la Evaluación del Diseño del Gobierno del Estado de Nuevo León a través de la Secretaría de Finanzas y Tesorería General del Estado, con base en los Lineamientos Generales del Poder Ejecutivo del Estado de Nuevo León para la consolidación del PpR y el SED.2 El ISSSTELEON fue creado el 12 de octubre de 1993 cuando el Congreso del Estado aprobó la Ley del Instituto de Seguridad y Servicios Sociales para los Trabajadores al Servicio del Estado de Nuevo León, que da facultades al ISSSTELEON para administrar los servicios de seguro de enfermedades y maternidad, de riesgos de trabajo, sistema certificado para jubilación, pensión por invalidez, pensión por causa de muerte, seguro de vida y préstamos a corto y largo plazo.3 El propósito de Servicio Médico ISSSTELEON es que los derechohabientes del ISSSTELEON cuenten con servicios de seguridad social. El Pp surge debido a que los trabajadores del Estado de Nuevo León y sus familias no contaban con prestaciones de seguridad social específicamente servicios médicos de calidad y amplia cobertura. 4 El programa presupuestario se opera por el ISSSTELEON cuyas funciones5 son:
• Cumplir con los programas aprobados para otorgar los seguros y las prestaciones a su cargo;
• Otorgar pensiones;
• Determinar, vigilar y cobrar el importe de las cuotas y aportaciones, así como los demás recursos del Instituto;
• Invertir los fondos y reservas de acuerdo con las disposiciones de esta Ley;
• Adquirir los bienes muebles e inmuebles necesarios para la realización de sus fines;
• Establecer la estructura de organización y funcionamiento de sus unidades administrativas;
• Administrar los seguros y las prestaciones;
• Difundir conocimientos y prácticas de previsión social;
• Expedir los reglamentos para el debido cumplimiento de lo establecido en relación con sus seguros y prestaciones, así como para su organización interna;
1 Secretaría de Finanzas y Tesorería General del Estado de Nuevo León (2018). Términos de Referencia para la Evaluación del Diseño. Programas presupuestarios PAE 2018. http://www.nl.gob.mx/sites/default/files/tdr_diseno_pae2018.pdf. 2 Gobierno Constitucional del Estado Libre y Soberano de Nuevo León (2017). Periódico Oficial. Tomo CLIV, núm. 10, pág 3-44. Lineamientos Generales del Poder Ejecutivo del Estado de Nuevo León para la Consolidación del Presupuesto por Resultados (Ppr) y el Sistema de Evaluación del Desempeño (SED). http://pbr-sed.nl.gob.mx/sites/default/files/Lineamientos%20%28Peri%C3%B3dico%20Oficial%29_3.pdf. 3 Instituto de Seguridad y Servicios Sociales para los Trabajadores al servicio del Estado de Nuevo León. s/f. Monografía del ISSSTELEÓN. 4 Instituto de Seguridad y Servicios Sociales para los Trabajadores al servicio del Estado de Nuevo León. s/f. Monografía del ISSSTELEÓN. 5 Ley del ISSSTELEON.
Evaluación de Diseño:
Servicio Médico ISSSTELEON
4
• Hacer las publicaciones que ordene esta Ley;
• Autorizar la celebración y revocación de los convenios de subrogación que ordena esta Ley;
• Las demás funciones que le confieran esta Ley y sus reglamentos.
El Programa presupuestario (Pp) está vinculado al Plan Estatal de Desarrollo (PED) 2016-2021 del Estado de Nuevo León,6 en el objetivo correspondiente al tema “Salud”, que señala “Promover en la población de Nuevo León la corresponsabilidad de crear una nueva cultura de vida saludable, facilitando el acceso oportuno y equitativo de los servicios de salud pública, atención médica y protección contra riesgos sanitarios, bajo estándares de eficiencia y calidad.” La población objetivo está definida como “los servidores públicos de Nuevo León y sus beneficiarios”.7 Objetivo general y específicos Evaluar el Diseño del Programa presupuestal Servicio Médico ISSSTELEON del ejercicio fiscal 2017 con la finalidad de proveer información que retroalimente su diseño, gestión y resultados. De lo anterior se desprenden los objetivos específicos siguientes:
• Analizar la justificación de la creación y diseño del Programa;
• Identificar y analizar su vinculación con la planeación estatal;
• Identificar sus poblaciones y mecanismos de atención;
• Analizar el funcionamiento y operación del padrón de beneficiarios y la entrega de apoyos;
• Analizar la consistencia entre su diseño y la normatividad aplicable.
6 Gobierno Constitucional del Estado Libre y Soberano de Nuevo León (2016). Plan Estatal de Desarrollo 2016-2021. http://www.nl.gob.mx/publicaciones/plan-estatal-de-desarrollo-2016-2021. 7 Instituto de Seguridad y Servicios Sociales para los Trabajadores al servicio del Estado de Nuevo León. s/f. Monografía del ISSSTELEÓN.
Evaluación de Diseño:
Servicio Médico ISSSTELEON
5
DESCRIPCIÓN DEL TIPO DE EVALUACIÓN Y METODOLOGÍA UTILIZADA
La evaluación de Diseño tiene la finalidad de proveer información que retroalimente el diseño, gestión y resultados de los Pp.
A través de un trabajo de gabinete, se llevó a cabo la evaluación, recabando, organizando y analizando la información que para tal fin proporcionó el Instituto de Seguridad y Servicios Sociales para los Trabajadores al Servicio del Estado de Nuevo León (ISSSTELEON). Además, se llevó a cabo una sesión de socialización de los resultados parciales con la dependencia evaluada. La metodología, estructura del presente informe y sus conclusiones, son plasmadas en apego a los Términos de Referencia para la Evaluación de Diseño8 publicados por el Gobierno del Estado de Nuevo León a través de la Secretaría de Finanzas y Tesorería General del Estado. La evaluación consistió en una valoración cualitativa ordinal para dar respuesta a un total de 18 preguntas con base en las evidencias documentales proporcionadas por el ISSSTELEON; del total de 18 preguntas, tres preguntas se contestan de forma abierta y quince de forma cerrada. Las preguntas cerradas estuvieron sujetas a una valoración cualitativa ordinal, en una escala del 0 al 4, donde el nivel 0 significa una valoración negativa y los niveles 1 al 4, una valoración positiva. La evaluación contiene seis temas:
• Justificación de la creación y del diseño del programa.
• Contribución a las metas y objetivos estatales.
• Población potencial, objetivo y mecanismos de elegibilidad.
• Padrón de beneficiarios y mecanismos de atención.
• Matriz de indicadores para resultados.
• Complementariedades y coincidencias con otros programas.
Los cuales permiten generar información útil, rigurosa y homogénea para el Ente Público Estatal encargado de la operación del Programa, de tal forma que contribuya a mejorar la toma de decisiones a nivel directivo; esto es, a nivel estratégico y con ello, mejorar la Gestión por Resultados en Nuevo León. Con la ejecución de esta evaluación externa, se da cumplimiento a los mandatos de ley para la evaluación de los recursos públicos con base en los resultados finales esperados.
8 Secretaría de Finanzas y Tesorería General del Estado de Nuevo León (2018). Términos de Referencia para la Evaluación de Diseño. Programas Presupuestarios. http://www.nl.gob.mx/publicaciones/terminos-de-referencia-para-la-evaluacion-de-diseno
Evaluación de Diseño:
Servicio Médico ISSSTELEON
6
VALORACIÓN ORDINAL DEL PP
TEMA I. JUSTIFICACIÓN DE LA CREACIÓN Y DEL DISEÑO DEL PROGRAMA 1. El problema o necesidad prioritaria que busca resolver el Programa presupuestario (Pp) está
identificado en un documento que cuenta con la siguiente información: a) El problema o necesidad se formula como un hecho negativo o como una situación que puede
ser revertida. b) Se define la población que tiene el problema o necesidad. c) Se define el plazo para su revisión y su actualización.
Clasificación
Ordinal Valoración de la respuesta
3 SÍ
El programa tiene identificado el problema o necesidad que busca resolver y el problema cumple con dos de las características establecidas en la pregunta.
La monografía9 señala la necesidad de ofrecer a la población servicios de salud para prevenir enfermedades, y presenta algunos datos desglosados por sexo, así mismo, presenta el problema de una forma negativa “los trabajadores del Estado de Nuevo León no cuentan con Seguridad y Servicios Sociales” y que puede ser revertida a través de los servicios de salud. Además, se establece como población objetivo a los servidores públicos de Nuevo León y sus beneficiarios. Sin embargo, no se define plazo de revisión y actualización de la monografía.
9 Instituto de Seguridad y Servicios Sociales para los Trabajadores al Servicio del Estado de Nuevo León. s/f. Monografía del ISSSTELEÓN.
Evaluación de Diseño:
Servicio Médico ISSSTELEON
7
2. Existe un diagnóstico del problema que atiende el programa que describa de manera específica: a) Causas, efectos y características del problema. b) Cuantificación y características de la población que presenta el problema. c) Ubicación territorial de la población que presenta el problema. d) El plazo para su revisión y su actualización.
Clasificación
Ordinal Valoración de la respuesta
3
SÍ El programa cuenta con documentos, información y/o evidencias que le permiten conocer la situación del problema que pretende atender, y el diagnóstico cumple con dos o tres de las características establecidas en la pregunta.
La Monografía del Instituto de Seguridad y Servicios Sociales de los Trabajadores del Estado de Nuevo León (ISSSTELEON)10 describe el problema como “los trabajadores del Estado de Nuevo León no cuentan con Seguridad y Servicios Sociales” y su causa es que los servidores públicos reciban servicios médicos limitados o de baja calidad, debido a instalaciones o mobiliario obsoleto, insuficiente personal médico para atender a los pacientes, o por el difícil acceso de la atención médica en zonas fuera del área metropolitana. Así mismo señala como efectos que no se prevengan ni se atiendan los principales padecimientos en materia de salud que presenta la entidad y que no se forme una cultura de planificación familiar y anticoncepción. Además, las características de la población que presenta el problema es que se trata de trabajadores del Estado de Nuevo León y no cuentan con Seguridad y Servicios Sociales, por lo que la ubicación territorial está acotada a la entidad federativa, sin embargo, no se cuantifica a dicha población. Cabe señalar que no se define un plazo para revisión o actualización de la monografía. Se recomienda realizar un diagnóstico con información actualizada en donde se amplíen las causas y efectos específicos del Servicio Médico de ISSSTELEON y derivado de la situación actual cuantificar la población, plazos de revisión y replantear el problema.
10 Instituto de Seguridad y Servicios Sociales para los Trabajadores al Servicio del Estado de Nuevo León. s/f. Monografía ISSSTELEON.
Evaluación de Diseño:
Servicio Médico ISSSTELEON
8
TEMA II. CONTRIBUCIÓN A LAS METAS Y OBJETIVOS ESTATALES
3. ¿Con cuáles objetivos y estrategias del Plan Estatal de Desarrollo (PED) vigente, así como Objetivos de Desarrollo Sostenible (ODS) está vinculado el objetivo del Programa?
La Ley del Instituto de Seguridad y Servicios Sociales de los Trabajadores del Estado de Nuevo León11, señala como objetivo “Establecer un régimen de seguridad social con el propósito de proteger la salud y el bienestar económico de los servidores públicos, jubilados, pensionados del Estado de Nuevo León y sus beneficiarios”. Este objetivo es coherente con el PED12 en el objetivo correspondiente al tema “Salud” que señala “Promover en la población de Nuevo León la corresponsabilidad de crear una nueva cultura de vida saludable, facilitando el acceso oportuno y equitativo de los servicios de salud pública, atención médica y protección contra riesgos sanitarios, bajo estándares de eficiencia y calidad”. La estrategia para lograrlo es “Fortalecer la disponibilidad de recursos y acceso a los servicios de salud.” A su vez, esto es coherente con el Objetivo de Desarrollo Sostenible13 Número 3 “Salud y bienestar” en particular la meta 3.8 “Lograr la cobertura sanitaria universal, en particular la protección contra los riesgos financieros, el acceso a servicios de salud esenciales de calidad y el acceso a medicamentos y vacunas seguros, eficaces, asequibles y de calidad para todos.” Se considera que los tres documentos se encuentran vinculados ya que los tres se enfocan a procurar el bienestar de la población a partir de la protección de la salud.
11 Ley del ISSSTELEON. 12 Gobierno del Estado de Nuevo León. Plan Estatal de Desarrollo 2016-2021. 13 Secretaría de Finanzas y Tesorería General del Estado de Nuevo León (2018). Alineación entre los ODS y los Programas Presupuestarios. http://pbr-sed.nl.gob.mx/objetivos-de-desarrollo-sostenible.
Evaluación de Diseño:
Servicio Médico ISSSTELEON
9
TEMA III. POBLACIÓN POTENCIAL, OBJETIVO Y MECANISMOS DE ELEGIBILIDAD
4. Las poblaciones, potencial y objetivo, están definidas en documentos oficiales y/o en el diagnóstico del problema y cuentan con la siguiente información y características: a) Unidad de medida. b) Están cuantificadas. c) Metodología para su cuantificación y fuentes de información. d) Se define un plazo para su revisión y actualización.
Clasificación Ordinal
Valoración de la respuesta
3 SÍ
El programa tiene definidas las poblaciones (potencial y objetivo), y las definiciones cumplen dos o tres de las características establecidas.
La monografía14 señala como población objetivo y potencial a los servidores públicos de Nuevo León y sus beneficiarios. No se especifica de manera textual la unidad de medida de la población objetivo, sin embargo, se considera que va implícito en la palabra “servidores”, lo que indica que se trata de personas. No se presenta evidencia que dichas poblaciones estén cuantificadas. Las fichas técnicas15 señalan como fuente de información el Padrón de derechohabientes que podría proporcionar dichos datos. Cabe señalar que no se define un plazo para revisión o actualización de la monografía. Se recomienda diferenciar y cuantificar la población potencial y objetivo, así como definir plazos de revisión y actualización.
14 Instituto de Seguridad y Servicios Sociales para los Trabajadores al Servicio del Estado de Nuevo León. s/f. Monografía del ISSSTELEÓN. 15 Secretaría de Finanzas y Tesorería General del Estado (2017). Ficha Técnica de Indicadores 2017. Servicio Médico ISSSTELEON.
Evaluación de Diseño:
Servicio Médico ISSSTELEON
10
5. Los procedimientos del programa para la selección de beneficiarios y/o proyectos tienen las siguientes características: a) Incluyen criterios de elegibilidad claramente especificados, es decir, no existe ambigüedad en
su redacción. b) Están estandarizados, es decir, son utilizados por todas las instancias ejecutoras. c) Están sistematizados. d) Están difundidos públicamente.
Clasificación Ordinal
Valoración de la respuesta
3 SÍ
Los procedimientos para la selección de beneficiarios y/o proyectos tienen tres de las características establecidas.
Para acceder al programa se debe tener la categoría de derechohabiente del ISSSTELEON, y está
claramente especificado que los beneficiarios del programa son todos los servidores públicos que
laboren al servicio del Estado de Nuevo León y sus organismos paraestatales, los municipios y sus
organismos descentralizados en los términos de los convenios de incorporación que celebren con el
Instituto. Así mismo las personas que adquieran el carácter de pensionistas o jubilados y los
beneficiarios de los servidores públicos, pensionistas y jubilados. Así mismo, la Ley señala que se
excluye de la categoría de beneficiarios de la Ley a los servidores públicos que presten servicios por
honorarios o mediante contrato sujeto a la legislación común; los que están sujetos a contratos
eventuales con vigencia inferior a seis meses, mismos que solo tendrán derecho al seguro; y los que
presten sus servicios por menos de diez horas semana-mes.
Dichos procedimientos están estandarizados ya que en función de la afiliación es reconocido en todas
las instancias ejecutoras. Además, los procedimientos de elegibilidad de beneficiarios están difundidos
públicamente mediante la Ley del ISSSTE16 disponibles en las páginas oficiales del ISSSTELEON. Sin
embargo, no se presentó evidencia de que los procedimientos de elegibilidad estén sistematizados,
entendiendo esto como un software que integre toda la información relativa a los derechohabientes
en donde sea posible dar seguimiento a los procedimientos de selección de beneficiarios relacionados
con el Servicio Médico. Dada la falta de evidencia de sistematización de los procedimientos de
elegibilidad de beneficiarios, se sugiere que se desarrolle un software que integre la información de
los procedimientos vigentes que facilite la elegibilidad; esta información sistematizada debería ser
pública para contribuir en cuestiones de transparencia.
16Ley del ISSSTELEON.
Evaluación de Diseño:
Servicio Médico ISSSTELEON
11
TEMA IV. PADRÓN DE BENEFICIARIOS Y MECANISMOS DE ATENCIÓN
6. Existe información que permita conocer quiénes reciben los apoyos del programa (padrón de beneficiarios) que: a) Incluya las características de los beneficiarios establecidas en su documento normativo. b) Incluya el tipo de apoyo otorgado. c) Esté sistematizada e incluya una clave única de identificación por beneficiario que no cambie
en el tiempo. d) Cuente con mecanismos documentados para su depuración y actualización
Clasificación Ordinal
Valoración de la respuesta
0 NO
El programa no cuenta con información de los beneficiarios del programa o la información no cuenta con al menos una de las características establecidas.
La dependencia no presentó evidencia documental del padrón de beneficiarios; sin embargo, se infiere que existe ya que la Ley ISSSTELEON17 señala que las entidades públicas deben proporcionar al Instituto informes sobre los movimientos de altas y bajas del personal cotizante y además deberá de formular y actualizar el registro de servidores públicos ya que sirve de base para otorgar los seguros y prestaciones correspondientes. La falta de evidencia de padrón de beneficiarios impide determinar los apoyos otorgados a los beneficiarios. Respecto a los apoyos que se pueden otorgar, la Ley del ISSSTELEON señala como posibles beneficios: el Seguro de enfermedades y maternidad y Seguro de riesgos de trabajo. En relación a la asignación de una clave única de identificación por beneficiario, la citada Ley señala como medio de identificación el Registro Federal de Contribuyentes, el cual no cambia con el tiempo. Asimismo, no se cuenta con evidencia de mecanismos documentados para su depuración y actualización. Se recomienda generar un padrón de beneficiarios que permita el desglose de las características de los mismos, nombre, sexo, edad, dependencia a la que está adscrita, tipo de puesto, nivel salarial, domicilio, si tiene algún tipo de necesidad especial, dependientes económicos, entre otros.
17Ley del ISSSTELEON.
Evaluación de Diseño:
Servicio Médico ISSSTELEON
12
7. Los procedimientos para otorgar los apoyos a los beneficiarios: a) Están estandarizados, es decir, son utilizadas por todas las instancias ejecutoras. b) Están sistematizados. c) Están difundidos públicamente. d) Están apegados al documento normativo del programa.
Clasificación Ordinal
Valoración de la respuesta
4 SÍ
Los procedimientos para otorgar los apoyos a los beneficiarios tienen todas las características establecidas.
Los procedimientos para otorgar los apoyos a los beneficiarios se encuentran debidamente señalados y estandarizados dentro de la Ley del ISSSTELEON18 para cada tipo de apoyo que otorgan; Seguro por enfermedades y maternidad y Seguro de riesgos de trabajo. Para acceder al apoyo de seguro por enfermedades y maternidad, deberán ser derechohabientes y sujetarse a las prescripciones y tratamientos médicos indicados por el Instituto o sus unidades médicas subrogadas. Para acceder al apoyo de riesgo de trabajo, los derechohabientes deben comprobar que su accidente o enfermedad fue ocasionada por las funciones del puesto que tiene asignado; esta información se encuentra disponible en la página del instituto. Asimismo, toda la información acerca de los beneficios disponibles para los derechohabientes, son de acceso libre en la página del instituto,19 y los procedimientos para otorgar los apoyos a los beneficiarios se apegan a la Ley del ISSSTELEON.
18Ley del ISSSTELEON. 19Página web del ISSSTELEON. http://www.isssteleon.gob.mx/index322f.html?page_id=459..
Evaluación de Diseño:
Servicio Médico ISSSTELEON
13
TEMA V. MATRIZ DE INDICADORES PARA RESULTADOS
8. Los componentes señalados en la Matriz de Indicadores para Resultados (MIR) cumplen con las siguientes características: a) Son los bienes o servicios que produce el programa. b) Están redactados como resultados logrados, por ejemplo, becas entregadas. c) Son necesarios, es decir, ninguno de los componentes es prescindible para producir el
propósito. d) Su realización genera junto con los supuestos en ese nivel de objetivos el propósito.
Clasificación Ordinal
Valoración de la respuesta
4 SÍ
Del 85 al 100% de los componentes cumplen con todas las características establecidas en la pregunta.
Los componentes señalados en la MIR20, sí corresponde a los beneficios otorgados a los derechohabientes. El beneficio es el Servicio médico. Además, los componentes se encuentran redactados como resultados logrados: consulta externa otorgada; consultas de urgencias otorgadas; servicios de hospitalización subrogados; servicios médicos no metropolitanos subrogados, por lo que son necesarios ya que generan información puntual acerca de los beneficios que se otorgan a los derechohabientes. Por tales motivos, su realización genera junto con los supuestos en ese nivel de objetivos el propósito que es: “Los derechohabientes del ISSSTELEON reciben atención médica de calidad.”
20 Secretaría de Finanzas y Tesorería General del Estado de Nuevo León (2017). Matriz de Indicadores para Resultados 2017. Servicio Médico ISSSTELEON. http://pbr-sed.nl.gob.mx/programas-presupuestarios.
Evaluación de Diseño:
Servicio Médico ISSSTELEON
14
9. El propósito de la MIR cuenta con las siguientes características: a) Es consecuencia directa que se espera ocurrirá como resultado de los componentes y los
supuestos a ese nivel de objetivos. b) Su logro no está controlado por los responsables del programa. c) Es único, es decir, incluye un solo objetivo. d) Está redactado como una situación alcanzada, por ejemplo: morbilidad en la localidad
reducida. e) Incluye la población objetivo.
Clasificación Ordinal
Valoración de la respuesta
4 SÍ
El propósito cumple con todas las características establecidas en la pregunta.
El propósito señalado en la MIR21: “Los derechohabientes del ISSSTELEON reciben atención médica de calidad” es consecuencia directa de los componentes y los supuestos, es muy puntual ya que plantea un solo objetivo, está redactado como una situación alcanzada y señala la población objetivo que son los derechohabientes del ISSSTELEON. El logro del propósito depende de si los derechohabientes reúnen los requisitos para acceder a los beneficios, por lo que se considera que el logro no depende totalmente de los responsables del programa.
21 Secretaría de Finanzas y Tesorería General del Estado de Nuevo León (2017). Matriz de Indicadores para Resultados 2017. Servicio Médico ISSSTELEON. http://pbr-sed.nl.gob.mx/programas-presupuestarios.
Evaluación de Diseño:
Servicio Médico ISSSTELEON
15
10. El fin de la MIR cuenta con las siguientes características: a) Está claramente especificado, es decir, no existe ambigüedad en su redacción. b) Es un objetivo superior al que el programa contribuye, es decir, no se espera que la ejecución
del programa sea suficiente para alcanzar el fin. c) Su logro no está controlado por los responsables del programa. d) Es único, es decir, incluye un solo objetivo. e) Está vinculado con objetivos estratégicos de la dependencia o del programa sectorial.
Clasificación Ordinal
Valoración de la respuesta
4 SÍ
El fin cumple con todas las características establecidas en la pregunta.
El fin de la MIR22 está claramente especificado, ya que no existe ambigüedad, se acota a “contribuir a disminuir la incidencia de enfermedades”, el cual está definido como un objetivo superior en el que el programa aporta algo, por lo tanto, no se espera que la ejecución del programa sea suficiente para alcanzar el fin, además, es único ya que se acota a un solo objetivo. Asimismo, el logro del fin no está controlado por los responsables del programa ya que no son ellos los que otorgan el servicio ni todo lo relacionado con el mismo. Cabe señalar que el fin del Programa está vinculado con el objetivo de la dependencia, mismo que se señala en la Ley del ISSSTELEON como “…proteger la salud y el bienestar económico de los servidores públicos, jubilados, pensionados del Estado de Nuevo León y sus beneficiarios.”23
22 Secretaría de Finanzas y Tesorería General del Estado de Nuevo León (2017). Matriz de Indicadores para Resultados 2017. Servicio Médico ISSSTELEON. http://pbr-sed.nl.gob.mx/programas-presupuestarios. 23 Ley del ISSSTELEON.
Evaluación de Diseño:
Servicio Médico ISSSTELEON
16
11. ¿En las Reglas de Operación del Programa (ROP) o documento normativo del programa es posible identificar el resumen narrativo de la MIR (fin, propósito, componentes y actividades)?
Clasificación Ordinal
Valoración de la respuesta
4 SÍ
Algunas de las actividades, todos los componentes, el propósito y el fin de la MIR se identifican en las ROP o documento normativo del programa.
El Fin de la MIR24 es “contribuir a disminuir la incidencia de las enfermedades mediante el otorgamiento de servicios médicos del ISSSTELEON”; el propósito “los derechohabientes del ISSSTELEON reciben atención médica de calidad”; y los componentes 1 Consulta externa otorgada; 2 Consultas de urgencias otorgadas; 3 Servicios de hospitalización subrogados; 4 Servicios médicos no metropolitanos subrogados, son coherentes con la Ley del ISSSTELEON25 ya que señala como su objetivo “el establecimiento de un régimen de seguridad social con el propósito de proteger la salud y el bienestar económico de los servidores públicos, jubilados, pensionados del Estado de Nuevo León y sus beneficiarios.” Por otra parte, esto se refuerza con lo señalado en el Reglamento para el Gobierno Interior del ISSSTELEON.26
24 Secretaría de Finanzas y Tesorería General del Estado de Nuevo León (2017). Matriz de Indicadores para Resultados 2017. Servicio Médico ISSSTELEON. http://pbr-sed.nl.gob.mx/programas-presupuestarios. 25Ley del ISSSTELEON. 26 Reglamento para el Gobierno interior del ISSSTELEON.
Evaluación de Diseño:
Servicio Médico ISSSTELEON
17
12. En cada uno de los niveles de objetivos de la MIR del programa existen indicadores para medir el desempeño del programa con las siguientes características: a) Claros. b) Relevantes. c) Económicos. d) Monitoreables. e) Adecuados.
Clasificación Ordinal
Valoración de la respuesta
4 SÍ
Del 85% al 100% de los indicadores del programa tienen las características establecidas.
Los indicadores de la MIR27 que miden el desempeño del programa son claros y específicos. Además, son relevantes ya que reflejan la tasa de variación de un año a otro a nivel de componentes respecto a consultas externas otorgadas, consultas de urgencias otorgadas, el porcentaje de recursos ejercidos en servicios de hospitalización subrogados, porcentaje de recursos ejercidos en servicios médicos no metropolitanos subrogados. A nivel de actividad el porcentaje de citas programadas efectuadas, la tasa de variación de estudios, tasa de variación de medicamentos entregados, porcentaje de pacientes registrados en urgencias, porcentaje de urgencias clasificadas por triage, porcentaje de órdenes de internamiento emitidas, porcentaje de altas médicas emitidas, porcentaje de unidades médicas contratadas, porcentaje de pacientes con grado de calificación otorgada, porcentaje de servicios médicos contratados, porcentaje de pago de servicios médicos no metropolitanos subrogados. También son económicos en el sentido que la información se genera continuamente, se supone actualizada y que se cuenta con el personal capacitado para procesarla. Asimismo, se considera que son monitoreables porque tienen especificado el periodo de revisión para cada indicador, además de que las fichas técnicas28 señalan la existencia de un sistema estadístico médico, se supone que el sistema funciona adecuadamente y por lo tanto la tarea de monitoreo resulta más fácil. Finalmente se considera que los indicadores son adecuados ya que la información que proporcionan está directamente relacionada con el beneficio de seguro médico que se otorgan a los derechohabientes.
27 Secretaría de Finanzas y Tesorería General del Estado de Nuevo León (2017). Matriz de Indicadores para Resultados 2017. Servicio Médico ISSSTELEON. http://pbr-sed.nl.gob.mx/programas-presupuestarios. 28 Secretaría de Finanzas y Tesorería General del Estado (2017). Ficha Técnica de Indicadores 2017. Servicio Médico ISSSTELEON.
Evaluación de Diseño:
Servicio Médico ISSSTELEON
18
13. Las fichas técnicas de los indicadores del programa cuentan con la siguiente información: a) Nombre. b) Definición. c) Método de cálculo. d) Unidad de medida. e) Frecuencia de medición. f) Línea base. g) Metas. h) Comportamiento del indicador.
Clasificación Ordinal
Valoración de la respuesta
4
SI
Del 85% al 100% de las fichas técnicas de indicadores del programa tienen las características establecidas.
Las fichas técnicas de los indicadores29 del programa cuentan con nombre, definición, método de cálculo, unidad de medida, frecuencia de medición, metas y comportamiento del indicador en todos los niveles; mientras que la línea base solo aparece a nivel de fin, propósito y componentes.
La única característica que no aparece textualmente citada en ningún nivel es la Definición, aunque en realidad va implícito en el nombre de todos los indicadores en todos los niveles.
29 Secretaría de Finanzas y Tesorería General del Estado (2017). Ficha Técnica de Indicadores 2017. Servicio Médico ISSSTELEON.
Evaluación de Diseño:
Servicio Médico ISSSTELEON
19
14. Las metas de los indicadores de la MIR del programa tienen las siguientes características: a) Cuentan con unidad de medida. b) Están orientadas a impulsar el desempeño, es decir, no son laxas. c) Son factibles de alcanzar considerando los plazos y los recursos humanos y financieros con los
que cuenta el programa.
Clasificación Ordinal
Valoración de la respuesta
1
SI
Del 0% al 49% de las metas de los indicadores del programa tienen las características establecidas.
Las metas de la MIR30 Servicio Médico del ISSSTELEON, cuentan con unidad de medida. Además, de los diecisiete indicadores, doce se considera que son laxas: dado que ocho fijaron meta cero, tres la fijaron por debajo de la línea base y una es poco ambiciosa. No se cuenta con información adicional para justificar por qué se establecieron de esa forma. (Anexo 3) La información que se utiliza para establecer las metas proviene de diversas fuentes como el Servicio Estadístico Médico, Dirección de servicios médicos, evaluación anual del servicio médico, dirección de desarrollo humano, sistema contable ISSSTELEON, dirección de administración y finanzas, registros del área de urgencias, dirección de servicios médicos, listado de contratos, encuesta de calidad del servicio brindado por el hospital San José, listado de contratos, registros del área de pagos. 31 Algunas metas utilizan una escala diferente al resto (0 a 1 y 0 a 100), por lo cual se recomienda homologar este aspecto; así como evitar fijar metas en cero o poco ambiciosas.
30 Secretaría de Finanzas y Tesorería General del Estado de Nuevo León (2017). Matriz de Indicadores para Resultados 2017. Servicio Médico ISSSTELEON. http://pbr-sed.nl.gob.mx/programas-presupuestarios. 31 Secretaría de Finanzas y Tesorería General del Estado (2017). Ficha Técnica de Indicadores 2017. Servicio Médico ISSSTELEON.
Evaluación de Diseño:
Servicio Médico ISSSTELEON
20
15. ¿Cuántos de los indicadores incluidos en la MIR tienen especificados medios de verificación con las siguientes características: a) Oficiales o institucionales. b) Con un nombre que permita identificarlos. c) Permiten reproducir el cálculo del indicador. d) Públicos, accesibles a cualquier persona.
Clasificación Ordinal
Valoración de la respuesta
3
SI
Del 70% al 84% de los medios de verificación cumplen con las características establecidas en la pregunta.
Los diecisiete indicadores incluidos en la MIR32 cuentan con especificación de medios de verificación oficiales, con un nombre específico que permite identificarlos y permiten reproducir el cálculo. Los datos de cada medio de verificación no son públicos de manera directa.
32 Secretaría de Finanzas y Tesorería General del Estado de Nuevo León (2017). Matriz de Indicadores para Resultados 2017. Servicio Médico ISSSTELEON. http://pbr-sed.nl.gob.mx/programas-presupuestarios.
Evaluación de Diseño:
Servicio Médico ISSSTELEON
21
16. Considerando el conjunto objetivo-indicadores-medios de verificación, es decir, cada renglón de la MIR del programa es posible identificar lo siguiente: a) Los medios de verificación son los necesarios para calcular los indicadores. b) Los medios de verificación son suficientes para calcular los indicadores. c) Los indicadores permiten medir, directa o indirectamente, el objetivo a ese nivel.
Clasificación Ordinal
Valoración de la respuesta
4 SÍ
Todos los conjuntos objetivo-indicadores-medios de verificación del programa tienen las características establecidas.
De acuerdo con la revisión de cada renglón de la MIR33 es posible identificar que los medios de verificación son los necesarios para calcular los indicadores ya que contienen la información que se requiere en cada uno. Además, los medios de verificación son suficientes para calcular los indicadores ya que proporcionan la información puntual para el cálculo de cada indicador y permiten medir, directa o indirectamente el objetivo a cada nivel establecido.
33 Secretaría de Finanzas y Tesorería General del Estado de Nuevo León (2017). Matriz de Indicadores para Resultados 2017. Servicio Médico ISSSTELEON. http://pbr-sed.nl.gob.mx/programas-presupuestarios.
Evaluación de Diseño:
Servicio Médico ISSSTELEON
22
17. En caso de encontrar deficiencias en la MIR del Programa, sugiera modificaciones que considere resuelvan las fallas encontradas.
Se considera que el diseño de la MIR34 es adecuado; sin embargo, respecto al establecimiento de las metas, estas deben de fijarse de tal forma que sean retadoras. Cabe señalar que, a pesar de que el Programa no cuenta con indicadores de desempeño con perspectiva de género o por desagregación por sexo, la Secretaría de Finanzas y Tesorería General del Estado ha establecido una metodología35 para elaborar un Tablero de Indicadores con Perspectiva de Igualdad de Género y que será aplicable a nivel de Propósito debido a que en este nivel se establece el impacto estratégico que debe tener el Pp para apoyar este enfoque transversal.
34 Secretaría de Finanzas y Tesorería General del Estado de Nuevo León (2017). Matriz de Indicadores para Resultados 2017. Servicio Médico ISSSTELEON. http://pbr-sed.nl.gob.mx/programas-presupuestarios. 35 Secretaría de Finanzas y Tesorería General del Estado de Nuevo León (2018). Metodología de Indicadores de Desempeño con Perspectiva de Género. http://pbr-sed.nl.gob.mx/sites/default/files/metodologia_para_indicadores_de_desempeno_con _perspectiva_de_genero_.pdf.
Evaluación de Diseño:
Servicio Médico ISSSTELEON
23
TEMA VI. COMPLEMENTARIEDADES Y COINCIDENCIAS CON OTROS PROGRAMAS
18. ¿Con cuáles programas y/o acciones del Estado y en qué aspectos el programa evaluado podría tener complementariedad y/o coincidencias?
Se encontró evidencia de tres programas presupuestarios que ofrecen Servicios de Salud en el Estado de Nuevo León: a) el programa “Afiliación al Seguro Popular” por parte del Régimen de protección social en salud de Nuevo León, que tiene como población objetivo a las personas sin seguridad social en el Estado; b) el programa “Prevención y control de enfermedades” y c) “Atención a la salud” ambos por parte de los Servicios de Salud de Nuevo León. Los tres programas brindan servicios ligados a temas de salud, desde la afiliación, prevención y atención de la salud; sin embargo, no existe duplicidad de servicios, ya que atienden a poblaciones diferentes a las que atiende el ISSSTELEON, motivo por el cual se considera que los programas citados complementan la oferta de servicios de salud en la población del Estado de Nuevo León.
Evaluación de Diseño:
Servicio Médico ISSSTELEON
24
RESULTADOS OBSERVADOS EN EL ANÁLISIS
Los principales hallazgos derivados de la evaluación del Pp Servicio Médico ISSSTELEON, se detallan a continuación:
Principales resultados
• El problema o necesidad prioritaria que busca resolver Servicio Médico ISSSTELEON está
identificado en una monografía que señala el problema como un hecho negativo, se define a su
vez las poblaciones potencial y objetivo; sin embargo, no tiene plazos establecidos para la
revisión y actualización de dicha información.
• El Pp cuenta con un diagnóstico del problema que señala las causas; sin embargo, el diagnóstico
no señala la fecha de elaboración. Por otra parte, el diagnóstico no señala el plazo para revisión
y actualización de la información.
• El Pp está vinculado tanto con el PED en el objetivo de salud; y con los Objetivos de Desarrollo
Sostenible (ODS) específicamente en el objetivo número 3 “salud y bienestar.”
• Las poblaciones potencial y objetivo se encuentran definidas, cuentan con unidad de medida y
señala las fuentes de información; sin embargo, no están cuantificadas y no se definen plazos
para revisión o actualización de la información.
• Los procedimientos del programa para seleccionar beneficiarios incluyen criterios de elegibilidad
claramente especificados, están estandarizados, están difundidos públicamente, pero no están
sistematizados.
• El Pp no cuenta con padrón de beneficiarios.
• Los procedimientos para otorgar apoyos a los beneficiarios están estandarizados, sistematizados,
difundidos públicamente y apegados a la normativa del programa.
• Los componentes señalados en la MIR coinciden con los bienes y servicios que produce el
programa; están redactados como resultados logrados; son necesarios y su realización genera
junto con los supuestos en ese nivel de objetivos el propósito.
• El propósito de la MIR es consecuencia directa que se espera ocurrirá como resultado de los
componentes y los supuestos a ese nivel de objetivos; el logro no está controlado por los
responsables del programa; es único; se redactó como situación alcanzada e incluye a la
población objetivo.
• El fin de la MIR está claramente especificado, es un objetivo superior al del Pp; su logro no está
controlado por los responsables del programa; es único y está vinculado con los objetivos
estratégicos de la dependencia.
• En las reglas del resumen narrativo de la MIR (fin, propósito, componentes y actividades) se
identifican en el Reglamento para el Gobierno Interior del ISSSTELEON.
Evaluación de Diseño:
Servicio Médico ISSSTELEON
25
Principales resultados
• Los indicadores para medir el desempeño son claros, relevantes, económicos, monitoreables y
adecuados.
• Las fichas técnicas de los indicadores del programa cuentan con nombre, método de cálculo,
unidad de medida, línea base y comportamiento del indicador. El único aspecto que no aparece
textual es la definición del indicador, sin embargo es información que va implícita en el nombre
de los indicadores.
• Las metas de los indicadores de la MIR del Pp cuentan con unidad de medida; 12 de 17 metas no
están orientadas a impulsar el desempeño; y en algunos casos las metas utilizan escalas
diferentes.
• Los 17 indicadores incluidos en la MIR cuentan con especificación de medios de verificación
oficiales, con un nombre específico que permite identificarlos y hacen posible reproducir el
cálculo, sin embargo, no son públicos.
• En cada renglón de la MIR del Pp es posible identificar que los medios de verificación son los
necesarios y suficientes para calcular los indicadores; y permiten medir el objetivo de cada nivel.
• El diseño de la MIR del Pp, es adecuado. Y actualmente se trabaja en mejorar para incorporar el
enfoque de género.
• No existe duplicidad con otros programas del Gobierno del Estado de Nuevo León, pero se complementa con a) el programa “Afiliación al Seguro Popular”; b) el programa “Prevención y control de enfermedades” y c) “Atención a la salud.”
Evaluación de Diseño:
Servicio Médico ISSSTELEON
26
PRINCIPALES FORTALEZAS, OPORTUNIDADES, DEBILIDADES Y AMENAZAS En este apartado se exponen los principales resultados del análisis de las fortalezas y oportunidades, así como de las debilidades y amenazas que presenta el Programa Servicio Médico ISSSTELEON. Se presenta la descripción para cada una de las áreas temáticas analizadas:
Fortalezas y oportunidades
Justificación de la creación y del diseño del programa
• El problema o necesidad prioritaria que busca resolver el Pp Servicio Médico ISSSTELEON está identificado en una monografía que señala el problema como un hecho negativo, se define a su vez las poblaciones potencial y objetivo.
• El Pp cuenta con un diagnóstico del problema que señala las causas.
Contribución a las metas y objetivos estatales
• El Pp está vinculado tanto con el PED en el objetivo de salud; y con los ODS específicamente en el objetivo número 3 “salud y bienestar”.
Población potencial, objetivo y mecanismos de elegibilidad
• Las poblaciones potencial y objetivo se encuentran definidas, cuentan con unidad de medida y señala las fuentes de información.
• Los procedimientos del programa para seleccionar beneficiarios incluyen criterios de elegibilidad claramente especificados, están estandarizados y están difundidos públicamente.
Padrón de beneficiarios y mecanismos de atención
• Los procedimientos para otorgar apoyos a los beneficiarios están estandarizados, sistematizados, difundidos públicamente y apegados a la normativa del programa.
Matriz de Indicadores para Resultados
• Los componentes señalados en la MIR coinciden con los bienes y servicios que produce el programa; están redactados como resultados logrados; son necesarios y su realización genera junto con los supuestos en ese nivel de objetivos el propósito.
• El propósito de la MIR es consecuencia directa que se espera ocurrirá como resultado de los componentes y los supuestos a ese nivel de objetivos; el logro no está controlado por los responsables del programa; es único; se redactó como situación alcanzada e incluye a la población objetivo.
• El fin de la MIR está claramente especificado, es un objetivo superior al del Pp; su logro no está controlado por los responsables del programa; es único y está vinculado con los objetivos estratégicos de la dependencia.
• En las reglas de el resumen narrativo de la MIR (fin, propósito, componentes y actividades) se identifican en el Reglamento para el Gobierno Interior del ISSSTELEON.
• Los indicadores para medir el desempeño son claros, relevantes, económicos, monitoreables y adecuados.
• Las fichas técnicas de los indicadores del programa cuentan con nombre, método de cálculo, unidad de medida, línea base y comportamiento del indicador.
Evaluación de Diseño:
Servicio Médico ISSSTELEON
27
• Las metas de los indicadores de la MIR del Pp cuentan con unidad de medida.
• Los 17 indicadores incluidos en la MIR cuentan con especificación de medios de verificación oficiales, con un nombre específico que permite identificarlos y permiten reproducir el cálculo.
• En cada renglón de la MIR del Pp es posible identificar que los medios de verificación son los necesarios y suficientes para calcular los indicadores; y permiten medir el objetivo de cada nivel.
• El diseño de la MIR del Pp, es adecuado. Y actualmente se trabaja en mejorar para incorporar el enfoque de género.
Debilidades o amenazas
Justificación de la creación y del diseño del programa
• No tiene plazos establecidos para la revisión y actualización del problema o necesidad que busca resolver el Pp.
• El diagnóstico no señala fecha de elaboración.
• El diagnóstico no establece plazos para revisión y actualización del problema, población potencial y objetivo.
Población potencial, objetivo y mecanismos de elegibilidad
• No se definen plazos para la revisión o actualización de la población potencial y objetivo.
• Los procedimientos del programa para seleccionar beneficiarios no están sistematizados.
Padrón de beneficiarios y mecanismos de atención
• El Pp no cuenta con padrón de beneficiarios.
Matriz de Indicadores para Resultados
• Los medios de verificación no son públicos.
• Indicadores con escala diferente (0 a 1 y 0 a 100).
Evaluación de Diseño:
Servicio Médico ISSSTELEON
28
RETOS Y RECOMENDACIONES
En la siguiente tabla se presentan las recomendaciones por sección temática para el Programa Servicio Médico ISSSTELEON identificadas dentro del informe de evaluación.
Sección Recomendación Referencia (pregunta)
Justificación de la creación y del
diseño del programa
Elaborar un diagnóstico actualizado del problema o la necesidad que cubre el programa.
1 y 2
Especificar un plazo para la revisión y actualización de los diagnósticos.
1 y 2
Población potencial, objetivo y mecanismos de
elegibilidad
Diferenciar y cuantificar la población potencial y objetivo.
4
Incorporar en un sistema los procedimientos para elegir a los beneficiarios.
5
Padrón de beneficiarios y mecanismos de
atención
Generar un padrón de beneficiarios detallado y que esté disponible en formato digital.
6
Matriz de Indicadores para
Resultados
Incluir la definición de los indicadores en las fichas técnicas.
13
Establecer metas diferentes de cero de tal forma que incentiven el desempeño.
14
Homogenizar la escala de los indicadores (0 a 1 o de 0 a 100). 14
Hacer públicos (en la medida de lo posible) los medios de verificación de los indicadores especificados en la MIR del Programa.
15
Evaluación de Diseño:
Servicio Médico ISSSTELEON
29
ASPECTOS SUSCEPTIBLES DE MEJORA
En este apartado se presentan los ASM derivados de la evaluación de diseño del programa Servicio Médico ISSSTELEON con su respectiva clasificación y priorización.
No. ASM Clasificación Priorización
AE36 AI37 AID38 AIG39 Alto Medio Bajo
1
Elaborar un diagnóstico que identifique el problema o necesidad prioritaria que busca resolver el Pp, así como la ubicación territorial, la cuantificación y las características de la población que presenta dicho problema, que defina las áreas de enfoque potencial y objetivo y que contenga un árbol de problemas y otros elementos mínimos establecidos en el “Criterio de actualización y creación de programas presupuestarios, modificación de metas y seguimiento de los indicadores de desempeño”.40
X X
2 Integrar procedimientos de elegibilidad de beneficiarios en un sistema.
X X
36 Aspectos específicos (AE): aquellos cuya solución corresponde a la unidad administrativa específica responsable del Programa. 37 Aspectos institucionales (AI): que requieren de la intervención de varias unidades administrativas dentro de la misma dependencia o ente público para su solución. 38 Aspectos interinstitucionales (AID): que para su solución se deberá contar con la participación de unidades administrativas ubicadas en otra dependencia o ente público. 39 Aspectos intergubernamentales (AIG): que demandan la intervención del gobierno estatal (aparte del ente público responsable de la ejecución de los recursos del Programa) para su solución. 40 Secretaría de Finanzas y Tesorería General del Estado de Nuevo León (2018). Criterio de actualización y creación de programas presupuestarios, modificación de metas y seguimiento de los indicadores de desempeño. http://pbr-sed.nl.gob.mx/sites/default/files/criterios_final.pdf
Evaluación de Diseño:
Servicio Médico ISSSTELEON
30
No. ASM Clasificación Priorización
AE AI AID AIG Alto Medio
Bajo
3
Generar un padrón de beneficiarios que permita conocer las características de los mismos y su evolución con el tiempo.
X X
4
Hacer públicos (en la medida de lo posible) los medios de verificación de los indicadores especificados en la MIR del Programa.
X X
5 Redefinir las metas de los indicadores de la MIR.
X X
Evaluación de Diseño:
Servicio Médico ISSSTELEON
31
CONCLUSIONES
I. Justificación de la creación y del diseño del programa.
El programa tiene identificada la necesidad que es “ofrecer a la población servicios de salud para prevenir enfermedades” dado lo anterior, el programa justifica plenamente su creación. Así mismo el programa está enfocado a la atención de los servidores públicos del Estado de Nuevo León y sus beneficiarios. Sin embargo no se tiene cuantificada la población y no se tienen plazos establecidos para la revisión y actualización del problema o necesidad ni de la población objetivo y potencial. La calificación obtenida en esta área temática fue de 3.00. II. Contribución a las metas y objetivos estatales.
Se encontró que el programa está alineado al PED en el tema de “Salud” para lo cual el PED planteó la estrategia “Fortalecer la disponibilidad de recursos y acceso a los servicios de salud”; en este mismo sentido está alineado con los ODS en el Objetivo Número 3 “Salud y Bienestar” y más específicamente con la meta “Lograr la cobertura sanitaria universal, en particular la protección contra los riesgos financieros, el acceso a servicios de salud esenciales de calidad y el acceso a medicamentos y vacunas seguros, eficaces, asequibles y de calidad para todos”. Dado lo anterior se observa que el Pp contribuye al logro de objetivos de planes superiores. En esta área temática no aplica valoración ordinal. III. Población potencial, objetivo y mecanismos de elegibilidad Se encontró que se tiene definida la población objetivo, potencial y los mecanismos de elegibilidad de beneficiarios; sin embargo, la población potencial y la objetivo son idénticas, por lo que es preciso incluir algún elemento que las distinga, así como su cuantificación. La calificación obtenida en esta área temática fue de 3.00. IV. Padrón de beneficiarios y mecanismos de atención
La Ley del ISSSTELEON señala como beneficiarios a los derechohabientes del ISSSTELEON, que son los servidores públicos que laboren al servicio del Estado de Nuevo León y sus organismos paraestatales, los municipios y sus organismos descentralizados en los términos de incorporación que celebren con el Instituto; los pensionados o jubilados y los beneficiarios de todo estos. Los procedimientos de elegiblidad así como los mecanismos de atención detallados están estandarizados y son de carácter público. Sin embargo, no se encontró evidencia de la existencia de un padrón de beneficiarios, ni de que los mecanismos estén sistematizados. La calificación obtenida en esta área temática fue de 2.00.
Evaluación de Diseño:
Servicio Médico ISSSTELEON
32
V. Matriz de indicadores para resultados La MIR del programa tiene información relevante y detallada, ya que los componentes señalados corresponden a los beneficios otorgados y se encuentran redactados como resultados logrados. Dado lo anterior se considera que su realización genera junto con los supuestos, el propósito de que los derechohabientes del ISSSTELEON reciban atención médica de calidad. Cabe resaltar que el Fin del programa se vincula con el objetivo de la dependencia que es proteger la salud y el bienestar económico de los servidores públicos, jubilados, pensionados del Estado de Nuevo León y sus beneficiarios. Sin embargo, existen áreas de oportunidad que enriquecerían la información que proporcionada, por ejemplo, que no se establezcan metas en cero. La calificación obtenida en esta área temática fue de 3.56. VI. Complementariedades y coincidencias Se identificaron tres programas presupuestarios que ofrecen Servicios de Salud en el Estado de Nuevo León:
a) Programa Afiliación al Seguro Popular por parte del Régimen de protección social en salud de Nuevo León, que tiene como población objetivo a las personas sin seguridad social en el Estado;
b) Programa “Prevención y control de enfermedades” por parte de los Servicios de Salud de Nuevo León.
c) Programa “Atención a la salud” por parte de los Servicios de Salud de Nuevo León. Los tres programas brindan servicios ligados a temas de salud, desde la afiliación, prevención y atención de la salud, sin embargo, no existe duplicidad de servicios, ya que atienden a poblaciones diferentes, motivo por el cual se considera que los programas citados complementan la oferta de servicios de salud en la población del Estado de Nuevo León. En esta área temática no aplica valoración ordinal. VII. Conclusiones generales De manera general, se puede concluir que el programa presupuestario Servicio Médico ISSSTELEON se ajusta a la normativa, está alineado al Plan Estatal de Desarrollo vigente y los Objetivos de Desarrollo Sostenible, por lo que en este contexto se considera pertinente su existencia. Dentro de las áreas de oportunidad se encuentran diferenciar y cuantificar la población potencial y objetivo, la generación de un padrón de beneficiarios y no establecer metas en cero dentro de la matriz de indicadores para resultados. La valoración numérica comprende un rango de cero a cuatro donde el cero indica el menor cumplimiento y cuatro indica el óptimo. En este sentido, el Programa Servicio Médico ISSSTELEON ha obtenido una calificación promedio de 3.20. Dentro de las áreas temáticas, la Matriz de Indicadores
Evaluación de Diseño:
Servicio Médico ISSSTELEON
33
para Resultados obtuvo la valoración más alta con un 3.56; mientras que el área con la valoración más baja fue Padrón de beneficiarios y mecanismos de atención con 2.00.
Evaluación de Diseño:
Servicio Médico ISSSTELEON
34
VALORACIÓN FINAL DEL PP
La valoración de las secciones de la evaluación se construyó con los promedios de las calificaciones asignadas a todas las preguntas binarias de cada tema. La valoración global del Programa Servicio Médico ISSSTELEON corresponde al promedio simple de todas las preguntas ordinales.
Sección de la evaluación Valoración general
Justificación de la creación y del diseño del programa 3.00
Contribución a las metas y objetivos estatales Sin Valoración Ordinal
Población potencial, objetivo y mecanismos de elegibilidad 3.00
Padrón de beneficiarios y mecanismos de atención 2.00
Matriz de Indicadores para Resultados 3.56
Complementariedades y coincidencias con otros programas Sin Valoración Ordinal
Servicio médico ISSSTELEON 3.20
Evaluación de Diseño:
Servicio Médico ISSSTELEON
35
BIBLIOGRAFÍA
Gobierno del Estado de Nuevo León. Alineación entre los ODS y los programas presupuestarios. http://pbr-sed.nl.gob.mx/objetivos-de-desarrollo-sostenible. ----- Página web institucional del ISSSTELEON. http://www.isssteleon.gob.mx/index322f.html?page_id=459. ----- (2016). Plan Estatal de Desarrollo 2016-2021. http://www.nl.gob.mx/publicaciones/plan-estatal-de-desarrollo-2016-2021. ----- Programa Anual de Evaluación 2018. http://www.nl.gob.mx/sites/default/files/pae_2018.pdf. ----- Sistema Estatal del Transparencia. http://transparencia.nl.gob.mx/site/bienvenida.
Instituto de Seguridad y Servicios Sociales de los Trabajadores del Estado de Nuevo León, (2015). Reglamento para el gobierno Interior del Instituto de Seguridad y Servicios Sociales de los Trabajadores del Estado de Nuevo León. Instituto de Seguridad y Servicios Sociales para los Trabajadores al servicio del Estado de Nuevo León. s/f. Monografía del ISSSTELEON. Periódico Oficial. 13 de octubre 1993. Ley del Instituto de Seguridad y Servicios Sociales de los Trabajadores del Estado de Nuevo León. Secretaría de Finanzas y Tesorería General del Estado (2017). Ficha Técnica de Indicadores 2017. Servicio Médico ISSSTELEON. ----- (2017). Matriz de Indicadores para Resultados 2017. Servicio Médico ISSSTELEON. http://pbr-sed.nl.gob.mx/programas-presupuestarios. ----- (2018). Términos de Referencia para la Evaluación del Diseño. Programas presupuestarios PAE 2018. http://www.nl.gob.mx/sites/default/files/tdr_diseno_pae2018.pdf. ----- (2017). Ficha Técnica de Indicadores 2017. Servicio Médico ISSSTELEON. ----- (2018). Metodología de Indicadores de Desempeño con Perspectiva de Género. http://pbr-sed.nl.gob.mx/sites/default/files/metodologia_para_indicadores_de_desempeno_con_perspectiva_de_genero_.pdf.
Evaluación de Diseño:
Servicio Médico ISSSTELEON
36
ANEXOS
Anexo 1A. MIR
Resumen narrativo
Indicadores Medio de verificación y
fuente de información
Supuesto
Indicador Fórmula Frecuencia
Fin
Contribuir a disminuir la incidencia de las enfermedades mediante el otorgamiento de servicios médicos del isssteleon
Porcentaje de morbilidad de los derechohabientes del isssteleon
(pacientes con alguna enfermedad crónica degenerativa / derechohabientes del isssteleon) * 100
Anual
Sistema estadístico médico / dirección de servicios médicos
Propósito
Los derechohabientes del isssteleon reciben atención médica de calidad
Índice de servicio médico de calidad
(calificaciones recibidas / encuestas realizadas)
Anual
Evaluación anual del servicio médico / dirección de desarrollo humano
El personal médico y administrativo del isssteleon cumple con los estándares de calidad establecidos
Componentes C1. Consulta externa otorgada
Tasa de variación de consultas externas otorgadas
((consultas externas otorgadas en el trimestre del año t - consultas externas otorgadas en el trimestre del año t-1) / consultas externas otorgadas en el trimestre del año t-1) * 100
Trimestral
Sistema estadístico médico / dirección de servicios médicos
Los pacientes cumplen en tiempo y forma el trámite para agendar una consulta externa
Evaluación de Diseño:
Servicio Médico ISSSTELEON
37
Resumen narrativo
Indicadores Medio de verificación y
fuente de información
Supuesto
Indicador Fórmula Frecuencia
Componentes
C2. Consultas de urgencias otorgadas
Tasa de variación de consultas de urgencias otorgadas
((consultas de urgencias otorgadas en el trimestre del año t - consultas de urgencias otorgadas en el trimestre del año t-1) / consultas de urgencias otorgadas en el trimestre del año t-1) * 100
Trimestral
Sistema estadístico médico / dirección de servicios médicos
El derechohabiente tiene conocimiento de la ubicación de la unidad y específica correctamente su sintomatología al médico tratante.
C3. Servicios de hospitalización subrogados
Porcentaje de recursos ejercidos en servicios de hospitalización subrogados
(recursos ejercidos en servicios de hospitalización subrogados / recursos presupuestados para servicios de hospitalización) * 100
Trimestral
Sistema contable isssteleon / dirección de administración y finanzas
Los pacientes cuentan con derecho médico vigente
C4. Servicios médicos no metropolitanos subrogados
Porcentaje de recursos ejercidos en servicios médicos no metropolitanos subrogados
(recursos ejercidos en servicios médicos no metropolitanos subrogados / recursos presupuestados para servicios médicos no metropolitanos) * 100
Trimestral
Sistema contable isssteleon / dirección de administración y finanzas
Los pacientes cuentan con derecho médico vigente
Evaluación de Diseño:
Servicio Médico ISSSTELEON
38
Resumen narrativo
Indicadores Medio de verificación y
fuente de información
Supuesto
Indicador Fórmula Frecuencia
C2. Consultas de urgencias otorgadas
Actividades (Procesos)
A1C2. Registro del paciente
Porcentaje de pacientes registrados en urgencias
(pacientes registrados en urgencias / registro programado de pacientes en urgencias) * 100
Trimestral
Registros del área de urgencias / dirección de servicios médicos
El paciente acude a recibir atención médica de urgencia
A2C2. Clasificación de la urgencia
Porcentaje de urgencias clasificadas por triage (rojas, naranjas, amarillo, azul y verde)
(urgencias clasificadas por triage / pacientes registrados en urgencias) *100
Trimestral
Registros del área de urgencias / dirección de servicios médicos
El paciente acepta que su urgencia sea clasificada
A3C2. Emisión de órdenes de internamiento
Porcentaje de órdenes de internamiento emitidas
(órdenes de internamiento emitidas / pacientes atendidos en urgencias) * 100
Trimestral
Sistema estadístico médico / dirección de servicios médicos
La capacidad en camas disponibles de la unidad médica es suficiente
A4C2. Emisión de altas médicas de urgencias
Porcentaje de altas médicas de urgencias emitidas
(altas médicas de urgencias emitidas / pacientes atendidos en urgencias) * 100
Trimestral
Sistema estadístico médico / dirección de servicios médicos
El paciente está de acuerdo con el alta médica emitida
Evaluación de Diseño:
Servicio Médico ISSSTELEON
39
Resumen narrativo
Indicadores Medio de verificación y
fuente de información
Supuesto Indicador Fórmula Frecuencia
C3. Servicios de hospitalización subrogados
Actividades (Procesos)
A1C3. Contratación de la unidad médica
Porcentaje de unidades médicas contratadas
(unidades médicas contratadas / unidades médicas programadas) * 100
Trimestral
Listado de contratos / dirección de administración y finanzas
Las unidades médicas que aplican al concurso de licitación aceptan las condiciones de éste
A2C3. Aplicación de encuestas de calidad del servicio subrogado
Porcentaje de pacientes que califican de "buena"o "muy buena" la atención brindada durante la hospitalización
(pacientes que califican de "buena" o "muy buena" la atención brindada durante la hospitalización / pacientes de hospitalización encuestados) * 100
Trimestral
Encuesta de calidad del servicio brindado por el hospital san josé / dirección de desarrollo humano
El paciente acepta realizar la encuesta
C4. Servicios médicos no metropolitanos subrogados
Actividades (procesos)
A1C4. Contratación de servicios médicos (unidades y médicos) en municipios fuera del área metropolitana de monterrey
Porcentaje de servicios médicos contratados
(servicios médicos contratados / servicios médicos programados) * 100
Trimestral
Listado de contratos / dirección de servicios médicos
Las unidades médicas que aplican al concurso de licitación aceptan las condiciones de éste
A2C4. Pago de servicios médicos no metropolitanos subrogados
Porcentaje de pago de servicios médicos no metropolitanos subrogados
(pago realizado por servicios médicos no metropolitanos subrogados / pago programado por servicios médicos no metropolitanos subrogados) * 100
Trimestral
Registros del área de pagos / dirección de administración y finanzas
El prestador de servicios entrega en tiempo la factura con soporte completo
Evaluación de Diseño:
Servicio Médico ISSSTELEON
40
Anexo 2. Indicadores
N
ivel d
e
ob
jetivo
No
mb
re d
el
ind
icado
r
Mé
tod
o d
e
cálculo
Claro
Re
levan
te
Econ
óm
ico
Mo
nito
reab
le
Ad
ecu
ado
Un
idad
de
me
did
a
Frecu
en
cia de
me
dició
n
Líne
a base
Me
tas
Co
mp
orta m
ien
to
de
l ind
icado
r
Fin Sí Sí Sí Sí Sí Sí Sí Sí Sí Sí Sí Sí
Propósito Sí Sí Sí Sí Sí Sí Sí Sí Sí Sí Sí Sí
Componente 1 Sí Sí Sí Sí Sí Sí Sí Sí Sí Sí Sí Sí
Componente 2 Sí Sí Sí Sí Sí Sí Sí Sí Sí Sí Sí Sí
Componente 3 Sí Sí Sí Sí Sí Sí Sí Sí Sí Sí Sí Sí
Componente 4 Sí Sí Sí Sí Sí Sí Sí Sí Sí Sí Sí Sí
Actividad A1C1 Sí Sí Sí Sí Sí Sí Sí Sí Sí No aplica Sí Sí
Actividad A2C1 Sí Sí Sí Sí Sí Sí Sí Sí Sí No aplica Sí Sí
Actividad A3C1 Sí Sí Sí Sí Sí Sí Sí Sí Sí No aplica Sí Sí
Actividad A1C2 Sí Sí Sí Sí Sí Sí Sí Sí Sí No aplica Sí Sí
Actividad A2C2 Sí Sí Sí Sí Sí Sí Sí Sí Sí No aplica Sí Sí
Actividad A3C2 Sí Sí Sí Sí Sí Sí Sí Sí Sí No aplica Sí Sí
Actividad A4C2 Sí Sí Sí Sí Sí Sí Sí Sí Sí No aplica Sí Sí
Actividad A1C3 Sí Sí Sí Sí Sí Sí Sí Sí Sí No aplica Sí Sí
Actividad A2C3 Sí Sí Sí Sí Sí Sí Sí Sí Sí No aplica Sí No
Actividad A1C4 Sí Sí Sí Sí Sí Sí Sí Sí Sí No aplica Sí Sí
Actividad A2C4 Sí Sí Sí Sí Sí Sí Sí Sí Sí No aplica Sí Sí
De acuerdo con el apartado 6 “Elementos mínimos de la Ficha Técnica del Indicador de Desempeño” del Anexo Único de los Lineamientos Generales del Poder Ejecutivo para la Consolidación del
Evaluación de Diseño:
Servicio Médico ISSSTELEON
41
Presupuesto por Resultados (PpR) y del Sistema de Evaluación del Desempeño (SED)41, la línea base no está establecida como un elemento mínimo que deba integrar las Fichas Técnicas de Indicadores, sin embargo, se reporta para nivel de Fin, Propósito y Componentes.
41 Secretaría de Finanzas y Tesorería General del Estado (2017). Anexo Único: de los Lineamientos Generales del Poder Ejecutivo para la Consolidación del Presupuesto por Resultados (PpR) y del Sistema de Evaluación del Desempeño (SED) http://sgi.nl.gob.mx/Transparencia_2015/Archivos/AC_0001_0007_00161230_000001.pdf
Evaluación de Diseño:
Servicio Médico ISSSTELEON
42
Anexo 3. Metas del Programa
Nivel de objetivo
Nombre del indicador
Meta Unidad de
medida
Orientada a impulsar el desempeño
Justificación Factible Propuesta de mejora de la meta
Fin
Porcentaje de morbilidad de los derechohabientes del ISSSTELEON
18.26 Porcentaje No
La meta se estableció por debajo de la línea base
Sí Ninguna
Propósito Índice de servicio médico de calidad
0.95 Absoluto Sí Busca mejorar la calidad del servicio
Sí
Utilizar la misma escala que el resto de los indicadores
Componente 1
Tasa de variación de consultas externas otorgadas
0.44 Porcentaje No
La meta se estableció por debajo de la línea base
No
Utilizar la misma escala que el resto de los indicadores
Componente 2
Tasa de variación de consultas de urgencias otorgadas
9.87 Porcentaje No
La meta se estableció muy por debajo de la línea base
No
Justificar el motivo de haber establecido esa meta
Componente 3
Porcentaje de recursos ejercidos en servicios de hospitalización subrogados
100 Porcentaje Sí
Se pretende ejercer recursos en servicios de hospitalización subrogados
Sí Ninguna
Componente 4
Porcentaje de recursos ejercidos en servicios médicos no metropolitanos subrogados
0.98 Porcentaje No
Se esperaría que hubiera una mayor atención en zonas no metropolitanas y la meta es poco ambiciosa
No
Utilizar la misma escala que el resto de los indicadores
Evaluación de Diseño:
Servicio Médico ISSSTELEON
43
Nivel de objetivo
Nombre del indicador
Meta Unidad de
medida
Orientada a impulsar el desempeño
Justificación Factible Propuesta de mejora de la
meta
Actividad A1C1
Porcentaje de citas programadas efectuadas
100 Porcentaje Sí
La meta es atender todas las citas programadas
Sí Ninguna
Actividad A2C1
Tasa de variación de estudios (de laboratorio o de gabinete) realizados
100 Porcentaje Sí
La meta es que se atiendan más estudios de laboratorio cada trimestre
Sí Ninguna
Actividad A3C1
Tasa de variación de medicamentos entregados
100 Porcentaje Sí
La meta es que crezca la entrega de medicamentos
Sí Ninguna
Actividad A1C2
Porcentaje de pacientes registrados en urgencias
0 Porcentaje No
La meta busca no atender pacientes en urgencias
No
Hacer coherente con lo planteado en el componente correspondiente
Actividad A2C2
Porcentaje de urgencias clasificadas por triage (rojas, naranjas, amarillo, azul y verde)
0 Porcentaje No
La meta en cero implica que no se pretende clasificar urgencias por triage
No
Hacer coherente con lo planteado en el componente correspondiente
Actividad A3C2
Porcentaje de órdenes de internamiento emitidas
0 Porcentaje No
La meta en cero implica que no se pretende emitir órdenes de internamiento
No
Hacer coherente con lo planteado en el componente correspondiente
Evaluación de Diseño:
Servicio Médico ISSSTELEON
44
Nivel de objetivo
Nombre del indicador
Meta Unidad de
medida
Orientada a impulsar el desempeño
Justificación Factible Propuesta de mejora de la
meta
Actividad A4C2
Porcentaje de altas médicas de urgencias emitidas
0 Porcentaje No
La meta cero implica que no se pretenden emitir altas médicas de urgencias
No
Hacer coherente con lo planteado en el componente correspondiente
Actividad A1C3
Porcentaje de unidades médicas contratadas
0 Porcentaje No
La meta en cero implica que no se pretende contratar unidades médicas
No
Hacer coherente con lo planteado en el componente correspondiente
Actividad A2C3
Porcentaje de pacientes que califican de "buena" o "muy buena" la atención brindada durante la hospitalización
0 Porcentaje No
La meta en cero implica que no se pretende aplicar encuestas de servicio
No
Hacer coherente con lo planteado en el componente correspondiente
Actividad A1C4
Porcentaje de servicios médicos contratados
0 Porcentaje No
La meta en cero implica que no se pretende contratar servicios médicos
No
Hacer coherente con lo planteado en el componente correspondiente
Actividad A2C4
Porcentaje de pago de servicios médicos no metropolitanos subrogados
0 Porcentaje No No
Hacer coherente con lo planteado en el componente correspondiente
Evaluación de Diseño:
Servicio Médico ISSSTELEON
45
Anexo 4. Complementariedad y coincidencias con otros programas y/o acciones
No
mb
re d
el P
rog
ram
a
Cla
sifi
caci
ón
pro
gra
má
tica
Dep
end
enci
a/E
nti
da
d
Pro
pó
sito
Po
bla
ció
n o
bje
tivo
Tip
o d
e a
po
yo
¿Co
inci
de
con
el
Pro
gra
ma
eva
lua
do
?
¿Se
co
mp
lem
enta
co
n
el P
rog
ram
a e
valu
ad
o?
Just
ific
aci
ón
Afiliación al Seguro Popular
L19U21818
Régimen de protección social en salud de Nuevo León OPD
Las personas sin seguridad social del Estado de Nuevo León tienen garantizados los servicios de salud establecidos en el catálogo único de servicios de salud (causas), fondo de protección contra gastos catastróficos y seguro médico siglo XXI.
Personas
Servicios de salud
No Sí Brindan servicios semejantes
Prevención y control de enfermedades
L19E27218
Servicios de salud de Nuevo León (SSNL)
Las personas mejoran su nivel de salud
Personas
Acciones de promoción, prevención y control en las unidades médicas
No Sí Brindan servicios semejantes
Atención a la salud
L19E27318
Servicios de salud de Nuevo León (SSNL)
Las personas sin seguridad social cuentan con acceso oportuno a las unidades médicas de los servicios de salud
Personas
Acceso a servicios de salud
No Sí Brindan servicios semejantes
Evaluación de Diseño:
Servicio Médico ISSSTELEON
46
Anexo 5. Formato para la difusión de los resultados de la evaluación (CONAC)
1. Descripción de la evaluación
1.1 Nombre de la evaluación: Evaluación de Diseño del Programa presupuestario: Servicio Médico ISSSTELEON
1.2 Fecha de inicio de la evaluación (dd/mm/aaaa): 08/06/2018
1.3 Fecha de término de la evaluación (dd/mm/aaaa): 09/01/2019
1.4 Nombre de la persona responsable de darle seguimiento a la evaluación y nombre de la unidad administrativa a la que pertenece:
Nombre: Dra. Tayde Olvera Martínez
Unidad administrativa: Subdirección de Especialidades del ISSSTELEON
1.5 Objetivo general de la evaluación: Evaluar el diseño del Pp Servicio Médico ISSSTELEON con la finalidad de proveer información que retroalimente su diseño, gestión y resultados
1.6 Objetivos específicos de la evaluación:
• Analizar la justificación de la creación y diseño del Programa.
• Identificar y analizar su vinculación con la planeación estatal.
• Identificar sus poblaciones y mecanismos de atención.
• Analizar el funcionamiento y operación del padrón de beneficiarios y la entrega de apoyos.
• Analizar la consistencia entre su diseño y la normatividad aplicable.
1.7 Metodología utilizada en la evaluación:
Instrumentos de recolección de información:
Cuestionarios__ Entrevistas_X_ Formatos_X_ Otros__ Especifique:
Descripción de las técnicas y modelos utilizados: La evaluación de diseño del Programa se realizó a través de un trabajo de gabinete, recabando, organizando y analizando la información que para tal fin proporcionó el Instituto de Seguridad y Servicios Sociales para los Trabajadores al Servicio del Estado de Nuevo León (ISSSTELEON). Además, se llevó a cabo una sesión de socialización de los resultados parciales con la Dependencia evaluada. La metodología, estructura del presente informe y sus conclusiones, son plasmadas en apego a los Términos de Referencia para la Evaluación de Diseño publicados por el Gobierno del Estado de Nuevo León a través de la Secretaría de Finanzas y Tesorería General del Estado.
2. Principales hallazgos de la evaluación
• El problema o necesidad prioritaria que busca resolver el Pp Servicio Médico ISSSTELEON está identificado en una monografía que señala el problema como un hecho negativo, se define a su vez las poblaciones potencial y objetivo; sin embargo, no tiene plazos establecidos para la revisión y actualización de dicha información.
• El Pp cuenta con un diagnóstico del problema que señala las causas; sin embargo, el diagnóstico no señala la fecha de elaboración. Por otra parte, el diagnóstico no señala el plazo para revisión y actualización de la información.
• El Pp está vinculado tanto con el PED en el objetivo de “salud”; y con los ODS específicamente en el objetivo número 3 “salud y bienestar”.
Evaluación de Diseño:
Servicio Médico ISSSTELEON
47
• Las poblaciones potencial y objetivo se encuentran definidas, cuentan con unidad de medida y señala las fuentes de información; sin embargo, no están cuantificadas y no se definen plazos para su revisión o actualización de la información.
• Los procedimientos del programa para seleccionar beneficiarios incluyen criterios de elegibilidad claramente especificados, están estandarizados, están difundidos públicamente, pero no están sistematizados.
• El Pp no cuenta con padrón de beneficiarios.
• Los procedimientos para otorgar apoyos a los beneficiarios están estandarizados, sistematizados, difundidos públicamente y apegados a la normativa del programa.
• Los componentes señalados en la MIR coinciden con los bienes y servicios que produce el programa; están redactados como resultados logrados; son necesarios y su realización genera junto con los supuestos en ese nivel de objetivos el propósito.
• El propósito de la MIR es consecuencia directa que se espera ocurrirá como resultado de los componentes y los supuestos a ese nivel de objetivos; el logro no está controlado por los responsables del programa; es único; se redactó como situación alcanzada e incluye a la población objetivo.
• El fin de la MIR está claramente especificado, es un objetivo superior al del Pp; su logro no está controlado por los responsables del programa; es único y está vinculado con los objetivos estratégicos de la dependencia.
• En las reglas del resumen narrativo de la MIR (fin, propósito, componentes y actividades) se identifican en el Reglamento para el Gobierno Interior del ISSSTELEON.
• Los indicadores para medir el desempeño son claros, relevantes, económicos, monitoreables y adecuados.
• Las fichas técnicas de los indicadores del programa cuentan con nombre, método de cálculo, unidad de medida, línea base y comportamiento del indicador. El único aspecto que no aparece textual es la definición del indicador; sin embargo, es información que va implícita en el nombre de los indicadores.
• Las metas de los indicadores de la MIR del Pp cuentan con unidad de medida; 12 de 17 metas no están orientadas a impulsar el desempeño; y en algunos casos las metas utilizan escalas diferentes.
• Los 17 indicadores incluidos en la MIR cuentan con especificación de medios de verificación oficiales, con un nombre específico que permite identificarlos y hacen posible reproducir el cálculo, sin embargo, no son públicos.
• En cada renglón de la MIR del Pp es posible identificar que los medios de verificación son los necesarios y suficientes para calcular los indicadores; y permiten medir el objetivo de cada nivel.
• El diseño de la MIR del Pp, es adecuado. Y actualmente se trabaja en mejorar para incorporar el enfoque de género.
• No existe duplicidad con otros programas del Gobierno del Estado de Nuevo León, sino que se complementa
con a) el programa “Afiliación al Seguro Popular”; b) el programa “Prevención y control de enfermedades”
y c) “Atención a la salud.”
2.2 Señalar cuáles son las principales FODA, de acuerdo con los temas del programa, estrategia o instituciones.
2.2.1 Fortalezas y oportunidades: • El problema o necesidad prioritaria que busca resolver el Pp Servicio Médico ISSSTELEON está identificado
en una monografía que señala el problema como un hecho negativo, se define a su vez las poblaciones potencial y objetivo.
• El Pp cuenta con un diagnóstico del problema que señala las causas.
Evaluación de Diseño:
Servicio Médico ISSSTELEON
48
• El Pp está vinculado tanto con el PED en el objetivo de salud; y con los ODS específicamente en el objetivo número 3 “salud y bienestar”.
• Las poblaciones potencial y objetivo se encuentran definidas, cuentan con unidad de medida y señala las fuentes de información.
• Los procedimientos del programa para seleccionar beneficiarios incluyen criterios de elegibilidad claramente especificados, están estandarizados y están difundidos públicamente.
• Los procedimientos para otorgar apoyos a los beneficiarios están estandarizados, sistematizados, difundidos públicamente y apegados a la normativa del programa.
• Los componentes señalados en la MIR coinciden con los bienes y servicios que produce el programa; están redactados como resultados logrados; son necesarios y su realización genera junto con los supuestos en ese nivel de objetivos el propósito.
• El propósito de la MIR es consecuencia directa que se espera ocurrirá como resultado de los componentes y los supuestos a ese nivel de objetivos; el logro no está controlado por los responsables del programa; es único; se redactó como situación alcanzada e incluye a la población objetivo.
• El fin de la MIR está claramente especificado, es un objetivo superior al del Pp; su logro no está controlado por los responsables del programa; es único y está vinculado con los objetivos estratégicos de la dependencia.
• En las reglas del resumen narrativo de la MIR (fin, propósito, componentes y actividades) se identifican en el Reglamento para el Gobierno Interior del ISSSTELEON.
• Los indicadores para medir el desempeño son claros, relevantes, económicos, monitoreables y adecuados.
• Las fichas técnicas de los indicadores del programa cuentan con nombre, método de cálculo, unidad de medida, línea base y comportamiento del indicador.
• Las metas de los indicadores de la MIR del Pp cuentan con unidad de medida.
• Los 17 indicadores incluidos en la MIR cuentan con especificación de medios de verificación oficiales, con un nombre específico que permite identificarlos, permiten reproducir el cálculo y son públicos.
• En cada renglón de la MIR del Pp es posible identificar que los medios de verificación son los necesarios y suficientes para calcular los indicadores; y permiten medir el objetivo de cada nivel.
• El diseño de la MIR del Pp, es adecuado. Y actualmente se trabaja en mejorar para incorporar el enfoque de género.
• No existe duplicidad con otros programas del Gobierno del Estado de Nuevo León.
• Existe complementariedad con a) el programa “Afiliación al Seguro Popular”; b) el programa “Prevención y control de enfermedades” y c) “Atención a la salud.”
2.2.2: Debilidades y amenazas:
• No tiene plazos establecidos para la revisión y actualización del problema o necesidad que busca resolver el Pp.
• El diagnóstico no señala fecha de elaboración.
• El diagnóstico no establece plazos para revisión y actualización del problema, población potencial y objetivo.
• No se definen plazos para la revisión o actualización de la población potencial y objetivo.
• Los procedimientos del programa para seleccionar beneficiarios no están sistematizados.
• El Pp no cuenta con padrón de beneficiarios.
• Los medios de verificación no son públicos.
• Indicadores con escala diferente (0 a 1 y 0 a 100).
Evaluación de Diseño:
Servicio Médico ISSSTELEON
49
3. Conclusiones y recomendaciones de la evaluación
3.1 Describir brevemente las conclusiones de la evaluación:
De manera general, se puede concluir que el programa presupuestario Servicio Médico ISSSTELEON se ajusta a la normativa, está alineado al Plan Estatal de Desarrollo vigente y los Objetivos de Desarrollo Sostenible, por lo que en este contexto se considera pertinente su existencia. Dentro de las áreas de oportunidad se encuentran diferenciar y cuantificar la población potencial y objetivo, la generación de un padrón de beneficiarios y no establecer metas en cero dentro de la matriz de indicadores para resultados. La valoración numérica comprende un rango de cero a cuatro donde el cero indica el menor cumplimiento y cuatro indica el óptimo. En este sentido, el Programa Servicio Médico ISSSTELEON ha obtenido una calificación promedio de 3.20. Dentro de las áreas temáticas, la Matriz de Indicadores para Resultados obtuvo la valoración más alta con un 3.56; mientras que el área con la valoración más baja fue Padrón de beneficiarios y mecanismos de atención con 2.00.
3.2 Describir las recomendaciones de acuerdo con su relevancia:
1: Elaborar un diagnóstico que identifique el problema o necesidad prioritaria que busca resolver el Pp,
así como la ubicación territorial, la cuantificación y las características de la población que presenta dicho
problema, que defina las áreas de enfoque potencial y objetivo y que contenga un árbol de problemas
y otros elementos mínimos establecidos en el “Criterio de actualización y creación de programas
presupuestarios, modificación de metas y seguimiento de los indicadores de desempeño”. Elaboración
de un diagnóstico actualizado del problema o la necesidad que cubre el programa.
2: Integrar procedimientos de elegibilidad de beneficiarios en un sistema. Diferenciar y cuantificar la
población potencial y objetivo.
3: Generar un padrón de beneficiarios que permita conocer las características de los mismos y su
evolución con el tiempo. Integrar procedimientos de elegibilidad de beneficiarios en un sistema.
4: Hacer públicos (en la medida de lo posible) los medios de verificación de los indicadores especificados
en la MIR del Programa. Generar un padrón de beneficiarios que permita conocer las características de
los mismos y su evolución con el tiempo.
5: Redefinir las metas de los indicadores de la MIR. No establecer metas en cero, o bien justificar el
motivo de haberlas establecido en cero.
4. Datos de la Instancia evaluadora
4.1 Nombre del coordinador de la evaluación: Dra. América Elvira Hernández Veráztica
4.2 Cargo: Coordinadora de Evaluación
4.3 Institución a la que pertenece: Oficina de las Naciones Unidas contra la Droga y el Delito
4.4 Principales colaboradores: Dr. Gregorio Castro Rosales, Dra. Martha Elena Fuentes Castillo, Dra. Ceyla Antonio Anderson, Mtro. Aran Mayola Huguet, Dr. Isidro de la Fuente Almanza, Mtro. Rodrigo González Morales, Mtro. Francisco Banda Garza, Dra. Xóchitl Amalia Arango Morales, Mtro. Raúl Parra Alemán, Dr. Felipe de Jesús Marañón Lazcano
Evaluación de Diseño:
Servicio Médico ISSSTELEON
50
4.5 Correo electrónico del coordinador de la evaluación: [email protected]
4.6 Teléfono (con clave lada): 5541708764 ext. 200
5. Identificación del (los) programa(s)
5.1 Nombre del (los) programa(s) evaluado(s): Servicio Médico ISSSTELEON
5.2 Siglas: No aplica
5.3 Ente público coordinador del (los) programa(s): Instituto de Servicios de Seguridad Social del Estado de Nuevo León.
5.4 Poder público al que pertenece(n) el(los) programa(s):
Poder Ejecutivo___ Poder Legislativo___ Poder Judicial___ Ente Autónomo___
5.5 Ámbito gubernamental al que pertenece(n) el(los) programa(s):
Federal___ Estatal_____ Local___
5.6 Nombre de la(s) unidad(es) administrativa(s) y de (los) titular(es) a cargo del (los) programa(s):
Nombre: Dra. Tayde Olvera Martínez [email protected] (81) 2033 9275
Unidad administrativa: Subdirección de Especialidades del ISSSTELEON
6. Datos de contratación de la evaluación
6.1 Tipo de contratación:
6.1.1 Adjudicación Directa___ 6.1.2 Invitación a tres___ 6.1.3 Licitación Pública Nacional___ 6.1.4 Licitación Pública Internacional___ 6.1.5 Otro: (Señalar) Convenio de Colaboración Internacional
6.2 Unidad administrativa responsable de contratar la evaluación: Dirección de Presupuesto y Control Presupuestal, Subsecretaría de Egresos de la Secretaría de Finanzas y Tesorería General del Estado.
6.3 Costo total de la evaluación: $390,000.00 (trescientos noventa mil pesos M.N.)
6.4 Fuente de Financiamiento: Recursos estatales propios
7. Difusión de la evaluación
7.1 Difusión en internet de la evaluación: http://pbr-sed.nl.gob.mx/evaluacion-del desempeno
7.2 Difusión en internet del formato: http://pbr-sed.nl.gob.mx/evaluacion-del desempeno