HERRAMIENTA DE VERIFICACIÓN DE LAS CIFRAS REPORTADAS EN LOS INDICADORES, ODS

H3_Ver_de_las_cifras_reportadas_en_indicad_ODS_VF.xlsx

Boletín

11th Jul 2022

Descargar

Extracto

Entidad Fiscalizadora Superior:Indicar nombre de la EFS que realiza la auditoríaEntidades Fiscalizadas:Indicar el nombre del o los organismos auditadosNombre de auditoría:Indicar el nombre completo de la auditoría, especificando el o los ODS auditadosPeríodo evaluado:Indicar el periodo que comprende la revisión de auditoríaObjetivo de aplicación:Esta herramienta esta dirigida a la institucionalidad encargada del seguimiento y monitoreo de los ODS (preparación de indicadores)Propósito de la herramienta:Información base de indicadores:Instrucciones generales para completar la herramienta: ODS:META:ID INDICADOR:N°Rubro valoradoCumplimientoPesoPuntos obtenidosPuntos posiblesNombre del indicadorSíLa «fórmula» responde al indicador y está correctamente definida.Se agrega glosario con definiciones pertinentes al indicador, para una mayor comprensión2.12.2Se definió oficialmente en la institucionalidad de los ODS un responsable del indicador.Se muestra el rendimiento de avance en la meta, entendiendo la diferencia entre la meta y/o indicador actual y el definido en el umbral.Se han establecido umbrales de cumplimiento intermedios, con data anterior al 2030, con la finalidad de medir estados de avance. PAÍS:Indique el país ESTRUCTURA GENERAL %1.11.21.31.41.51.61.72.52.32.42.62.73.13.23.33.43.54.14.25.15.26.16.27.17.2El indicador se esta reportando para el seguimiento de ODS, hacia Naciones Unidas1. Contenido de la Ficha Técnica del IndicadorSe indica la fuente de datos del indicador y esta es clara.2.92.83. Confiabilidad de la información3.63.74. Oportunidad de la información4.34.44.55. Utilidad de la información6. Rendimiento de la meta y/o indicador7. Verificación de los resultados7.38.18.22. Coherencia de la Ficha Técnica del IndicadorVariable a medirFicha técnica del IndicadorResultado obtenidoDesarrolle aquí, la explicación que puede documentar o indicar la situación acontecida.Evidencia / Archivo de respaldoIncruste aquí los archivos de respaldo o referencie las hojas de trabajo.Ficha técnica del Indicador o anexoRecabar evidencia en entrevistas y en procedimientos de la institucionalidad ODS.Informes emitidos por la institucionalidad ODS.Procedimientos de la institucionalidad ODS o de los organismos productores de datos.Recabar evidencia en entrevistas a la institucionalidad ODS.Recabar evidencia en entrevistas a la institucionalidad ODS y organismos productores de datos.Informes de avance emitidos por la institucionalidad ODS más información levantada en entrevistas.Informes de avance a UN y anexos con fichas metadatos.La OLACEF, mediante el grupo de fuerza de tarea sobre el desarrollo de herramientas técnicas para medir el cumplimiento de los ODS 2030, presenta este instrumento que permite medir la confiabilidad de la información, reportada como resultado de los indicadores calculados en cada una de las metas ODS, que pretenden dar cumplimiento a los 17 objetivos de la Agenda 2030, a efecto de que los auditores de las EFS la utilicen en la ejecución de sus auditorías sobre este tema.I. De la aplicación de la herramienta Determinar mediante la estimación del grado de eficacia respecto de la confiabilidad de las cifras reportadas, como resultado de los indicadores vinculados a las metas necesarias para el seguimiento de la Agenda 2030 y el Desarrollo Sostenible en nuestro país, por parte del organismo o institucionalidad responsable de efectuar este seguimiento, lo que permite aumentar la transparencia en la información divulgada.ParcialNoCumplimiento por rubroPORCENTAJE DE CUMPLIMIENTO POR RUBROSRubrosBase 10%Base 15%No Aplica1. En la pestaña excel denominada «Escala resumen %» se encuentra la estructura general de los resultados medidos en términos de eficacia en la confiabilidad de las cifras reportadas. Las celdas de la hoja denominada «Escala %» se actualizan de forma automática, por lo cual no resulta necesario manipular dichas celdas. 2. El trabajo de revisión se realiza en la pestaña «Val. De indicadores», que es la hoja de trabajo en la cual se debe completar todo aquellos datos que tienen letra de color azul, completando la información del indicador que será evaluado, corresponde una pestaña por indicador, por lo cual si se pretende medir más de uno, se debe duplicar la pestaña y diferenciar el nombre, quizás por el ID del indicador a revisar. 3. Seguidamente, por cada uno de las variables a revisar, se debe dar respuesta en la columna «C» de Cumplimiento, la cual tiene opciones desplegables, encontrando SI, NO, PARCIAL, NO APLICA, las que se encuentran ya automatizadas para que arrojen el puntaje previamente asignado, de acuerdo a la ponderación que tiene cada rubro y que en su totalidad suman 100%.
En el caso de responder ser SI asignara el puntaje total, NO asignara cero puntaje, PARCIAL asignara la mitad del puntaje y NO APLICA, no asignara puntaje pero tampoco le descontara. En la columnas siguientes se efectúa el calculo automatizado por lo cual no deben modificarlo hasta continuar con la columna «H en la cual se debe completar los resultados obtenidos con los mecanismos de verificación empleados por el equipo de fiscalización para recopilar las evidencias, señalando lo recopilado en cada caso y explicando las razones por las cuales no aplica o aplica parcialmente.4. Por otra parte, en la columna «I», se debe dejar incrustado o vinculado cualquier papel de trabajo del auditor o de antecedentes que respalden la indagación realizada.5. Una vez terminada la revisión de todos los rubros, se reflejará en la pestaña de excel «Escala resumen %», agrupado cada uno de los rubros, con el resumen del puntaje obtenido, de acuerdo con la ponderación de base y el porcentaje de cumplimiento de cada rubro, lo cual permitirá tener una visión más detallada de la situación actual de los datos que permiten el calculo de las cifras reportadas en los indicadores, y determinar si estos son o no confiables. La institucionalidad de los ODS, aplicó un procedimiento de control para verificar la información registrada por los ejecutores y/o productores de datos, en el sistema correspondiente.La institucionalidad responsable del seguimiento de los ODS, aplico algún mecanismo para valorar las necesidades y demandas de sus diferentes grupos de interés.Las políticas públicas vinculadas con el cumplimiento de la meta, ¿cumplen con la satisfacción de los usuarios?.Indicador nacional cumple con todas las características propuestas por el indicador internacional (segregación, periodicidad, otros)Acá debe registrar el ODS, al que hace referencia ejemplo 5. Lograr la igualdad entre los géneros y empoderar a todas las mujeres y las niñas.Acá debe indicar la meta asociada, por ejemplo 5.1 Poner fin a todas las formas de discriminación contra todas las mujeres y las niñas en todo el mundo.Acá debe indicar el ID o número referencial más el nombre del indicador por ejemplo 5.1.1 Determinar si existen o no marcos jurídicos para promover, hacer cumplir y supervisar la igualdad y la no discriminación por razón de sexo.Consulta de la página web, o bien, solicitud de información a la Institucionalidad ODS.Encuestas de satisfacción, informes de evaluación de políticas publicas, etc, si no se cuenta con información suficiente para concluir, el resultado deberá ser una abstención de opinión.Objetivo: Aplicar la herramienta, a efecto de que los auditores de las EFS recopilen datos e información para medir la confiabilidad de la información reportada como resultado de los indicadores calculados y medidos, en el marco del cumplimiento de los 17 objetivos de desarrollo sostenible, ante naciones unidas; con la finalidad de visualizar y exponer las debilidades u omisiones, en información, segregación, y validación de las fuentes productoras de datos necesarios para sus cálculos, que permitan recomendar ajustes necesarios para el cumplimiento de la Agenda 2030, de manera oportuna.II. Sobre su aplicabilidad y adaptabilidadIII. Referentes o definicioneshttps://unstats.un.org/sdgs/iaeg-sdgs/2020-comp-rev/https://unstats.un.org/sdgs/iaeg-sdgs/tier-classification/La herramienta que se presenta contiene un esfuerzo por estandarizar a la mayor cantidad de casos posibles de tipo de institucionalidad de seguimiento de los ODS. Sin embargo, es posible que para casos particulares de cada país se requiera una mejor adaptación de los rubros considerados en esta evaluación.
Queda a criterio de cada EFS su adaptabilidad al caso Nacional según sus necesidades.Verificación aplicada por EFS, en base a los Informes de avance, indicar si hay una nueva cifra y detallar las diferencias.Verificación aplicada por la EFS, si no se cuenta con información suficiente para concluir, el resultado deberá ser una abstención de opinión.Detalla la fórmula de cálculoDescribe los componentes o variables involucrados en la fórmula del cálculoIndica la unidad de medidaIndica la línea baseSeñala la meta o umbral a alcanzarMenciona la periodicidad del dato o datos necesarios para el calculoEspecifica el o los tipos de fuente de información (encuesta, estadísticas de un organismo público, otros)Identifica la metodología internacional o TIER en el que se clasificaAgrega comentarios generales, en caso de ser necesario, para una mejor comprensión del indicador.La información en la ficha es completa para comprender qué es lo que pretende medir el indicador.Se definió oficialmente en la institucionalidad de los ODS un responsable del resultado del indicador.Existe un expediente (digital o físico) en la institución con la documentación que respalda los avances del indicador.La institución ejecutora y/o productora de los datos, informó sobre los riesgos internos y externos que pueden afectar los resultados del indicador.La institucionalidad de los ODS informó sobre su valoración de los riesgos internos y externos que pueden afectar los resultados del indicador.En la comunicación de los resultados del indicador, las instituciones productoras de datos, consideraron las necesidades y demandas de sus diferentes usuarios, en términos de utilidad, pertinencia, relevancia, suficiencia, y presentación adecuada.El o los informes de la institucionalidad de ODS, fue suscrito por la máxima autoridad de dicha institucionalidad.En las instituciones del Sector se aplicó un procedimiento aprobado para la recolección de la información sobre el resultado del indicador.El equipo de auditoría cuenta con información suficiente y apropiada para emitir una conclusión sobre la calidad de la información reportada sobre los resultados del indicador correspondiente al período sujeto a examen.Señala la definición conceptualSeñala la desagregación geográfica y/o temática en caso que aplique.El o los informes de la institucionalidad de ODS, sobre el resultado del indicador está completo y es comprensible para cualquier ciudadano o parte interesada. El informe sobre los resultados del indicador se remitió a Naciones Unidas en el plazo establecido.La institucionalidad de los ODS, diseño un mecanismo (sitio web) para informar a las partes interesadas y al público en general sobre los resultados del indicador, y es de fácil acceso, se encuentra operativo, actualizado y completo, para la difusión de los ODS.
Se modifica redacción a sugerencia de Argentina.La información pública reportada por la institucionalidad ODS, sobre los resultados del indicador, incluyó los metadatos y las bases de datos en formato abierto y la promoción de su uso.El monto de la ejecución presupuestaria de la meta verificada por la EFS coincide con el monto reportado por la institucionalidad de ODS.La presente herramienta ha sido preparada en base a 8 rubros que pretenden evaluar la confiabilidad de las cifras reportadas, por parte de la institucionalidad a cargo del seguimiento de los ODS y contribuir, a nivel nacional, a mejorar los resultados de los indicadores en relación a una meta específica de los ODS.
Los rubros a evaluar son:
1. Contenido de la Ficha Técnica del Indicador
2. Coherencia de la Ficha Técnica del Indicador
3. Confiabilidad de la información
4. Oportunidad de la información
5. Utilidad de la información
6. Rendimiento de la meta y/o indicador
7. Verificación de los resultados
8. Congruencia indicador internacionalNOTA TÉCNICA – HERRAMIENTA DE VERIFICACIÓN DE LAS CIFRAS REPORTADAS EN LOS INDICADORES, ODSIV. Acrónimos y abreviaturasVI. Links de interésHERRAMIENTA ÍNDICE INTEGRADO PARA MEDIR LA EFICACIA EN LA IMPLEMENTACIÓN DE LOS ODSDentro de los posibles criterios a utilizar como respaldo de los eventuales hallazgos que derivan de esta herramienta, se encuentran todas aquella normas relacionadas con control interno, las metodologías utilizadas para el procesamiento de datos estadísticos y otros similares.Es necesario aclarar que esta herramienta no se complementa con la denominada H.4 Verificación de buenas prácticas de las autoridades estadísticas, ODS, ya que si bien, tienen aspectos similares abordan objetivos distintos, por tanto el equipo auditor deberá optar por una de ellas, dependiendo del objetivo de la auditoría. Esta se enfoca principalmente en la confiabilidad de los datos recolectados, y que son usados para el calculo de los indicadores reportados en cada meta a Naciones Unidas y las distintas partes interesadas, apuntando también a evaluar alternativas de indicadores, fuentes de datos y avances en los indicadores ODS, entre otros. En cambio la otra se enfoca principalmente en la confiabilidad de los datos a nivel general, basada en principios estadísticos y aplicable a cualquier información u organismo estadístico.8. Avance y coherencia con indicador internacionalCaracterísticas:
1. La herramienta se estructura de rubros temáticos, a manera de indagación, que tienen como objetivo recolectar datos relevantes que se conviertan en información para que los auditores en campo evalúen la idoneidad del entorno de las instituciones encargadas de las estadísticas, sus procesos, así como la producción de información relacionada con las metas, indicadores y objetivos de los ODS.
2. Esta herramienta utiliza ponderadores para cada rubro y asigna puntaje de acuerdo a la evidencia recabada, además de un % de cumplimiento del mismo, de esta forma se permite cuantificar las cualidades analizadas y calificar el desempeño y la gestión de las instituciones que manejan la información del avance de los ODS.
3. La herramienta también permite a los auditores en campo tener evidencias documentales sobre las áreas de oportunidad, así como de innovación hacia donde tienen que avanzar las instituciones encargadas del manejo de información estadística.
4. El cúmulo de información que se extrae de la herramienta permite disponer de indicios útiles para la auditoría a los ODS, en términos de abrir nuevas líneas de investigación para dar mayor integralidad a la auditoría, como es el caso del estudio del control interno y el fortalecimiento del análisis de riesgos. Confiabilidad estadística: se refiere al grado de precisión o exactitud de la medida, en el sentido de que si aplicamos repetidamente el instrumento al mismo sujeto u objeto produce iguales resultados.Calidad estadística: es el cumplimiento de requisitos establecidos de forma convencional en materia datos e información y se deriva de la aplicación de diferentes técnicas estadísticas a los procesos.Procedimientos estadísticos adecuados: son aquellas actividades estructuradas para manejar datos cuantitativos y cualitativos mediante técnicas de recolección, recuento, presentación, descripción y análisis generalmente aceptados.Institucionalidad: al conjunto de entes, actores o sujetos que tienen una responsabilidad ordenada en el marco jurídico o legal de un país.Metainformación: es la información sobre un proceso de análisis de datos que se convierten en indicios e información que, a su vez, se relaciona o correlaciona entre sí y genera más información relevante y sólida.Microdatos: son datos de una dimensión suficientemente reducida, tanto en su volumen y como en su formato que los hacen accesibles, informativos y procesables para la toma de decisiones. Los macro datos persiguen la búsqueda de correlaciones, y los microdatos las causas, los porqués.Involucramiento participativo: corresponde a las gestiones del gobierno que permitan incorporar en las distintas etapas de implementación de la Agenda 2030, como el diagnostico y la toma de decisiones respecto de metas ODS que sean de su interés, a las distintas partes interesadas o a aquellas que cada EFS defina para la auditoría. Indicador: Dato o información observable, que sirve para conocer o valorar las características específicas, y medir la intensidad de un hecho o para mostrar los cambios y progresos que está haciendo un programa hacia el logro de un resultado específico. Este dato o información, puede estar dado como reporte de una cifra o como resultado de un calculo de varias variables.Indicador adicional: se puede considerar solo en casos excepcionales cuando un aspecto crucial de un objetivo no está siendo monitoreado por el indicador o indicadores actuales o para abordar un nuevo problema crítico o emergente que no está monitoreado por los indicadores existentes, o cuando todo El objetivo tiene muy pocos indicadores de nivel I o nivel II para el seguimiento.Nivel 1 o TIER I: el indicador es conceptualmente claro, tiene una metodología establecida internacionalmente y hay estándares disponibles, y los países producen regularmente datos de al menos el 50 por ciento de los países y de la población en cada región donde el indicador es relevante.Nivel 2 o TIER II: el indicador es conceptualmente claro, tiene una metodología establecida internacionalmente y hay estándares disponibles, pero los países no producen datos regularmente.Nivel 3 o TIER III: Todavía no se dispone de metodología o estándares establecidos internacionalmente para el indicador, pero la metodología / estándares están siendo (o serán) desarrollados o probados. (A partir de la 51ª sesión de la Comisión de Estadística de la ONU, el marco global de indicadores no contiene ningún indicador de Nivel III)IDI : Iniciativa para el Desarrollo de la INTOSAIINTOSAI: Organización Internacional de Entidades Fiscalizadoras SuperioresODS: Objetivos de Desarrollo SostenibleEFS: Entidad Fiscalizadora Superior

Nota: El texto extraído es sólo una aproximación del contenido del documento, puede contener caracteres especiales no legibles.

Compartir en redes