Curso Internacional: Planificación Estratégica, Preparación y Evaluación de Proyectos. NACIONES UNIDAS

e E P A ~

ILPES/CEPAL/CAPRADE Santiago, 08 al 24 de Noviembre del 2012

Lineamientos metodológicos para la construcción de indicadores de desempeño

Marianela Armijo Consultora Área de Políticas Presupuestarias y Gestión Pública

ILPES/CEPAL [email protected]

r----

Contenido de la presentación








Indicadores: Qué son para qué se usan? Conceptos 10 pasos básicos para la construcción de indicadores Ejemplos Requisitos para la construcción de indicadores

INDICADORES DE DESEMPEÑO “Que indica o sirve para indicar”


Del latín “Indicare”, significa: “Mostrar o significar algo, con indicios y señales” Real Academia de la Lengua

INDICADORES DE DESEMPEÑO Cuantificación de los factores críticos de desempeño

Es una herramienta que entrega información cuantitativa respecto del logro o resultado en la entrega de productos (bienes o servicios) generados por la institucion, cubriendo aspectos cuantitativos o cualitativos.

r----












El uso de los indicadores es variado… Mejorar en Información Fundamentar la discusión de Resultados Posibilitar la Evaluación Apoyar el proceso de Formulación de Políticas Rendir cuentas Facilitar el establecimiento de Compromisos de Resultado…. Etc…

10 pasos básicos para construir indicadores 1.

Establecer las definiciones estratégicas como referente para la medición

6.

Establecer las metas o el valor deseado del indicador y la periodicidad de la medición

2.

Establecer las áreas de desempeño relevantes a medir

7.

Señalar la fuente de los datos

3.

Formular el indicador para medir el producto u objetivo y describir la fórmula de cálculo.

8.

Establecer supuestos (observaciones)

9.

Evaluar: establecer referentes comparativos y establecer juicios

10.

Comunicar e Informar el desempeño logrado

4.

Validar los indicadores aplicando criterios técnicos

5

Recopilar los datos

1. Establecer las definiciones estratégicas como referente para la medición del desempeño

r----

MISION

RAZON DE SER DE LA ENTIDAD, FIN, PROPOSITO

PROPOSITOS

VISION OBJETIVOS ESTRATEGICOS ESTRATEGIAS

FUTURO, ESCENARIO DESEADO, COMO QUIERE SER LA ENTIDAD

FUNDAMENTALES

QUE ESPERA LOGRAR LA ENTIDAD PARA CUMPLIR SU MISION

MEDIOS PARA LOGRAR LOS OBJETIVOS ESTRATEGICOS

ANALISIS DEL MEDIO EXTERNO E INTERNO

COMO

PROYECTOS, PROGRAMAS, ACTIVIDADES

CONCRECION DE LOS OBJETIVOS ESTRATEGICOS

PRESUPUESTO INDICADORES

MEDIDAS PARA ESTABLECER EL GRADO DE CUMPLI MIENTO DE LOS OBJETIVOS

PLAN ESTRATEGICO

METAS o LINEAS DE ACCION

2.

Establecer las áreas de desempeño relevantes a medir

Proceso productivo

Proceso 2

Productos

Proceso 3 Productos Estratégicos (Bienes y Servicios)

Proceso 1

Insumos Y Recursos

Proceso 4

Resultados

PRESUPUESTO r----

.

Presupuesto ($)

Insumos / Procesos

Producción (Q) -Cobertura -Focalización

Resultados

-Oportunidad

(desde punto de vista de los usuarios)

-Ciertas características -Costos -Etc.

Indicadores ámbito de proceso

Indicadores ámbito de producto

Indicadores ámbito de resultado

-Programas de trabajo

-Eficacia

-Intermedio

-Programación

-Eficiencia

-Ejecución de recursos

-Economía -Calidad

-Final

SECTOR PUBLICO

r----

Ministerios

Objetivos Gubernamentales

Ministerios

Ministerios

Ministerios

Servicios

Servicios

Servicios

División

Dpto.

División

División

Dpto.

SECTOR PUBLICO Agregación de mediciones

Objetivos Gubernamentales

r----

Ministerios

O B J E T I V O S

Servicios

Servicios

Servicios

División

Dpto.

Operacionalización de objetivos

Ministerios

Ministerios

Ministerios

División

División

Dpto.

I N D I C A D O R E S

2. Establecer las áreas de desempeño relevantes a medir Economía

Eficacia

Eficiencia Eficacia

$$

Insumos

Procesos

Productos

Costo Efectividad

Resultados

Identificación de aspectos relevantes de medición o factores críticos: r----

Relevancia para el cumplimiento de la misión y los objetivos estratégicos de la institución

Misión

Aspectos relevantes de medición

Indicadores

Tipo

Formula

Promover en la población en general estilos de vida activa por medio de la práctica periódica del ejercicio físico, el deporte y la recreación en todas sus Manifestaciones, contribuyendo al mejoramiento de la calidad de vida de la población

Estilos de vida activa de la población

Tasa Variación de la población entre x años que practica deporte en forma periódica

Resultado Final o Impacto

(Población que practica deporte año n /Poblaciónaño n1)-1*100)

Prácticas periódica del ejercicio físico, deporte y la recreación

Calidad de vida…..

Porcentaje de la población objetivo que práctica alguna actividad deportiva de forma periódica

Resultado Intermedio

(Población participante Programa Deporte que practica actividad deportiva dos veces a la semana/Población inscrita Programa)*100

Identificación de aspectos relevantes de medición o factores críticos: r----

Relevancia para el cumplimiento de la misión y los objetivos estratégicos de la institución

Objetivos Estratégicos Aumentar la oferta de programas en deporte, recreación y ejercicio físico que permitan mayor incorporación de llos diferentes sectores de la población (niñez, adolescencia, persona joven, adulto y adulto mayor) en busca de estilos de vida activa. Incrementar la participación en el deporte, recreación y ejercicio físico adaptado para la población con discapacidad física. Mejorar el rendimiento deportivo de los atletas de Asociaciones y Federaciones de Representación Nacional, con miras a la participación

Aspectos relevantes de medición

Indicadores

Tipo

Formula

Ejemplos

r----

Ámbito de los Procesos productivos (Ejemplos para Actividades Centrales)  administración financiera  Capacidad de ejecución de los recursos  recursos humanos  Funcionarios con las competencias requeridas  procesos administrativos  Registro de usuarios – calculo de beneficios

r----

Algunos ejemplos de Indicadores en el ámbito de los Procesos:



Porcentaje de ejecución del presupuesto



Porcentaje de gasto en Recursos Humanos respecto de gasto total



Porcentaje de gasto corriente respecto de gasto total



Porcentaje de productos entregados respecto de lo programado



Porcentaje de compras de insumos efectuadas dentro del tiempo programado



Porcentaje de licitaciones adjudicadas respecto de licitaciones totales



Porcentaje de ingresos propios percibidos respecto de los programados



Porcentaje de subsidios asignados



Porcentaje de familias pobres catastradas



Porcentaje de normas de aviación actualizadas

r----

Ámbito de los Procesos productivos (Ejemplos para Actividades Centrales)

Definir aquellos procesos que son claves para la generación de los productos (bienes y/o servicios): 

procedimientos de compra

 Adquisición de insumos – contratación de empresas proveedoras 

Licitaciones

 Externalización de servicios - subcontratación de empresas que proveen los productos 

procesos tecnológicos

 Implementación de servicios por internet - procesos para generar productos

Ámbito de los Productos: r----

Bienes y/o servicios proporcionados directamente a los usuarios: 

Definir los requerimientos de los usuarios

 Establecer las características de los productos - Características técnicas del producto - Tiempo de entrega a los usuarios

- Cobertura (todos los niños y niñas del país) - Focalización (niños y niñas en situación riesgo social) - Grado de satisfacción de los usuarios

r----

Algunos ejemplos de indicadores en el ámbito de los Productos:

 Porcentaje de familias sin vivienda que reciben aportes del Estado  Porcentaje de familias pobres sin vivienda que reciben aporte del Estado respecto del total de familias sin vivienda que reciben aporte del Estado  Tiempo promedio de entrega de subsidios para la vivienda  Metros de cuadrados construidos promedio por vivienda entregada  Porcentaje de condominios construidos que cuentan con infraestructura social (lugares para reuniones, parques, plazas, juegos para niños)  Porcentaje de familias que manifiestan satisfacción con la vivienda entregada

r----

Algunos ejemplos de indicadores en el ámbito de los Productos:

 Porcentaje de familias sin vivienda que reciben aportes del Estado  Porcentaje de familias pobres sin vivienda que reciben aporte del Estado respecto del total de familias sin vivienda que reciben aporte del Estado  Tiempo promedio de entrega de subsidios para la vivienda  Metros de cuadrados construidos promedio por vivienda entregada  Porcentaje de condominios construidos que cuentan con infraestructura social (lugares para reuniones, parques, plazas, juegos para niños)  Porcentaje de familias que manifiestan satisfacción con la vivienda entregada

Ejemplos Indicadores ONEMI (Producto) r----

Porcentaje de Directores Regionales y Provinciales que han aprobado el nivel III del Programa de Formación Profesional en Protección Civil Déficit de Unidades Territoriales con personal capacitado en el nivel Nº 3 con resultado superior a 65% del Plan nacional de Capacitación

((N° de Directores Regionales y Provinciales que han aprobado el nivel III Del Programa de Formación Profesional al año t/N° Directores Regionales y Provinciales de Protección Civil al año t)*100)

((1-(Nº unidades territoriales capacitadas con resultado superior a 65% en el año t/Nº unidades territoriales en el año t))*100)

Ejemplos Indicadores ONEMI (Producto/eficacia) r----

Porcentaje de Regiones con diagnósticos de Vulnerabilidad considerando las variables de riesgo más recurrentes en la región.

(Nº de Regiones con Diagnósticos de Vulnerabilidad en el año t /Total de regiones del año t)*100)

Porcentaje de alertas tempranas en la variable hidrometereológica, realizadas con 24 horas de anticipación a la ocurrencia del evento, a las Intendencias y Gobernaciones

((Nº de alertas tempranas, en la variable Hidrometereológica realizadas con 24horas de anticipación a la ocurrencia del evento a las Intendencias y gobernaciones en el año t/Nº de eventos hidrometereológicos ocurridos en el año t – Nº eventos Hidrometereológicos fallidos en el año t)*100)

r----

Ámbito de los Resultados: Resultados intermedios


Cambio en el comportamiento de los beneficiarios una vez que han recibido los bienes y/o servicios.




La entrega de los bienes y/o servicios a los usuarios supone que conduce a la Obtención de los resultados finales.







Constituye una aproximación a los resultados finales

Algunos ejemplos de indicadores en el ámbito de Resultados Intermedios:

r----




Porcentaje de subsidios de vivienda efectivamente pagados respecto del total de subsidios otorgados




Porcentaje de trabajadores sin calificación que egresan de un programa de capacitación técnica




Porcentaje de participantes egresados de programa antidrogas con actitud crítica hacia la droga




Número de ocasiones en que se activan mecanismos de ayuda mutua frente al número de desastres ocurridos




Porcentaje de familias pobres que inician una actividad empresarial con apoyo del Estado

r----

Resultados Finales o Impacto: Resultados a nivel de fin de los bienes y servcios entregados, significan un mejoramiento en las condiciones objetivas de la población objetivo. Complejidad de medir Impacto o Resultado Final: 

un programas público contribuye a alcanzar un fin (resultado final)



se complementa con la acción de otros programas

¿Cómo identificar el Impacto de nuestro programa? 

el impacto no se produce inmediatamente



es difícil medirlo con un indicador (mejoramiento de la calidad de vida)



por lo general no se dispone de información de punto de partida (línea base)

r----

Algunos ejemplos de indicador de resultado final o impacto
















Porcentaje de trabajadores sin calificación egresados de un programa de capacitación que consiguen un empleo permanente Porcentaje de personas que no reinciden después de participar en programa antidrogas Tasa de accidentes de aviación Porcentaje de familias que superan la línea de pobreza Tasa de variación de delitos Porcentaje de empresas que cumplen la normativa laboral Tasa de incidencia de la poliomielitis Tasa de obesidad infantil Porcentaje de días sin suministros eléctrico a la población Tasa de suspensión de servicios de internet Porcentaje de reclamos solucionados de usuarios de servicios de telefonía

Conceptos de dimensiones de desempeño

EFICACIA


Indicador de eficacia: nos dice acerca del grado de cumplimiento de los objetivos de la organización, sin referirse al costo de los mismos. Por esta razón podemos obtener indicadores de eficacia, tanto de los productos (outputs), o bien de los resultados ya sea intermedios o finales (impactosoutcomes)

Eficacia











RESULTADO (% RESULTADO LOGRADO EXITOSAMENTE RESPECTO REALIZADO-SOLICITADO) FOCALIZACION (LOGRADO RESPECTO DEL UNIVERSO) COBERTURA ( LOGRADO RESPECTO DE LA DEMANDA POSIBLE) IMPACTO (LOGRADO RESPECTO DEL PROBLEMA QUE SE QUIERE ATACAR)

EFICACIA (Cobertura)/Producto Incremento de instituciones educativas de todos los niveles que cuentan con programas curriculares en prevención de desastres (transversal y específico) SISTEMA DE MONITOREO ORIENTADO A IMPACTOS. CAPRADE-PREDECAN COBERTURA DE CONTROL DE EMISIONES DE LOS BUSES INTERURBANOS Controles de emisiones de Buses Interurbanos

Total de Buses Inter urbanos

Subsecretaria de Transportes Chile PORCENTAJE DE RECLUSOS INCLUIDOS EN PROGRAMA DE ACTIVIDAD INDUSTRIAL

Reclusos con actividad industrial Dirección Nacional de Cárceles Uruguay

Total de reclusos

Algunos ejemplos de indicadores de focalización: r----

 Porcentaje de la población en situación de pobreza que recibe subsidio para agua potable  Porcentaje de niños en situación de pobreza que reciben beca estudiantil  Porcentaje de adultos mayores que reciben complemento alimenticio contra la desnutrición  Porcentaje de deportistas que acceden a programas de alto rendimiento  Porcentaje de comunas de alto riesgo cubiertas por programas especiales antidelincuencia

Finalmente, también en eficacia se mide al cumplimiento de programas de trabajo:  Porcentaje de capacitaciones de funcionarios en relación a lo programado

EFICIENCIA


Describe la relación entre dos magnitudes:





La producción física de un producto (bien o servicio) y Los insumos o recursos que se utilizaron para alcanzar ese nivel de producción





Mayor cantidad de servicios dado el mismo nivel de recursos Alcanzar un determinado nivel de servicios utilizando la menor cantidad de recursos posible

EFICIENCIA








Indicador de eficiencia: costo por unidad de servicio o bienes provistos; o productividad de un input, son útiles en evaluar los costos relativos y productividad que diferente métodos de servicio entregan o la producción de bienes. Los indicadores de eficiencia pueden expresarse como “costo por producto”, o “unidades por insumo”, o “costo por resultado”.

Ejemplos de Indicadores de Eficiencia ,",,,,au. u

\J

EJEMPLOS DE INDICADORES DE EFICIENCIA Indicador

Costo promedio de los beneficios entregados Costo promedio de las acciones de recaudación Núnlero de fiscalizaciones! Número de fiscalizadores Número de usuarios en archivos en relación a dotación efectiva de archivos Costo total programa de becas ITotal de beneficiarios Cajas inspeccionadas/Jornadas persona Fuente: Elaboración propia a partir de indicadores de desempeño de Uruguay y.

Chile y ejemplos de talleres de indicadores de desempeño.

EFICIENCIA EFICIENCIA-Producto Medio Número de inspecciones/número de inspectores Número de expedientes resueltos por semestre/dotación de personal en la tarea Número de inspecciones al transporte de pasajeros/personal que participa en la tarea Número de consultas/número de médicos

Calidad Capacidad de la institución por responder en forma consistente, rápida y directa a las necesidades de los usuarios A) Mediciones Indirectas. Mejorar los atributos y características de los productos. B) Mediciones Directas. Grado de satisfacción de los usuarios.

CALIDAD Calidad-Tiempo de respuesta Tiempo de espera media para atender una consulta

Dirección General de Salud Tiempo de tramitación media de solicitudes mineras Dirección General de Geología e Minas Tiempo medio para o estudio de cada Plan de Reforestamiento Dirección General de Recursos Naturales Dias de demora media de trámites de legalización Dirección General de Secretaría

INDICADORES DE CALIDAD Oportunidad

Accesibilidad

Percepción usuarios

Porcentaje de respuestas a los Parlamentarios dentro de los límites acordados.

Número de localidades cubiertas por atenciones móviles

Porcentaje de aprobación excelente de los talleres de trabajo, por los participantes

Porcentaje de reportes económicos entregados en tiempo acordado

Nº de horas que la Biblioteca está abierta fuera de las horas de trabajo

Porcentaje de usuarios satisfechos

Número de intervenciones con retraso/ Número de intervenciones totales

Porcentaje de Población con necesidades especiales que son miembros activos de la Biblioteca

de

Precisión

Porcentaje contratos terminados errores

de por

Número de fallas reales/ Fallas programadas

Nº de usuarios satisfechos/ Total usuarios encuestados Nº de usuarios Satisfechos con el trato en la atención/ Total usuarios

Porcentaje de contratos con uno o más errores encontrados por revisiones externas

CALIDAD Calidad- Satisfacción de usuarios Porcentaje de aprobación Encuesta de opinión a los usuarios Dirección Nacional de Registos Porcentaje de reclamos/casos atendidos Dirección Nacional de Topografía Asuntos resueltos/ Número de servicios reclamados Subsecretaria de Ministerio de Educación y Cultura Número de servicios reclamados/número total de servicios Hospital de Montevideo

ECONOMIA


Indicador de economía: mide la capacidad de de la institución para movilizar adecuadamente sus recursos financieros para lograr el cumplimiento de sus objetivos


Porcentaje de recuperación de créditos de corto plazo




Gasto de actividades de apoyo/gastos totales




Aporte de beneficiarios a financiamento/Monto total de inversión del programa




Gasto de funcionamento/gastos ejecutados totales




Recuperación de cobranza/Facturación

ECONOMIA Porcentaje de recuperación de créditos de corto plazo Gasto de actividades de apoyo/gastos totales Aporte de beneficiarios a financiamento/Monto total de inversión del programa Gasto de funcionamento/gastos ejecutados totales Recuperación de cobranza/Facturación

EJEMPLOS Indicador de Producto

Indicador de Resultado Intermedio

Indicador de Resultado Final

Nº de niños matriculados en Educación preescolar pública/Nº de niños entre 3 a 6 años del país

Porcentaje de niños de 3-6 años matriculados que logran terminar la enseñanza preescolar

Porcentaje de niños que terminan preescolar logran Manejo de habilidades básicas en lecto escritura

Porcentaje de padres y madres satisfechos con la educación impartida

PRODUCTO

RESULTADO INTERMEDIO

RESULTADO FINAL O IMPACTO

Porcentaje de reclusos participando en el programa de reinserción/Total población reclusa potencialmente beneficiaria del Programa

Tasa anual de variación de Porcentaje de desempleo reclusos con contrato de da población reclusa trabajo aprobada

Talleres de capacitación realizados/Talleres de capacitación programados

Participantes que consiguen certificarse /Total de participantes

(Produtividad de los participantes año t Productividad participantes año t1/Produtividad participantes año t-1)*100

PRODUCTO

RESULTADO INTERMEDIO

Porcentaje de reclusos participando en el programa de reinserción/Total población reclusa potencialmente beneficiaria del Programa

Tasa anual de variación de reclusos con contrato de trabajo

Talleres de capacitación realizados/Talleres de capacitación programados

Participantes que consiguen certificarse /Total de participantes

RESULTADO FINAL O IMPACTO Porcentaje de desempleo de población reclusa aprobada

(Produtividad de los participantes año t Productividad participantes año t1/Produtividad participantes año t1)*100

PROGRAMA CE CAPACITACION LABORAL DIMENSIONES

Ámbitos de control INSUMO

Eficacia

DE DESEMPEÑO

Eficiencia

Economía

Calidad

Contratación de profesores Arrendamiento de salas Equipamiento com putacional

PROCESO

Supervisiones realizadas a los cursos/ Número total de sL.pervisores

PRODUCTO

Número de talleres de capacitación realizados I Número de talleres de capacitación programados

Costo de cada tallerl Número de partici pantes

Gastos en capacitación ejecutados a Junio del añol Gastos de capacitación programados en el año

Instalación de los equipamiento com putacionales para capacitación en los plazos acordados Porcentajes de trabajadores que asisten al curso y los evalúan con nota superior a 5

Número de trabajadores participantes activos de los cursos /N° de particip.antes inscritos Tasa aprobación alumnos participantes del programa RESULTADO

Porcentaje de trabajadores que logran nota mayor a 5 en la evaluación de la aplicación de sus competencias

Intermedio

Final

Aumento de productividad de los trabajadores en la tarea Disminución de accidentes laborales de los trabajadores que aprobaron el curso.

UNA VEZ QUE SE TIENE CLARIDAD SOBRE:

Cuáles son los aspectos relevantes que deben ser medidos Qué ámbitos se van a medir Cuáles dimensiones

Corresponde construir cada uno de los indicadores

RESULTADO INSUMO CUANTOS RECURSOS OCUPAMOS

I N D I C A D O R E S

T I P O

U S O I N F.

Costos planilla Costos unidades de productos Número de funcionarios Licitaciones realizadas

PROCESO CUAN BIEN LO HACEMOS

Costo por vivienda Costo por kilómetro construido

PRODUCTO QUE HACEMOS

Número de viviendas Kilómetros construidos

Resoluciones

Tiempo promedio atención Gasto Ejecutado/Gasto programado

Sentencias judiciales

Sistema de Información Interna

Presupuesto

Entidades

Sistema de Información Interna (Productos Intermedios)

Contraloría

Porcentaje de viviendas con estándares de calidad en la normal

Porcentaje de usuarios de tribunales que acceden a la justicia

Actividades

Eficiencia Calidad Economía

COMO CAMBIAN LOS COMPORTAMIENTOS DE LA VARIABLE, USUARIOS

Porcentaje de viviendas con entorno urbano Mejorado

Tiempo de respuesta Fallo judicial

Insumos o Inputs

RESULTADO INTERMEDIO

Eficacia (Cobertura, Focalización) Calidad

Porcentaje de tribunales de familia que resuelven casos en menos de 120 días

FINAL HAY ALGUNA MEJORIA CAMBIO EN LAS CONDICIONES INICIALES

Disminución del déficit habitacional Provincia X Porcentaje de usuarios que reciben vivienda declaran satisfacción por calidad y entorno Tasa de variación en la percepción de los ciudadanos respecto de la justicia. Porcentaje de reducción de criminalidad

Eficacia Eficiencia Calidad

Eficacia Eficiencia Calidad

Presupuesto

Presupuesto

Presupuesto

Sistema de Información interna (Productos intermedios, Productos finales, no relacionados con O.Estratégicos)

Sistema de Información Directivo

Sistema de Información Directivo

(Productos Finales)

ORGANISMO DE PLANIFICACION, HACIENDA

3. Formular el nombre del indicador, la fórmula de cálculo, unidad de medida

El nombre del indicador debe ser lo más ilustrativo posible de lo que se quiere medir, y la fórmula debe permitir informar sobre los parámetros o variables que se están midiendo

r----

Nombre del indicador












Debe ser claro, preciso y autoexplicativo Que cualquier persona entienda qué se mide con ese indicador Si se usan siglas o aspectos técnicos, deben definirse en una nota explicativa “Porcentaje de aeropuertos que cuentan con sistema ILS” Nota: ILS (Instrument Landing System) es un sistema de aterrizaje instrumental con que cuentan los aviones para aterrizar en condiciones de baja visibilidad.

r----

Sentido de la medición





















Indicador ascendente o descendente Mientras más aeropuertos tenga ILS es mejor, por lo tanto, el indicador es ascendente En general: Los indicadores de cobertura, focalización, accesibilidad, cumplimiento de programas de trabajo, etc. son ascendente. Los indicadores de tiempos promedio de respuesta a los usuarios son descendentes. Los indicadores que miden capacidad de utilización de recursos son ascendentes Los indicadores que miden errores son descendentes Los indicadores que miden satisfacción de usuarios son ascendentes

r----

3. Fórmula de cálculo





La relación matemática de las variables deben entregar como resultado lo que se definió en el nombre (Total de aeropuertos con sistema ILS / Total de aeropuertos del país) * 100

INSTITUCIÓN: PANI

Supuestos

PROGRAMA : Centros Asistencia Técnico Profesional

Metas

Nombre, OBJETIVO(S) ESTRATÉGICO(S) INSTITUCIONAL(ES): Productos

Objetivos Estratégicos

r----

Usuarios

Indicador (Producto, Resultado Intermedio , Resultado Final)

Fórmula

Niños y Niñas Centros

Contar con el personal profesionaliza do y comprometido con altos estándares de calidad

Porcentaje de centros PANI que cuentan con sicólogos capacitado s en tratamient o de niños

Metas del Indicador

Monto Estimación Recursos Presupuestarios (millones de colones)

Línea Base

Eficacia, Eficiencia, Calidad, Economía

Asistencia técnico profesion al en Centros PANI

Desempeño histórico

FF

FF

: 2006

2007

2008

2009

2010

10% 15% Fórmula

15%

30%

50%

60%

Total de Centros que cuenta n con psicolo gos capacit ados/ Total de Centros

2005

Fuentes de Datos

Fuente De Datos

Observacio nes

UNIDAD DE MEDIDA r----

Indicador (Superficie forestal con plantaciones comerciales establecidas del periodo actual/Superficie forestal con plantaciones comerciales establecidas del periodo inmediato anterior) *100. (Escuelas primarias indígenas que están en el nivel elemental o bueno de las pruebas de ENLACE / Total de escuelas de educación primaria indígena evaluadas)*100 (Número de informes de evaluación y seguimiento elaborados / el número de informes de evaluación y seguimiento programados) * 100 (Número de beneficiarios que manifiestan que se fortaleció y preservó su patrimonio cultural / Número total de beneficiarios entrevistados)* 100 (Número de empresas lideradas por mujeres / Número de empresas atendidas) *100

Unidad de Medida. Hectáreas.

Escuelas primarias indígenas.

Informes de seguimiento.

evaluación

Beneficiarios entrevistados.

Empresas

y

DEFINIR LAS FORMULAS O ALGORITMOS


A) BASES DE COMPARACIÓN: Sirve para medir cobertura lograda, cumplimiento programado, cumplimiento solicitado Lo que se hace Nº de usuarios atendidos

Nº de certificados emitidos

Monto inversión ejecutada

Lo que debe hacerse Nº de usuarios por atender

Nº Certificados solicitados

Monto asignado para inversión

EJEMPLOS DE CONSTRUCCION DE INDICADORES: FORMULAS DE CALCULO

LO PROGRAMADO, COMPARACION RESPECTO DEL OBJETIVO DEFINIDO

Porcentaje de vías navegables ya habilitadas Fórmula de cálculo

1999

Vías navegables habilitadas año t/ Vías navegables programadas año t

s/d

2000 s/d

2001 (120/143)*100 83,9%

FORMULAR ALGORITMOS B) DEFINICIÓN DE RATIOS Sirve para medir Costos medios, producto medio, indicadores de eficiencia Costos medios: Costo total consultas/ consultas realizadas Producto medio: Nº inspecciones realizadas/ Nº inspectores

EJEMPLOS DE CONSTRUCCION DE INDICADORES: FORMULAS DE CALCULO TASA DE VARIACION Porcentaje de aumento del parque informático de la Unidad Ejecutora y su conexión en red Fórmula de cálculo:

1999

2000

2001

[(Equipos incorporados y conectados en el año t/ equipos conectados año t-1) -1] *100

53

71

96

33,9%

35,2%

EJEMPLOS DE CONSTRUCCION DE INDICADORES: FORMULAS DE CALCULO Tiempo máximo de respuesta de tramitación

Fórmula de cálculo: 1999 Sumatoria de N°de días de Tramitación/N°de tramitaciones Realizadas

(días)

2000

Meta

18días 30días 25días

4. Validar los indicadores APLICAR CRITERIOS DE TECNICOS y

REQUISITOS

~rC·o"sT·o"""""·I~ ¿II::.===----- 'p'"::E=R=r=m=e=:N===-

RA.Z.ONABL

REI,El'"Al){ Medir le cometo

N... pwihJ.ni d"llhhn.cIi.dD

IJrÍ.. NIIWÍII;.%IiIiB.. '>~F..J.06lN..... ~~,

ae la, e6.dend .. ciüldad, econonm

Medir lo controlable Dato•• uficlente.

r'oMoGENEIDAP • McdldAo equivo.lente.

y clemo.trabl4>.

5. RECOPILAR LOS DATOS PARA CONSTRUIR LOS INDICADORES

TIPOS DE INFORMACION


Información contable-presupuestaria




Estadísticas de producción física, cargas de trabajo del personal




Encuestas, estudios especiales




Benchmarking,etc

6. Establecer las metas o el valor r----

deseado del indicador y la periodicidad de la medición METAS:






Expresan el nivel de desempeño a alcanzar. Se vinculan a los Indicadores, proveen la base para la planificación operativa y el presupuesto. Cuatro características generales:




Especifica un desempeño medible. Especifica la fecha tope o el período de Cumplimiento Debe ser realista y lograble, pero representa un desafío significativo.

6. Establecer las metas o el valor deseado del indicador y la periodicidad de la medición


DESEMPEÑO HISTORICO




LINEA BASE




OBJETIVOS DEFINIDOS




DESEMPEÑO LOGRADO EN INSTITUCIONES SIMILARES, PROCESOS O PROGRAMAS.

r----

Objetivo-Indicador-Metas OBJETIVO

INDICADOR

SITUACIÓN INICIAL O LINEA BASE

META: AVANCE (ANUAL, SEMESTRAL, ETC.) HACIA LA SITUACIÓN ESPERADA.

SITUACIÓN ESPERADA EN EL LARGOPLAZO

r----

Objetivo, Indicador, Metas OBJETIVO Cubrir la demanda de agua potable de las zonas rurales.

Número de hogares rurales con agua potable x 100/ Total de hogares rurales.

Año 2006

META 2007:

60% Hogares rurales cuentan con agua potable.

66% Hogares rurales cuentan con agua potable.

Año 2012 95% Hogares rurales cuentan con agua potable.

r----

7. Señalar las fuentes de datos








Registros de la institución (posibles de auditar) Estadísticas oficiales Encuestas (realizadas por entes externos)

r----

8. Supuestos (observaciones)











Aspectos no controlables por la institución Variaciones del tipo de cambio, o de determinados precios pueden afectar niveles de ingresos esperados, tarifas, etc Aprobaciones de procesos por entes externos en la que hay probada posibilidad (norma o procedimiento externa) que puede alterar la programación) Flujo de recursos internacionales, etc.

r----

9.- Monitorear y Evaluar Establecimiento de las metas

Sistema de Monitoreo Registro de resultados Comparación de resultados v/s metas e indicadores

Análisis de causas de variaciones

Evaluación de alternativas Toma de decisiones Evaluación y retroalimentación

Rendición de cuentas

r----

Análisis del desempeño de los indicadores

Toma de decisiones correctivas

Vuelta al proceso de planeación: políticas, programas Redefinición de responsabilidades

Redefinición de procesos Reasignación de recursos, etc

Seguimiento

Se implantaron acciones Correctivas Las variaciones se corrigieron?

Vuelta al problema

Recomendaciones para construir indicadores estratégicos

Requisitos • El resultado de la medición del indicador entrega un “valor” de comparación el cual está referido a alguna meta asociada. • El indicador deberá estar focalizado y orientado a “medir aquellos aspectos claves”, lo cual implica la necesidad de tener claridad cuáles son los “objetivos o propósitos” de la institución, y no todos, sino aquellos más relevantes que se relacionan con los productos estratégicos, dirigidos a los usuarios externos.

Requisitos de los indicadores • Deben lograr una información integrada del desempeño de la institución: Abarque la mayor parte de los productos finales. En las dimensiones de desempeño de eficiencia, eficacia, calidad, economía

• Deben ser comparativos: Nº de estudiantes matriculados, no es indicador. Debiera ser Número de Estudiantes matriculados/Total estudiantes matriculados programados

INTEGRALIDAD DE LA MEDICION Aumentar la cobertura del programa de raciones a un 55% de la población escolar. Llegar a un costos promedio de $5 Alcanzar1000 calorías por ración

INDICADOR DE EFICACIA

INDICADOR DE EFICIENCIA

INDICADOR DE CALIDAD * Calorías por ración.

Población escolar en programa / población escolar total

Costo promedio de las raciones: gasto total programa / número de raciones

* Porcentaje de aceptación de los escolares (encuesta)

Requisitos de los indicadores • El indicador comprometido es una “promesa” de desempeño, por lo tanto debe tener la aprobación del Directivo responsable por el producto que se está midiendo • Recordar que deben ser pocos, muchos indicadores generan mayor costo y poca utilidad • Deben permitir la medición continua de las variables relevantes

Indicadores que permitan medir continuamente (año a año) variables relevantes en el cumplimiento de la misión y de interés para la ciudadanía








Tasa de escolaridad Porcentaje de recaudación de impuestos Porcentaje de vías en buen estado Porcentaje de delitos contra la propiedad Porcentaje de plagas bajo control Porcentaje de fallos favorables Tiempo de respuesta

Preguntas de validación






















Requisito a validar SI/ NO ¿Se relaciona el indicador con el objetivo al cual está vinculado? ¿Se relaciona el indicador con el producto al cual está vinculado? ¿Se relaciona el indicador con la misión de La institución, programa o subprograma? ¿Es importante el indicador para la institución? Las variables medidas son continuas y relevantes para la toma de decisiones El indicador tiene claramente una meta o referente para ser medido su resultado El resultado del indicador explica de forma precisa y clara el grado de cumplimiento de la meta o el resultado es ambiguo Muestra o expresa el indicador de forma clara el resultado para poder ser analizado por el responsable

Preguntas de validación ¿ Se ha definido la frecuencia de medición del indicador? ¿ La unidad de medición es adecuada para la meta que se espera medir? ¿Es posible recopilar datos confiables y precisos para este indicador? ¿El resultado de este indicador podría estar condicionado por otras entidades? ¿Está la información de este indicador disponible y accesible a los interesados? (interesados internos y externos, el publico en general, etc.) • ¿El indicador fue elaborado en forma participativa? (liderazgo y personal de la institución y el programa, grupos de interés públicos, etc.) •¿Es importante el indicador para el usuario? •¿Muestra o expresa el indicador de forma clara el resultado para poder ser analizado por los interesados externos a la institución?

EVITAR INDICADORES QUE NO EXPRESAN LOGROS DADO QUE LA DEMANDA DEBE SER 100% SATISFECHA r----

N°de certificados de antecedentes emitidos/ N° de certificados solicitados Cantidad de permisos otorgados de portación de armas/Cantidad de solicitudes recibidas

Resultado será siempre de 100%

Esta prestación constituye una obligación legal de ser satisfecha, dado que es un requisito insoslayable para el usuario. Cobertura garantizada

Aspectos relevantes de los resultados son la calidad del servicio, la oportunidad, la precisión, la disponibilidad a nivel nacional (cobertura geográfica).

Ejemplo r----

“Atención de emergencias” Indicador: Número de emergencias programadas Meta:

1000

Número de emergencias que se atendieron 1500 “Meta superada” ?

r----

Evitar indicadores que generen incentivos perversos” • Aumento en los porcentajes de recaudación por multas a contribuyentes evasores Puede incentivarse a destinar mayores recursos de los necesarios a las acciones de fiscalización en áreas donde las multas sean más onerosas; desestimando otros que tienen mayor importancia desde el punto de vista de la economía, la competencia, la seguridad para los usuarios, calidad de los productos, etc.

r----

Evitar indicadores que generen incentivos perversos” • Porcentaje de detenciones por delitos Puede incentivarse una acción represiva no acorde con la situación delictiva, o destinar recursos extras para la represión del delito, dejando otras acciones preventivas, etc)

r----

Evitar indicadores que generen incentivos perversos” • Disminución de tiempos de respuestas, sin llevar asociado una meta de calidad del producto entregado. Número de fallos judiciales en un tiempo X., puede implicar que el juicio no se ajuste a derecho, que los fallos sean inapropiados, generando problemas de seguridad, reincidencia, etc)

r----

La Planeación estratégica y los Indicadores son sólo instrumentos…., su validez se potencia en un ambiente propicio:




Reformas institucionales y continuidad de las iniciativas




Liderazgos directivos, regularidad en la aplicación de las herramientas de gestión.




Asistencia técnica sostenida




Incentivos en un marco de integralidad de la evaluación

El mejor uso de los indicadores, dependerá de cómo r----

….

éstos sirvan a sus diferentes propósitos




Toma de decisiones y mejoramiento de la gestión institucional (proceso presupuestario)




Evaluación de todos los componentes del sector justicia




Evaluación de la reforma judicial




Rendición de Cuentas