Successfully reported this slideshow.
We use your LinkedIn profile and activity data to personalize ads and to show you more relevant ads. You can change your ad preferences anytime.

La estadística pública en la evaluación de políticas publicas. 2ª parte

1,051 views

Published on

Presentación para el curso del Instituto Canario de Administraciones Públicas. Segunda sesión del curso en la que se analiza el evaluación en Canarias y el papel del ISTAC.

Published in: Government & Nonprofit
  • Be the first to comment

  • Be the first to like this

La estadística pública en la evaluación de políticas publicas. 2ª parte

  1. 1. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS FORMACIÓN ICAP-2016 LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLÍTICAS Indicadores, herramientas y ejemplos
  2. 2. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Domingo J. Lorenzo Díaz Jefe de Sección de Estadísticas Económicas dlordia@gobiernodecanarias.org FORMACIÓN ICAP-2016 LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLÍTICAS Indicadores, herramientas y ejemplos
  3. 3. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS DÍA 1: Alberto (ISTAC) Introducción a la estadística oficial DÍA 2: Domingo (ISTAC) EVALUACIÓN DE POLÍTICAS EN CANARIAS Estado de situación y papel del ISTAC DÍA 3: Fernando y Francisco (IECA) EVALUACIÓN DE POLÍTICAS EN ANDALUCÍA
  4. 4. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS 0.- Presentación ¿QUÉ HAGO YO AQUÍ? 1.- Estado de la cuestión en Canarias 2.- Conceptos básicos 3.- ¿Qué papel puede tener el ISTAC? 4.- Indicadores y su cálculo 5.- Ejemplos de políticas e indicadores en Canarias 6.- Visualización y análisis de indicadores Índice
  5. 5. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS ALUMNOS DEL CURSO
  6. 6. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS ALUMNOS DEL CURSO GC
  7. 7. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS ALUMNOS DEL CURSO TF
  8. 8. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS 0.- Presentación ¿QUÉ HAGO YO AQUÍ? 1.- Estado de la cuestión en Canarias 2.- Conceptos básicos 3.- ¿Qué papel puede tener el ISTAC? 4.- Indicadores y su cálculo 5.- Ejemplos de políticas e indicadores en Canarias 6.- Visualización y análisis de indicadores Índice
  9. 9. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Líneas de actuación PEMAC: Línea 1. Desarrollo e implantación de la administración electrónica Línea 2. Simplificación de los procedimientos administrativos y reducción de cargas administrativas Línea 3. Mejora de la calidad en la prestación de los servicios públicos Línea 4. Evaluación de programas y políticas públicas Línea 5. La dirección por objetivos orientada a resultados Línea 6. Gestión integral del conocimiento corporativo Línea 7. Transversalidad Incorporar y consolidar la evaluación de los programas y las políticas públicas en la Administración Autonómica, como herramienta de rendición de cuentas a la ciudadanía canaria.
  10. 10. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS GUÍA PARA LA EVALUACIÓN DE PROGRAMAS Y POLÍTICAS PÚBLICAS
  11. 11. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS
  12. 12. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS http://www.gobiernodecanarias.org/transparencia/temas/planificacion/ EXISTE INTERÉS SOBRE EL PAPEL (NORMATIVA) NO EXISTE CONCIENCIA DE EVALUACIÓN EN NUESTROS DEPARTAMENTOS POR PROBLEMAS DE FORMACIÓN, DIRECTRICES CLARAS, ETC. ESTAMOS LEJOS DE OTRAS CCAA Y DEL ESTADO
  13. 13. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS ¿QUÉ HACEN OTRAS CCAA? 2008 2015-16
  14. 14. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS ¿QUÉ HACEN OTRAS CCAA?
  15. 15. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS
  16. 16. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS 0.- Presentación ¿QUÉ HAGO YO AQUÍ? 1.- Estado de la cuestión en Canarias 2.- Conceptos básicos 3.- ¿Qué papel puede tener el ISTAC? 4.- Indicadores y su cálculo 5.- Ejemplos de políticas e indicadores en Canarias 6.- Visualización y análisis de indicadores Índice
  17. 17. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS
  18. 18. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS La Comisión Europea define la evaluación como la valoración de las intervenciones de los organismos públicos según sus productos y sus impactos, en relación con las necesidades que pretenden satisfacer y orientada a proporcionar información rigurosa, basada en pruebas, para la toma de decisiones (CE, 2007)
  19. 19. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS A destacar de la definición: 1.- Necesidad a) Servicio público esencial (tradicional) b) Solventar un problema puntual o emergente (Por ejemplo Plan E ¿se ha evaluado?) 2.- Intervenciones (políticas públicas) a) Nivel o alcance: ● Planes o estrategias ● Programas, medidas o proyectos b) Sector de la administración
  20. 20. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS A destacar de la definición: 3.- Productos (outputs) e impactos (outcomes) Teoría del cambio: cadena de hipótesis sobre de qué manera se espera que los recursos asignados a la intervención permitan desarrollar unas actividades cuyo fruto serán determinados productos (outputs), que, a su vez, generarán beneficios de corta, media y larga duración sobre la sociedad en su conjunto o sobre la población objetivo de la política o el programa (impactos o outcomes).
  21. 21. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Ivàlua
  22. 22. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS A destacar de la definición: 4.- Proporcionar información a) Indicadores en cada etapa de la evaluación b) Informes: juicios de valor 5.- Toma de decisiones
  23. 23. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS 5.- Toma de decisiones
  24. 24. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Contenido de la evaluación EVALUABILIDAD
  25. 25. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Tipos de evaluación
  26. 26. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Recapitulando 1.- ¿Por qué evaluar? Gestión, aprendizaje, rendir cuentas, transparencia 2.- ¿Qué avaluar? Políticas públicas....proyectos (evaluación estratégica y operativa) Necesidades;implementación;resultados;impacto 3.- ¿Quién evalúa? Interna, externa, mixta 4.- ¿Cuándo evaluar? Antes, durante, después 5.- ¿Cómo evaluar? Criterios, tipo/fase y métodos Indicadores
  27. 27. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS
  28. 28. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS TRABAJO EN GRUPO 3-4 PERSONAS 1.- PENSAR UNA POLÍTICA SENCILLA (PLAN, MEDIDA...) A EVALUAR 2.- COMPLETAR EL ESQUEMA
  29. 29. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS El proceso evaluador
  30. 30. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS El proceso evaluador
  31. 31. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS 5.- ¿Cómo evaluar? Criterios, tipo/fase y métodos CRITERIOS PARA LA EVALUACIÓN RELEVANCIA IMPLEMENTACIÓN RESULTADOS EFICACIA EFICIENCIA EQUIDAD IMPACTO SOSTENIBILIDAD SATISFACCIÓN PERTINENCIA COHERENCIA DISEÑO/ PLANIFICACIÓN
  32. 32. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Criterios: PREGUNTAS CLAVE RELEVANCIA ¿En qué medida la intervención realizada está alineada con las necesidades y prioridades del entorno? ¿Las acciones emprendidas otorgan prioridad según la importancia de las necesidades detectadas? ¿Era pertinente el objetivo de mejora de la política pública en el contexto aplicado?
  33. 33. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Criterios: PREGUNTAS CLAVE PERTINENCIA ¿Los objetivos planteados dan repuesta a las necesidades de la población beneficiaria? ¿Se identifica claramente el resultado que pretende alcanzar cada objetivo de la política? Los objetivos ¿Son realistas y alcanzables? ¿Son claros y concretos? ¿Son medibles?
  34. 34. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Criterios: PREGUNTAS CLAVE COHERENCIA ¿Está adecuadamente diseñada la intervención para alcanzar los objetivos pretendidos? El ciclo de programación, seguimiento, evaluación y financiación ¿está correctamente explicitado? ¿Se puede decir que no existe complementariedad o superposición entre las intervenciones públicas evaluadas y otras aplicadas en el mismo territorio?
  35. 35. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Criterios: PREGUNTAS CLAVE EFICACIA ¿En qué medida se han cumplido los objetivos? ¿Qué acciones concretas de la intervención han favorecido el cumplimiento de los objetivos esperados? ¿Han existido factores externos a la evaluación que hayan influido en la resolución de los problemas detectados? ¿Causas que están relacionadas con la eficacia o ausencia de eficacia de la intervención?
  36. 36. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Criterios: PREGUNTAS CLAVE EFICIENCIA ¿Cuál ha sido el coste material de los objetivos conseguidos? ¿Se aplicaron procedimientos racionales de gestión financiera y de equipo? ¿Se han utilizado los recursos de la manera más económica posible?
  37. 37. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Criterios: PREGUNTAS CLAVE EQUIDAD ¿Se han utilizado criterios de equidad en la definición de los objetivos de la intervención pública? ¿La dedicación de esfuerzo ha seguido una lógica de reparto justo?
  38. 38. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Criterios: PREGUNTAS CLAVE SATISFACCIÓN ¿El grado de satisfacción sobre la intervención es elevado? ¿Qué actores se muestran más satisfechos y con qué dimensión?
  39. 39. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Criterios: PREGUNTAS CLAVE SOSTENIBILIDAD ¿Cuál es la probabilidad de que los efectos, cambios producidos por la intervención se mantengan en el futuro una vez finalizada la intervención? La propia intervención pública, tal como está diseñada ¿Es perdurable en el tiempo? ¿Debe ser reformulada? ¿Tienen las diferentes partes que participan la voluntad y la capacidad de continuar por su cuenta las actividades de la intervención?
  40. 40. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Los indicadores: hacer operativas las preguntas El indicador es un dato cuantitativo o cualitativo que permite dar cuenta sobre el estado de algún aspecto de las intervenciones públicas que interesa conocer. Los indicadores han de reunir una serie de atributos, entre los que cabe destacar que han de ser claros, relevantes, económicos, medibles y adecuados. Una vez determinados los procesos, productos e impactos que serán objeto de medición, la definición de los indicadores nos permitirá adoptar las variables clave más relevantes y valiosas para la obtención y comparación de los datos que nos facilitarán información sobre el cambio producido por la intervención pública. El tipo de indicador elegido estará en función indudablemente de la dimensión que se haya definido en la fase de diseño de la evaluación y de los criterios establecidos en función de las cuestiones a las que quien evalúa debe dar respuesta.
  41. 41. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS La ficha de un indicador Identificador (pertenece a un sistema (ej. 2020)?) Nombre Dimensiones a medir (eje, medida, etc.) Definición Unidad de medida Método de cálculo y fuente Frecuencia de medición Línea de Base o valor de referencia Metas o valor previsto
  42. 42. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS ¿Datos por islas? Encuesta de Salud de Canarias (ISTAC-SCS)
  43. 43. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS GUÍA CANARIAS
  44. 44. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS EVALUACIÓN DE LA IMPLEMENTACIÓN Analizar si la intervención pública aplicada está consiguiendo los resultados operativos previstos, y si los distintos componentes o partes de dicha intervención que actúan en su ejecución son adecuados en relación con los citados resultados. ANÁLISIS DE LA COBERTURA Y DE LOS FACTORES EVALUACIÓN DE LOS RESULTADOS (outputs) Conocer hasta qué punto la intervención pública aplicada está consiguiendo los objetivos establecidos o esperados en la población objetivo (evaluación de eficacia) y a qué coste se consiguen en términos de tiempo, recursos humanos, recursos materiales y monetarios (evaluación de eficiencia) ANÁLISIS EFICACIA Y EFICIENCIA EVALUACIÓN DE IMPACTO (outcomes) Medir a medio y largo plazo los efectos de una intervención pública sobre la población ampliada, e identificar la totalidad de los efectos posibles de la intervención: “específicos y globales, buscados según los objetivos o no, positivos, negativos o neutros; directos o indirectos. ANÁLISIS GLOBAL EX POST (OUTCOMES)
  45. 45. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS ¿La población diana está recibiendo los servicios previstos? ¿El funcionamiento y la organización interna de la intervención pública son adecuados? EVALUACIÓN DE LA IMPLEMENTACIÓN Objeto
  46. 46. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS EVALUACIÓN DE LA IMPLEMENTACIÓN Criterios e indicadores asociados Tipo de indicador Finalidad Ejemplos De coherencia interna Administración de la intervención: recursos humanos, económicos y materiales ● Nº de participantes en la gestión de la intervención, por categorías y especialización ● Nº de expedientes tramitados por cada persona encargada de la gestión. ● Dotación presupuestaria vinculada a la intervención ● Nº de equipos informáticos a disposición de las personas participantes en la gestión. De coherencia externa Complementariedad o interferencias entre administraciones ● Existencia de servicios de similares características para un territorio determinado De eficacia Personas beneficiarias ● Tasa de cobertura de un determinado servicio por sexo respecto al total de la población objetivo.
  47. 47. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS EVALUACIÓN DE LA IMPLEMENTACIÓN Criterios e indicadores asociados Tipo de indicador Finalidad Ejemplos De eficiencia Medir la forma en que se están utilizando los recursos durante el proceso de generación del producto y/o servicio. ● Coste por persona beneficiaria de un determinado servicio prestado. ● Coste medio de los recursos utilizados para gestionar un expediente de una subvención. De equidad Conocer si existen sesgos en la distribución de los servicios prestados. ● Tasa de cobertura de un determinado servicio por sexo respecto al total de la población objetivo. De satisfacción Enfoque al cliente, mejora de la calidad ● Nº y tipología de quejas/sugerencias presentadas por las personas beneficiarias usuarias de los servicios (por sexos)
  48. 48. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS ¿Cuáles son los resultados críticos que la intervención trata de lograr? ¿Qué efectos de corto y medio plazo generó la intervención? ¿Con la intervención pública implementada se han conseguido los resultados buscados? ¿Los resultados son consecuencia de la implementación de la intervención? ¿Se incluyen los resultados no buscados? EVALUACIÓN DE RESULTADOS Objeto
  49. 49. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS EVALUACIÓN DE RESULTADOS Criterios e indicadores asociados Impacto?
  50. 50. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS EVALUACIÓN DE RESULTADOS Criterios e indicadores asociados Medible?
  51. 51. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS EVALUACIÓN DE RESULTADOS Ejemplo ficticio Ivàlua
  52. 52. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS EVALUACIÓN DE RESULTADOS Ejemplo ficticio Ivàlua
  53. 53. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS EVALUACIÓN DE IMPACTO
  54. 54. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS EVALUACIÓN DE IMPACTO
  55. 55. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Técnicas de recogida de información. 1-. Técnicas cuantitativas Consulta a bases de datos y/o registros Fuentes estadísticas Encuestas 2.- Técnicas cualitativas Análisis Documental Observación natural Entrevistas personales y/o a grupos focales Estudios de casos
  56. 56. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Métodos de análisis: IMPACTO
  57. 57. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Métodos de análisis: IMPACTO ¿Qué ha pasado después de poner en marcha una intervención pública? (muchas cosas pueden haber influido). ¿Qué ha pasado en comparación con lo que habría ocurrido si la intervención no se hubiera llevado a cabo?
  58. 58. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Métodos de análisis: IMPACTO EJEMPLO: Un profesor usa el mismo método de enseñanza a dos grupos de alumnos durante un trimestre. Tras examinar a los dos grupos obtiene la misma nota media, XA =XB = 6 Prueba un nuevo método con el grupo A (grupo de tratamiento) y los examina del segundo trimestre YA =8 YB =6 (grupo control). ¿Cuál es el impacto del nuevo método de enseñanza? ¿Qué hipótesis han de suponerse?
  59. 59. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Métodos de análisis: IMPACTO ¿DE QUÉ DATOS DISPONEMOS PARA HACER LA EVALUACIÓN DE IMPACTO? 1.- REGISTROS ADMINISTRATIVOS: Ventajas: baratos, preexistentes Desventajas: no elaborados para el fin, cobertura 2.- ENCUESTAS: Ventajas: adaptable a la evaluación Desventajas: no preexistente, coste, sesgos IDEAL: registros administrativos adaptados ex-ante a la evaluación, o, en su ausencia, encuesta en distintos momentos.
  60. 60. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Métodos de análisis: IMPACTO Diseños experimentales: son aquellos en los que, partiendo de una población de potenciales beneficiarios del programa o política, los individuos acaban participando o no de acuerdo con un mecanismo de asignación puramente aleatorio; los individuos que no participan, el denominado grupo de control, constituyen el contrafactual en este tipo de diseño. Diseños cuasiexperimentales, resto de métodos disponibles, comparten la característica de que la participación de los individuos en el programa no la define un procedimiento aleatorio: ya sea porque son los propios individuos los que eligen participar o no, ya sea porque otro agente toma esa decisión, o por las dos cosas al mismo tiempo. En los diseños cuasiexperimentales, el contrafactual se define a partir de los individuos que no participan en el programa, que constituyen lo que se denomina grupo de comparación.
  61. 61. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Métodos de análisis: IMPACTO Métodos sin grupo de control
  62. 62. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Métodos de análisis: IMPACTO Métodos sin grupo de control
  63. 63. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Métodos de análisis: IMPACTO Métodos cuasiexperimentales con grupo de control
  64. 64. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS AEVAL http://www.aeval.es/export/sites/aeval/comun/pdf/evaluaciones/E34_2013_Evaluacion_EficienciaEnergetica.pdf
  65. 65. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Dos cuestionarios: Un cuestionario para evaluar los resultados, dirigido a conocer el grado de logro de los objetivos establecidos en la END 2000-2008, basado en los indicadores y fuentes señalados en el anexo de la misma. Dirigido a responsables de Planes Autonómicos de Drogas y de otros Departamentos de la Administración Central con competencias indirectas en la materia. B. Un cuestionario para evaluar el impacto de la END entre los profesionales del sector de las drogodependencias y otros íntimamente relacionados con él para valorar el grado de conocimiento de la END y su efecto en el desarrollo de políticas y programas desarrollados en el período 2000-2008. Igualmente, se dirige a los destinatarios del cuestionario A HERRAMIENTAS PARA LA EVALUACIÓN FINAL: ESTRATEGIA NACIONAL DE DROGAS Aeval
  66. 66. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS
  67. 67. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS 0.- Presentación ¿QUÉ HAGO YO AQUÍ? 1.- Estado de la cuestión en Canarias 2.- Conceptos básicos 3.- ¿Qué papel puede tener el ISTAC? 4.- Indicadores y su cálculo 5.- Ejemplos de políticas e indicadores en Canarias 6.- Visualización y análisis de indicadores Índice
  68. 68. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS EVALUACIÓN ISTAC PRESENTE ¿PARTICIPA EL ISTAC EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLÍTICAS PÚBLICAS? MUY POCO
  69. 69. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS A DÍA DE HOY EL ISTAC ES UTILIZADO COMO UNA HERRAMIENTA DE EVALUACIÓN EX-POST 1.- INFORMES REF: AIEM, REA, ZEC,etc 2.- PREDICCIÓN CRECIMIENTO DEL PIB PARA EL PRESUPUESTO 3.- IMPACTO DEL TURISMO EN LA ECONOMÍA, ZEC, ETC. 4.- ETC.
  70. 70. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Página 210
  71. 71. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS
  72. 72. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS EVALUACIÓN ISTAC PRESENTE FUTURO EVALUACIÓN ISTAC ¿QUÉ PUEDE APORTAR EL ISTAC EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLÍTICAS?
  73. 73. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS ¿QUÉ PUEDE APORTAR EL ISTAC EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLÍTICAS? 1.- SUMINISTRO DE INFORMACIÓN ESTADÍSTICA 1.-B PROYECCIONES Y MEDICIÓN DEL IMPACTO 2.- ASESORAMIENTO METODOLÓGICO 3.- PROPORCIONAR HERRAMIENTAS Y TECNOLOGÍA
  74. 74. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS 1.- SUMINISTRO DE INFORMACIÓN ESTADÍSTICA: a) WEB: en nuestra web existe mucha información que se desconoce y puede ser útil para la planificación y evaluación (antes, durante y después). b) Peticiones a medida: explotaciones estadísticas específicas para un caso concreto: Precios REA, Directorios de empresas sectoriales, Microdatos, Explotaciones para Promotur, Empresas ZEC, etc. c) Elaboración de nuevas operaciones estadísticas o estudios para atender a una necesidad concreta: Encuesta de Salud, AIEM, Precios Canarias-España, etc.
  75. 75. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS 1.-B PROYECCIONES Y MEDICIÓN DEL IMPACTO PLANIFICACIÓN: elaborar proyecciones de indicadores (Población, PIB etc.) y mediciones de impacto: por ejemplo (Ec Azul, deporte, turismo, impuestos y política fiscal...). 2.- ASESORAMIENTO METODOLÓGICO a) Diseño muestral y cuestionarios. b) Definición de indicadores c) Aplicación de métodos estadísticos apropiados. 3.- PROPORCIONAR HERRAMIENTAS Y TECNOLOGÍA
  76. 76. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS 0.- Presentación ¿QUÉ HAGO YO AQUÍ? 1.- Estado de la cuestión en Canarias 2.- Conceptos básicos 3.- ¿Qué papel puede tener el ISTAC? 4.- Indicadores y su cálculo 5.- Ejemplos de políticas e indicadores en Canarias 6.- Visualización y análisis de indicadores Índice
  77. 77. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS TIPOS DE INDICADORES 1.- CON UNIDAD DE MEDIDA O ADIMESIONALES Niveles, diferencias, índices, ratios, tasas 2.- SEGÚN EL CRITERIO Y EL CONTENIDO DE LA EVALUACIÓN 3.- SEGÚN LA FRECUENCIA TEMPORAL Coyuntura vs estructura 4.- ETC.
  78. 78. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS TIPOS DE INDICADORES 1.- CON UNIDAD DE MEDIDA O ADIMESIONALES Niveles, diferencias, índices, ratios, tasas
  79. 79. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS INDICADORES QUE PUEDE APORTAR EL ISTAC En mayor medida: 1.- DETECCIÓN DE NECESIDADES 2.- CUANTIFICACIÓN DE RESULTADOS 3.- MEDICIÓN DE IMPACTOS
  80. 80. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS PRINCIPALES INDICADORES DE REFERENCIA 1.- CIFRAS DE POBLACIÓN Cifras oficiales Proyecciones de población 2.- MACROMAGNITUDES Producto Interior Bruto (PIB): ratio y evolución (volumen), el problema de la estimación en Canarias Valor Añadido Bruto (VAB): ratio y evolución (volumen) Medidas de impacto: efecto total=directo+indirecto Renta municipal 3.- EMPLEO Distintas fuentes Unidades de medida 4.- PRECIOS
  81. 81. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS PRINCIPALES INDICADORES DE REFERENCIA 1.- CIFRAS DE POBLACIÓN Cifras oficiales (dos casos): Hasta nivel insular: Las cifras de población y censos demográficos, que estiman la población residente. Se calculan a partir de los censos y se actualizan continuamente. (1 de enero y 1 de julio). Población por municipios: Las cifras de población del Padrón se difunden por el INE, una vez que se ha publicado en el BOE el Real Decreto de aprobación de las mismas. (1 de enero).
  82. 82. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS PRINCIPALES INDICADORES DE REFERENCIA 1.- CIFRAS DE POBLACIÓN Proyecciones de población Las Proyecciones de Población proporcionan una simulación estadística de la población que residiría en España en los próximos años en caso de mantenerse las tendencias demográficas actuales, desagregada según características demográficas básicas y tomando como punto de partida las Cifras de Población a 1 de enero del año en curso. Se ofrece esta información cada 2 años con un horizonte proyectivo de 50 años para el total nacional y 15 para las comunidades autónomas y provincias, según características demográficas básicas.
  83. 83. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS PRINCIPALES INDICADORES DE REFERENCIA 2.- MACROMAGNITUDES Producto Interior Bruto (PIB): el problema de la estimación en Canarias ¿Qué consecuencias puede tener este cambio? Similar peso construcción
  84. 84. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS PRINCIPALES INDICADORES DE REFERENCIA 2.- MACROMAGNITUDES PIB: el problema de la estimación en Canarias ¿Qué consecuencias puede tener este cambio? 6,7%
  85. 85. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS PRINCIPALES INDICADORES DE REFERENCIA 2.- MACROMAGNITUDES Valor Añadido Bruto (VAB): ratio y evolución (volumen) Medidas de impacto: efecto total=directo+indirecto Renta municipal 3.- EMPLEO Distintas fuentes: EPA, Seguridad Social, Cuentas económicas, censos... Unidades de medida: personas, puestos de trabajo, horas de trabajo, puestos de trabajo equivalentes a tiempo completo, etc. 4.- PRECIOS
  86. 86. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS PRINCIPALES INDICADORES DE REFERENCIA 2.- MACROMAGNITUDES Producto Interior Bruto (PIB): ratio y evolución (volumen), el problema de la estimación en Canarias Valor Añadido Bruto (VAB): ratio y evolución (volumen) Medidas de impacto: efecto total=directo+indirecto Renta municipal 3.- EMPLEO Distintas fuentes Unidades de medida 4.- PRECIOS
  87. 87. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS TRABAJO EN GRUPO 3-4 PERSONAS CONTINUACIÓN 1.- PENSAR UNA POLÍTICA SENCILLA (PLAN, MEDIDA...) A EVALUAR 2.- COMPLETAR EL ESQUEMA ¿Algún indicador en el que pueda participar el ISTAC?
  88. 88. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS PLANTEAMIENTO DE UN ESTUDIO ESTADÍSTICO PARA EVALUAR 1.- Objetivos-> Indicadores-> pueden elaborarse con registros administrativos o encuestas existentes? ● Sí ● En parte (adaptar registro o encuesta (muestra y preguntas) ● No, nueva encuesta 2.- Diseño: cuestionario, población, marcos, muestra, disponibilidad de recursos económicos y personales 3.- Pruebas piloto 4.- Trabajo campo (empresa externa) 5-. Carga de datos, validar, imputar, calibrar y elevar resultados 6.- Tabulación y cálculo de indicadores
  89. 89. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS 0.- Presentación ¿QUÉ HAGO YO AQUÍ? 1.- Estado de la cuestión en Canarias 2.- Conceptos básicos 3.- ¿Qué papel puede tener el ISTAC? 4.- Indicadores y su cálculo 5.- Ejemplos de políticas e indicadores en Canarias 6.- Visualización y análisis de indicadores Índice
  90. 90. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Prácticas a evitar
  91. 91. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Prácticas a evitar
  92. 92. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS ESTRATEGIA DE DESARROLLO INDUSTRIAL (EDIC) Prácticas a evitar
  93. 93. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Información disponible en el ISTAC, formará parte del PEC Prácticas a evitar
  94. 94. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Prácticas a evitar
  95. 95. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Prácticas a evitar
  96. 96. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS ¿ES POSIBLE MEDIR ESTOS OBJETIVOS? Prácticas a evitar
  97. 97. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS EDIC
  98. 98. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS EDIC
  99. 99. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS EDIC
  100. 100. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS
  101. 101. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS RIS 3 CANARIAS
  102. 102. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS
  103. 103. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS
  104. 104. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS
  105. 105. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS
  106. 106. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS INFORME BIANUAL 2013-2014 Informe ejecución bianual Estrategia PEIMH CUESTIONARIOS PARA INFORME 2015-2016 Cuestionario de actuaciones EPIMH 2015-2016 Agradecer la colaboración de Rosario Pizarro (Instituto Canario de Igualdad)
  107. 107. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS http://www.turismodecanarias.com/promoturturismocanarias/fondo-de-desarrollo-de-vuelos-flight-development-fund/ CUESTIONARIOS ¿Se mide efecto?
  108. 108. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Llegadas de pasajeros a Fuerteventura desde París (AENA)
  109. 109. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Llegadas de pasajeros a Fuerteventura desde París (AENA)
  110. 110. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS EJEMPLO PRÁCTICO: SUPONGAMOS QUE PERTENECEMOS A UN CABILDO Y VAMOS A PRESENTAR UN PROYECTO PARA EL FONDO DE DESARROLLO DE CANARIAS (FDCAN) (Hoja de cálculo) El eje seleccionado es Políticas activas de empleo: Incentivos a la contratación para colectivos de difícil inserción DEFINIR EL PROYECTO EN LOS SIGUIENTES TÉRMINOS: JUSTIFICACIÓN DE LA NECESIDAD IMPLEMENTACIÓN: recursos a dedicar y actividades a desarrollar RESULTADOS o productos a obtener IMPACTOS DEFINIR OBJETIVOS EN CADA ETAPA Y LOS INDICADORES A USAR Y CÓMO OBTENERLOS (FUENTE, MÉTODO)
  111. 111. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS 0.- Presentación ¿QUÉ HAGO YO AQUÍ? 1.- Estado de la cuestión en Canarias 2.- Conceptos básicos 3.- ¿Qué papel puede tener el ISTAC? 4.- Indicadores y su cálculo 5.- Ejemplos de políticas e indicadores en Canarias 6.- Visualización y análisis de indicadores Índice
  112. 112. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS https://public.tableau.com/profile/istac#!/
  113. 113. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Ofreciendo información MACRO para la toma de decisiones Indicador Sintéticode ActividadTurística desestacionalizado Lanzarote Gran Canaria Tenerife La Palma Canarias Fuerteventura 0 0,2 0,4 0,6 0,8 1 1,2 1,4 1,6 2009Q1 2009Q2 2009Q3 2009Q4 2010Q1 2010Q2 2010Q3 2010Q4 2011Q1 2011Q2 2011Q3 2011Q4 2012Q1 2012Q2 2012Q3 2012Q4
  114. 114. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS Para terminar, creo que la Dirección General de Modernización y Calidad de los Servicios debe dar un impulso a la evaluación y planificación de políticas públicas: ● Localizando las políticas que están sujetas a evaluación ● Localizando al personal que hace evaluación ● Armonizando criterios y rediseño de la guía ● Formación de equipos de evaluación ● Integrar al ISTAC en el proceso
  115. 115. LA ESTADÍSTICA PÚBLICA EN LA PLANIFICACIÓN Y EVALUACIÓN DE POLITICAS GRACIAS POR SU ATENCIÓN Más información: www.gobiernodecanarias.org/istac www.slideshare/istac @istac_es

×