Indicadores de resultados de los sistemas de inspección medioambiental

Descripción y objetivos del proyecto

El objetivo del proyecto era elaborar indicadores de rendimiento para las inspecciones medioambientales. En cuanto al alcance del proyecto, se acordó que debería abarcar indicadores
relacionados con el RMCEI. Los indicadores deberían incluir indicadores de entrada, salida y resultado.

Fase de tormenta de ideas

La primera fase tuvo lugar en 2008. El grupo acordó una breve lista de indicadores que deberían analizarse más a fondo en un futuro proyecto IMPEL. En el marco del proyecto, los países voluntarios proporcionarán los datos necesarios para los indicadores seleccionados, que luego se analizarán y debatirán. Como la recopilación de datos sobre todas las instalaciones cubiertas por el RMCEI se consideró demasiado gravosa, se acordó que el proyecto se centrara en las instalaciones IPPC. Podría estudiarse la posibilidad de limitarlo a sectores concretos en el marco de la Directiva IPPC si con ello se obtuvieran datos más comparables y representativos. El alcance debería evaluarse al final del proyecto.

Definición de los indicadores

El objetivo de este ejercicio era definir los 10 indicadores de rendimiento propuestos por el proyecto IMPEL de 2008 "Brainstorming on an IMPEL Project to develop performance indicators for environmental inspectorates", evaluar sus puntos fuertes y débiles y realizar una prueba piloto entre una lista corta de miembros de IMPEL. Sobre esta base, se propuso una lista de indicadores revisada y definida con la mayor precisión posible, junto con una evaluación cualitativa de cada uno de los indicadores.

A lo largo del proyecto, debido a las numerosas dificultades políticas y operativas entre los Estados miembros, la definición de indicadores comparables a escala de la UE resultó ser de máxima dificultad. El proyecto piloto demostró que la comparabilidad es a menudo escasa, la disponibilidad de datos variable y el abanico de respuestas elevado. También se acordó que la lista de indicadores propuesta no caracteriza la eficacia de los servicios de inspección. Es una evaluación parcial de su capacidad.

Se hacen algunas recomendaciones sobre la forma de utilizarlos: en particular, es mejor utilizar varios indicadores que uno solo, y los indicadores deben combinarse con instrumentos orientados a la calidad. Se concluyó que sería útil organizar un debate en profundidad entre IMPEL y la Comisión y otras partes relevantes como la OCDE, para explorar más a fondo qué herramientas de evaluación cualitativas y cuantitativas como auditorías, revisiones por pares (IRI), indicadores concretos de productos y resultados específicos de sectores/directivas y combinaciones de éstos podrían utilizarse para la supervisión a escala de la UE del rendimiento de los cuerpos de inspectores.

Exploración de herramientas de evaluación cualitativas y cuantitativas para evaluar el rendimiento de las inspecciones medioambientales en toda la UE

Este proyecto se propuso examinar el uso actual y potencial de herramientas de evaluación para evaluar las inspecciones medioambientales en toda la UE.
Se examinaron diversos indicadores y herramientas de evaluación y se evaluó su uso para tres tipos de evaluación:

• por parte de una inspección individual para medir su rendimiento e identificar áreas de mejora;
• verificación externa de que una inspección cuenta con los "elementos básicos" necesarios para funcionar eficazmente; y
• si es posible, para comparar las inspecciones dentro de un Estado miembro y en toda la UE.

Este proyecto no ha podido identificar un único conjunto de indicadores numéricos que puedan incorporarse a las herramientas de evaluación y utilizarse de forma justa y significativa para clasificar numéricamente el rendimiento de los servicios de inspección en toda la Unión Europea. Esto se debe a que las circunstancias en las que opera cada cuerpo de inspección pueden ser significativamente diferentes. Sin embargo, este proyecto ha identificado principios que pueden permitir una comparación limitada basada en indicadores de resultados. El objetivo principal de tales comparaciones debería ser permitir a los servicios de inspección comprender las acciones que han contribuido en mayor medida a los resultados (es decir, la causalidad), comprender mejor los enfoques alternativos que son eficaces en determinadas circunstancias y fomentar el intercambio de las mejores prácticas. No se recomienda el uso de indicadores de resultados para facilitar tablas clasificatorias u otros tipos de clasificación. Los diferentes enfoques para la verificación de los datos, la falta de definiciones comunes y las diferencias en el contexto local tienen pocas probabilidades de dar lugar a una comparación justa o significativa y corren el riesgo de que la evaluación se convierta en una fuente de disputas en lugar de una herramienta para la mejora.

Archivos/información relacionados

< 

• Metodología de "hacer lo correcto" 

< 

Método de "hacer lo correcto".