Indicateurs de performance pour les systèmes d'inspection environnementale

Description et objectifs du projet

Le but du projet était d'élaborer des indicateurs de performance pour les inspections environnementales. Concernant la portée du projet, il a été convenu qu'il devait couvrir les indicateurs
liés au RMCEI. Les indicateurs devraient inclure des indicateurs d'entrée, de sortie et de résultat.

Phase de réflexion

La première phase, a eu lieu en 2008. Le groupe s'est mis d'accord sur une courte liste d'indicateurs qui devraient être analysés plus en détail dans un futur projet IMPEL. Dans le cadre de ce projet, les pays volontaires fourniront les données nécessaires pour les indicateurs sélectionnés, qui seront ensuite analysés et discutés. Comme la collecte de données sur toutes les installations couvertes par le RMCEI a été jugée trop lourde, il a été convenu que le projet devrait se concentrer sur les installations IPPC. Une limitation supplémentaire aux secteurs individuels de la directive IPPC pourrait être envisagée si cela permet d'obtenir des données plus comparables et plus représentatives. Le champ d'application devrait être évalué à la fin du projet.

Définir les indicateurs

Le but de cet exercice était de définir les 10 indicateurs de performance proposés par le projet IMPEL 2008 " Brainstorming on an IMPEL Project to develop performance indicators for environmental inspectorates ", d'évaluer leurs forces et leurs faiblesses, et de réaliser un test pilote parmi une liste restreinte de membres IMPEL. Sur cette base, une liste révisée et aussi précisément définie que possible d'indicateurs a été proposée, ainsi qu'une évaluation qualitative de chacun des indicateurs.

Tout au long du projet, en raison des nombreuses difficultés politiques et opérationnelles entre les États membres, la définition d'indicateurs comparables à l'échelle de l'UE s'est avérée être de la plus grande difficulté. Le pilote a démontré que la comparabilité est souvent faible, la disponibilité des données variable et l'éventail des réponses élevé. Il a également été convenu que la liste d'indicateurs proposée ne caractérise pas l'efficacité des services d'inspection. Il s'agit d'une évaluation partielle de leur capacité.

Certaines recommandations concernant la manière de les utiliser sont faites : en particulier, il vaut mieux utiliser plusieurs indicateurs plutôt qu'un seul, et les indicateurs doivent être combinés avec des instruments orientés vers la qualité. Il a été conclu qu'il serait utile d'organiser une discussion approfondie entre IMPEL et la Commission et d'autres parties concernées comme l'OCDE, afin d'explorer plus avant les outils d'évaluation qualitative et quantitative tels que les audits, les examens par les pairs (IRI), les indicateurs de sortie et de résultat concrets spécifiques à un secteur/directive et les combinaisons de ceux-ci qui pourraient être utilisés pour le suivi des performances des inspections à l'échelle de l'UE.

Exploration des outils d'évaluation qualitatifs et quantitatifs pour évaluer la performance des inspections environnementales à travers l'UE

Ce projet a entrepris d'examiner l'utilisation actuelle et potentielle des outils d'évaluation pour évaluer les inspections environnementales à travers l'UE.
Divers indicateurs et outils d'évaluation ont été examinés et leur utilisation évaluée pour trois types d'évaluation :

• par un service d'inspection individuel pour mesurer sa performance et identifier les domaines à améliorer ;
• une vérification externe qu'un service d'inspection dispose des " éléments constitutifs " nécessaires pour fonctionner efficacement ; et
• si possible, pour comparer les services d'inspection au sein d'un État membre et à travers l'UE.

Ce projet n'a pas été en mesure d'identifier un ensemble unique d'indicateurs numériques pouvant être incorporés dans les outils d'évaluation et utilisés de manière équitable et significative pour classer numériquement les performances des inspections à travers l'Union européenne. Cela est dû au fait que les circonstances dans lesquelles chaque inspection opère peuvent être sensiblement différentes. Cependant, ce projet a identifié des principes qui peuvent permettre une comparaison limitée basée sur des indicateurs de résultats. L'objectif principal de telles comparaisons devrait être de permettre aux inspections de comprendre les actions qui ont le plus contribué aux résultats (c'est-à-dire la causalité), de mieux comprendre les approches alternatives qui sont efficaces dans certaines circonstances, et d'encourager le partage des meilleures pratiques. Il n'est pas recommandé d'utiliser les indicateurs de résultats pour faciliter les tableaux de classement ou d'autres types de classement. Les différentes approches de la vérification des données, l'absence de définitions communes et les différences de contexte local sont peu susceptibles de donner lieu à une comparaison équitable ou significative et risquent de faire de l'évaluation une source de litige plutôt qu'un outil d'amélioration.

Dossiers connexes/informations

• Méthodologie de la bonne action 

.