Δείκτες επιδόσεων για συστήματα περιβαλλοντικής επιθεώρησης

Περιγραφή και στόχοι του έργου

Στόχος του έργου ήταν η εκπόνηση δεικτών απόδοσης για τις περιβαλλοντικές επιθεωρήσεις. Όσον αφορά το πεδίο εφαρμογής του έργου, συμφωνήθηκε ότι θα έπρεπε να καλύπτει δείκτες
σχετικούς με το RMCEI. Οι δείκτες θα πρέπει να περιλαμβάνουν δείκτες εισροών, εκροών και αποτελεσμάτων.

Φάση καταιγίδας ιδεών

Η πρώτη φάση, έλαβε χώρα το 2008. Η ομάδα συμφώνησε σε έναν σύντομο κατάλογο δεικτών που θα έπρεπε να αναλυθούν περαιτέρω σε ένα μελλοντικό έργο IMPEL. Στο πλαίσιο του έργου, οι εθελοντικές χώρες θα παράσχουν τα απαραίτητα δεδομένα για τους επιλεγμένους δείκτες, τα οποία στη συνέχεια θα αναλυθούν και θα συζητηθούν. Καθώς η συλλογή δεδομένων για όλες τις εγκαταστάσεις που καλύπτονται από το RMCEI κρίθηκε πολύ επαχθής, συμφωνήθηκε ότι το έργο θα πρέπει να επικεντρωθεί στις εγκαταστάσεις IPPC. Θα μπορούσε να εξεταστεί ένας περαιτέρω περιορισμός σε επιμέρους τομείς στο πλαίσιο της οδηγίας IPPC, εάν αυτό οδηγήσει σε πιο συγκρίσιμα και αντιπροσωπευτικά δεδομένα. Το πεδίο εφαρμογής θα πρέπει να αξιολογηθεί στο τέλος του έργου.

Καθορισμός των δεικτών

Στόχος της άσκησης αυτής ήταν να καθοριστούν οι 10 δείκτες επιδόσεων που προτάθηκαν από το έργο IMPEL του 2008 με τίτλο "Καταιγισμός ιδεών για ένα έργο IMPEL για την ανάπτυξη δεικτών επιδόσεων για τις περιβαλλοντικές επιθεωρήσεις", να εκτιμηθούν τα δυνατά και αδύνατα σημεία τους και να διεξαχθεί μια πιλοτική δοκιμή μεταξύ ενός μικρού καταλόγου μελών του IMPEL. Στη βάση αυτή, προτάθηκε ένας αναθεωρημένος και όσο το δυνατόν ακριβέστερα καθορισμένος κατάλογος δεικτών, μαζί με μια ποιοτική αξιολόγηση κάθε δείκτη.

Σε όλη τη διάρκεια του έργου, λόγω των πολλών πολιτικών και λειτουργικών δυσκολιών μεταξύ των κρατών μελών, ο καθορισμός συγκρίσιμων δεικτών σε επίπεδο ΕΕ αποδείχθηκε εξαιρετικά δύσκολος. Η πιλοτική εφαρμογή κατέδειξε ότι η συγκρισιμότητα είναι συχνά χαμηλή, η διαθεσιμότητα των δεδομένων μεταβλητή και το εύρος των απαντήσεων υψηλό. Συμφωνήθηκε επίσης ότι ο προτεινόμενος κατάλογος δεικτών δεν χαρακτηρίζει την αποτελεσματικότητα των επιθεωρήσεων. Πρόκειται για μια μερική αξιολόγηση της ικανότητάς τους.

Εκφράζονται ορισμένες συστάσεις σχετικά με τον τρόπο χρήσης τους : ειδικότερα, είναι προτιμότερο να χρησιμοποιούνται περισσότεροι δείκτες παρά ένας και οι δείκτες πρέπει να συνδυάζονται με μέσα προσανατολισμένα στην ποιότητα. Το συμπέρασμα ήταν ότι θα ήταν χρήσιμο να οργανωθεί μια σε βάθος συζήτηση μεταξύ του IMPEL και της Επιτροπής και άλλων σχετικών μερών, όπως ο ΟΟΣΑ, για να διερευνηθεί περαιτέρω ποια ποιοτικά και ποσοτικά εργαλεία αξιολόγησης, όπως οι έλεγχοι, οι αξιολογήσεις από ομοτίμους (IRI), οι συγκεκριμένοι δείκτες εκροών και αποτελεσμάτων για συγκεκριμένους τομείς/κατευθύνσεις και οι συνδυασμοί αυτών θα μπορούσαν να χρησιμοποιηθούν για την παρακολούθηση των επιδόσεων των επιθεωρήσεων σε επίπεδο ΕΕ.

Διερεύνηση ποιοτικών και ποσοτικών εργαλείων αξιολόγησης για την αξιολόγηση των επιδόσεων των περιβαλλοντικών επιθεωρήσεων σε ολόκληρη την ΕΕ

Το έργο αυτό είχε ως στόχο να εξετάσει την τρέχουσα και τη δυνητική χρήση εργαλείων αξιολόγησης για την αξιολόγηση των περιβαλλοντικών επιθεωρήσεων σε ολόκληρη την ΕΕ.
Εξετάστηκαν διάφοροι δείκτες και εργαλεία αξιολόγησης και αξιολογήθηκε η χρήση τους για τρεις τύπους αξιολόγησης:

• από μια μεμονωμένη επιθεώρηση για τη μέτρηση των επιδόσεών της και τον εντοπισμό τομέων προς βελτίωση;
• εξωτερική επαλήθευση ότι μια επιθεώρηση διαθέτει τα απαραίτητα "δομικά στοιχεία" για να λειτουργεί αποτελεσματικά- και
• εάν είναι δυνατόν, για τη σύγκριση των επιθεωρήσεων εντός ενός κράτους μέλους και σε ολόκληρη την ΕΕ.

Το παρόν έργο δεν μπόρεσε να προσδιορίσει ένα ενιαίο σύνολο αριθμητικών δεικτών που μπορούν να ενσωματωθούν σε εργαλεία αξιολόγησης και να χρησιμοποιηθούν με δίκαιο και ουσιαστικό τρόπο για την αριθμητική κατάταξη των επιδόσεων των επιθεωρήσεων σε ολόκληρη την Ευρωπαϊκή Ένωση. Αυτό οφείλεται στο γεγονός ότι οι συνθήκες υπό τις οποίες λειτουργεί κάθε επιθεώρηση μπορεί να είναι σημαντικά διαφορετικές. Ωστόσο, το έργο αυτό προσδιόρισε αρχές που μπορούν να επιτρέψουν περιορισμένη σύγκριση με βάση δείκτες αποτελέσματος. Ο πρωταρχικός σκοπός αυτών των συγκρίσεων θα πρέπει να είναι να επιτρέψει στις επιθεωρήσεις να κατανοήσουν τις δράσεις που είχαν τη μεγαλύτερη συμβολή στα αποτελέσματα (δηλαδή την αιτιώδη συνάφεια), να κατανοήσουν καλύτερα τις εναλλακτικές προσεγγίσεις που είναι αποτελεσματικές σε ορισμένες περιστάσεις και να ενθαρρύνουν την ανταλλαγή βέλτιστων πρακτικών. Δεν συνιστάται η χρήση δεικτών αποτελεσμάτων για τη διευκόλυνση των πινάκων κατάταξης ή άλλων τύπων κατάταξης. Οι διαφορετικές προσεγγίσεις για την επαλήθευση των δεδομένων, η έλλειψη κοινών ορισμών και οι διαφορές στο τοπικό πλαίσιο είναι απίθανο να οδηγήσουν σε δίκαιη ή ουσιαστική σύγκριση και ενέχουν τον κίνδυνο η αξιολόγηση να γίνει πηγή διαφωνιών και όχι εργαλείο βελτίωσης.

Σχετικά αρχεία/πληροφορίες

• Μεθοδολογία του "Doing the right thing"