government-accountability-and-transparency
Evaluarea eficacității regulamentului: Metrici și metode
Table of Contents
Introducere: De ce aspecte legate de evaluarea reglementării
Reglementarea modelează aproape fiecare aspect al vieţii moderne. O regulă care arată raţional pe hârtie poate produce consecinţe nedorite, impune costuri disproporţionate sau pur şi simplu nu reuşim să schimbăm comportamentul. Evaluarea eficienţei reglementărilor este, prin urmare, o funcţie critică de guvernare. Ea oferă dovezile necesare pentru a rafina regulile existente, a concepe unele mai bune şi a garanta că factorii de decizie publică care intenţionează să beneficieze de beneficii sunt efectiv livraţi. Fără o evaluare riguroasă, reglementarea riscă să devină o povară fără a se întoarce la realitate sau mai rău, o sursă de prejudicii.
Acest articol oferă o examinare cuprinzătoare a indicatorilor și metodelor utilizate pentru evaluarea eficacității reglementărilor. Se bazează pe cadrele de evaluare stabilite din organizații precum []OCDE] și S.U.S. pentru protecția mediului, precum și pe lecțiile din studiile de caz din lumea reală. Prin înțelegerea a ceea ce funcționează și ce nu, autoritățile de reglementare, părțile interesate și cetățenii pot să insiste pentru o guvernanță mai inteligentă și mai responsabilă.
Înțelegerea eficacității reglementării
Eficacitatea reglementării nu este un concept unic, ci unul multidimensional. În esenţă, se referă la gradul în care un regulament îşi atinge obiectivele declarate. Cu toate acestea, aceste obiective acoperă adesea mai multe domenii de eficienţă economică, calitate ecologică, sănătate publică, echitate şi fezabilitate administrativă. O reglementare cu adevărat eficientă trebuie să îndeplinească cu succes mai multe criterii:
- Eficacia: Regulă produce schimbarea dorită în comportament sau în rezultat?
- [ Eficienţa: Beneficiile regulii sunt justificate de costurile impuse societăţii?
- Equity: Sunt sarcinile și beneficiile distribuite corect în diferite grupuri?
- Responsabilitatea: Se poate adapta regulamentul la circumstanţe în schimbare sau la informaţii noi?
- Legitimitatea: Este regula percepută ca fiind corectă și rezonabilă de cei afectați?
Aceste dimensiuni se tranzactioneaza adesea impotriva altora. De exemplu, o reglementare foarte prescriptiva poate obtine o eficacitate ridicata dar cu costul flexibilitatii si eficienta. O evaluare trebuie sa echilibreze aceste tensiuni, folosind o combinatie de indicatori si metode care captureaza imaginea completa. OCDE Politica de reglementare Outlook subliniază faptul ca eficacitatea ar trebui evaluata nu numai prin respectarea imediata, ci si prin rezultate societale pe termen lung si prin calitatea procesului de reglementare in sine.
Metrici cheie pentru evaluare
Metricile traduc obiectivele de reglementare în indicatori măsurabili. Nu este suficient un singur indicator; este nevoie de o serie de indicatori pentru a capta numeroasele faţete ale eficacității. Mai jos sunt cele mai utilizate indicatori, extinse cu exemple și context.
Ratele de conformitate
Conformarea este cea mai simplă măsură: măsoară proporția entităților reglementate care aderă la regulă. Ratele ridicate de conformitate sugerează că regulamentul este bine conceput, aplicat și acceptat. Conformarea scăzută poate indica un design slab, cerințe de asigurare a respectării normelor sau cerințe nerealiste. Cu toate acestea, respectarea în sine poate fi înșelătoare. O regulă care este ușor de respectat nu poate conduce la modificări semnificative, în timp ce o regulă dificilă cu respectarea moderată ar putea genera în continuare beneficii nete mari. De exemplu, valorile mobiliare și schimbul de informații efectuate de Comisie în SUA urmărește respectarea cerințelor de publicare; ratele ridicate de depunere nu garantează faptul că investitorii utilizează efectiv informațiile.
Impactul asupra rezultatelor
Pentru reglementările de mediu, aceasta ar putea fi reducerea concentrațiilor poluante sau recuperarea speciilor. Pentru reglementările privind siguranța, ar putea fi mai puține leziuni la locul de muncă sau decese în trafic. Indicatorii de rezultat sunt măsura cea mai directă a faptului dacă un regulament funcționează. Totuși, acestea necesită control pentru alți factori care influențează rezultatul. Provocarea care necesită adesea metode statistice sofisticate. EPA [Analiza retrospectivă a Actului privind aerul curat] oferă un exemplu binecunoscut: prin compararea tendințelor privind calitatea aerului înainte și după modificări majore, agenția a estimat că Legea a împiedicat sute de mii de decese premature.
Analiza cost-beneficiar (CBA)
CBA compară costurile economice totale ale unui regulament (costurile de conformitate, sarcinile administrative, productivitatea pierdută) cu beneficiile totale (îmbunătățirile sănătății, câștigurile de mediu, riscurile reduse). Atât costurile, cât și beneficiile sunt exprimate în termeni monetari, permițând o evaluare directă a bunăstării sociale nete. CBA este o piatră de temelie a analizei impactului normativ în multe țări, dar are limitări. Se luptă cu valori nemonetabile (de exemplu, biodiversitatea, demnitatea umană) și poate fi sensibilă la ratele de reducere și incertitudinea. În ciuda acestor probleme, CBA rămâne un instrument puternic de comparare a alternativelor de reglementare. Oficiul de Management și Buget din SUA publică rapoarte anuale privind costurile și beneficiile reglementărilor federale, oferind o sursă bogată de date pentru evaluare.
Feedback-ul părților interesate
Etapele cantitative trebuie completate de contribuţii calitative din partea celor afectaţi. În urma sondajelor, a comentariilor publice sau a reuniunilor consultative, se pot observa consecinţe nedorite, obstacole de punere în aplicare şi percepţii asupra echităţii. De exemplu, un studiu de afaceri mic ar putea arăta că o cerinţă de raportare este atât de împovărătoare încât descurajează respectarea normelor, chiar dacă regula în sine este raţională. Autoritatea de conduită financiară din Regatul Unit efectuează periodic evaluări post-implementare care combină datele cantitative cu interviurile părţilor interesate.
Studii longitudinale și analiza seriilor temporale
Multe regulamente produc efecte care se desfăşoară de-a lungul anilor sau deceniilor. Studiile longitudinale urmăresc în timp aceleaşi entităţi reglementate sau zone geografice, permiţând evaluatorilor să observe tendinţele înainte şi după reglementare. Econometria serilor temporale poate izola efectul normativ de alte schimbări economice sau sociale. De exemplu, cercetătorii care studiază impactul Actului Dodd-Frank asupra asumării riscului bancar au folosit zeci de ani de date trimestriale privind bilanţurile bancare pentru a estima schimbările în ceea ce priveşte efectul de levier şi activitatea de tranzacţionare. Aceste studii sunt nepreţuite, dar necesită modelare atentă pentru a evita confundarea variabilelor.
Muzica suplimentară: capitaluri proprii, eficiență și responsabilitate
Dincolo de indicatorii de bază de mai sus, autoritățile de reglementare măsoară din ce în ce mai mult Acquity[ [iar regulamentul afectează în mod disproporționat populațiile vulnerabile. Acest lucru poate fi captat prin defalcarea demografică a costurilor de conformitate sau a modificărilor de rezultat. Eficiența poate fi evaluată în continuare prin analiza rentabilității (de exemplu, dolari pe viață salvate) sau prin compararea performanței reglementare în jurisdicții. Responsivitatea este mai greu de cuantificat, dar poate fi aproximativă prin viteza actualizărilor de reglementare sau prin numărul de derogări acordate.Un regulament care nu se adaptează niciodată la noile dovezi poate pierde eficacitatea în timp.
Metode de evaluare
Alegerea metodei de evaluare corecte depinde de contextul de reglementare, de disponibilitatea datelor, precum și de întrebările care se pun. Metodele se încadrează în general de-a lungul unui spectru cantitativ la calitativ, cu abordări mixte-metodă care adesea produc cele mai bogate perspective.
Metode cantitative
Metodele cantitative se bazează pe date numerice și pe o concluzie statistică. Puterea lor este obiectivitatea și replicabilitatea, însă necesită date de înaltă calitate și specificații detaliate de model atent.
Proiectări quasi-experimentale
Deoarece testele de control randomizate sunt rareori fezabile pentru reglementări (nu se poate atribui anumite firme să fie reglementate și altele nu), evaluatorii utilizează metode cvasi-experimentale. Diferința-in-diferențe compară un grup reglementat cu un grup de control nereglementat înainte și după schimbarea politicii. Discontinuitatea de regresie exploatează pragurile (de exemplu, un nivel specific al poluării care declanşează reguli mai stricte) cu efectele estimate cauzal Variabilele structurale pot aborda endogeneitatea atunci când reglementarea este influențată de rezultate. Aceste metode sunt în prezent standard în evaluarea politicilor academice și sunt tot mai mult adoptate de agențiile guvernamentale.
Modelarea economică și simulările
Modelele generale de echilibru și modelele dinamice ale sistemului pot simula efectele valurilor ale unei reglementări printr-o economie sau sector întreg. De exemplu, EPA utilizează modele economice pentru a estima impactul macronivel al limitelor de emisii. Aceste modele sunt puternice pentru prognozare, dar depind în mare măsură de ipoteze despre comportament și tehnologie. Ele sunt cel mai bine utilizate alături de indici de referință empirici.
Sondaje și date administrative
Anchete la scară largă ale entităților reglementate pot genera date privind conformitatea și rezultatele la costuri reduse. Înregistrări administrative . Cum ar fi depunerile fiscale, rapoartele de poluare sau inspecțiile de siguranță . Prezintă date longitudinale bogate fără a fi nevoie de colectarea de date primare. Legarea seturilor de date administrative între agenții (de exemplu, înregistrările de sănătate și monitorizarea mediului) permite analize puternice, dar ridică preocupări legate de confidențialitate care trebuie gestionate.
Metode calitative
Metodele calitative explorează
Interviuri in-Dept
Interviurile semistructurate cu autorităţile de reglementare, reprezentanţii industriei, grupurile de avocaţi şi cetăţenii afectaţi pot descoperi bariere în calea respectării normelor, percepţii asupra corectitudinii şi consecinţe nedorite. De exemplu, interviurile cu micii proprietari de întreprinderi după introducerea unei noi reguli privind siguranţa alimentară ar putea dezvălui faptul că costurile de testare a echipamentelor depăşesc cu mult beneficiile pentru siguranţa alimentară ale funcţionării lor specifice. Astfel de informaţii pot informa scutirile sau cerinţele standardizate.
Grupuri de focalizare
Grupurile focale reunesc grupuri mici, diverse de părți interesate pentru a-și explora opiniile cu privire la un regulament. Ele sunt deosebit de utile atunci când testează proiecte de norme sau explorează motivul pentru care conformitatea este scăzută. Interacțiunea dinamică a grupului prezintă adesea perspective care nu ar apărea în interviurile individuale.
Studii de caz
Studii de caz aprofundate de implementare specifice de reglementare oferă dovezi bogate, contextualizate. Un studiu de caz ar putea urmări modul în care un oraș noua ordonanță de control al chiriei afectat comportamentul proprietarului, furnizarea de locuințe, și de închiriere satisfacție pe parcursul a doi ani.
Metode mixte: Combinarea celor mai bune dintre cele două
Din ce în ce mai mult, cadrele de evaluare pledează pentru metode mixte: utilizarea datelor cantitative pentru estimarea efectelor de cauzalitate și identificarea modelelor, apoi utilizarea unei anchete calitative pentru a explica aceste modele și a identifica mecanismele. De exemplu, un studiu al AFDA s tutun ar putea combina analiza în timp a ratelor de fumat cu interviurile funcționarilor din domeniul sănătății publice și ale comercianților cu amănuntul din tutun. Această triangulare consolidează credibilitatea constatărilor și oferă recomandări concrete.
Provocări în evaluarea regulamentului
Chiar și cu cele mai bune metode și indicatori, evaluarea reglementărilor se confruntă cu obstacole persistente. Recunoscând aceste provocări este esențială pentru evaluarea realistă.
Disponibilitatea datelor și calitatea
Evaluarea de reglementare necesită adesea date care nu există sau nu sunt accesibile. Informaţii confidenţiale de afaceri, evidenţe de agenţie fragmentate sau perioade scurte de măsurare pot limita analiza. În ţările în curs de dezvoltare, datele de bază de conformitate pot lipsi în întregime. Evaluatorii trebuie să se bazeze uneori pe proxy-uri sau eşantioane mici, care introduc incertitudine. ]Regulament.gov] portalul din SUA a îmbunătăţit transparenţa datelor, dar multe agenţii încă nu dispun de baze de date sistematice de evaluare.
Atribuirea și contrafactualii
Izolarea efectului unui regulament de alte modificări ale evoluţiei economice, schimbări tehnologice, alte politici este foarte dificilă. Fără o valabilitate a regulamentului (ceea ce s-ar fi întâmplat fără regulament), atribuirea cauzală rămâne tentativă. Metodele de calificare ajută, dar se bazează pe ipoteze (de exemplu, tendinţe paralele) care nu pot fi deţinute.
Time Lags și efecte dinamice
Multe regulamente produc efecte doar după o lungă perioadă de timp. Reglementările de mediu durează adesea ani pentru a arăta îmbunătățiri măsurabile în sănătatea ecosistemului. Reglementările financiare pot preveni crize care ar fi avut loc zeci de ani mai târziu sau niciodată. Evaluările efectuate prea devreme pot găsi nici un efect, în timp ce așteaptă riscuri prea mari folosind date învechite. Efecte dinamice (de exemplu, firme care inovează pentru a evita respectarea) pot schimba, de asemenea, peisajul de reglementare în timp.
Rezistenţa şi jocurile părţilor interesate
Entitățile reglementate pot rezista colectării sau raportării strategice pentru a minimiza nerespectarea percepută. Aceasta poate influența atât indicatorii de conformitate, cât și măsurile de rezultat. De exemplu, întreprinderile care fac obiectul plafoanelor de emisii ar putea subscrie la poluare, făcând ca regulamentul să pară mai eficient decât este. Auditurile independente și verificarea terților pot atenua jocurile de noroc, dar pot adăuga costuri.
Constrângeri politice și instituționale
Evaluările care arată că un regulament este ineficient pot fi incomode din punct de vedere politic. Agenţiile pot face presiuni pentru a publica doar rezultate pozitive, sau bugetele de evaluare pot fi reduse atunci când rezultatele sunt nefavorabile. Inerţia instituţională poate împiedica, de asemenea, utilizarea rezultatelor evaluării pentru a actualiza normele. Construirea unei culturi a evaluării necesită conducere şi angajament pe termen lung.
Studii de caz în evaluarea reglementării
Evaluările din lumea reală ilustrează modul în care teoria întâlnește practica. Următoarele cazuri evidențiază diferite indicatori și metode în acțiune.
Legea privind aerul curat (Regulamentul privind mediul)
Legea privind aerul curat din SUA a fost una dintre cele mai extinse reglementări evaluate din istorie. Analizele retrospective ale EPA utilizează o combinație de date privind conformitatea, monitorizarea calității aerului (măsură) și modelarea impactului asupra sănătății. Un studiu de referință a estimat că între 1970 și 2020, Legea a împiedicat anual peste 200.000 de decese premature. Evaluarea s-a bazat pe diferențe-indiferențe care compară județele cu diferite niveluri de poluare de bază, precum și pe analiza cost-beneficiu care arată beneficii care depășesc costurile cu un factor de 30. Aceste dovezi au fost utilizate pentru a justifica modificările ulterioare și pentru a stabili standarde de calitate a aerului.
Legea Dodd-Frank (Regulamentul financiar)
După criza financiară din 2008, Dodd-Frank a urmărit reducerea riscului sistemic și protejarea consumatorilor. Evaluările s-au concentrat pe indicatori precum ratele capitalului bancar, comportamentul de asumare a riscurilor și numărul de falimente bancare. Un studiu folosind date bancare trimestriale și un proiect de discontinuitate de regresie în jurul pragului de mărime a activelor a constatat că supravegherea mai atentă în cadrul Dodd-Frank a redus asumarea riscurilor, dar și costurile de conformare mai ridicate pentru băncile mai mici. Interviuri calitative au arătat că băncile comunitare s-au luptat cu sarcina de raportare, ceea ce a determinat actul de reglementare din 2018.
Politicile de control al tutunului (Regulamentul privind sănătatea)
Când FDA a câștigat autoritatea de a reglementa produsele din tutun în 2009, a implementat restricții de publicitate, etichete de avertizare și interdicții de arome. Evaluatorii au folosit modele de serie întrerupte cu date de vânzări la nivel de magazin pentru a arăta că interdicțiile de arome au redus inițierea tinerilor cu 40%. Sondaje ale comercianților cu amănuntul și grupurilor de focus cu adolescenți au furnizat context: interdicțiile au fost eficiente deoarece au eliminat arome atrăgătoare, dar tinerii pur și simplu au trecut la achiziții online. Această constatare a dus la o aplicare sporită împotriva vânzărilor de e-commerce. Programul de știință pentru reglementare continuă să finanțeze evaluări care se încadrează în proiectarea politicilor.
GDPR (Regulamentul privind confidențialitatea datelor)
Regulamentul general al Uniunii Europene privind protecția datelor, care a avut ca scop consolidarea drepturilor de confidențialitate a datelor. Evaluarea eficacității sale este o provocare din cauza naturii globale a fluxurilor de date. Metricile includ numărul de notificări privind încălcarea datelor, amenzile impuse și anchetele privind încrederea consumatorilor. Un studiu mixt care combină analiza cantitativă a rapoartelor privind încălcarea dreptului comunitar (care a crescut) cu interviurile ofițerilor de protecție a vieții private a constatat că regulamentul a sporit gradul de conștientizare, dar a creat și sarcini de conformitate pentru întreprinderile mici. Evaluarea a evidențiat necesitatea aplicării în mod uniform și a armonizării între statele membre.
Concluzie: către o gestionare mai inteligentă a reglementării
Evaluarea eficacității reglementării nu este un exercițiu de o singură dată, ci un angajament continuu. Pe măsură ce complexitatea economiilor și ecosistemelor moderne crește, la fel și necesitatea unei evaluări riguroase și transparente. De la ratele de conformitate și analiza cost-beneficiu până la proiecte cvasi-experimentale și interviuri cu părțile interesate, se oferă un set de instrumente care poate fi adaptat la orice context de reglementare. Niciun instrument unic nu este perfect. Cele mai bune evaluări combină abordări multiple, recunosc incertitudinea și caută în mod activ dovezi deconcordare.
Provocările disponibilității datelor, atribuirea și rezistența politică sunt reale, dar nu sunt de netrecut. Guvernele pot investi în infrastructura de date, pot mandata unități independente de evaluare și pot construi mecanisme de feedback care permit reglementările să evolueze. Scopul final nu este de a găsi un verdict final asupra unei reguli, ci de a crea un proces dinamic de învățare și îmbunătățire. Reglementarea care este evaluată poate câștiga încredere, poate oferi rezultate și servi interesul public mult mai eficient decât reglementarea lăsată neexaminată.