O papel da avaliação política na formulação das decisões legislativas

A avaliação de políticas não é apenas um exercício acadêmico, mas um mecanismo fundamental que impulsiona uma governança eficaz e responsável. Quando legisladores elaboram leis, eles estão fazendo apostas sobre como uma determinada intervenção irá mudar o comportamento, alocar recursos ou resolver um problema social. Sem avaliação sistemática, essas apostas permanecem cegas. A prática de avaliar políticas após a implementação fornece aos legisladores evidências concretas sobre o que realmente aconteceu, permitindo que eles refinem, escalem ou abandonem abordagens que não consigam produzir resultados. Esse ciclo de feedback é essencial para uma democracia funcional, onde os recursos públicos devem ser usados sabiamente e a confiança pública sustentada através de resultados transparentes.

Este artigo analisa como a avaliação de políticas influencia as futuras decisões legislativas, desde os fundamentos teóricos até os estudos de caso do mundo real e as tendências emergentes, argumentando que a avaliação deve ser inserida no processo legislativo desde o início, não atrelada após uma política já estar entrincheirada.

A Fundação Teórica: A formulação de políticas baseadas em provas

A ênfase moderna na avaliação de políticas se desenvolve a partir do movimento mais amplo para a elaboração de políticas baseadas em evidências (EBPM). EBPM defende que as decisões devem ser informadas por dados rigorosos e análise em vez de ideologia, anedota ou conveniência política. A ideia central é simples: antes de aprovar uma nova lei ou expandir um programa existente, os decisores políticos devem olhar para o que as evidências dizem sobre intervenções semelhantes. Depois de uma política está em vigor, eles devem avaliar o seu impacto real contra os seus objetivos pretendidos.

Dois modelos clássicos de elaboração de políticas ilustram por que motivo a avaliação é importante:

  • Modelo Racional-Compreensivo: Assume que os formuladores de políticas podem identificar objetivos claros, considerar todas as alternativas, escolher o melhor, e depois avaliar os resultados objetivamente. Na realidade, este modelo raramente é alcançado devido a tempo limitado, informações e capacidade cognitiva.A avaliação ajuda a aproximar a racionalidade através da alimentação de dados de desempenho reais.
  • Incrementalismo (Lindblom’s “mudindo através”): Descreve a elaboração de políticas como uma série de pequenos ajustes do status quo. A avaliação aqui serve como um mecanismo orientador, mostrando quais mudanças incrementais funcionaram e que não, permitindo refinamentos sucessivos.

Ambos os modelos dependem, em última análise, de feedback da avaliação para melhorar as decisões futuras. Sem ela, o processo político permanece preso em suposições. Para um mergulho mais profundo em quadros EBPM, a RAND Corporation fornece ampla pesquisa sobre métodos de análise de políticas.

Por que a avaliação política é essencial para as legislações

Os órgãos legislativos operam sob restrições: tempo de sessão limitado, prioridades concorrentes e intensas pressões políticas. Neste contexto, a avaliação oferece vários benefícios concretos:

  • Contabilidade: Os contribuintes e os constituintes merecem saber se uma lei atingiu os seus objectivos declarados. Os relatórios de avaliação criam um registo de desempenho que pode ser utilizado nas audições de supervisão e nas negociações orçamentais.
  • Otimização de recursos: Os governos raramente têm orçamentos ilimitados.A avaliação identifica programas que entregam altos retornos por dólar gasto e aqueles que devem ser desfinanciados ou reestruturados.
  • Aprendizado institucional: Ao longo do tempo, a avaliação regular constrói conhecimentos institucionais dentro de legislaturas e agências. Os legisladores podem recorrer a uma biblioteca de resultados passados ao elaborar novas contas, evitando erros repetidos.
  • Confiança Pública: Quando os cidadãos vêem que as leis são revistas e revistas com base em evidências, a confiança no governo aumenta. Transparência em torno de métodos de avaliação e conclusões reduz o cinismo.

Tipos e Métodos de Avaliação Política

A compreensão das diferentes abordagens de avaliação ajuda os legisladores a escolherem a ferramenta certa para cada situação, não sendo a avaliação monolítica, podendo ser categorizada em várias dimensões.

Avaliação Formativa vs. Somativa

A avaliação formativa ocorre durante a concepção da política ou a implementação precoce. Testa estudos-piloto, recolhe feedback das partes interessadas e aperfeiçoa os procedimentos antes da implantação completa.Por exemplo, uma nova plataforma de arquivamento fiscal digital pode ser submetida a avaliação formativa para identificar problemas de usabilidade. A avaliação cumulativa[, por outro lado, acontece após a implementação estar concluída. Pergunta: A política causou as mudanças pretendidas? Quão grandes foram essas mudanças? As expansões de cobertura da Lei de Cuidados Acesáveis foram sujeitas a inúmeras avaliações sumárias que informaram as reformas posteriores.

Avaliação do Processo, Impacto e Custo-Efetividade

  • Avaliação do processo: Examina se uma política foi implementada conforme projetado. Se um programa de treinamento de trabalho mostrasse resultados ruins, a avaliação do processo verificaria se o treinamento foi realmente entregue, para quem, e com que fidelidade, o que ajuda a distinguir entre falha da política e falha na implementação.
  • Avaliação do impacto: Utiliza métodos experimentais ou quase experimentais (ensaios controlados randomizados, diferenças de diferenças, descontinuidade de regressão) para isolar o efeito causal de uma política. Por exemplo, avaliações de impacto de salário mínimo aumenta a variação de nível estatal para medir efeitos sobre o emprego e os ganhos. O Instituto Urbano mantém uma coleção abrangente de tais estudos.
  • Avaliação custo-efetividade e custo-benefício: Compara os custos monetários de uma política com os seus resultados, muitas vezes em termos não monetários (por exemplo, anos de vida salvos, crime reduzido). Estas análises são cruciais para as legislaturas conscientes do orçamento.

Métodos Quantitativos, Qualitativos e Mistos

As avaliações são realizadas com base em dados quantitativos (investigações, registros administrativos, indicadores econômicos) e fornecem poder estatístico e generalização. Dados qualitativos (entrevistas, grupos focais, estudos de caso) revelam mecanismos, contexto e consequências não intencionais.

Desafios Principais na condução de avaliações úteis

Apesar do seu valor, a avaliação política enfrenta obstáculos persistentes. Reconhecer esses desafios ajuda os legisladores a conceber mandatos de avaliação realistas e acionáveis.

Disponibilidade e Qualidade dos Dados

Sem dados de base e medidas de resultado confiáveis, a avaliação é impossível. Muitas leis são aprovadas sem especificar quais dados devem ser coletados ou como serão tornados acessíveis. Preocupações de privacidade, sistemas de informação fragmentados e infraestrutura desatualizada complicam ainda mais as questões. Legislações podem abordar isso incorporando requisitos de coleta de dados na língua de faturamento original, estipulando que as agências devem publicar conjuntos de dados desidentificados dentro de um prazo razoável.

Resistência política e erros de tempo

Os funcionários eleitos podem resistir a avaliações que possam embaraçá-los ou capacitar os oponentes. Um programa popular com os constituintes pode ser protegido do escrutínio, mesmo que as evidências mostrem que é ineficaz. Além disso, o ciclo legislativo é muitas vezes desalinhado com o ciclo de avaliação. Uma avaliação de cinco anos pode chegar após os legisladores que aprovaram o projeto de lei original terem deixado o cargo ou se mudado. Para contrariar isso, a elaboração legislativa pode incluir disposições de pôr-do-sol que exigem reautorização apenas após uma avaliação é submetida.

A Causalidade e Atribuição Complexas

As políticas raramente operam de forma isolada. Condições econômicas, outras leis e choques externos influenciam todos os resultados. Isolar o efeito líquido da política requer controles estatísticos sofisticados ou delineamentos randomizados, que nem sempre são viáveis.Os formuladores de políticas devem ser realistas sobre o que as avaliações podem reivindicar e evitar esperar respostas simples sim/não de programas sociais complexos.

Restrições de Recursos

Avaliações rigorosas são caras e demoradas. Pequenas agências ou legisladores estaduais com orçamentos limitados podem não ter a experiência ou fundos para realizar estudos de alta qualidade. Acordos colaborativos com universidades, organizações de pesquisa não partidárias (como o Escritório de Responsabilidade do Governo ou escritórios de auditoria legislativa estatal), e fundações filantrópicas podem ajudar a esticar ainda mais os dólares de avaliação.

Estudos de caso: Como a avaliação moldou a legislação subsequente

Exemplos reais demonstram o impacto tangível da avaliação das políticas sobre as trajetórias legislativas.

O crédito do imposto sobre o rendimento obtido (EITC)

O EITC federal dos EUA tem sido amplamente avaliado desde sua criação em 1975. Estudos mostram consistentemente que aumenta a participação da força de trabalho entre mães solteiras e reduz a pobreza, com custos marginais relativamente pequenos.Esses achados positivos levaram a múltiplas expansões tanto no nível federal quanto no estadual. Em contraste, avaliações do programa Assistência Temporária para Famílias Necessárias (TANF) têm produzido resultados mais mistos, levando alguns estados a experimentarem as renúncias e políticas de apoio ao trabalho. O Centro de Prioridades de Orçamento e Política] acompanha os resultados do EITC e mudanças legislativas.

Leis de três ataques e reforma de sentenças

A lei de “três greves” da Califórnia, promulgada em 1994, exigia sentenças longas para os infratores repetidos. Na década de 2000, as avaliações mostraram que a lei tinha desproporcionalmente encarcerados infratores não violentos, custavam bilhões, e não reduziram significativamente o crime em comparação com outros estados. Essas descobertas construíram impulso para a reforma, levando à Proposição 36 de 2012, que reduziu a aplicação da lei. Reformas similares orientadas pela avaliação ocorreram em outros estados, deslocando recursos para alternativas baseadas em evidências, como tribunais de drogas e programas de reinserção.

Inovações de Seguro de Desemprego Pandemia-Era

Durante a pandemia de COVID-19, muitos estados racionalizaram os sistemas de seguro de desemprego (UI) e adicionaram benefícios temporários.Avaliações conduzidas por acadêmicos e pelo Departamento de Trabalho dos EUA revelaram que mudanças de processo – como aceitar assinaturas eletrônicas e pagamentos retroativos – reduziram os atrasos e as taxas de erro. Vários estados tornaram essas mudanças permanentes através de ações legislativas.

Testes e Responsabilidade Educacionais Normalizados

A Lei de Não-Criança-Esquerda (NCLB) de 2001 implicou testes anuais e impôs sanções às escolas de baixo desempenho. Avaliações sumativas ao longo da próxima década descobriram que, embora alguns subgrupos melhoraram em matemática, a lei incentivou o ensino para o teste, reduziu currículos e produziu altas taxas de abandono entre estudantes em dificuldades. Essas avaliações informaram a Lei de Todos os Sucessos dos Estudantes (ESSA) de 2015, que devolveu flexibilidade aos estados e enfatizou várias medidas de desempenho escolar em vez de apenas escores de teste.

Integrar a Avaliação no Processo Legislativo

Para maximizar o impacto, a avaliação não pode ser uma reflexão posterior. Os legisladores podem incorporar a avaliação em seu trabalho através de vários mecanismos.

Requisitos de avaliação pré-legislativa

Antes de ser introduzido um projeto de lei, é necessário um plano de avaliação preliminar que especifique: (1) os resultados mensuráveis que a política pretende alcançar, (2) as fontes de dados e métodos para medir esses resultados e (3) o cronograma para a produção de um relatório. Algumas legislaturas, como o U.S. Government Accountability Office (GAO), já fornecem avaliações não partidárias mediante solicitação.

Cláusulas do pôr-do-sol e revisão periódica

Muitos estados têm comissões de consultoria sunset que dissolvem automaticamente agências ou programas a menos que o legislativo os autorize com base no desempenho. Texas, por exemplo, usa a Comissão Consultiva Sunset para avaliar agências estatais a cada doze anos. Isto cria um gatilho de avaliação embutido e força a atenção legislativa sobre os resultados em vez de inércia.

Participação e avaliação participante das partes interessadas

A avaliação é mais credível quando inclui as perspectivas dos afetados pela política.A avaliação participante envolve beneficiários, trabalhadores de linha de frente e organizações comunitárias na definição de resultados de sucesso e interpretação.Essa abordagem pode emergir consequências não intencionais – como encargos administrativos que detêm os beneficiários elegíveis – que avaliações de topo para baixo podem falhar.

Formação Legislativa do Pessoal sobre o Uso de Evidências

O pessoal do comité e os assistentes legislativos são frequentemente os que digerem relatórios de avaliação para os legisladores. A formação em concepção de investigação básica, literacia em dados e avaliação crítica das avaliações melhora a qualidade da deliberação legislativa. Várias organizações, incluindo a Conferência Nacional de Legislações Estatais, oferecem workshops e kits de ferramentas sobre a elaboração de políticas baseadas em provas.

Tendências emergentes na avaliação política

O domínio da avaliação das políticas está a evoluir rapidamente, impulsionado pelos avanços tecnológicos e pelas expectativas em mudança.

Big Data, aprendizagem de máquina e monitoramento em tempo real

Dados administrativos de declarações fiscais, reclamações de benefícios, registros de saúde e sistemas governamentais locais podem agora ser ligados a nível individual, permitindo avaliações mais granulares e oportunas. Algoritmos de aprendizagem de máquinas podem identificar padrões e prever resultados, embora eles também levantem preocupações sobre viés e transparência. Painel de avaliação em tempo real – agora usado em vários países para resposta pandémica – permite que os formuladores de políticas ajustem o curso no meio da implementação, em vez de esperarem anos para um relatório final.

Avaliação Participativa e Focada em Equidade

Há um reconhecimento crescente de que os métodos tradicionais de avaliação podem ignorar disparidades ou reforçar desigualdades existentes. Novos frameworks centralizam a equidade por desagregar resultados por raça, renda, gênero e geografia, e por dar às comunidades uma voz na concepção de questões de avaliação. A abordagem de avaliação centrada em equidade do Instituto Urbano exemplifica essa tendência.

Benchmarking internacional e aprendizagem cross-National

Os legisladores buscam cada vez mais as experiências de outros países ao elaborarem leis. Organizações como a OCDE e o Banco Mundial publicam avaliações comparativas de políticas em áreas como educação, saúde, tributação e regulação ambiental. Essas bases de dados internacionais ajudam os legisladores a avaliar se uma política é provável que funcione em seu próprio contexto antes de investir em uma avaliação nacional completa.

Insights comportamentais e abordagens experimentais

Unidades de Nudge e equipes de ciência comportamental (como a equipe de Insights Comportamentais do Reino Unido) realizam avaliações randomizadas rápidas de pequenas mudanças políticas, como cartas redesenhadas para reduzir a delinquência fiscal ou formas simplificadas para aumentar a matrícula de programas. Essas experiências de baixo custo podem ser dimensionadas em legislação completa se os resultados forem positivos, criando um pipeline direto da avaliação para a ação legislativa.

Conclusão: Construir uma Cultura de Avaliação

A avaliação política não é uma atividade periférica a ser terceirizada para os acadêmicos e ignorada pelos políticos. É o mecanismo central de feedback que permite que os órgãos legislativos aprendam, se adaptem e governem de forma eficaz. Quando a avaliação é projetada para o processo legislativo desde o início, ela produz insights acionáveis que informam as decisões subsequentes – seja isso que significa expandir um piloto bem sucedido, fixar uma implementação falhada, ou terminar um programa que tenha sobrevivido à sua utilidade.

Os desafios dos dados, política e recursos são reais, mas superáveis. Ao investir em escritórios independentes de avaliação, obrigando a coleta de dados, treinando pessoal, e abraçando novos métodos como monitoramento em tempo real e avaliação participativa, as legislaturas podem passar de fazer leis sobre fé para fazer leis sobre evidências.