Qualidade das AIRs da ANA
A qualidade das Análises de Impacto Regulatório (AIR) realizadas na Agência Nacional de Águas e Saneamento Básico (ANA) é medida com o Indicador de Qualidade da AIR (IQAIR). Esse indicador foi criado pela agência e possibilita um diagnóstico da qualidade das AIRs da ANA e a identificação de áreas de aprimoramento.
- .
Figura: Evolução da qualidade das AIRs da ANA medidas com o IQAIR
Os resultados do IQAIR revelam a evolução da qualidade das AIRs da ANA no período de 2020 a 2025. Embora 2021 tenha registrado uma média superior a 2020, houve maior dispersão nos resultados. A partir de 2022, essa dispersão começou a diminuir, culminando em um desempenho consistente a partir de 2023: médias elevadas acompanhadas de baixa dispersão.
As 7 (sete) AIRs concluídas em 2025 (6 sobre saneamento básico e 1 sobre recursos hídricos) alcançaram nota média de 97,06 pontos, superando a meta de 90 pontos definida no Plano de Gestão Anual 2025. Destaca-se que a pontuação máxima (100 pontos) foi alcançada pela primeira vez, por 2 (duas) AIRs que apresentam, inclusive, análises quantitativas de custos.
Saiba mais: Relatório Gerencial Qualidade AIR (março 2024)
1) O que é e como é calculado o Indicador de Qualidade da AIR (IQAIR)?
O IQAIR é um indicador quantitativo utilizado para medir a qualidade das AIR realizadas na ANA. Esse indicador é composto por 12 critérios e 24 subcritérios, conforme detalhado na Tabela abaixo. Os critérios são baseados nos elementos obrigatórios da AIR, definidos no Art. 6º do Decreto 10.411/2020, e os subcritérios são desagregações dos critérios, formulados com base no Decreto ou no Guia de AIR da Casa Civil.
Para cada critério e subcritério, foram atribuídos pesos, conforme indicado na Tabela abaixo. Os pesos dos critérios refletem sua importância relativa no cálculo do valor da pontuação global e totalizam 1, ou 100%. Da mesma forma, os pesos dos subcritérios refletem a importância relativa destes dentro de cada critério e, da mesma forma, totalizam 1, somados dentro de cada critério.
A tabela a seguir apresenta os critérios e subcritérios do IQAIR, bem como os seus respectivos pesos:
- .
Na utilização do IQAIR, cada Análise de Impacto Regulatório (AIR) é avaliada quanto ao cumprimento de cada subcritério, sendo classificada como integral (SIM), parcial (PARCIAL) ou não atendida (NÃO). Atribuem-se pontuações da seguinte forma: SIM (pontuação 1), PARCIAL (pontuação 0,5) e NÃO (pontuação 0). A pontuação geral é obtida pela fórmula a seguir:
- Fonte: elaboração própria
Fonte: elaboração própria
A pontuação final varia de 0 a 100, refletindo a qualidade da AIR, sendo maior quanto mais próxima de 100 for a pontuação. Adicionalmente, é possível avaliar individualmente cada critério ou subcritério. Ao dividir a pontuação final pelo peso, obtemos o percentual de atendimento do critério em relação à sua pontuação máxima possível, o que possibilita avaliar o desempenho de cada critério. O Box 1 fornece um exemplo ilustrativo do exercício do cálculo do indicador
2) Qual a finalidade do IQAIR?
2.1) Objetivo Geral:
Aumentar a qualidade das AIR da ANA. A proposta de um indicador de qualidade da AIR visa a, principalmente, aprimorar a qualidade desses estudos dentro da ANA. Este indicador representa uma ferramenta que otimiza o processo de monitoramento e avaliação das AIR na Agência, abrangendo tanto o nível micro (cada estudo específico) quanto o macro (considerando o conjunto de estudos da Agência). Como afirmava Lord Kelvin, "Aquilo que não pode ser medido, não pode ser melhorado".
2.2) Objetivos Específicos:
2.2.1) Reduzir a subjetividade nas avaliações das AIR. Embora não seja possível eliminar completamente a subjetividade na avaliação da qualidade de uma AIR, é desejável buscar a redução dessa subjetividade. Isso ajuda a evitar, por exemplo, o uso de critérios muito discrepantes entre os avaliadores, com o risco potencial de uma mesma AIR ser "aprovada" por um avaliador e "reprovada" por outro. A redução dessa subjetividade também impacta o objetivo descrito a seguir.
2.2.2) Reduzir o risco de orientações contraditórias para as equipes na execução das AIR. A ausência de critérios mais objetivos relacionados à qualidade das AIR pode resultar em orientações divergentes e, por vezes, contraditórias para as equipes na elaboração da AIR. Por exemplo, se um critério estipula que, para uma AIR ser bem avaliada na definição dos objetos, estes devem ser formulados em níveis hierárquicos (objetivo geral e objetivos específicos), durante a elaboração da AIR, as equipes devem ser orientadas a formulá-los dessa maneira.
2.2.3) Aumentar a agilidade na avaliação das AIR. Tendo em vista o princípio da eficiência, criar mecanismos que tornem a avaliação das AIR mais célere, sem comprometer a qualidade da própria avaliação, é crucial, especialmente diante de situações de urgência.
2.2.4) Aumentar a transparência nos critérios de avaliação das AIR na ANA. Outro benefício significativo do indicador é a promoção de maior transparência nos critérios empregados na avaliação das AIR. Esse resultado é crucial para diversos stakeholders, incluindo as próprias áreas responsáveis pelo estudo, a Diretoria Colegiada, os órgãos de controle e a sociedade em geral. Por esse motivo, é essencial que os critérios estabelecidos no indicador estejam em conformidade com as normas que regem a elaboração desses estudos em âmbito nacional, conforme os guias de AIR reconhecidos nacionalmente.
2.2.5) Produzir informações sistematizadas sobre a qualidade da AIR na ANA. A aplicação sistemática do indicador de qualidade das AIR resultará em dados que contribuirão para o monitoramento e avaliação desses estudos pela Agência. Através desses dados, será possível acompanhar a evolução da qualidade dos estudos realizados pela Agência como um todo, permitindo diferentes análises. Isso possibilita o planejamento de ações de melhoria, como, por exemplo, a identificação dos critérios ou subcritérios que necessitam de capacitações específicas.