C. Ülke Bazında Değerlendirme
1. Cezai Sorumluluğu Kabul Etmeyen Ülkeler a Almanya
A partir do resgate bibliográfico dos autores que, de alguma maneira, têm produzido conhecimentos sobre o monitoramento e a avaliação é perceptível a inexpressividade de produções sobre o primeiro e um acúmulo e adensamento no trato da segunda, com ênfase para a área da educação, particularmente na
[...] aprendizagem do aluno. Entre esta literatura, uma grande parte trata das técnicas de avaliação. Ora, o processo de avaliação não diz respeito apenas ao ensino e nem pode ser reduzido apenas a técnicas. Fazendo parte da permanente reflexão sobre a atividade humana, a avaliação constitui-se num processo intencional, auxiliado por diversas ciências, e que se aplica a qualquer prática. Podemos falar na avaliação das diversas atividades profissionais, bem como de uma empresa, de um programa, de uma política (GADOTTI, 1987, p. 7, grifo nosso).
Isso significa que a avaliação não está restrita ao campo da educação, mas está presente nas diferentes áreas do conhecimento (Administração, Economia, Antropologia, Ciência Política, Serviço Social, Psicologia, Sociologia, dentre outras), portanto, nas diferentes modalidades de intervenção social e/ou nos diferentes componentes de uma política ou programa social (tanto na fase do diagnóstico quanto na programação ou execução). Mais que isso, o monitoramento e avaliação são processos inerentes ao planejamento.
No que diz respeito ao monitoramento, esse se constitui em uma atividade sistemática e contínua, efetuada durante a execução de determinada atividade com a finalidade de produzir dados que possam subsidiar a análise dos envolvidos no processo de tomada de decisões concernentes ao planejamento das ações vinculadas à: a) gestão de diferentes modalidades de intervenção social e/ou de políticas e programas sociais; b) melhoria da função gerencial85; c) garantia da eficiência, eficácia e efetividade social das ações desenvolvidas; d) organização das informações sobre uma política ou um programa, constituindo-se em fonte de consulta. Dito de outro modo,
84 A revisão de literatura exposta nessa sessão contém partes do conteúdo da dissertação de mestrado. Para
maiores aprofundamentos indica-se a leitura de Carraro (2011).
85Desempenhada por gerentes e coordenadores de políticas ou programas sociais tem o papel “[...] fundamental
para executar equilibradamente o planejado com flexibilidade e capacidade de interação, de modo a realizar adaptações e fazer avançar o programa sem perder de vista o propósito do programa. Ao buscar fortalecer suas capacidades para a gestão, os responsáveis pela política estão criando condições para reduzir as
monitoramento consiste no acompanhamento contínuo, cotidiano, por parte de gestores e gerentes, do desenvolvimento dos programas e políticas em relação a seus objetivos e metas. É uma função inerente à gestão dos programas, devendo ser capaz de prover informações sobre o programa para seus gestores, permitindo a adoção de medidas corretivas para melhorar sua operacionalização. É realizado por meio de indicadores produzidos regularmente com base em diferentes fontes de dados, que dão aos gestores informações sobre o desempenho de programas, permitindo medir se objetivos e metas estão sendo alcançados (VAITSMAN; RODRIGUES; PAES- SOUSA, 2006, p. 21).
Assim, o monitoramento e a avaliação, apesar de se constituírem em ações diferentes, são interdependentes, pois o monitoramento ocorre durante o período de execução dos serviços, programas, projetos e consiste em “[...] verificar como estão sendo executadas as atividades. Visa ao desenvolvimento dos trabalhos conforme o planejado, caracterizando- se, portanto, como uma atividade interna [...]” (SILVA E SILVA, 2008, p. 147). Vale destacar ainda que o monitoramento, do mesmo modo que a avaliação pressupõe a construção de indicadores quantitativos e qualitativos, no sentido de dimensionar e detalhar determinado aspecto (insumos, produtos, processos, efeitos, plano de trabalho) – objeto de monitoramento – de diferentes modalidades de intervenção social, políticas e programas sociais que se busca acompanhar.
Já, a avaliação pode ser efetivada antes, durante ou depois, e busca julgar tanto o mérito quanto o valor dos diferentes componentes de uma política ou de um programa social – tanto na fase do diagnóstico, programação ou execução – ou de um conjunto de atividades específicas – nas diferentes modalidades de intervenção social – que se realizam, foram realizadas ou se realizarão, com o propósito de sistematizar dados e informações concernentes aos efeitos e resultados concretos gerados (AGUILAR; ANDER-EGG, 1994). Em vista de mostrar as diferenças e complementaridades entre monitoramento e avaliação elaborou-se o Quadro 1.
Quadro 1 – Síntese das complementaridades e das diferenças entre monitoramento e avaliação
DIMENSÃO MONITORAMENTO AVALIAÇÃO
Momento de realização Durante Antes, durante ou depois Frequência Regular, sistemática, contínua Ocasional, circunstancial Conteúdo ou objeto Insumos, produtos, processos,
efeitos, plano de trabalho.
Processos, produtos e resultados. Objetivos Melhorar a ação desenvolvida,
adequando-a aos objetivos e metas previstas no planejamento.
Analisar a proposta de um programa ou projeto e de um conjunto de atividades nas diferentes modalidades de intervenção social, visando a contribuir com subsídios para a tomada de decisão. Sujeitos que realizam Pesquisadores, formuladores,
executores, financiadores e população beneficiária.
Pesquisadores, formuladores, executores, financiadores e população beneficiária.
Destinatários Formuladores, executores, financiadores e população beneficiária.
Formuladores, executores, financiadores e população beneficiária.
Fonte: elaborado pela autora a partir de Aguilar e Ander-Egg (1994).
Em síntese, verifica-se que o diferencial entre monitoramento e avaliação encontra-se relacionado ao momento de realização, à frequência em que se concretiza, aos objetivos a que ambos se propõem a atingir. No entanto, assemelha-se aos sujeitos que realizam e a quem se destina o monitoramento e a avaliação. Por outro lado, constata-se a complementaridade entre monitoramento e avaliação, pois a avaliação busca analisar a proposta, o curso de políticas e/ou programas sociais, considerando seus objetivos e utilizando os dados produzidos pelo monitoramento – durante o desenvolvimento das ações – e outras fontes de dados.
Guardadas as particularidades do monitoramento e da avaliação, explicitam-se as principais classificações empregadas em relação às formas ou aos tipos de avaliações. Referente ao que pode ser considerado de avaliação, a literatura que trata da temática faz menção a vários tipos, definindo-os a partir de diferentes critérios, como o momento em que se avalia, a natureza, o papel ou função da avaliação; a procedência dos avaliadores ou quem realiza a avaliação.
Em relação ao momento em que se avalia, os autores Aguilar; Ander-Egg (1994), Cohen; Franco (2012) e Barreira (2002a e 2002b) fazem a seguinte categorização, aqui condensada no Quadro 2, a seguir.
Quadro 2 – Tipologia de Avaliação em Função do Momento
AUTORES AVALIAÇÃO EM FUNÇÃO DO MOMENTO
Aguilar; Ander-Egg (1994)
Avaliação antes ou ex- ante: – inicial ou pré-decisão de empreender um programa ou projeto ou sua aprovação, ou sobre a conveniência ou não de levar a cabo.
Avaliação durante a execução ou avaliação da gestão, avaliação contínua, avaliação concorrente, monitoração ou avaliação concomitante: no andamento do programa
ou projeto, observando distância entre a proposta inicial e o desenvolvimento da ação. Avaliação expost: na fase de conclusão de um ciclo planejado de um programa e/ou projeto. Barreira (2002a e 2002b) Avaliação ex-ante ou Avaliação de diagnóstico e da proposta: na fase de formulação e definição do programa. Avaliação de monitoramento e/ou acompanhamento avaliativo: na fase de implementação e execução do programa. Avaliação post-factum ou final: na fase de encerramento de um ciclo planejado do programa. Cohen; Franco (2012) Avaliação ex-ante: início da construção de um projeto. Avaliação expost:
na execução ou conclusão de um projeto.
Fonte: elaborado pela autora a partir de Aguilar; Ander-Egg (1994), Barreira (2002a e 2002b), Cohen; Franco (2012).
Como pode ser visualizado no Quadro 3, os tipos de avaliação em função do momento em que é efetivada tem em comum ser ex-ante ou expost, sendo que essa última pode contemplar a avaliação realizada durante o processo de implantação da política ou programa social. Entendem-se que a concepção mais abrangente é a empregada por Aguilar e Ander-Egg (1994): avaliação antes ou ex-ante, avaliação durante a execução ou avaliação da gestão, avaliação contínua, avaliação concorrente, monitoração ou avaliação concomitante e avaliação expost.
Conforme a natureza, o papel ou função da avaliação os autores Aguilar e Ander- Egg (1994), Barreira (2002a e 2002b) e o NEPP/UNICAMP (1999) fazem uma dupla categorização, aqui condensada no Quadro 3, a seguir.
Quadro 3 – Síntese: Tipologia de Avaliação conforme a Natureza, o Papel ou a Função. AUTORES TIPOLOGIA DE AVALIAÇÃO CONFORME A NATUREZA, O PAPEL OU A
FUNÇÃO