2.4. Stratejik Yönetim ve Performans Ölçüm Sisteminde Her Đki Modelin
3.1.2. Araştırmanın Yöntemi ve Elde Edilen Bulgular
3.1.2.2. Veri Analiz Yöntemi
3.1.2.2.2. Anket Sonucunda Elde Edilen Bulgular
ATIVIDADES DO AVALIADOR ATIVIDADES DO CLIENTE (gestores do curso) Compilar e avaliar informações sobre as
necessidades dos beneficiários a partir de fontes tais como a saúde registros, notas escolares e os resultados dos testes, propostas de
financiamento, e arquivos de jornais.
Usar os resultados da avaliação de contexto para esclarecer o perfil dos beneficiários em
potencial.
Entrevistar os líderes do programa para analisar e discutir as suas perspectivas quanto às
necessidades dos beneficiários e identificar qualquer problema (político ou não) que o programa terá de resolver.
Analisar e rever os objetivos do programa quanto à sua adequação para atender as necessidades dos beneficiários.
Quadro 13 – Primeiros itens do checklist da avaliação de contexto do CIPP. Fonte: Stufflebeam (2007), tradução livre.
6.1.3 Seleção dos indicadores do CIPP
Uma vez identificadas as avaliações e o papel do CIPP aplicáveis à avaliação de cursos de graduação, procedemos à análise de seus indicadores, visando a identificar os temas de
análise previstos neste modelo aplicáveis à avaliação de cursos de graduação.
Indicadores da avaliação de Contexto
Após uma análise da aplicabilidade de cada indicador da avaliação de contexto à avaliação de curso de graduação, apresentamos no Quadro 14 aqueles considerados aplicáveis a este estudo, aqui denominados por C1, C2, C3 e C4. Este mesmo Quadro traz também os temas avaliados por cada parte de cada um deles, em uma tradução livre adaptada à realidade dos cursos de graduação brasileiros.
Atividades do Avaliador Temas de análise e envolvidos
C1.Compilar e verificar as informações de contexto educacional e perfil do aluno12 fornecidas aos avaliadores através de formulários preenchidos previamente à avaliação in loco.
Temas:
- contexto educacional (demandas de natureza econômica e social); - perfil do aluno (ingressante) Envolvidos (Stakeholders): - alunos.
C2.Entrevistar gestores do curso13 e debater sobre suas perspectivas quando às necessidades dos beneficiários, e identificar qualquer problema (político ou outro) que o programa precisará resolver.
Temas:
- contexto educacional (demandas de natureza econômica e social); Envolvidos:
- gestores do curso. C3.Entrevistar outros gestores institucionais14 para
obter sua visão de futuro quanto às informações de contexto e perfil do aluno, e problemas potenciais para o programa.
Observação: no contexto brasileiro, a visão de futuro é expressa através do Plano de
Desenvolvimento Institucional (PDI).
Temas:
- contexto institucional do curso
Envolvidos:
- gestores institucionais
C4.Verificar objetivos do curso à luz do contexto educacional e perfil esperado para o egresso.
Temas:
- objetivos do curso;
- contexto educacional (demandas de natureza econômica e social); - perfil do egresso.
Envolvidos: - alunos.
Quadro 14 – Avaliação de Contexto/CIPP: indicadores selecionados. Fonte: elaboração própria.
_
12 Background information on the intended beneficiaries‟ needs and assets. 13 Program leaders.
O Quadro 15, por sua vez, reúne aqueles indicadores considerados não aplicáveis para este estudo.
Atividades do Avaliador Temas de análise
C5.Designar um especialista em coleta de dados para monitorar e registrar dados do ambiente do curso, incluindo programas relacionados, necessidades, problemas e políticas da área.
Estes dados estão compilados nos
parâmetros curriculares nacionais. Cabe ao avaliador verificar se estão sendo utilizados, o que ocorre na Avaliação de Processos. C6.Requerer que a coordenação do curso forneça
periodicamente aos avaliadores informações sobre alunos e contexto educacional.
A regularidade é definida pelo calendário de avaliação do curso. Este item, portanto, não tem impacto nos indicadores do instrumento de avaliação.
C7.Anualmente, ou conforme o caso, preparar e entregar para as partes interessadas um relatório com indicativos de novas demanda do contexto educacional, juntamente com uma revisão das metas e prioridades do programa.
A avaliação das condições de ensino de cursos de graduação é uma ação pontual, e não de longo prazo como previsto neste indicador.
C8.Periodicamente, debater as conclusões da avaliação de contexto em seções com o cliente e demais participantes por ele designado.
C9.Finalizar os relatórios de avaliação de contexto, com recursos visuais associados, e para apresentação aos stakeholders.
A sistemática de divulgação de resultados das avaliações de cursos é definida através de portarias do MEC e, portanto, não tem impacto no instrumento de avaliação.
Quadro 15 – Avaliação de Contexto/CIPP: indicadores não selecionados. Fonte: elaboração própria.
Indicadores da avaliação de insumos
De forma similar à avaliação de contexto, o Quadro 16 traz os indicadores da avaliação de insumos do CIPP aplicáveis a este estudo, enquanto o Quadro 17 contém aqueles que não se aplicam.
Atividades do Avaliador Temas de análise
I2.Verificar a capacidade do Projeto Pedagógico do Curso15 (PPC) atender às demandas identificadas.
Tema:
-Projeto Pedagógico do Curso (PPC) Subtema:
- Capacidade de atender às demandas identificadas; exequibilidade. I3.Verificar se o Projeto do Curso atende as
diretrizes curriculares16.
Tema:
-Projeto Pedagógico do Curso (PPC) Subtema:
-Conformidade com Diretrizes Curriculares Nacionais.
I4.Verificar o mérito do projeto do curso comparado a estratégias empregadas em
Tema:
-Projeto Pedagógico do Curso (PPC) _
15 Program‟s proposed strategy.
programas similares. Subtema:
-Atualização do programa. I5.Verificar a suficiência dos recursos
disponíveis em relação ao trabalho a ser realizado.
Tema:
- adequação de recursos humanos e materiais disponíveis.
Envolvidos:
- todo corpo docente e técnico-administrativo. I6.Verificar o plano de trabalho17 do curso
quanto a suficiência, exequibilidade e viabilidade política.
Tema:
- Planejamento Operacional Subtemas:
- suficiência; exequibilidade; viabilidade política.
Quadro 16 – Avaliação de Insumos/CIPP: indicadores selecionados. Fonte: elaboração própria.
Atividades do Avaliador Temas de análise
I1.Identificar e analisar parâmetros curriculares e tendências de cursos similares, que possam servir de modelo.
Estas informações são conhecidas previamente pelo avaliador, faz parte da sua formação e experiência.
Na avaliação somativa, o avaliador externo verifica a adequação do curso aos parâmetros – verifica se esta atividade já vem sendo realizada (de maneira formativa pela coordenação do curso, o que é verificado na Avaliação de Processo).
I7.Compilar um relatório preliminar de avaliação de insumos e enviar para os
stakeholders. Na ACG a sistemática de divulgação dos resultados das avaliações é definida através de portarias do MEC e, portanto, não tem impacto no instrumento de avaliação.
I8.Debater as conclusões da avaliação de contexto em workshops com o cliente. I9.Finalizar o relatório de avaliação de
insumos, associanto recursos visuais para apresentação aos stakeholders.
Quadro 17 – Avaliação de Insumos/CIPP: indicadores não selecionados. Fonte: elaboração própria.
Indicadores da avaliação de processos
Dando continuidade à análise dos indicadores do CIPP aplicáveis, ou não, à avaliação de cursos de graduação, o Quadro 18 contém os indicadores aplicáveis a este estudo, enquanto o Quadro 19 traz aqueles não aplicáveis.
_
Atividades do Avaliador Temas de análise
P1.Engajar um grupo de avaliadores pra monitorar, observar, manter registros e prover relatórios periódicos da
implementação e progresso do programa.
Temas:
- Relatório operacional Envolvidos:
- CPA no âmbito do curso; P2.Em colaboração com a equipe do curso
(staff), manter registros de eventos, problemas, custos e alocações.
Temas:
- Relatórios de gestão (eventos, problemas custos, patrimônio)
Subtema:
- informações atualizadas. Envolvidos:
- gestores do curso. P3.Periodicamente, entrevistar estudantes, a
equipe do curso e seus gestores, para obter sua avaliação do progresso do programa.
Temas:
- Autoavaliação do curso. Envolvidos:
- gestores do curso; corpo docente e técnico- administrativo.
P4.Manter registros atualizados do curso em geral, eletrônico ou em papel.
Temas:
- Registros do curso (dados de alunos, professores, atas, portarias, normas, manuais; registro em sistema acadêmico ou em papel)
Subtema:
- informações atualizadas.
Quadro 18 – Avaliação de Processos/CIPP: indicadores selecionados. Fonte: elaboração própria.
Atividades do Avaliador Temas de análise
P5.Periodicamente, esboçar relatórios da avaliação de processos e apresentá-los para
stakeholders. Na ACG a sistemática de divulgação dos
resultados das avaliações é definida por meio de portarias do MEC e, portanto, não tem impacto no instrumento de avaliação. P6.Apresentar e debater os achados da avaliação
em workshops com o cliente.
P7.Finalizar cada relatório de avaliação de
processo, possivelmente incorporando-se a um relatório mais amplo, com o uso de recursos visuais para apresentação aos stakeholders.
Quadro 19 – Avaliação de Processos/CIPP: indicadores não selecionados. Fonte: elaboração própria.
A seção 6.1.1 demonstrou que avaliações do CIPP aplicáveis a este trabalho são contexto, insumos e processos. A seção 6.1.2 mostrou que o CIPP pode ser empregado com papel formativo ou somativo e que, nesta pesquisa, cabe considerar apenas o somativo. A partir deles, a seção 6.1.3 apontou quais os indicadores do CIPP aplicáveis à avaliação de cursos de graduação, mapeando os temas de análise sugeridos para serem considerados em avaliações educacionais. O Quadro 20 resume o conjunto destas informações, resultado que significa a adaptação do CIPP à avaliação de cursos de graduação.
AVALIAÇÕES