Maden Grubu

ILDF on-line” na disciplina

Esse plano de avaliação engloba a descrição da fase 3 (avaliação) do “modelo estendido do ILDF on-line” sobre os aspectos avaliativos dos alunos e do modelo propriamente dito.

Fase 3- Avaliação

Nessa fase, o professor determinou os propósitos, resultados desejados e métodos de avaliação da aprendizagem on-line.

O planejamento dessa fase de avaliação também compreende a definição de padrões e métricas relacionados aos objetivos pretendidos e as respostas dos alunos durante as atividades propostas no curso. Esses parâmetros de avaliação (assessment) são componentes fundamentais para a execução da tarefa do professor ao julgar o desempenho e a evolução dos alunos.

De forma geral, o processo de avaliação do desempenho do aluno seguiu a proposta de Bloom, Hastings e Madaus (1983), e todas as unidades temáticas do curso foram previamente estruturadas para compor um perfil do aluno sobre os aspectos da avaliação diagnóstica, formativa e somativa.

5.5.2.1 Avaliação diagnóstica do aluno

A avaliação diagnóstica ocorreu com base nos relatos e declarações dos alunos nos fóruns das unidades 2 e 7 que envolveram a análise das apresentações semanais dos alunos durante os primeiros encontros presenciais. Nessa ocasião, os alunos – apresentadores deveriam expor em 10 minutos o projeto de pesquisa e participar das discussões no fórum on-line para esclarecer dúvidas ou gerar esclarecimentos aos demais colegas, que, por sua vez, estavam incumbidos de interagir com perguntas sobre o assunto exposto assim como de sugerir melhorias aos aspectos da oratória e dos slides apresentados. Essa avaliação diagnóstica foi retomada no fórum da unidade 7 da disciplina, para que os alunos percebessem o nível de evolução atingido com relação aos aspectos da oratória e da comunicação em público.

Os instrumentos de autoavaliação que fazem parte da avaliação diagnóstica, propostos na primeira seção da disciplina, representam um incentivo para o aluno controlar e conscientizar-se sobre a própria evolução. A indicação do professor é que o aluno realize a autoavaliação logo após o término de cada unidade temática de ensino, porém foi facultativo o seu preenchimento.

5.5.2.2 Avaliação formativa do aluno

A avaliação formativa aconteceu ao longo das unidades 4 a 7 da disciplina através da controle de envio das tarefas, sínteses, participação nos fóruns de discussões, participação na wiki.

Esse tipo de avaliação visa reunir o maior número de dados sobre os alunos em relação aos níveis de desenvolvimento e evolução, porém as formas de medida desses níveis basearam-se nas seguintes considerações: o enviou da tarefa, da síntese e da participação na wiki, dentro do tempo estipulado significa nota máxima (5) na avaliação final; caso isso não ocorra, o aluno obtém nota mínima (1).

As avaliações das participações dos alunos nos fóruns de discussões foram guiadas pela rubrica avaliativa apresentada pelo modelo, e as análises de conteúdo das mensagens foram realizadas conforme os passos já descritos no início deste capítulo. A métrica utilizada para conceituar as mensagens postadas nos fóruns seguiu a mesma escala das demais tarefas. Assim, as mensagens foram categorizadas segundo as 5 dimensões (D1,D2,D3,D4,D5) e receberam pesos relativos ao conceito (Excelente= 5, bom=4, regular=3, ruim=2 e péssimo=1).

A média de evolução nos fóruns foi calculada somando-se os conceitos resultantes da multiplicação da frequência x peso, cujo resultado é dividido pelo número total de mensagens postadas no fórum em análise.

Esse jogo de operações complementares sustenta o processo de avaliação de cada aluno no curso, de modo a analisar o desenvolvimento pessoal no decorrer das unidades sem utilizar técnicas de comparação entre os alunos.

5.5.2.3 Avaliação somativa do aluno

A avaliação somativa ocorreu nas unidades 8 e 9 da disciplina, através do questionário de autoavaliação e do envio do artigo final para submissão em uma revista científica da área. Essa avaliação teve como objetivo principal mensurar os resultados obtidos pelos alunos de forma geral durante toda a disciplina. Foram consideradas a execução e participação em todas as tarefas propostas assim como o número de mensagens postadas nos fóruns de discussões.

Para efetivar o controle das atividades encaminhadas pelos alunos no Moodle ou por email, foi elaborada uma matriz (Figura 11) que reúne os conceitos atingidos em cada tarefa segundo a métrica Likert (1932) predefinida pelo professor, que assumiu, nesse caso, os seguintes critérios: peso 5 (Excelente ou exemplar); peso 4 (bom ou satisfatório); peso 3 (médio ou regular); peso 2 ( ruim ou insatisfatório) e peso 1 (péssimo ou atividade não realizada). Essa métrica pode ser totalmente adaptada conforme necessidade ou interesse do responsável pela avaliação.

Excelente Bom Médio Ruim Péssimo Fórum Wiki Questionário Tarefas Sínteses Autoavaliações Artigo final Conceito Estratégias

Avaliação formativa e somativa

Aluno: Unidade:

Figura 11- Matriz de avaliação do aluno

A nota final da disciplina foi composta pela média aritmética simples dos conceitos obtidos em todas as unidades do conteúdo programático, levando-se em consideração também o conceito da autoavaliação do aluno sobre a própria evolução na aprendizagem.

As etapas descritas acima podem acontecer simultânea ou sequencialmente, dependendo da necessidade do professor e do contexto instrucional onde serão aplicadas, pois, na aplicação de qualquer modelo de design

instrucional, são pertinentes e recomendáveis as ações de revisão e re-design do plano.

Esse acompanhamento permite acertos e a adequação imediata do plano, frente às situações adversas ou incidentes tecnológicos que possam vir acontecer durante a execução das atividades programadas.

5.5.2.4 Avaliação do modelo

O processo de avaliação da implementação de uma disciplina utilizando o “modelo estendido do ILDF para aprendizagem on-line” corresponde à análise do modelo propriamente dito, e comprova a sua pertinência e utilidade para o processo de planejamento estratégico do ensino assim como para o design instrucional de uma disciplina de pós-graduação em engenharia de produção.

O resultado da evolução dos alunos durante as atividades propostas na disciplina será utilizado como indicador de validade inicial do modelo. Esses resultados representam diretamente os níveis de desenvolvimento cognitivo dos alunos, e dentre os objetivos educacionais expostos, essa expectativa, se alcançada, representa o sucesso do modelo e sua replicabilidade. No entanto, ressalte-se que, em uma fase posterior, torna-se interessante apresentar esse modelo para outros desenvolvedores de cursos on-line e validá-lo integralmente.

No âmbito desta pesquisa, a avaliação do modelo corresponde à compilação de dados sobre a evolução dos alunos e seu desenvolvimento cognitivo.

O instrumento de avaliação aplicado na unidade 8 da disciplina é um questionário elaborado especificamente para verificar o nível de satisfação e aproveitamento do próprio aluno nas atividades e estratégias programadas.

O questionário (anexo A) abrangeu todos os elementos do design instrucional e foi organizado em perguntas assim divididas:

Perguntas T1 e T.2 – avaliação do desempenho do aluno ao realizar as tarefas propostas (sínteses e envio de PowerPoint) e participação nas discussões dos fóruns;

Perguntas U1,U2a,U2b,U3a,U3b,U4a,U4b,U4c,U5,U6,U7 – avaliação da percepção dos alunos quanto ao nível de conhecimento cognitivo (Bloom)

implementado em cada unidade de ensino para a realização dos objetivos educacionais;

Perguntas a1,a2,a3,a4 – avaliação estrutural da disciplina, que inclui cronograma; organização e disposição do material didático no Moodle; relevância dos conceitos teóricos apresentados; importância das leituras complementares;

Perguntas F1, F2,F3,F4 – avaliação da tecnologia instrucional: fórum de discussão quanto aos aspectos da relevância das mensagens para o processo de aprendizagem; contribuições dos colegas; organização e dinâmica do fórum e interferência do tutor/professor;

Pergunta O1 – avaliação geral da prática de comunicação em público

Os alunos deveriam responder ao questionário no próprio Moodle, apontando o nível de satisfação pessoal na escala de (muito satisfeito; satisfeito; nem satisfeito, nem insatisfeito; insatisfeito; muito insatisfeito).

O professor solicitou a participação dos alunos na realização dessa tarefa e esclareceu sobre a sua importância no planejamento estratégico e no design da disciplina.