Os resultados estatísticos obtidos dos testes ANOVA e sumarizados nos modelos de regressão apresentam inúmeros indícios que, durante o processo de avaliação dos fóruns algumas variáveis são consideradas essenciais e outras pelo contrário podem ser colocadas em segundo plano, caso isso seja conveniente ao avaliador.
O grande número de mensagens a serem avaliadas e a codificação de todas, mesmo com o apoio de ferramentas, é um processo exaustivo que pode ser potencializado mediante a predefinição de pesos para cada uma das variáveis. A metodologia proposta nesse trabalho apresenta os modelos de regressão linear que podem ser ajustados aos requisitos estabelecidos pelo professor de qualquer disciplina que intenciona utilizar o modelo de FSC no curso online. Obviamente as variáveis aqui definidas podem ser permutadas, porém existe a necessidade de adequação ao objeto de estudo e a amostra de dados a serem analisados.
Nos resultados do teste ANOVA, algumas categorias apresentaram níveis significantes para composição da variável resposta (nota), e apesar de figurarem em fases diferentes do modelo FSC (Figura 13) podem ser consideradas categorias complementares no contexto da discussão e para o objetivo da aprendizagem.
Cita-se como exemplo, na disciplina PO_2011, a covariável (v2) “Garrison” que apresenta em suas categorias os seguintes p-value : senso de confusão (0,011) e defende soluções (0,010). Esses índices são significativos para a variável nota, mas expressam acima de tudo que, os alunos que despontam na categoria “senso de confusão” postam questões ou emitem comentários que conduzem a discussão para novas direções, contribuem para o nível de discussão elevado no FSC. Assim também aqueles alunos que “defendem soluções” no fórum, demonstram níveis mais elevados de resolução e comprometimento segundo as fases de Garrison.
Observando os resultados da análise estatística da categoria “reconhecer o problema” na disciplina PO_2012 nota-se que essa não tem associação com a variável nota provando que, o fato do aluno simplesmente reconhecer uma questão, não eleva sua
196
contribuição na discussão do fórum. Espera-se que além de reconhecer o problema o aluno crie e defenda soluções construídas no ínterim do FSC.
Na disciplina AVA_2011, por exemplo, as categorias de Garrison “divergente na comunidade”, “troca de informações” e “converge na mensagem”, apresentaram p-value (> α=5%) e não tem associação com a variável resposta (nota). Isso demonstra claramente que não basta o aluno “divergir na comunidade” expondo inúmeras ideias diferentes ou fazer longas descrições, contando fatos pessoais, sem usá-las como argumentos para sustentar um posicionamento ou conclusão.
A covariável “riqueza vocabular” (v4), calculada a partir das médias entre o número de palavras diferentes e o número total de palavras, obteve nas disciplinas PO e AVA em 2011 e 2012 p-value (> α=5%), não apresentando associação com a variável nota. Apenas na disciplina AVA_2013 essa covariável obteve p-value (< α=5%). Esses valores não são significativos para associação no modelo estatístico, mas, nas análises de conteúdo, a variedade de vocabulário torna as mensagens mais originais. Além disso, o uso de sinônimos demonstra maior habilidade linguística dos alunos e pode ser considerado um indício da presença cognitiva segundo a dimensão semântica do modelo tridimensional de Gatti (1997) (Figura 6).
Sobre os modelos de regressão linear chamam atenção algumas covariáveis que revelam, para as duas disciplinas, pontos a serem mais explorados no fórum e aqueles aspectos que devem ser mantidos em outras edições do curso. Por exemplo, na disciplina PO a categoria de (v1) “conceitos” de maior destaque foi o “uso do celular como elemento de motivação durante o processo de ensino-aprendizagem”. Esse aspecto é de grande relevância para a discussão visto que, o celular é uma ferramenta tecnológica a ser utilizada para incentivar a participação dos alunos em cursos online. Na disciplina AVA a categoria de (v1) “conceitos” que apresentou p-value (α> 5%) foi “as características e os recursos da web 2.0”, essa categoria representa as citações do texto-base e das mensagens que apenas descrevem os diferentes recursos existentes na web 2.0. A relevância desta categoria para a discussão do FSC é baixa, pois o aluno além de identificar os recursos da web 2.0, deve também avaliá-los e aplicá-los para resolução de problemas em curso online.
197 6.3 Resultados nas Redes complexas
A visualização das redes complexas dos fóruns das disciplinas possibilitou a análise pontual dos alunos de maior destaque na discussão. Após a execução dos agrupamentos de mensagens por disciplina, sala e tópicos dos fóruns, as redes foram construídas (ANEXO B) e demonstram a posição dos alunos com relação ao número de mensagens postadas, o grau de influência e o número de citações realizadas entre eles.
Retomando os resultados apresentados nas Tabelas de 21 a 25 nota-se que a análise comparativa entre os índices de centralidade e a média de notas finais nas disciplinas PO e AVA são significativas para avaliação final do aluno.
Observa-se que os índices de centralidade se comparados às médias finais da nota consolidam a avaliação dos alunos e contribuem para a identificação das habilidades cognitivas que envolvem a expressão de conhecimentos e conceitos, através da linguagem informal nos fóruns.
A liderança de alguns alunos nos fóruns está relacionada à habilidade de expressão e comunicação assim como à capacidade de interação cognitiva. Observa-se que esses alunos assumem o perfil de formadores de opiniões e/ou incentivadores do debate contribuindo com novas ideias e informações que são absorvidas pelos colegas nos fóruns. Estas habilidades são relevantes, pois contribuem diretamente para o sucesso da aprendizagem colaborativa e para a construção coletiva do conhecimento.
As redes complexas são elementos previstos na metodologia deste trabalho e os resultados obtidos a partir destes cálculos confirmam as demais análises e permitem identificar relações que não são possíveis a partir do grid de avaliação.
Neste trabalho procurou-se observar, a partir das redes complexas os alunos que se destacam nas discussões, mas outro aspecto que merece atenção é a posição marginal de alguns alunos que não se envolveram na discussão, ou seja, foram pouco citados ou realizaram poucas citações.
O mapeamento destas características será bem vindo em trabalhos futuros que ajudarão a compor um diagnóstico completo da comunidade de inquirição e do desempenho de cada aluno individualmente.
198 CAPÍTULO 7
7 Conclusões
A proposição de um modelo de fórum “Fórum Socrático Cognitivo” visa incentivar o pensamento crítico e a presença cognitiva em comunidades de aprendizagem online que envolvem os alunos e suas características linguísticas e socioculturais.
Este trabalho buscou, por meio de sua arquitetura teórica, instrumentalizar os professores no uso adequado dos fóruns enquanto poderosa estratégia educacional que gera vários benefícios ao processo de ensino-aprendizagem online.
Observou-se também, assim como afirmam Paul e Elder (2007), que as pessoas que pensam criticamente consistentemente tentam viver de modo racional e se esforçam para diminuir o poder de suas tendências egocêntricas e sociocêntricas. Ao utilizarem as ferramentas intelectuais (conceitos e princípios) que o pensamento crítico oferece, esses indivíduos podem analisar, avaliar e expandir o nível de pensamento.
Os resultados obtidos podem inspirar novas pesquisas em outros domínios temáticos e diferentes contextos socioculturais, visto que a aplicação do modelo FSC é particular para determinado grupo de aluno e sua replicação em outros contextos apresentará resultados singulares. A construção de um novo modelo de fórum (FSC) envolveu a definição de uma metodologia de avaliação da presença cognitiva e dos níveis de pensamento crítico dos alunos. As definições das relações de dependência entre as categorias e as variáveis poderão vir a ser permutadas e submetidas a novos testes de comparação para validar o modelo de regressão estatístico ora proposto. Sugere-se, por exemplo, estudar a relação da covariável “Garrison” e da “riqueza vocabular” para a construção das redes complexas por sala, bem como observar o desempenho dos alunos com maior nível de presença cognitiva e simulando uma rede sem a presença desse aluno. Os resultados dessa simulação podem ser utilizados para acompanhar a evolução da comunidade de inquirição ou do aluno em particular. Outro objetivo desse trabalho foi apresentar o grid de avaliação do FSC, destacando a possibilidade de atribuição de pesos diferentes para cada categoria do questionamento socrático e da presença cognitiva para auxiliar cálculos mais avançados por algoritmos com ferramentas computacionais.
199
Um fator relevante obtidos nesta pesquisa foi o comportamento das redes complexas nos FSC e o desempenho da metodologia utilizada para construção dessas. A visualização da interação dos alunos no formato de redes, os hubs e as arestas que são estabelecidas promovem uma análise diagnóstica do desempenho dos alunos, indicando, assim, que as redes complexas podem ser construídas antes da aplicação do grid de avaliação para auxiliar o avaliador na identificação dos alunos e das situações de discussões relevantes ou não que precisam de atenção do tutor durante o fórum. As análises confirmatórias que as redes complexas proporcionam podem aprimorar ainda mais o uso do modelo e do grid de avaliação do FSC.
Além disso, as redes complexas, são úteis para a avaliação formativa e somativa dos alunos em cursos online, visto que durante o desenvolvimento das discussões o professor ou responsável pelo fórum pode mapear a atuação dialógica e cognitiva do aluno na comunidade de inquirição. Quanto aos aspectos subjetivos da avaliação de fóruns, indicados na lacuna da área, pode-se afirmar que a metodologia e os recursos técnicos apresentados nesse trabalho sustentam uma avaliação mais objetiva fundamentada nas técnicas de análise de conteúdo, na leitura documentária e nos princípios da lexicometria, que auxiliam a prática avaliativa, fornecendo indicadores mensuráveis e precisos para a análise do curso.
Os resultados das análises textuais das mensagens e a pertinência do diálogo socrático podem comprovar que os alunos adquiriram maior nível de pensamento crítico principalmente ao perceberem o princípio elementar da argumentação e suas implicações. Nas análises textuais, esta pesquisa limitou-se aos aspectos lexicais das mensagens desconsiderando, em seu escopo, a semântica linguística e os inúmeros casos de mudanças de sentido que ocorrem no diálogo virtual. Sugere-se que, nas análises textuais, sejam elaborados dicionários hierárquicos de termos que possibilitem a investigação do comportamento linguístico dos alunos a partir de um banco de “modelos” e posterior definição e prospecção de perfis.
Especificamente sobre o modelo FSC, considera-se que seu uso prevê uma dinâmica que amplia a qualidade e a quantidade dos enunciados entre professores/tutores e alunos, na medida em que as atividades de ensino sejam estruturadas com o propósito de problematizar as questões cruciais do tema. A finalidade do FSC é a elaboração das dúvidas na forma de perguntas estruturadas a partir de problemas relacionados aos fenômenos estudados que promoverá maior domínio cognitivo aos alunos. Apesar de ser a introspecção