Olağanüstü Fesih

Definidos os termos, a próxima etapa foi definir junto a PROEN quais seriam os critérios de classificação de tais indicadores. Os termos linguísticos, ou funções de pertinência, correspondem aos conjuntos difusos do MPD, e é com base neles que é calculado o grau de pertinência e feita a base de inferência. O principal facilitador para criação das classificações é a existência de metas definidas internamente ou externamente. Um exemplo de meta seria algo como: Na Rede Federal – EPCT, cada instituição deve atingir o percentual

mínimo de conclusão de 90% até 2017. Nesse exemplo, o indicador evasão poderia ter uma

classificação Baixa com valores até 10%, sendo, que os cursos que tivessem menos de 10% de evasão estariam em conformidade com a meta governamental e consequentemente teriam uma classificação boa na avaliação. Na criação dos Institutos Federais, foi acordado um conjunto de metas voltado para a Rede Federal – EPCT. Entretanto, de acordo com os profissionais da PROEN, esses números são inexequíveis no prazo estipulado e não poderiam ser considerados para um monitoramento e a avaliação gerencial e interna da instituição.

Dada a impossibilidade de usar metas do governo, a próxima estratégia para definir os termos linguísticos foi a tentativa de elaborá-los com base no conhecimento dos especialistas da PROEN. Após algumas tentativas, notou-se que os especialistas tinham dificuldade em definir classificações para os indicadores, pelo fato de ser a primeira vez que estariam realizando o monitoramento e por não terem orientações do MEC nesse sentido. Outra

estratégia utilizada na literatura para geração dos termos linguísticos é a criação automática com base nos valores, como proposto no trabalho realizado por Cremasco; et al., (2010). Diante dessa possibilidade, decidiu-se que os termos linguísticos seriam gerados com base nos valores de cada indicador. Esse método leva em conta que o conjunto de dados de cada indicador define a classificação dos seus termos com base em valores referência do próprio conjunto utilizando principalmente a mediana dos valores. Para cada indicador foram definidos 5 pontos referência para as Funções de Pertinência (FP). O quadro 7 exibe a forma de cálculo de cada valor referência.

Quadro 7 Método de cálculo de referência para os termos linguísticos

Fp1 Fp2 Fp3 Fp4 Fp5

Fp2 2

Quociente da soma de todos os valores até a mediana pela

quantidade de elementos. ̅ = Mediana do conjunto de dados Fp5 2

Quociente da soma de todos os valores depois da mediana pela quantidade de

elementos. Fonte: Elaborado pelo autor.

As funções de pertinência dos termos linguísticos foram definidas com o apoio da equipe da PROEN. Quando existe uma função de pertinência do tipo Trapezoide significa que existe uma escala maior onde os elementos recebem pertinência igual a 1, por exemplo, todos os alunos que tiverem média da nota final acima de 80 pontos recebem pertinência 1 no termo alta. Portanto, a pertinência não muda à medida que a nota final do aluno é maior. O quadro 8 apresenta as funções de pertinência definidas:

Quadro 8 Funções de pertinência dos indicadores

Indicador Termo1 Termo 2 Termo3

vestibular Baixa, Triangular = [mínimo, mínimo, fp2]

Media, Triangular = [fp1, fp3, fp5)

Alta, Trapezoide = [fp3, fp5, máximo, máximo) Evasao Baixa, Triangular = [mínimo,

mínimo, fp2]

Media, Triangular = [fp1, fp3, fp5)

Alta, Trapezoide = [fp3, fp5, máximo, máximo) alunodocente Baixa, Triangular = [mínimo,

mínimo, fp3]

Alta, Trapezoide = [ , , máximo, máximo]

Não existe

Titulação Baixa, Triangular = [mínimo, mínimo, fp3]

Alta, Trapezoide = [ , , máximo, máximo]

Não existe

Retenção Baixa, Triangular = [mínimo, mínimo, fp3]

Alta, Trapezoide =[ , , máximo, máximo]

Não existe

Medianf Baixa, Triangular = [mínimo, mínimo, fp3]

Alta, Trapezoide = [ , , máximo, máximo]

Não existe

Exemplificamos a forma de obtenção dos termos com um exemplo para o indicador Evasão. Considerando um conjunto de valores do indicador evasão composto por {0.00, 2.00, 2.00, 4.00, 7.00, 9.00, 10.00, 10.00, 10.00, 11.00, 15.00, 19.00, 21.00, 32.00}, seus valores referência seriam: mínimo = 0.00, fp1 = 2.43, fp2 = 4.86, fp3 =10.00, fp4 = 8.43, fp5 = 16.86

máximo = 32.00, e seus termos seriam utilizados conforme a tabela 8:

Tabela 8 Exemplo definição de termos e valores para indicador Evasão

Termo Tipo Pertinência Valor 1 Valor 2 Valor 3 Valor 4

Baixa Triangular 0 0 4.86

Média Triangular 2.43 10.00 16.86

Alta Trapezoide 10 16.86 32.00 32.00

Fonte: Elaborado pelo autor.

No exemplo anterior, a evasão quando baixa inicia em 0 e termina em 4.86. A evasão, quando média inicia em 2.43 e termina em 16.86. A evasão, quando alta começa em 10, e a partir de 16.86 possui pertinência máxima (1) nesse conjunto. Os cursos que tiverem evasão igual a 3% vão receber um grau de pertinência no conjunto baixa; porém, também vão receber um grau de pertinência no conjunto média. Os valores referência de cada termo linguístico de entrada são calculados observando os valores normalizados e não o valor bruto conforme exibido no exemplo anterior.

Com a definição dos termos linguísticos dos indicadores, seria necessário definir os termos linguísticos da variável de saída avaliação. A partir da agregação das variáveis de entrada (indicadores), a variável de saída remete ao resultado do curso perante todos os critérios de entrada gerando um indicador de cada curso conceituado na pesquisa como Índice

de Monitoramento de Cursos (IMC). A pontuação de cada curso é dada no intervalo de 0 a

100 pontos, ou seja, o resultado difuso gerado é apresentado nesse intervalo. A equipe da PROEN optou por utilizar um conceito já fixado nas avaliações externas do MEC, que consiste em classificar o curso em 4 opções. Os termos foram gerados dividindo a pontuação máxima 100 pontos em 4 partes iguais (uma para cada classificação), conforme exibido na tabela 9:

Tabela 9 Termos linguísticos variável saída avaliação

Termo Tipo Pertinência Valor 1 Valor 2 Valor 3 Valor 4

Insuficiente Triangular 0 0 25

Suficiente Triangular 12.5 25 50

Muito Bom Triangular 37.50 62.50 75

Excelente Trapezoide 62.50 75.00 100.00 100.00

Conforme exibido acima, os cursos que tiverem pontuação inferior a 25 pontos, terão pertinência no conjunto Insuficiente. Entretanto, se a pontuação for igual ou superior à 12.5, também terão pertinência no conjunto Suficiente. Dessa forma, podemos dizer que o curso somente pertence exclusivamente ao conjunto Insuficiente se tiver uma pontuação inferior a 12.5 pontos. Esse intervalo representa um nível de incerteza considerando a subjetividade envolvida na avaliação, que considera que cursos que tenham pontuação de 12.5 à 25 pontos já começam a aproximar-se mais do conjunto suficiente e não podem receber a mesma pontuação que os cursos com pontuação abaixo de 12.5. Como o MPD não gera os termos linguísticos graficamente, foi utilizado o software MATLAB para gerar o gráfico das funções de pertinência da variável de saída. A figura 26 apresenta as funções de pertinência geradas:

Figura 26 Variável de Saída Índice Monitoramento de Cursos (IMC)

Fonte: Elaborado pelo autor.

A definição dos termos e suas respectivas classificações são fáceis de serem gerenciadas no MPD, portanto, o modelo de avaliação de cursos deve ser gradativamente aperfeiçoado pela equipe da PROEN que deve contribuir cada vez mais com o seu conhecimento para a construção do cenário ideal de monitoramento de cursos do IFMG.