3. PARMAKİZİ ÖN İŞLEME
5.9. YSA Metotlarının Parmakizi Tanıma Performansları ve Analizi
A política de pagamento de bônus aos professores foi introduzida em São Paulo em 2008. Os professores que lecionam em escolas que cumprem as metas de aprendizado estabelecidas pela Secretaria de Educação recebem um bônus por mérito no final do ano. O bônus pago para cada professor é proporcional à remuneração média recebida ao longo do ano. Assim, num dado ano, o valor esperado do bônus é mais elevado para professores que completam quinquênios. Do mesmo modo, entre professores que completam quinquênios em 2008, o valor esperado do bônus é maior para aqueles que completam um ciclo de cinco anos de tempo de serviço no início do ano do que para aqueles que completam este ciclo no final do ano. Ou seja, o valor esperado do bônus é uma função crescente do tempo decorrido desde que o professor completou um ano a mais de tempo de serviço para as coortes tratadas.
Ao utilizar a regra do adicional por quinquênios para identificar o efeito de aumentos na margem intensiva do pagamento da remuneração variável por desempenho, o desafio está em separar o efeito do bônus do efeito do aumento salarial induzido pelo fato de o professor completar um ciclo de cinco anos (ou múltiplos) no emprego. Nos dois exercícios econométricos descritos acima, as regressões foram estimadas a partir dos dados de proficiência do SARESP de 2007, ano em que a política de bônus não havia sido implantada. Por este motivo, esperamos identificar com estas estimações apenas os efeitos do aumento salarial sobre a proficiência. Em 2008, todos os professores efetivos da rede estadual estavam sujeitos ao recebimento da remuneração variável. Então, ao estimarmos os modelos empregados nos exercícios anteriores a partir dos dados de proficiência do SARESP 2008, os coeficientes das dummies de tratamento (modelo 1) e o coeficiente da interação entre a dummy de tratamento e o tempo decorrido desde o último aniversário de emprego (modelo 2) nos fornecerão os efeitos conjuntos do salário fixo e do bônus por desempenho.
Para identificar isoladamente o impacto da remuneração variável nos valemos das diferenças no ambiente existente entre 2007 (ausência de bônus) e 2008 (introdução do bônus) na rede estadual paulista. Em outras palavras, para separar os dois efeitos (salários e bônus), empregamos estratégias de diferenças-em-diferenças e diferenças triplas, a partir dos modelos (1) e (2) descritos acima e explorando a variação ocorrida ao longo do tempo. O modelo (3) a seguir utiliza a variação salarial introduzida pela regra dos quinquênios.
∑ ∑
(3)
em que:
notas da turma i, do professor p, na escola s, no ano t.
dummy que indica se o docente possui de 5 a 8 anos de tenure em 2007. dummy que indica se o docente possui de 10 a 13 anos de tenure em 2007. dummy que indica se o docente possui de 15 a 18 anos de tenure em 2007. dummy que indica se o docente possui de 20 a 23 anos de tenure em 2007.
dummy para o ano de 2008.
anos de serviço do professor p (variável contínua), no ano t.
vetor de características do professor p (gênero, cor, idade, escolaridade, dummies para os
50
vetor de características da turma i (proporção de meninos, proporção de brancos, média
de idade, educação dos pais, indicadores de renda), no ano t. efeito fixo da escola.
variáveis não-observáveis da turma i, do professor p, na escola s, no ano t.
A amostra considerada neste modelo é ligeiramente diferente daquela do modelo (1). Neste caso, excluímos as coortes de professores que completaram quinquênios em 2008. Isto porque desejamos manter no grupo de tratamento os professores que entre 2007 e 2008 verificaram apenas a mudança da introdução do bônus e, nos dois anos, estiveram sujeitos à mesma faixa salarial. Os parâmetros identificam as diferenças nas correlações entre as dummies de tratamento e a proficiência dos alunos existentes entre 2008 e 2007 (segundas diferenças). Sob as hipóteses de que: a) os efeitos do salário regular e do bônus são aditivamente separáveis e b) os efeitos dos salários sobre a proficiência é homogêneo para as diferentes coortes, estes parâmetros identificam o impacto da margem intensiva do bônus esperado sobre a proficiência.
Já o modelo (4) explora a variação no mês de contratação dos professores e introduz a diferença ao longo do tempo entre as diferenças na ordem de admissão entre professores tratados e não-tratados pela regra dos quinquênios (terceiras diferenças). O parâmetro de interesse é .
(4)
em que:
notas da turma i, do professor p, na escola s, no ano t.
dummy que indica se o docente completou quinquênio em 2007 ou 2008.
tempo decorrido desde o último aniversário de emprego até o mês de realização das provas do SARESP.
dummy para o ano de 2008.
anos de serviço do professor p (variável contínua), no ano t.
vetor de características do professor p (gênero, cor, idade, escolaridade, dummies para os
contratos de trabalho de 20, 30 e 40 horas), no ano t.
vetor de características da turma i (proporção de meninos, proporção de brancos, média
de idade, educação dos pais, indicadores de renda), no ano t. efeito fixo da escola.
variáveis não-observáveis da turma i, do professor p, na escola s, no ano t.
Os modelos (1) a (4) foram estimados a partir das notas de língua portuguesa e matemática do SARESP, para as turmas do 5º e 9º anos do ensino fundamental e do 3º ano do ensino médio. As regressões para língua portuguesa e matemática foram estimadas considerando-se três amostras distintas de professores: a) todos os professores pareados; b) professores específicos da área (respectivamente, linguagem/humanidades e exatas/ciências); c) professores específicos das disciplinas (respectivamente, língua portuguesa e matemática). Foram estimados os efeitos dos salários e do bônus por desempenho sobre a nota média da turma, bem como sobre os percentis 10, 25, 75 e 90 da distribuição de notas.
51
2.5. Resultados e discussão
As Tabelas 2.7 a 2.9 apresentam os resultados das estimações dos modelos 01 e 02 (efeitos dos salários sobre a proficiência), respectivamente, para o 5º e 9º anos do ensino fundamental e para o 3º ano do ensino médio. Já as Tabelas 2.10 a 2.12 mostram os resultados das estimações dos modelos 03 e 04 (efeitos do bônus potencial sobre a proficiência), também para as mesmas séries. Os impactos ao longo da distribuição ainda podem ser visualizados nas Figuras 2.1 a 2.6. Todos estes resultados referem-se às estimações que consideram a amostra de professores específicos de cada disciplina, ou seja, nas regressões para matemática e língua portuguesa, consideramos apenas os professores que lecionam cada disciplina, respectivamente. Esta escolha justifica-se pelo fato de que os resultados estimados a partir das três amostras de professores (todos os professores, professores de área e professores de disciplina) são qualitativamente semelhantes. Escolhemos reportar estes resultados por supor que, se os salários regulares ou o bônus por desempenho afetarem o aprendizado, estes efeitos devem ser maiores entre os professores específicos de cada disciplina. Os coeficientes foram padronizados e, portanto, medem os efeitos em termos de desvios-padrão da nota.