Avaliação e monitoramento de

resultados educacionais:

desafios para políticas públicas e para

profissionais da educação

São Paulo

Outubro 2016

José Paulo Paes (1985, p. 10)

indicou que "é entre a recusa e o

entusiasmo que corre a estrada da

compreensão crítica". PAES, José Paulo. Gregos & baianos: ensaios. São Paulo: Brasiliense, 1985

Educação escolar:

para quê?

36.059.742

27.931.210

18.468.772

7.620.910 10.921.037

17.964.543

15.716.477

3.707.897 3.193.668 4.570.237

23.360.973

Ensino fundamental. Matrículas por dependência administrativa. Brasil. 1991-2015

Total Federal Estadual Municipal Privada Pública

Obrigatoriedade

da educação

escolar!

Aprendizagem

para todos

ou

para alguns?

Como organizar a

escola para que

ocorram as

aprendizagens?

Avaliação educacional:

processo caracterizado por

1) julgamento

(medidas, escala, critérios e juízos);

2) levantamento de informações

(técnicas, instrumentos e procedimentos); e

3) decisões

(encaminhamentos, consequências etc.).

Avaliação educacional: definição A avaliação é o processo de identificação, levantamento e análise de informação

relevante de um objeto educacional – que poderá ser quantitativa ou qualitativa

–, de forma sistemática, rigorosa, planificada, dirigida, objetiva, crível, fidedigna

e válida para emitir juízo de valor baseado em critérios e referências

preestabelecidos para determinar o valor e o mérito desse objeto a fim de tomar

decisões que ajudem a otimizá-lo. [1]

[1] LUKAS MUJIKA, Jose Francisco; SANTIAGO ETXEBERRIA, Karlos. Evaluación educativa. 2. ed.

Madrid: Alianza, 2009. p. 91-92. [Tradução nossa]

QUEM AVALIA (sujeito)

O QUE AVALIA (objeto)

PARA QUE AVALIA (finalidade)

PARA QUEM AVALIA (usuário)

COMO AVALIA (metodologia)

Sujeito da avaliação ... Heteroavaliação Autoavaliação

Quando sujeitos

diferentes avaliam

um mesmo objeto

Quando um sujeito

avalia um objeto

produzido por outro

sujeito

Quando o

avaliador avalia

um objeto por ele

produzido

Coavaliação

Quando um sujeito

externo avalia um

objeto produzido

por um sujeito

interno à escola

Avaliação externa

Objeto da avaliação...

Dimensão política da

avaliação educacional

Política educacional

Avaliação externa

Resultados de avaliação externa como

o indicador ou

a medida da qualidade da educação escolar, como uma

tendência das políticas educacionais

Desempenho dos alunos

Qualidade da educação escolar

Trabalho docente

Desempenho dos alunos

Trabalho docente

Qualidade da educação escolar

Avaliação externa

Responsabilização (accountability)

de docentes e gestores

Qualidade da educação escolar: conceito histórico em termos de

1) propriedades ou excelência;

2) processo ou produto;

3) acesso, permanência e conclusão;

4) igualdade de oportunidades;

5) igualdade de resultados.

Qualidade da educação escolar: mensurabilidade em termos de

1) currículo;

2) condições de ensino;

3) taxas de matrícula, rendimento e transição;

e

4) conhecimentos, habilidades etc.

Índice de

Desenvolvimento da

Educação Básica (Ideb)

Presidência da República

Casa Civil

Subchefia para Assuntos Jurídicos

Dispõe sobre a implementação do Plano de Metas Compromisso

Todos pela Educação, pela União Federal, em regime de colaboração com

Municípios, Distrito Federal e Estados, e a participação das famílias e da

comunidade, mediante programas e ações de assistência técnica e

financeira, visando a mobilização social pela melhoria da qualidade da

educação básica.

DECRETO Nº 6.094. DE 24 DE ABRIL DE 2007

O PRESIDENTE DA REPÚBLICA, no uso das atribuições que lhe confere o art.

84, incisos IV e VI, alínea “a”, da Constituição, e tendo em vista o disposto nos arts. 23,

inciso V, 205 e 211, § 1o, da Constituição, e nos arts. 8o a 15 da Lei no 9.394, de 20 de

dezembro de 1996,

DECRETA:

CAPÍTULO I

DO PLANO DE METAS COMPROMISSO TODOS PELA EDUCAÇÃO

[...]

XIX - divulgar na escola e na comunidade os dados relativos à área da educação,

com ênfase no Índice de Desenvolvimento da Educação Básica - IDEB, referido no art.

3o;

[...]

CAPÍTULO II

DO ÍNDICE DE DESENVOLVIMENTO DA EDUCAÇÃO BÁSICA

Art. 3o A qualidade da educação básica será aferida, objetivamente, com base

no IDEB, calculado e divulgado periodicamente pelo INEP, a partir dos dados sobre

rendimento escolar, combinados com o desempenho dos alunos, constantes do censo

escolar e do Sistema de Avaliação da Educação Básica - SAEB, composto pela

Avaliação Nacional da Educação Básica - ANEB e a Avaliação Nacional do

Rendimento Escolar (Prova Brasil).

Parágrafo único. O IDEB será o indicador objetivo para a verificação do

cumprimento de metas fixadas no termo de adesão ao Compromisso.

Indicador: conceito em termos de

1) representação quantitativa

de um construto

2) sensibilidade às mudanças do

construto na realidade

Ideb: equaciona qualidade da

educação escolar com

proficiência (aprendizagem)

e fluxo escolar

Ideb: qualidade da educação

associada aos conhecimentos

em leitura e resolução de

problemas

Ideb: um ou o indicador de

qualidade da educação

básica?

Ideb =

Média, entre 0 e 10, das notas padronizadas de Língua Portuguesa e Matemática na Prova Brasil

Fluxo, entre 1 a n anos, como tempo médio em cada série, para conclusão da etapa

ÍNDICE DE DESENVOLVIMENTO DA EDUCAÇÃO BÁSICA (Ideb)

Ideb =

Média, entre 0 e 10, das notas padronizadas de Língua Portuguesa e Matemática na Prova Brasil

ÍNDICE DE DESENVOLVIMENTO DA EDUCAÇÃO BÁSICA (Ideb)

X Taxa de

aprovação

83,1% 83,8% 85,2% 86,6% 87,6% 88,2% 89,3% 89,2% 89,9%

12,1% 11,8% 11,1% 10,3% 9,6% 9,1% 8,5% 8,6% 8,2% 4,8% 4,4% 3,7% 3,1% 2,8% 2,7% 2,2% 2,2% 1,9%

0%

10%

20%

30%

40%

50%

60%

70%

80%

90%

100%

2007 2008 2009 2010 2011 2012 2013 2014 2015

Ensino fundamental. Taxas de rendimento. Brasil. 2007-2015

Aprovação Reprovação Abandono

85,8% 87,0% 88,5% 89,9% 91,2% 91,7% 92,7% 92,7% 93,2%

11,0% 10,1% 9,2% 8,3% 7,2% 6,9% 6,1% 6,2% 5,8% 3,2% 2,9% 2,3% 1,8% 1,6% 1,4% 1,2% 1,1% 1,0%

0%

10%

20%

30%

40%

50%

60%

70%

80%

90%

100%

2007 2008 2009 2010 2011 2012 2013 2014 2015

Ensino fundamental. Anos iniciais. Taxas de rendimento. Brasil.

2007-2015

Aprovação Reprovação Abandono

79,8% 79,9% 81,3% 82,7% 83,4% 84,1% 85,1% 84,8% 85,7%

13,5% 13,9% 13,4% 12,6% 12,4% 11,8% 11,3% 11,7% 11,1%

6,7% 6,2% 5,3% 4,7% 4,2% 4,1% 3,6% 3,5% 3,2%

0%

10%

20%

30%

40%

50%

60%

70%

80%

90%

2007 2008 2009 2010 2011 2012 2013 2014 2015

Ensino fundamental. Anos finais. Taxas de rendimento. Brasil.

2007-2015

Aprovação Reprovação Abandono

Ensino fundamental. Taxa de aprovação por ano.

Brasil. 2007-2015

2007 2008 2009 2010 2011 2012 2013 2014 2015

1º ano 93,0% 94,0% 94,9% 95,8% 96,5% 96,8% 97,4% 97,5% 97,7%

2º ano 81,9% 83,7% 86,4% 88,9% 91,9% 93,7% 95,8% 96,3% 96,8%

3º ano 83,3% 83,9% 85,1% 86,2% 87,1% 87,6% 88,5% 87,8% 88,5%

4º ano 87,5% 88,4% 89,2% 90,0% 90,9% 90,7% 91,6% 91,2% 91,7%

5º ano 87,2% 88,0% 89,1% 89,8% 90,5% 90,8% 91,2% 91,7% 92,1%

6º ano 76,2% 76,3% 77,7% 79,7% 80,1% 80,9% 82,2% 81,6% 82,9%

7º ano 80,0% 79,9% 81,4% 82,4% 83,4% 83,5% 84,5% 84,2% 84,6%

8º ano 82,4% 82,5% 83,6% 84,6% 85,2% 86,2% 86,8% 86,4% 87,3%

9º ano 81,5% 82,0% 83,7% 85,0% 85,5% 86,4% 87,6% 87,5% 88,6% Fonte: MEC/Inep/DEED

188,30 186,50 170,70 165,10

169,40 172,30 175,77 184,28

190,58 195,58

207,57

256,10 250,00

232,90 235,20 232,00 231,90 234,64 243,99 245,20 245,81

253,50

290,00 283,90

266,60 262,30

266,70 257,60 261,39

268,83 268,57 264,06

267,87

150

175

200

225

250

275

300

325

1995 1997 1999 2001 2003 2005 2007 2009 2011 2013 2015

Saeb. Leitura. Nível Adequado. 5º e 9º anos e 3ª série. 1995-2015

5º ano 9º ano 3ª série

190,60 190,80 181,00 176,30 177,10

182,40 193,48

204,29 209,63 211,22

219,30

253,20 250,00 246,40 243,40 245,00 239,50

247,39 248,72 252,77 251,54 257,73

281,90

288,70 280,30 276,70 278,70

271,30 272,89 274,71 274,83 270,15 267,60

150

175

200

225

250

275

300

325

350

375

1995 1997 1999 2001 2003 2005 2007 2009 2011 2013 2015

Saeb. Matemática. Nível Adequado. 5º e 9º anos e 3ª série. 1995-2015

5º ano 9º ano 3ª série

2,7

4,9

6,3

7,8

3,9

6,0

2,5

3,0

3,5

4,0

4,5

5,0

5,5

6,0

6,5

7,0

7,5

8,0

2007 2008 2009 2010 2011 2012 2013 2014 2015 2016 2017 2018 2019 2020 2021

Ideb. Ensino fundamental. Anos Iniciais. Projeções. 2007-2021

Nordeste-Pública Sudeste-Privada Brasil-Total

2,5

3,0

3,5

4,0

4,5

5,0

5,5

6,0

2007 2009 2011 2013 2015 2017 2019 2021

Ideb. Ensino fundamental. Anos finais. Projeções. Rede Municipal W. 2007-2021

Ideb: limitações quanto ao momento

de coleta e de divulgação, pois

alunos podem ter saído da

escola ou da Rede

Ideb: limitações quanto à

capacidade das equipes

escolares efetuarem uma

análise retrospectiva de seus

resultados

Qualidade da educação

brasileira: Ideb

é parte da qualidade

Desafios para políticas públicas e

profissionais:

articular

avaliação externa, avaliação interna e

avaliação institucional

“A arma da crítica

não substitui

a crítica das armas” (Karl Marx, Crítica da filosofia do direito de Hegel, 1843)

Colocar a prova à prova

Meta-avaliação

Uma avaliação torna-se objeto de avaliação,

preferencialmente, externa