60
Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Embed Size (px)

Citation preview

Page 1: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Oficina de Apropriação de Resultados – Saethe 2014

Módulo IContextualização e Conceitos da

Avaliação em Larga Escala

Page 2: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Avaliação da rede municipal de Teresina

• Objetivos– Criar uma cultura de avaliação voltada para o êxito do

aluno.– Oportunizar a reflexão sobre o desempenho dos alunos

e a interpretação das causas e efeitos das deficiências e avanços revelados pela avaliação.

– Propor alternativas para a tomada de decisão levando em consideração os resultados obtidos.

Page 3: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Avaliação da rede municipal de Teresina

• Desde 1995, a Secretaria Municipal de Educação (Semec) executou diversos projetos de avaliação da rede, em parceira com institutos de pesquisa e avaliação.

• As experiências de avaliação podem ser organizadas em quatro momentos.

Page 4: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Evolução da experiência1° momento – 1995 a 1997 • Iniciou-se a organização de um sistema de avaliação

institucional a partir de um projeto intermunicipal de iniciativa da União Nacional dos Dirigentes Municipais de Educação (Undime), financiado pelo MEC/FNDE.

• Projeto “Qualidade da Educação Básica e Avaliação de Rede”.

• Os resultados circulavam apenas na Secretaria.

Avaliação da rede municipal de Teresina

Page 5: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Evolução da experiência2º Momento – 1998 a 2000 • O Projeto foi assumido integralmente pela PMT, que

contratou professores da UFPI para elaborar os testes. • A Semec assumiu a execução das demais etapas. Eram

divulgados resultados gerais (médias) por escola e série.

Avaliação da rede municipal de Teresina

Page 6: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Evolução da experiência3º Momento – de 2001 a 2010• A avaliação ganhou novo formato. • Foi criado um núcleo de avaliação, que assumiu a

coordenação do projeto. • Os testes passaram a ser construídos a partir de

habilidades e categorias de conteúdo, baseados nos PCN/ Proposta Curricular da Rede.

Avaliação da rede municipal de Teresina

Page 7: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Evolução da experiência3º Momento – de 2001 a 2010• Os resultados informam percentual de acerto por

habilidade e categoria de conteúdos de escola, turma, disciplina e aluno, para: professores, pais, alunos, conselhos escolares e divulgação ampla na mídia .

• Os relatórios são quanti-qualitativos contendo informações sobre o desempenho do aluno (desenvolvimento de habilidades cognitivas).

Avaliação da rede municipal de Teresina

Page 8: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Evolução da experiência3º Momento – de 2001 a 2010 2007 - Avaliação de Desempenho /Prêmio Professor

Alfabetizador.2010 - Avaliação externa do desempenho dos alunos de 5º

e 9º anos, nas áreas de Língua Portuguesa e Matemática, em 147 escolas da Rede Municipal de Teresina.Utiliza a metodologia da Teoria de Resposta ao Item (TRI), tomando como referência a escala do SAEB/PROVA BRASIL.

Avaliação da rede municipal de Teresina

Page 9: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Evolução da experiência4º Momento – a partir de 2014• Parceria com o CAEd/UFJF.• Avaliação de habilidades em Língua Portuguesa e

Matemática para 2º, 3º (saída), 4º e 8º anos do Ensino Fundamental.

• Avaliações de entrada e saída de todos os alunos matriculados na rede nas etapas avaliadas.

• Uso de TRI e escala do Saeb para o 8º ano. (Demais etapas: escala de Alfabetização).

Avaliação da rede municipal de TeresinaSaethe

Page 10: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

O que é avaliar?

O processo de avaliação está relacionado à produção de informações sobre determinada realidade e é algo que está bastante presente no cotidiano escolar.

Page 11: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Como funciona o processo?

Produzir algum julgamento sobre a realidade.

Dados e informações sobre determinada realidade.

Em função de um objetivo que se deseja alcançar.

Traçar estratégias de uma ação sobre o objeto avaliado.

Page 12: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

O que é avaliar?

Professores Observações, Registros, Provas etc.

O que precisa ser feito para que os alunos avancem?

Aferição de Aprendizagem

Page 13: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Avaliação educacional em larga escala

Nas últimas décadas, paralelo às avaliações tradicionais, outro procedimento de avaliação educacional tem ganhado espaço: são as avaliações externas, geralmente em larga escala, que têm objetivos e procedimentos diferenciados das avaliações realizadas pelos professores nas salas de aula.

Page 14: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Por que avaliamos?

Informação

Ação

Qualidade e Equidade

Page 15: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

DiagnósticaDiagnóstica FormativaFormativa SomativaSomativa

Pequena escalaPequena escala Larga escalaLarga escala

Tipos de Avaliação

Page 16: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Tipos de Avaliação

Page 17: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Tipos de Avaliação

Page 18: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Tipos de Avaliação

Page 19: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Tipos de Avaliação

Page 20: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Tipos de Avaliação

Page 21: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Provas abertasProvas objetivas

Observação/RegistroPortfólio

Provas abertasProvas objetivas

Observação/RegistroPortfólio

TEORIA CLÁSSICATEORIA CLÁSSICA TEORIA DA RESPOSTAAO ITEM

TEORIA DA RESPOSTAAO ITEM

Avaliação Interna/EscolaAvaliação Interna/Escola

Processo da aprendizagemProcesso da aprendizagem

Avaliação Externa/SistemasAvaliação Externa/Sistemas

Testes de proficiência Questionários contextuais

Testes de proficiência Questionários contextuais

Desempenho dos alunosDesempenho dos alunos

Avaliação Educacional

Page 22: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Linha do tempo das avaliações

Page 23: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Linha do Tempo | Avaliações

Page 24: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Linha do Tempo | Avaliações

Page 25: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Linha do Tempo | Avaliações

Page 26: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Sistemas próprios de Avaliação

SEAPE

SADEAM

SAEPI

SARESP

SIMAVE

SAERJ

SAERO

PAEBESSAEMS

SAEGO

AREAL

AVALIE

SISPAE

SALTO

SPAECE

SAEPESAEMI

SAERS

SAEP

Sistema de Av. da Educ. da Paraíba

AVALIA BH

ALFABETIZA RIO

SAETHE

Page 27: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Vantagens dos sistemas próprios de Avaliação

Page 28: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Etapas básicas dos programas de avaliação

Page 29: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Etapas básicas dos programas de avaliação

Page 30: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

O que a avaliação externa possibilita?

Page 31: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Possibilidades dos Sistemas próprios de Avaliação

Diagnóstico do efeito das políticas públicas implementadas.

Utilização dos resultados, com foco na identidade escolar..

Monitoramento a qualidade da educação pública ofertada e a promoção da equidade.

Estabelecimento de Padrões de Desempenho estudantis e metas educacionais.

Page 32: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Possibilidades dos Sistemas próprios de Avaliação

Diagnóstico do efeito das políticas públicas implementadas.

Utilização dos resultados, com foco na identidade escolar..

Monitoramento a qualidade da educação pública ofertada e a promoção da equidade.

Estabelecimento de Padrões de Desempenho estudantis e metas educacionais.

Page 33: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Evolução da proficiência média em Matemática Rede Estadual – Minas Gerais

Fonte: Proeb 2006/2010

Page 34: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Evolução da distribuição por Padrões de Desempenho em Matemática - Rede Estadual -

MG

Fonte: Proeb 2010/2012

Page 35: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Possibilidades dos Sistemas próprios de Avaliação

Diagnóstico do efeito das políticas públicas implementadas.

Utilização dos resultados, com foco na identidade escolar..

Monitoramento a qualidade da educação pública ofertada e a promoção da equidade.

Estabelecimento de Padrões de Desempenho estudantis e metas educacionais.

Page 36: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Possibilidades dos Sistemas próprios de Avaliação

•PAIC: programa de cooperação entre Governo do estado e municípios com a finalidade de apoiar os municípios para alfabetizar os alunos da rede pública de ensino até o final do segundo ano do ensino fundamental.•Programa propõe uma intervenção sistêmica que é executada através de cinco eixos:

•Alfabetização

•Gestão Municipal

•Educação Infantil

•Literatura e Formação do Leitor

•Avaliação Externa 

Diagnóstico do efeito de política pública implementada

Page 37: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Mapa de Alfabetização do Estado do CearáSPAECE-Alfa 2007

Fonte: Spaece-Alfa 2007

Page 38: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Fonte: Spaece-Alfa 2008

Mapa de Alfabetização do Estado do CearáSPAECE-Alfa 2008

Page 39: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Fonte: Spaece-Alfa 2009

Mapa de Alfabetização do Estado do CearáSPAECE-Alfa 2009

Page 40: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Fonte: Spaece-Alfa 2010

Mapa de Alfabetização do Estado do CearáSPAECE-Alfa 2010

Page 41: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Fonte: Spaece-Alfa 2011

Mapa de Alfabetização do Estado do CearáSPAECE-Alfa 2011

Page 42: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Possibilidades dos Sistemas próprios de Avaliação

Diagnóstico do efeito das políticas públicas implementadas.

Utilização dos resultados, com foco na identidade escolar..

Monitoramento a qualidade da educação pública ofertada e a promoção da equidade.

Estabelecimento de Padrões de Desempenho estudantis e metas educacionais.

Page 43: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Resultados Estaduais Transversais ou Longitudinais

Page 44: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Resultados Estaduais Transversais ou Longitudinais

Page 45: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

da Rede•Planejamento e execução de políticas públicas.•Criação de metas de qualidade e equidade educacionais.•Implementação de medidas de responsabilização.•Políticas de incentivos diretos ou indiretos.•Ações de formação continuada de professores.

da Escola•Elaboração do projeto da escola.•Monitoramento da qualidade de ensino.•Subsídio para avaliação institucional.

Uso dos ResultadosGestor

Page 46: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

• Projetos de intervenção pedagógica.

• Elaboração de projetos especiais.

• Foco nos alunos com dificuldades.

• Ações de reforço escolar.

• Planejamento das ações de sala de aula.

• Visão proativa quanto ao desenvolvimento de habilidades e competências ao longo da educação básica.

Uso dos ResultadosProfessor

Page 47: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

• Acompanhamento individual do desempenho escolar pelos alunos e seus

familiares.

• Informações sobre a qualidade dos serviços educacionais oferecidos.

Uso dos ResultadosAluno e família

Page 48: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Possibilidades dos Sistemas próprios de Avaliação

Diagnóstico do efeito das políticas públicas implementadas.

Utilização dos resultados, com foco na identidade escolar..

Monitoramento a qualidade da educação pública ofertada e a promoção da equidade.

Estabelecimento de Padrões de Desempenho estudantis e metas educacionais.

Page 49: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala
Page 50: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Descrição geral dos Padrões de Desempenho

Padrões Descrição

Abaixo do Básico

Os alunos que apresentam este padrão de desempenho revelam ter desenvolvido competências e habilidades muito aquém do que seria esperado para o período de escolarização em que se encontram. Por isso, esse grupo de alunos necessita de uma intervenção focada de modo a progredirem com sucesso em seu processo de escolarização.

Básico

Os alunos que apresentam este padrão de desempenho demonstram já terem começado um processo de sistematização e domínio das habilidades consideradas básicas e essenciais ao período de escolarização em que se encontram. Para esse grupo de alunos, é importante o investimento de esforços para que possam desenvolver habilidades mais elaboradas.

Page 51: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Descrição geral dos Padrões de Desempenho

Padrões Descrição

Adequado

Os alunos que apresentam este padrão de desempenho demonstram ter ampliado o leque de habilidades tanto no que diz respeito à quantidade quanto no que se refere à complexidade dessas habilidades, as quais exigem um maior refinamento dos processos cognitivos nelas envolvidos.

Avançado

Os alunos que apresentam este padrão de desempenho revelam ser capazes de realizar tarefas que exigem habilidades mais sofisticadas. Eles desenvolveram habilidades que superam aquelas esperadas para o período de escolaridade em que se encontram.

Page 52: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Projetos de intervenção pedagógica a partir dos Padrões de Desempenho

Page 53: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Avaliação em larga escala:Em que avançamos e quais os desafios?

Page 54: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Sistemas Estaduais de Avaliação Em que avançamos?

Page 55: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Sistemas Estaduais de Avaliação Em que avançamos?

Page 56: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Canais de divulgação

Page 57: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Fatores socioeconômicosFatores socioeconômicos

Fatores familiaresFatores familiares

Fatores individuaisFatores individuais

Gestão e administração Gestão e administração

Prática pedagógicaPrática pedagógica

Condições de infraestruturaCondições de infraestrutura

Qualificação dos profissionaisQualificação dos profissionais

Fatores Extraescolares Fatores Intraescolares

Fatores Associados ao Desempenho

Page 58: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Em que consiste considerar os fatores associados ao Desempenho?

Page 59: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Sistemas Estaduais de Avaliação Desafios

Page 60: Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da Avaliação em Larga Escala

Vídeo para discussãoOs Simpsons e as avaliações externas