Oficina de Apropriação de Resultados – Saethe 2014 Módulo I Contextualização e Conceitos da...

Oficina de Apropriação de Resultados – Saethe 2014

Módulo IContextualização e Conceitos da

Avaliação em Larga Escala

Avaliação da rede municipal de Teresina

• Objetivos– Criar uma cultura de avaliação voltada para o êxito do

aluno.– Oportunizar a reflexão sobre o desempenho dos alunos

e a interpretação das causas e efeitos das deficiências e avanços revelados pela avaliação.

– Propor alternativas para a tomada de decisão levando em consideração os resultados obtidos.

Avaliação da rede municipal de Teresina

• Desde 1995, a Secretaria Municipal de Educação (Semec) executou diversos projetos de avaliação da rede, em parceira com institutos de pesquisa e avaliação.

• As experiências de avaliação podem ser organizadas em quatro momentos.

Evolução da experiência1° momento – 1995 a 1997 • Iniciou-se a organização de um sistema de avaliação

institucional a partir de um projeto intermunicipal de iniciativa da União Nacional dos Dirigentes Municipais de Educação (Undime), financiado pelo MEC/FNDE.

• Projeto “Qualidade da Educação Básica e Avaliação de Rede”.

• Os resultados circulavam apenas na Secretaria.

Avaliação da rede municipal de Teresina

Evolução da experiência2º Momento – 1998 a 2000 • O Projeto foi assumido integralmente pela PMT, que

contratou professores da UFPI para elaborar os testes. • A Semec assumiu a execução das demais etapas. Eram

divulgados resultados gerais (médias) por escola e série.

Avaliação da rede municipal de Teresina

Evolução da experiência3º Momento – de 2001 a 2010• A avaliação ganhou novo formato. • Foi criado um núcleo de avaliação, que assumiu a

coordenação do projeto. • Os testes passaram a ser construídos a partir de

habilidades e categorias de conteúdo, baseados nos PCN/ Proposta Curricular da Rede.

Avaliação da rede municipal de Teresina

Evolução da experiência3º Momento – de 2001 a 2010• Os resultados informam percentual de acerto por

habilidade e categoria de conteúdos de escola, turma, disciplina e aluno, para: professores, pais, alunos, conselhos escolares e divulgação ampla na mídia .

• Os relatórios são quanti-qualitativos contendo informações sobre o desempenho do aluno (desenvolvimento de habilidades cognitivas).

Avaliação da rede municipal de Teresina

Evolução da experiência3º Momento – de 2001 a 2010 2007 - Avaliação de Desempenho /Prêmio Professor

Alfabetizador.2010 - Avaliação externa do desempenho dos alunos de 5º

e 9º anos, nas áreas de Língua Portuguesa e Matemática, em 147 escolas da Rede Municipal de Teresina.Utiliza a metodologia da Teoria de Resposta ao Item (TRI), tomando como referência a escala do SAEB/PROVA BRASIL.

Avaliação da rede municipal de Teresina

Evolução da experiência4º Momento – a partir de 2014• Parceria com o CAEd/UFJF.• Avaliação de habilidades em Língua Portuguesa e

Matemática para 2º, 3º (saída), 4º e 8º anos do Ensino Fundamental.

• Avaliações de entrada e saída de todos os alunos matriculados na rede nas etapas avaliadas.

• Uso de TRI e escala do Saeb para o 8º ano. (Demais etapas: escala de Alfabetização).

Avaliação da rede municipal de TeresinaSaethe

O que é avaliar?

O processo de avaliação está relacionado à produção de informações sobre determinada realidade e é algo que está bastante presente no cotidiano escolar.

Como funciona o processo?

Produzir algum julgamento sobre a realidade.

Dados e informações sobre determinada realidade.

Em função de um objetivo que se deseja alcançar.

Traçar estratégias de uma ação sobre o objeto avaliado.

O que é avaliar?

Professores Observações, Registros, Provas etc.

O que precisa ser feito para que os alunos avancem?

Aferição de Aprendizagem

Avaliação educacional em larga escala

Nas últimas décadas, paralelo às avaliações tradicionais, outro procedimento de avaliação educacional tem ganhado espaço: são as avaliações externas, geralmente em larga escala, que têm objetivos e procedimentos diferenciados das avaliações realizadas pelos professores nas salas de aula.

Por que avaliamos?

Informação

Ação

Qualidade e Equidade

DiagnósticaDiagnóstica FormativaFormativa SomativaSomativa

Pequena escalaPequena escala Larga escalaLarga escala

Tipos de Avaliação

Tipos de Avaliação

Tipos de Avaliação

Tipos de Avaliação

Tipos de Avaliação

Tipos de Avaliação

Provas abertasProvas objetivas

Observação/RegistroPortfólio

Provas abertasProvas objetivas

Observação/RegistroPortfólio

TEORIA CLÁSSICATEORIA CLÁSSICA TEORIA DA RESPOSTAAO ITEM

TEORIA DA RESPOSTAAO ITEM

Avaliação Interna/EscolaAvaliação Interna/Escola

Processo da aprendizagemProcesso da aprendizagem

Avaliação Externa/SistemasAvaliação Externa/Sistemas

Testes de proficiência Questionários contextuais

Testes de proficiência Questionários contextuais

Desempenho dos alunosDesempenho dos alunos

Avaliação Educacional

Linha do tempo das avaliações

Linha do Tempo | Avaliações

Linha do Tempo | Avaliações

Linha do Tempo | Avaliações

Sistemas próprios de Avaliação

SEAPE

SADEAM

SAEPI

SARESP

SIMAVE

SAERJ

SAERO

PAEBESSAEMS

SAEGO

AREAL

AVALIE

SISPAE

SALTO

SPAECE

SAEPESAEMI

SAERS

SAEP

Sistema de Av. da Educ. da Paraíba

AVALIA BH

ALFABETIZA RIO

SAETHE

Vantagens dos sistemas próprios de Avaliação

Etapas básicas dos programas de avaliação

Etapas básicas dos programas de avaliação

O que a avaliação externa possibilita?

Possibilidades dos Sistemas próprios de Avaliação

Diagnóstico do efeito das políticas públicas implementadas.

Utilização dos resultados, com foco na identidade escolar..

Monitoramento a qualidade da educação pública ofertada e a promoção da equidade.

Estabelecimento de Padrões de Desempenho estudantis e metas educacionais.

Possibilidades dos Sistemas próprios de Avaliação

Diagnóstico do efeito das políticas públicas implementadas.

Utilização dos resultados, com foco na identidade escolar..

Monitoramento a qualidade da educação pública ofertada e a promoção da equidade.

Estabelecimento de Padrões de Desempenho estudantis e metas educacionais.

Evolução da proficiência média em Matemática Rede Estadual – Minas Gerais

Fonte: Proeb 2006/2010

Evolução da distribuição por Padrões de Desempenho em Matemática - Rede Estadual -

MG

Fonte: Proeb 2010/2012

Possibilidades dos Sistemas próprios de Avaliação

Diagnóstico do efeito das políticas públicas implementadas.

Utilização dos resultados, com foco na identidade escolar..

Monitoramento a qualidade da educação pública ofertada e a promoção da equidade.

Estabelecimento de Padrões de Desempenho estudantis e metas educacionais.

Possibilidades dos Sistemas próprios de Avaliação

•PAIC: programa de cooperação entre Governo do estado e municípios com a finalidade de apoiar os municípios para alfabetizar os alunos da rede pública de ensino até o final do segundo ano do ensino fundamental.•Programa propõe uma intervenção sistêmica que é executada através de cinco eixos:

•Alfabetização

•Gestão Municipal

•Educação Infantil

•Literatura e Formação do Leitor

•Avaliação Externa 

Diagnóstico do efeito de política pública implementada

Mapa de Alfabetização do Estado do CearáSPAECE-Alfa 2007

Fonte: Spaece-Alfa 2007

Fonte: Spaece-Alfa 2008

Mapa de Alfabetização do Estado do CearáSPAECE-Alfa 2008

Fonte: Spaece-Alfa 2009

Mapa de Alfabetização do Estado do CearáSPAECE-Alfa 2009

Fonte: Spaece-Alfa 2010

Mapa de Alfabetização do Estado do CearáSPAECE-Alfa 2010

Fonte: Spaece-Alfa 2011

Mapa de Alfabetização do Estado do CearáSPAECE-Alfa 2011

Possibilidades dos Sistemas próprios de Avaliação

Diagnóstico do efeito das políticas públicas implementadas.

Utilização dos resultados, com foco na identidade escolar..

Monitoramento a qualidade da educação pública ofertada e a promoção da equidade.

Estabelecimento de Padrões de Desempenho estudantis e metas educacionais.

Resultados Estaduais Transversais ou Longitudinais

Resultados Estaduais Transversais ou Longitudinais

da Rede•Planejamento e execução de políticas públicas.•Criação de metas de qualidade e equidade educacionais.•Implementação de medidas de responsabilização.•Políticas de incentivos diretos ou indiretos.•Ações de formação continuada de professores.

da Escola•Elaboração do projeto da escola.•Monitoramento da qualidade de ensino.•Subsídio para avaliação institucional.

Uso dos ResultadosGestor

• Projetos de intervenção pedagógica.

• Elaboração de projetos especiais.

• Foco nos alunos com dificuldades.

• Ações de reforço escolar.

• Planejamento das ações de sala de aula.

• Visão proativa quanto ao desenvolvimento de habilidades e competências ao longo da educação básica.

Uso dos ResultadosProfessor

• Acompanhamento individual do desempenho escolar pelos alunos e seus

familiares.

• Informações sobre a qualidade dos serviços educacionais oferecidos.

Uso dos ResultadosAluno e família

Possibilidades dos Sistemas próprios de Avaliação

Diagnóstico do efeito das políticas públicas implementadas.

Utilização dos resultados, com foco na identidade escolar..

Monitoramento a qualidade da educação pública ofertada e a promoção da equidade.

Estabelecimento de Padrões de Desempenho estudantis e metas educacionais.

Descrição geral dos Padrões de Desempenho

Padrões Descrição

Abaixo do Básico

Os alunos que apresentam este padrão de desempenho revelam ter desenvolvido competências e habilidades muito aquém do que seria esperado para o período de escolarização em que se encontram. Por isso, esse grupo de alunos necessita de uma intervenção focada de modo a progredirem com sucesso em seu processo de escolarização.

Básico

Os alunos que apresentam este padrão de desempenho demonstram já terem começado um processo de sistematização e domínio das habilidades consideradas básicas e essenciais ao período de escolarização em que se encontram. Para esse grupo de alunos, é importante o investimento de esforços para que possam desenvolver habilidades mais elaboradas.

Descrição geral dos Padrões de Desempenho

Padrões Descrição

Adequado

Os alunos que apresentam este padrão de desempenho demonstram ter ampliado o leque de habilidades tanto no que diz respeito à quantidade quanto no que se refere à complexidade dessas habilidades, as quais exigem um maior refinamento dos processos cognitivos nelas envolvidos.

Avançado

Os alunos que apresentam este padrão de desempenho revelam ser capazes de realizar tarefas que exigem habilidades mais sofisticadas. Eles desenvolveram habilidades que superam aquelas esperadas para o período de escolaridade em que se encontram.

Projetos de intervenção pedagógica a partir dos Padrões de Desempenho

Avaliação em larga escala:Em que avançamos e quais os desafios?

Sistemas Estaduais de Avaliação Em que avançamos?

Sistemas Estaduais de Avaliação Em que avançamos?

Canais de divulgação

Fatores socioeconômicosFatores socioeconômicos

Fatores familiaresFatores familiares

Fatores individuaisFatores individuais

Gestão e administração Gestão e administração

Prática pedagógicaPrática pedagógica

Condições de infraestruturaCondições de infraestrutura

Qualificação dos profissionaisQualificação dos profissionais

Fatores Extraescolares Fatores Intraescolares

Fatores Associados ao Desempenho

Em que consiste considerar os fatores associados ao Desempenho?

Sistemas Estaduais de Avaliação Desafios

Vídeo para discussãoOs Simpsons e as avaliações externas