28
Contribuições da Avaliação do Programa de Formação Continuada Multicurso para o aprimoramento do projeto educacional e para a sociedade

Contribuições da Avaliação do Programa de Formação Continuada ...api.ning.com/files/EUEk6CBzyKBwJoD2Z3kr9XRgYk4FG6xc7GuWV6-BRMRfz1... · Programa de Formação continuada para

Embed Size (px)

Citation preview

Page 1: Contribuições da Avaliação do Programa de Formação Continuada ...api.ning.com/files/EUEk6CBzyKBwJoD2Z3kr9XRgYk4FG6xc7GuWV6-BRMRfz1... · Programa de Formação continuada para

Contribuições da Avaliação do

Programa de Formação Continuada Multicurso

para o aprimoramento

do projeto educacional e para a sociedade

Page 2: Contribuições da Avaliação do Programa de Formação Continuada ...api.ning.com/files/EUEk6CBzyKBwJoD2Z3kr9XRgYk4FG6xc7GuWV6-BRMRfz1... · Programa de Formação continuada para

A Avaliação de seus projetos é uma diretriz normativa da Fundação

Roberto Marinho tendo em vista que valorizamos identificar :

  Desafios, acertos e erros.

Tal política tem como finalidade responder perguntas como:

  O que aprendemos com a avaliação?

  Como ela contribui para a realização de nossa missão?

  Como ela contribui para o relacionamento com os parceiros?

Cultura da Avaliação: diretrizes

Page 3: Contribuições da Avaliação do Programa de Formação Continuada ...api.ning.com/files/EUEk6CBzyKBwJoD2Z3kr9XRgYk4FG6xc7GuWV6-BRMRfz1... · Programa de Formação continuada para

  Procedimentos fundamentais:

- planejamento: definição das questões, objetivos e indicadores; públicos;

etapas de verificação; orçamento

- banco de dados – cadastro dos beneficiários

- contratação de um instituto: desenho e execução da avaliação externa

  Aplicação de metodologias distintas:

-  Mix de métodos quantitativos e/ou qualitativos

Cultura de Avaliação: diretrizes

Page 4: Contribuições da Avaliação do Programa de Formação Continuada ...api.ning.com/files/EUEk6CBzyKBwJoD2Z3kr9XRgYk4FG6xc7GuWV6-BRMRfz1... · Programa de Formação continuada para

Demanda

Desenho do Projeto

Planejamento

Implementação

Utilização dos resultados

Cultura da Avaliação: diretrizes

Monitoram

ento e Avaliação M

onito

ram

ento

e A

valia

ção

Indicadores Quadro lógico Briefing

Relatório Meta-avaliação Artigos

Gestão Compartilhada (Equipes Teleducação e Avaliação )

Contratação de um instituto: Avaliação Externa

Page 5: Contribuições da Avaliação do Programa de Formação Continuada ...api.ning.com/files/EUEk6CBzyKBwJoD2Z3kr9XRgYk4FG6xc7GuWV6-BRMRfz1... · Programa de Formação continuada para
Page 6: Contribuições da Avaliação do Programa de Formação Continuada ...api.ning.com/files/EUEk6CBzyKBwJoD2Z3kr9XRgYk4FG6xc7GuWV6-BRMRfz1... · Programa de Formação continuada para

Empresa e Pesquisadores responsáveis

INNOVA – Pesquisa & Assessoria LAED PUC-Rio

Pesquisadores Maria Dolores Bombardelli Kappel Alicia Maria Catalano de Bonamino Cynthia Paes de Carvalho Fátima Cristina de Mendonça Alves Maria Inês do Rego Monteiro Bomfim Eduardo Wagner

Page 7: Contribuições da Avaliação do Programa de Formação Continuada ...api.ning.com/files/EUEk6CBzyKBwJoD2Z3kr9XRgYk4FG6xc7GuWV6-BRMRfz1... · Programa de Formação continuada para

Números (2008, 2009 e 2010)

  1.000 Educadores - Professores de Matemática - Técnicos da Secretaria de Educação - Gestores (Coordenadores e Diretores de Escola)

  252 Escolas   31.000 Alunos

Multicurso Matemática Espírito Santo

Contexto Programa de Formação continuada para professores de Matemática do Ensino Médio e gestores, adotado como Política Pública no Estado

Objetivos:   Promover a melhoria da aprendizagem dos alunos do Ensino Médio   Desenvolver rede de aprendizagem colaborativa   Promover a adoção de novas práticas no ensino

Page 8: Contribuições da Avaliação do Programa de Formação Continuada ...api.ning.com/files/EUEk6CBzyKBwJoD2Z3kr9XRgYk4FG6xc7GuWV6-BRMRfz1... · Programa de Formação continuada para

Avaliar a contribuição do Programa no que se refere à:

1.  Melhoria do desempenho cognitivo em Matemática dos alunos da

Rede Estadual do Ensino Médio;

2.  Adoção de novas práticas pelos professores no ensino da

Matemática na Rede Estadual do Ensino Médio do Espírito Santo.

Objetivo do Programa/Avaliação

Page 9: Contribuições da Avaliação do Programa de Formação Continuada ...api.ning.com/files/EUEk6CBzyKBwJoD2Z3kr9XRgYk4FG6xc7GuWV6-BRMRfz1... · Programa de Formação continuada para

Avaliação dos mesmos alunos

Professores

Maio 2008

Avaliação dos alunos do 1º ano do

Ensino Médio Professores

(oficinas) Gestores

Início Multicurso

Agosto 2008 Julho 2009 Outubro 2010

M1 M2 M3 11 meses

26 meses

Avaliação dos mesmos alunos

Professores Gestores

Estudo longitudinal

Aprendizagem

Desenho da Avaliação

Page 10: Contribuições da Avaliação do Programa de Formação Continuada ...api.ning.com/files/EUEk6CBzyKBwJoD2Z3kr9XRgYk4FG6xc7GuWV6-BRMRfz1... · Programa de Formação continuada para

- Teste cognitivo com 44 itens de Matemática

- Questionário sócio demográfico (86 perguntas)

Ano Total de alunos

Previsto Real Retorno (%)

2008 – Marco Zero 14.000 10.007 71,5

2009 – Marco Um 13.036 9.323 71,5

2010 – Marco Dois 10.439 6.699 64,2

Fonte: Avaliação do Programa de Formação Continuada - Multicurso Matemática Ensino Médio - ES, 2008/2009/20

Alunos do Ensino Médio Participantes da Pesquisa

Page 11: Contribuições da Avaliação do Programa de Formação Continuada ...api.ning.com/files/EUEk6CBzyKBwJoD2Z3kr9XRgYk4FG6xc7GuWV6-BRMRfz1... · Programa de Formação continuada para

Professores Total

Previsto Real Retorno (%) 2008 – Marco Zero 1083 837 77,3 2009 – Marco Um 1031 903 87,6 2010 – Marco Dois 958 659 67,8

Fonte: Avaliação do Programa de Formação Continuada - Multicurso Matemática Ensino Médio - ES, 2008/2009/2010.

Questionário Contextual com 155 questões

Professores Participantes da Pesquisa

Page 12: Contribuições da Avaliação do Programa de Formação Continuada ...api.ning.com/files/EUEk6CBzyKBwJoD2Z3kr9XRgYk4FG6xc7GuWV6-BRMRfz1... · Programa de Formação continuada para

Grupos Focais com: tutores, coordenadores de grupos de estudo e alunos Contribuir para melhoria da proficiência dos

alunos

Questionário sociodemográfico com alunos

Entrevistas individuais e coletivas com: gerentes, assessores e técnicos da SEDU

Questionário contextual com: professores, gestores, pedagogos e alunos

Oficinas de avaliação de práticas pedagógicas

Teste cognitivo com alunos

Análise do programa feita por especialistas

Verificar apropriação dos princípios e recursos do programa pelos professores

Desenvolver uma rede de aprendizagem qualificada e colaborativa

Captar a percepção dos alunos sobre mudanças na prática pedagógica do professor

Desenho da Avaliação

Page 13: Contribuições da Avaliação do Programa de Formação Continuada ...api.ning.com/files/EUEk6CBzyKBwJoD2Z3kr9XRgYk4FG6xc7GuWV6-BRMRfz1... · Programa de Formação continuada para

Grupos Focais com: tutores, coordenadores de grupos de estudo e alunos

Contribuir para melhoria da proficiência dos alunos

Questionário sociodemográfico com alunos

Entrevistas individuais e coletivas com: gerentes, assessores e técnicos da SEDU

Questionário contextual com: professores, gestores, pedagogos e alunos

Oficinas de avaliação de práticas pedagógicas

Teste cognitivo com alunos

Análise do programa feita por especialistas

Apropriação dos princípios e recursos do programa pelos professores

Desenvolvimento de uma rede de aprendizagem qualificada e colaborativa

Percepção dos alunos sobre mudanças na prática pedagógica do professor

Desenho da Avaliação

Page 14: Contribuições da Avaliação do Programa de Formação Continuada ...api.ning.com/files/EUEk6CBzyKBwJoD2Z3kr9XRgYk4FG6xc7GuWV6-BRMRfz1... · Programa de Formação continuada para

Grupos Focais com: tutores, coordenadores de grupos de estudo e alunos

Melhoria na proficiência dos alunos

Questionário sociodemográfico com alunos

Entrevistas individuais e coletivas com: gerentes, assessores e técnicos da SEDU

Questionário contextual com: professores, gestores, pedagogos e alunos

Oficinas de avaliação de práticas pedagógicas

Teste cognitivo com alunos

Análise do programa feita por especialistas

Apropriação dos princípios e recursos do programa pelos professores

Desenvolver uma rede de aprendizagem qualificada e colaborativa

Percepção dos alunos sobre mudanças na prática pedagógica do professor

Desenho da Avaliação

Page 15: Contribuições da Avaliação do Programa de Formação Continuada ...api.ning.com/files/EUEk6CBzyKBwJoD2Z3kr9XRgYk4FG6xc7GuWV6-BRMRfz1... · Programa de Formação continuada para

Grupos Focais com: tutores, coordenadores de grupos de estudo e alunos

Melhoria na proficiência dos alunos

Questionário sociodemográfico com alunos

Entrevistas individuais e coletivas com: gerentes, assessores e técnicos da SEDU

Questionário contextual com: professores, gestores, pedagogos e alunos

Oficinas de avaliação de práticas pedagógicas

Teste cognitivo com alunos

Análise do programa feita por especialistas

Apropriação dos princípios e recursos do programa pelos professores

Desenvolvimento de uma rede de aprendizagem qualificada e colaborativa

Captar a percepção dos alunos sobre mudanças na prática pedagógica do professor

Desenho da Avaliação

Page 16: Contribuições da Avaliação do Programa de Formação Continuada ...api.ning.com/files/EUEk6CBzyKBwJoD2Z3kr9XRgYk4FG6xc7GuWV6-BRMRfz1... · Programa de Formação continuada para

Grupos Focais com: tutores, coordenadores de grupos de estudo e alunos

Melhoria na proficiência dos alunos

Questionário sociodemográfico com alunos

Entrevistas individuais e coletivas com: gerentes, assessores e técnicos da SEDU

Questionário contextual com: professores, gestores, pedagogos e alunos

Oficinas de avaliação de práticas pedagógicas

Teste cognitivo com alunos

Análise do programa feita por especialistas

Verificar apropriação dos princípios e recursos do programa pelos professores

Desenvolvimento de uma rede de aprendizagem qualificada e colaborativa

Percepção dos alunos sobre mudanças na prática pedagógica do professor

Desenho da Avaliação

Page 17: Contribuições da Avaliação do Programa de Formação Continuada ...api.ning.com/files/EUEk6CBzyKBwJoD2Z3kr9XRgYk4FG6xc7GuWV6-BRMRfz1... · Programa de Formação continuada para

Resultados da Avaliação - Professores

Frequência Professores (%)

2009 2010

Procurei participar de todas as atividades do Multicurso 92,1 97,9

O trabalho em colaboração com meus colegas de grupo de estudo foi decisivo no meu aproveitamento do Multicurso 85,1 96,2

O Multicurso estimula um ambiente de trabalho mais cooperativo na escola 83,1 96,7

O Multicurso foi bastante útil para minha prática pedagógica 81,4 97,1

O Multicurso cumpriu seus objetivos como Programa de Formação Continuada 78,4 94,6

O Multicurso atendeu às minhas expectativas 72,4 93,1

O Multicurso não ajudou a melhorar minha prática como professor(a) de Matemática 12,3 16,4

Só participei do Multicurso em virtude do adicional financeiro 6,9 5,9

Fonte: Avaliação Externa do Multicurso Ensino Médio - Matemática, 2009/2010.

Page 18: Contribuições da Avaliação do Programa de Formação Continuada ...api.ning.com/files/EUEk6CBzyKBwJoD2Z3kr9XRgYk4FG6xc7GuWV6-BRMRfz1... · Programa de Formação continuada para

Ovaloresnega,vosindicamMENORusoderecursospedagógicos

Resultados da Avaliação - Professores

Page 19: Contribuições da Avaliação do Programa de Formação Continuada ...api.ning.com/files/EUEk6CBzyKBwJoD2Z3kr9XRgYk4FG6xc7GuWV6-BRMRfz1... · Programa de Formação continuada para

Resultados da Avaliação - Professores

Page 20: Contribuições da Avaliação do Programa de Formação Continuada ...api.ning.com/files/EUEk6CBzyKBwJoD2Z3kr9XRgYk4FG6xc7GuWV6-BRMRfz1... · Programa de Formação continuada para

Fonte:AvaliaçãodoProgramadeFormaçãoCon,nuada‐Mul,cursoMatemá,caEnsinoMédio‐ES,2008/2009/2010

Resultados da Avaliação - Alunos

Page 21: Contribuições da Avaliação do Programa de Formação Continuada ...api.ning.com/files/EUEk6CBzyKBwJoD2Z3kr9XRgYk4FG6xc7GuWV6-BRMRfz1... · Programa de Formação continuada para

Fonte:AvaliaçãodoProgramadeFormaçãoCon,nuada‐Mul,cursoMatemá,caEnsinoMédio‐ES,2008/2009/2010

Resultados da Avaliação - Alunos

Page 22: Contribuições da Avaliação do Programa de Formação Continuada ...api.ning.com/files/EUEk6CBzyKBwJoD2Z3kr9XRgYk4FG6xc7GuWV6-BRMRfz1... · Programa de Formação continuada para

Fonte:ProjetoMul,cursoEnsinoMédionoEspíritoSanto2010

Resultados da Avaliação - Alunos

Page 23: Contribuições da Avaliação do Programa de Formação Continuada ...api.ning.com/files/EUEk6CBzyKBwJoD2Z3kr9XRgYk4FG6xc7GuWV6-BRMRfz1... · Programa de Formação continuada para
Page 24: Contribuições da Avaliação do Programa de Formação Continuada ...api.ning.com/files/EUEk6CBzyKBwJoD2Z3kr9XRgYk4FG6xc7GuWV6-BRMRfz1... · Programa de Formação continuada para

Interessados – Produtos

Alunos

Professores

Gestão Escola

Gestão SEDU Universidades

FRM

Público Geral

Artigo de opinião Seminários Mídia Congressos

Flyers Cartazes de divulgação Questionários

Revista Redes Boletins Treinamento “Olhar Rede”

Revista Redes Boletins Treinamento “Olhar Rede”

Revista Redes Boletins Monitoramento “Olhar Rede”

Dissertações Teses Artigos Base de Dados

.ppt parciais Meta-avaliação Relatórios Mat. Prospecção

Page 25: Contribuições da Avaliação do Programa de Formação Continuada ...api.ning.com/files/EUEk6CBzyKBwJoD2Z3kr9XRgYk4FG6xc7GuWV6-BRMRfz1... · Programa de Formação continuada para

Contribuições do Processo Avaliativo

Projeto

Alinhamento conceitual da equipe

Preparação de novos conteúdos de formação

Incremento na produção de materiais de Comunicação e Monitoramento

Compartilhamento dos resultados com os envolvidos

Processo Avaliativo

Introdução de estudos longitudinais na análise

Identificação da contribuição da escola e do programa à aprendizagem

Análise da satisfação dos envolvidos no programa

FRM

Aprimoramento de briefings e modelos de contratação de empresas externas

Renovação da parceria

Fortalecimento dos argumentos de prospecção

Reconhecimento da qualidade FRM (Congressos e publicações)

SEDU

Linha de base: produção de

documentos de referência para o planejamento das escolas da rede

Informações fornecem subsídios para a gestão da SRE e suas regionais

Informações fornecem subsídios para renovação do projeto com novo escopo

Page 26: Contribuições da Avaliação do Programa de Formação Continuada ...api.ning.com/files/EUEk6CBzyKBwJoD2Z3kr9XRgYk4FG6xc7GuWV6-BRMRfz1... · Programa de Formação continuada para

•  contribuem para que os envolvidos encontrem seus próprios caminhos de

aprendizagem e desenvolvimento;

•  transformam a informação recolhida nos instrumentos em um novo

conhecimento;

•  acontecem em situações compartilhadas de aprendizagem entre aqueles que

avaliam e os protagonistas da ação;

•  promovem a reflexão com todos os envolvidos no processo;

•  divulgam, socializam e submetem as descobertas significativas à crítica

Os processos avaliativos...

Page 27: Contribuições da Avaliação do Programa de Formação Continuada ...api.ning.com/files/EUEk6CBzyKBwJoD2Z3kr9XRgYk4FG6xc7GuWV6-BRMRfz1... · Programa de Formação continuada para

Fundação Roberto Marinho UN Teleducação

Isa Lopes – Coordenação Pedagógica [email protected]

Page 28: Contribuições da Avaliação do Programa de Formação Continuada ...api.ning.com/files/EUEk6CBzyKBwJoD2Z3kr9XRgYk4FG6xc7GuWV6-BRMRfz1... · Programa de Formação continuada para

Referências Bibliográficas

  BOAVENTURA, Edvaldo M. Metodologia da Pesquisa. São Paulo: editora Atlas S.A., 2009.   BROOKE, N. SOARES, J. F. (org). Pesquisa em eficácia escolar: origens e trajetórias. Belo Horizonte: Editora da UFMG, 2008.   CUNHA, L. A. Educação e desenvolvimento social no Brasil. Rio de Janeiro: Francisco Alves, 1975.   FRANCO, C.; MANDARINO, M.; ORTIGÃO, M. I. Projeto pedagógico de escola promove eficácia e equidade em educação? Revista Undime - RJ, Rio de Janeiro, v. 7, n. 2, p. 30-46, 2001.   GIL, A. C. Métodos e técnicas de pesquisa social. 5. ed. São Paulo: Atlas, 1999.   SOARES, J. F. Qualidade e equidade na educação básica Brasileira: A evidencia do SAEB-2001. Archivos Analiticos de Politicas Educativas, 12(38). (2004). http://epaa.asu.edu/epaa/v12n38.   UNESCO.ORGANIZAÇÃO DAS NAÇÕES UNIDAS PARA A EDUCAÇÃO, A CIÊNCIA E A CULTURA. O perfil dos professores brasileiros: o que fazem, o que pensam, o que almejam. ABRAMOVAY, Miriam (coord) et al. São Paulo: Moderna, 2004.