Avaliação do impacto da hora do conto: experiência da aplicação da metodologia EIRAA 1 Avaliação das Sessões de Aprendizagem Iniciação às TIC1 Avaliação

Avaliação do impacto da hora do conto: experiência da aplicação da metodologia EIRAA 1

Avaliação das Sessões de Aprendizagem“Iniciação às TIC1”

Avaliação do impacto da hora do conto: experiência da aplicação da

metodologia EIRAA

Álvaro Fernandes | Maria José Leite | Leonor Gaspar Pinto

| Paulo Silva | César Ferreira

Setembro | 2009



Programa de Promoção da(s) Leitura(s) Programa de Promoção da(s) Leitura(s) Divisão de Gestão de BibliotecasDivisão de Gestão de Bibliotecas

Linha de Acção I – Promoção da Leitura e ColecçõesLinha de Acção II – Promoção da Literacia de InformaçãoLinha de Acção III – Promoção da Cidadania

Linhas de AcçãoLinhas de Acção

Identificar a Rede Municipal de Bibliotecas de Lisboa como um espaço privilegiado de acesso à informação e ao conhecimento e potenciador de leitura(s);

Consolidar e ampliar o papel social e educacional da Rede Municipal de Bibliotecas de Lisboa no desenvolvimento de hábitos de leitura e de competências de literacia da informação.

Objectivos GeraisObjectivos Gerais



Objectivos EspecíficosObjectivos Específicos

•Promover o contacto precoce com o livro e com a leitura;•Estimular o gosto pela leitura;•Diversificar interesses e práticas de leitura;•Promover o livro como forma de prazer e de lazer;•Promover o gosto pela partilha da leitura e do livro;•Promover e divulgar as colecções existentes na RMBL, assim como os autores.

Os indicadores de desempenho para estas actividades incidem no número de actividades previstas e realizadas, número de participantes e nível prossecução dos objectivos, todavia, no âmbito de cada projecto/ actividade, esta questão exige uma análise específica.

Linha de Acção I – Promoção da Leitura e ColecçõesLinha de Acção I – Promoção da Leitura e Colecções

Programa de Promoção da(s) Leitura(s) Programa de Promoção da(s) Leitura(s) Divisão de Gestão de BibliotecasDivisão de Gestão de Bibliotecas



O quê?O quê? Dá-me um livro…Conto-te uma História

Crianças em Idade Escolar: Grupos/Turma 1º Ciclo

Ensaio da aplicação metodologia medição impactos

Teste instrumentos de recolha

Matriz de ImpactoMatriz de ImpactoCaracterização os serviços/actividades a ser avaliadosCaracterização os serviços/actividades a ser avaliados



Os desafios que se colocaram à concepção da actividades

foram:

1. Como contribuir para promover o gosto por ouvir e ler

histórias nas crianças do 1º Ciclo?

2. Como contribuir para a promoção de hábitos de leitura

nas crianças do 1º Ciclo?

3. Como contribuir para promover a frequência de bibliotecas junto das crianças do 1º Ciclo?

“Dá-me um livro… Conto-te uma Dá-me um livro… Conto-te uma História”História”

Matriz de ImpactoMatriz de ImpactoCaracterização os serviços/actividades a ser avaliadosCaracterização os serviços/actividades a ser avaliados



Necessário porque…

- Cria as bases instrumentais, sociais e culturais, para uma fruição plena da cidadania na sociedade de informação e do conhecimento;- Permite intensificar o processo de difusão de aquisições precoces ao nível da Literacia;- Cativa novos públicos para a utilização das bibliotecas.

ETAPA 1ETAPA 1 Construa a “Estória”Construa a “Estória”

Recursos- Salas equipadas das bibliotecas municipais- Acervo documental actualizado- Técnicos com formação especifica e experiência na área



Onde e Quando? Onde e Quando?

2 Bibliotecas Municipais

Pelo menos 6 Sessões

Pelo menos 130 participantes

Final do Ano Lectivo 2008/2009

ETAPA 1ETAPA 1 Construa a “Estória”Construa a “Estória”

N.º de bibliotecas envolvidas

N.º de participantes

N.º de sessões

IndicadoresIndicadores

Resultados e Resultados e efeitos efeitos

definidosdefinidos



Conhecimento e CompreensãoConhecimento e Compreensão

ETAPA 2ETAPA 2 Seleccione Indicadores SMARTSeleccione Indicadores SMART

- Projecta-se que, pelo menos metade dos Professores considerem que a actividade contribuiu para promover oshábitos e competências de leitura da turma;

- Projecta-se que mais de metade dos Alunos compreendam bem a históriaabordada e os respectivos personagens.

Encadeamento para cada tipo de Efeito Global de Encadeamento para cada tipo de Efeito Global de Aprendizagem EGA :Aprendizagem EGA :

IndicadorIndicadorResultados e Resultados e efeitos efeitos

definidosdefinidosMétodo de RecolhaMétodo de Recolha

Nº de Professores que atribuíram um valorigual ou superior ao valor médio a simultaneamente: “3.2 Contributo paraaumentar as competências de leitura da turma”Nº de Alunos que atribuíram o valor máximo a:“1.1 Acho que percebi tudo sobre a história e ospersonagens”

Ficha de Avaliação da Actividade pelo Professor(Escala O a 4)(Escala O a 4)

Ficha de Avaliação da Actividade pelos Alunos(Escala 1 a 3)(Escala 1 a 3)



Aquisição de CompetênciasAquisição de Competências

Projecta-se que, pelo menos, três quartos dos Professores envolvidos considerem que a actividade contribuiupara aumentar as competências deleitura da turma



definidosdefinidos

Método de RecolhaMétodo de Recolha

Efeitos Esperados Efeitos Esperados (Outcomes)(Outcomes)

Nº de Professores que atribuíram o valor médioa: “3.2 Contributo para aumentar ascompetências de leitura da turma”

Ficha de Avaliação daActividade pelo Professor




Atitudes e ValoresAtitudes e Valores

Projecta-se que, pelo menos metade dos Professores e Alunos consideremuito conseguida a experiência proporcionada pela actividade


definidosdefinidos



Nº de Professores cuja média do valor Atribuído a: “1 – Avaliação do nível de interessedas actividades” e “2 – Apreciação dodesempenho do animador” , seja superior aovalor médioNº de Professores que atribuíram pelo menos ovalor médio a “3.3 Contributo para os hábitosde leitura da turma”Nº de Alunos que atribuíram o valor máximo atodos os itens do grupo “ 1 – Avaliação daactividade face aos objectivos”Nº de Alunos que atribuíram o valor máximo atodos os itens do grupo 2 – Avaliação global dodesenvolvimento da actividade”

Ficha de Avaliação daActividade peloProfessor

Ficha de Avaliação daActividade pelos Alunos



Divertimento, inspiração e criatividadeDivertimento, inspiração e criatividade

- Projecta-se que pelo menos metade dos Professores considere que a actividade contribuiu para aumentar o gosto da turma pela leitura

- Projecta-se que, pelo menos metade dos Alunos considere a actividade muito divertida




definidosdefinidos

Método de RecolhaMétodo de RecolhaNº de professores que atribuíram o valor médio a: “3.1 Contributo para aumentar o gosto da turma pela leitura”Nº de Alunos que atribuíram o valor máximo a:“1.2 Acho que foi tudo divertido”






Actividades, comportamentos e ProgressãoActividades, comportamentos e Progressão

- Projecta-se que pelo menos metadedos Alunos manifestem gosto e vontade por vir a ler

- Projecta-se que o Professor demonstre a intenção de participar com regularidade neste tipo de actividade.

- Projecta-se que o Professor venha a utilizar a actividade para complementar o desenvolvimento das suas estratégias educativas.

- Projecta-se que pelo menos metade dos Alunos demonstre maior apetência por ler.


Resultados e efeitos Resultados e efeitos definidosdefinidos






IndicadoresIndicadores- Nº de Alunos que atribuíram o valor médio a: 1.3 Gostei porque me ensinou uma nova história- Nº de Alunos que atribuíram o valor médio a: 3.1. Depois disto vou passar a ler mais histórias- Resposta “Sim” à questão “4 Pensa voltar a participar neste tipo de actividades a realizar pela RMBL?”-Incremento de um valor numa escala de “articulação entre estratégias de aprendizagem da leitura e promoção de leitura;- Incremento de um valor da actividade “Leitura” no grupo “1.1 Classifica das actividades semanais por grau de importância”- Incremento de 25% no nº de alunos que identificam pelo menos o nome de um título de uma lista de histórias;- Incremento do valor médio para o valor máximo, em “3.2. Vou passar a ir mais vezes à Biblioteca Municipal”









Guião para “Follow-up”Aplicação posterior



Foto

Método de recolha e instrumentos concebidosMétodo de recolha e instrumentos concebidos Ficha de inscrição

Mapas de Monitorização

Ficha de Avaliação da Actividade pelos Alunos

Ficha de Avaliação da Actividade pelos Professores

ETAPA 3 ETAPA 3 Escolher os métodos de recolha de Escolher os métodos de recolha de dadosdados



Adaptação dos Métodos de recolha às CriançasAdaptação dos Métodos de recolha às Crianças

Escala de Classificação das Respostas

Redefinição de objectivos:Redefinição de objectivos: Teste efectuado com crianças que frequentavam as Actividades de Verão durante o período de férias escolares

Grupos Diversificados acompanhados por Monitores/Animadores)

ETAPA 3 ETAPA 3 Escolher os métodos de recolha de Escolher os métodos de recolha de dadosdados



Envolver 3 Bibliotecas Municipais (Orlando Ribeiro; David Mourão-Ferreira; Natália Correia)

Envolveu 47 participantes

Abranger 3 sessões

Resultados Obtidos Resultados Obtidos (Outputs)(Outputs)

ETAPA 4 ETAPA 4 Analisar os dadosAnalisar os dados



Produto esperadoProduto esperado Produto obtidoProduto obtido

Envolver 2 bibliotecas

Envolver pelo menos 130130Participantes

Realizar pelo menos 6 sessões

Aplicação da Metodologia EIRAA (um processo completo) a uma actividade

3 bibliotecas envolvidas 3 bibliotecas envolvidas (Orlando Ribeiro; Natália (Orlando Ribeiro; Natália Correia; David Mourão-Correia; David Mourão-Ferreira)Ferreira)

47 (44 crianças e 3 adultos) 47 (44 crianças e 3 adultos) participantes envolvidosparticipantes envolvidos

3 sessões realizadas3 sessões realizadas

Teste dos instrumentos de Teste dos instrumentos de recolha de dadosrecolha de dados

Quadro Quadro ComparativoComparativo




Resultado: Resultado: Conhecimento e CompreensãoConhecimento e Compreensão

79,5% das crianças atingiram o nível 3 (máximo de 79,5% das crianças atingiram o nível 3 (máximo de concordância numa escala de 1 a 3) em relação ao concordância numa escala de 1 a 3) em relação ao item em questão: compreenderam a história e os item em questão: compreenderam a história e os personagenspersonagens

Todos os adultos consideram que contribuiu para aumentar Todos os adultos consideram que contribuiu para aumentar os hábitos e competência de leituraos hábitos e competência de leitura


Resultado: Resultado: Aquisição de CompetênciasAquisição de Competências

Todos os adultos consideram que contribuiu para aumentar os Todos os adultos consideram que contribuiu para aumentar os hábitos e competência de leiturahábitos e competência de leitura

Resultados por Efeitos Gerais de Aprendizagem Resultados por Efeitos Gerais de Aprendizagem





Resultado: Atitudes e ValoresResultado: Atitudes e Valores

(68%) das Crianças consideraram que a actividade (68%) das Crianças consideraram que a actividade alcançou o objectivo ao nível máximo (compreenderam alcançou o objectivo ao nível máximo (compreenderam a história e consideraram divertida)a história e consideraram divertida)

(72,7%) das crianças atribuíram o valor máximo à (72,7%) das crianças atribuíram o valor máximo à actividade (incluindo local, actividades actividade (incluindo local, actividades complementares e quem contava)complementares e quem contava)

Todos os adultos atribuíram o valor máximo à Todos os adultos atribuíram o valor máximo à actividade a todos os níveis: Nível de interesse da actividade a todos os níveis: Nível de interesse da actividade; Apreciação desempenho do Animadoractividade; Apreciação desempenho do Animador





Resultado: Resultado: Divertimento, inspiração e criatividadeDivertimento, inspiração e criatividade Todos os adultos consideraram que a actividade Todos os adultos consideraram que a actividade contribui paracontribui para

aumentar o gosto do grupo pela leituraaumentar o gosto do grupo pela leitura

61,3% das crianças considerou a actividade divertida61,3% das crianças considerou a actividade divertida





Resultado: Resultado: Actividades, Comportamentos e Progressão Actividades, Comportamentos e Progressão

((A aplicar Posteriormente)

(47,7%) Das crianças manifestou que iria passar a ler mais depois

da actividade;

O restantes indicadores relativos a este Efeito (EGA) não foram recolhidos

Projecta-se a utilização do processo de ”Follow-up” na recolha de dados sobre a evolução hábitos de leitura e a importância da leitura para um ensaio com Grupos-Turma, para a mesma actividade mas com a recolha dos dados em dois momentos diferentes do ano lectivo



Aplicação da metodologia a Grupos-TurmaAplicação da metodologia a Grupos-Turma

Envolvimento de 10 bibliotecas/ ano

Pelo menos 520 participantes/ ano

Pelo menos 20 sessões/ ano lectivo

Matriz de ImpactoMatriz de ImpactoCaracterização os serviços/actividades a ser avaliados paraCaracterização os serviços/actividades a ser avaliados para

O quê?O quê?

Objectivos do Processo:

Aplicação Metodologia EIRAA de forma articulado com o PAD Programa de Avaliação de Desempenho da RMBL

Desenvolvimentos FuturosDesenvolvimentos Futuros



ETAPA 1ETAPA 1

Onde e Quando?Onde e Quando? Requisitos:

1- Aplicação ao mesmo grupo Outubro/Novembro 2009 e Maio 2010;

2- Periodicidade: Bianual (aplicação de instrumentos follow-up por amostragem)



Contacto: [email protected]: [email protected]

Obrigado Obrigado

Documents

Avaliação do impacto da hora do conto: experiência da aplicação da metodologia EIRAA 1 Avaliação das Sessões de Aprendizagem Iniciação às TIC1 Avaliação