Upload
simao-pedro-marinho
View
216
Download
0
Embed Size (px)
DESCRIPTION
Documento inicial com a proposta para avaliação do Projeto Um Computador por Aluno (UCA).
Citation preview
MINISTÉRIO DA EDUCAÇÃO
SECRETARIA DE EDUCAÇÃO A DISTÂNCIA
PROJETO UM COMPUTADOR POR ALUNO - UCA
PROPOSTA PARA AVALIAÇÃO DO PROJETO UCA
Equipe Elaboradora
Pedro Andrade – SEED/MEC
Bartholomeu Tôrres Trócolli – UnB
Cláudio de Albuquerque Marques - UFC
Isabel Franchi Cappelletti - PUC/SP
Ronaldo Pilatti – UnB
Wagner Bandeira Andriola - UFC
Brasília, 29 de agosto de 2008
1
1. Eixos estruturantes do Projeto UCA
Em um mundo cada vez mais globalizado e interdependente, é fundamental que
nossas crianças e adolescentes sejam inseridos na dimensão tecnológica, para agirem
como cidadãos integrados e produtivos na sociedade do conhecimento.
As tecnologias digitais vêm revolucionando a vida das pessoas, a relação
interpessoal e a cultura. A comunicação ocorre entre as pessoas de todos os cantos do
mundo, aumentando a circulação de idéias e conhecimentos com o acesso a bases de
dados centrados na Internet. A expansão das redes é um novo e poderoso meio de
alcance da inteligência coletiva, proporcionando condições de avanços para a educação
brasileira.
A escola pública em nosso país representa a entrada de seus alunos ao
conhecimento sistematizado para a sociedade das redes e acesso à informação com as
bases de dados disponibilizadas na rede mundial que, deveriam estar ao alcance de
todos os cidadãos.
De acordo com o Censo Escolar (INEP, 2006) 86% de estudantes estão
matriculados nas escolas públicas, que em números correspondem, aproximadamente, a
48,5 milhões de estudantes, distribuídos em 82,6% das em escolas públicas localizadas
em áreas urbanas e rurais. Ou seja, existem 168,4 mil escolas públicas abstraídas de um
total de 203,9 mil estabelecimentos educacionais (educação básica) em todo país.
Ao examinar o mesmo Censo Escolar, de 2006, no que se refere ao acesso a
tecnologia pelas escolas públicas, constata-se que há apenas 36.816 (18%) de escolas
públicas brasileiras com laboratório de informática, e 29.890 (14,6%) conectadas à
Internet – 92% em baixa velocidade, 8% com velocidade maior que 512 Kbps, incluído
nestes 8% os pontos de presença do Governo Eletrônico Sistema de Atendimento ao
Cidadão (Gesac), programa do Ministério das Comunicações (MC).
O Programa Nacional de Tecnologia Educacional (ProInfo) do Ministério da
Educação (MEC) atendeu, no período de 10 anos, de 1997 a 2007, com a estratégia de
laboratórios de informática, um total de 14.386 escolas. No ano de 2008, está ocorrendo o
atendimento de 12.750 escolas, sendo que: 9 mil são escolas urbanas e 3.750 são
escolas rurais. No total, o ProInfo atenderá até o ano de 2008, 27.136 escolas públicas.
A conexão à Internet banda larga de 1 Mbps (Megabit por segundo) nas escolas
públicas está sendo providenciada pelo MEC em parceria com o MC em termos
gradativos. Todas as 56.685 escolas urbanas de ensino básico serão conectadas, num
prazo de 3 anos (2008-2010), à Internet banda larga, numa parceria do governo federal
2
com as operadoras de telecomunicações, com a gratuidade da conexão. O prazo de
concessão firmado com o governo federal é de 18 anos (2008-2025), de modo a chegar
Internet em banda larga a todas as escolas públicas.
São números que denotam o esforço do Governo Federal para levar laboratórios e
recursos de informática às escolas e prover outros meios como conectividade, além da
formação de professores e das equipes técnicas para o uso pedagógico da tecnologia na
escola, visando a melhoria da qualidade da educação e a participação ativa no processo
de inclusão digital.
O volume de equipamentos computacionais adquiridos até agora para as escolas
públicas, tornou possível o cálculo da média de 350 alunos para cada computador
adquirido, muito longe da meta do governamental de universalização, até 2010, de
atender a todas escolas públicas, que tangenciará uma média de um computador para
cada 50 alunos.
A inclusão digital tem um impacto na qualidade do ensino, mas só o laboratório de
informática na escola não é suficiente para apoiar mudanças pedagógicas desejadas
pelas redes escolares. Além da conexão com a Internet, de recursos educacionais
complementares (conteúdos, guias de tecnologia), os projetos pedagógicos que envolvam
a utilização da tecnologia devem ser experimentados para que mudanças de estruturação
e funcionamento do modus operandi do ambiente de ensino possam ocorrer.
O atual desafio do Governo é acrescido, no âmbito do ProInfo, em disseminar e
promover o uso pedagógico do laptop educacional, com o Projeto Um Computador por
Aluno – UCA; trata-se de um projeto de inclusão digital pedagógica nas escolas, com
repercussão na família, baseado em um notebook, tipo subnotebook, ou um laptop de
baixo custo, apto ao enlace de conectividade sem fio (em rede mesh ou wireless),
objetivando difundir o conhecimento e tecnologias que oportunizam a inovação
pedagógica nas escolas públicas. A idéia é revolucionar a educação, a partir do uso
desse laptop por estudantes e educadores da escola pública em um ambiente que
permita a imersão numa cultura digital e a sua utilização como ferramenta de
aprendizagem.
Outras características desse device, como mobilidade de uso pedagógico do
equipamento em ambientes dentro e fora da escola, uso das diferentes mídias colocadas
à disposição, contribuem para que a incorporação dos laptops na escola pública tome a
forma de um projeto educacional capaz de motivar a construção de novos caminhos de
expressão e de criação, práticas pedagógicas inovadoras e de incrementos adaptáveis
aos contextos locais.
3
Pela liberdade que esse equipamento oferece, poderá produzir impacto na
aprendizagem do aluno, na escola e no ambiente familiar.
A imersão digital com o uso intensivo e efetivo dos laptops e a qualidade pedagógica
com o uso de recursos educacionais articulados ao currículo estão no cerne da proposta
de uso dos laptops com vista a autonomia individual e coletiva do aprendizado, a
participação e gestão comunitária, a criação e produção de conhecimento e sua
disseminação.
Se efetivadas, essas expectativas podem constituir-se em uma revolução na
educação (básica), transpondo os muros da escola, refazendo os tempos, espaços e
modos de organização da educação formal, inspirando projetos e práticas pedagógicas
inovadoras e contextualizadas, motivando o aprendizado e tornando-o socialmente
significativo.
A questão não é simplesmente como operacionalizar o Projeto UCA do ponto de
vista das condições relacionadas ao contexto, organização, estrutura física e digital nas
escolas. Este é o lado mais visível da estruturação técnica da sistematização e do
acompanhamento. Mais complexo e fundamental é explicitar as situações inovadoras que
surgirão nas escolas, quais seus resultados para inspirarem outras escolas a trilhar seus
próprios caminhos com o uso pedagógico do laptop. A busca e a qualidade sócio-cultural
da educação, sucesso na aprendizagem do aluno, fornecendo elementos para soluções
alternativas em relação à expansão do Projeto, surgidas em processo e numa fase
posterior.
O Projeto Um Computador por Aluno - UCA é uma iniciativa da Presidência da
República. Uma decisão presidencial, em junho de 2005, define a necessidade de estudar
a proposta apresentada pelo Media Lab MIT, de um equipamento portátil na categoria de
laptop sem fins lucrativos e não desenvolvido para o varejo do mercado.
O Projeto Hundred-Dollar Laptop, ou laptop de cem dólares, pretende uma máquina
para cada estudante. O ideal da proposição focaliza que seja utilizada para o aprendizado
e para promover novo insight, novas descobertas.
A partir do ato presidencial, foram desenvolvidos estudos para viabilização do projeto
com a formação de grupos ministeriais em várias frentes, com tarefas definidas para
serem concluídas até março de 2006, a cargo das seguintes Forças Tarefas:
Desenvolvimento Pedagógico; Cadeia Produtiva e Desenvolvimento Tecnológico;
Orçamento; Relações Internacionais; Comunicação Social; Jurídico e Institucional.
Os trabalhos das Forças Tarefas forneceram elementos para análise de alternativas
de um caminho próprio calcado em valores e parâmetros técnicos e políticos de nossa
4
realidade. Explicitou-se que a realização nacional seja balizada pela (1) melhoria da
qualidade da educação; (2) inclusão digital; (3) inserção da cadeia produtiva brasileira no
processo de fabricação; e (3) na manutenção dos equipamentos.
Buscou-se reconhecer os requisitos funcionais e pedagógicos junto à comunidade
acadêmico-científica e pedagógica nacional e a contratação de quatro centros de
pesquisa para: realizar testes preliminares com os equipamentos disponíveis na categoria
de laptops; apontar soluções técnicas capazes de encaminhar uma produção nacional; e
avaliar os recursos existentes de formação de redes para as escolas públicas.
Na seqüência, foram escolhidas cinco escolas públicas como palco para
experimentações com laptops educacionais doados pelos fabricantes. Esta fase foi
denominada, no âmbito governamental, de Fase I do Projeto UCA. Um Grupo de
Assessoramento Pedagógico ao Projeto UCA foi constituído para acompanhar os
experimentos e oferecer subsídios de cunho pedagógico ao Projeto.
A Fase do Pré-Piloto do Projeto UCA nas escolas foi executada sem o planejamento
prévio do processo de avaliação dessas experiências. Ademais não foram previstos
recursos financeiros de atendimento às necessidades fundamentais do projeto e nem
suportes externos governamentais para a capacitação das atividades. Contudo, busca-se
resgatar a experimentação nas cinco escolas em uma documentação, em andamento.
Denominada de Pré-Piloto, as experimentações pedagógicas na maioria das escolas
contaram com o apoio de grupos de pesquisadores de universidades e das equipes das
secretarias de educação, mas não foi de todo suficiente para um registro
metodologicamente. O tamanho da amostra foi bastante reduzido e despojado de um pré-
planejamento sistemático.
O Projeto UCA está atualmente na denominada Piloto, que pode ser concebida
como estudo de pré-investimento necessário à expansão do Projeto UCA. Nesta fase,
será preciso executar experimentações, investigações e avaliações para determinar a
viabilidade e a especificação de seus principais atributos frente às circunstâncias de
certos fatores decorrentes das condições ambientais em que se desenrolarão.
O Piloto deverá ser desenvolvido em 300 escolas públicas pertencentes às redes de
ensino estaduais e municipais, distribuídas em todas as unidades da federação,
selecionadas mediante critérios acordados com o Conselho Nacional de Secretários
Estaduais de Educação (Consed), a União Nacional dos Dirigentes Municipais de
Educação (Undime), a Secretaria de Educação a Distância do Ministério da Educação
(SEED/MEC) e a Presidência da República.
Resumindo, o Piloto será executado em:
5
vinte e sete estados e dez escolas públicas por Estado, sendo cinco escolas
pertencentes a rede estadual, selecionadas pelas secretarias de educação dos
estados, e cinco escolas pertencentes às redes municipais entre urbanas e rurais,
selecionadas pela UNDIME. As escolas selecionadas atenderam o critério de 500
alunos e professores por escola.
cinco municípios escolhidos pelo Governo Federal, denominados de
UCA Total, onde serão atendidas todas as escolas na área do município. A
escolha desses municípios foi condicionada à prévia realização de um
convênio entre o Estado e o Município, de modo que as duas redes possam
ser beneficiárias. Outro critério é que o número total de professores e alunos
das redes municipal e estadual não seja superior a 3.000.
Para atender às 300 escolas, mais todas as escolas de cinco municípios, o Governo
Federal adquirirá de 150 mil laptops e servidores, os quais serão distribuídos da seguinte
forma: 500 laptops/aluno e dois servidores por escola.
Outro aspecto fundamental para a Fase II do Projeto UCA se refere às condições de
suporte que deverão ser disponibilizados às escolas e aos municípios UCA Total. As
responsabilidades das partes são:
Do governo federal – equipamentos, acesso de 1 Mbps à Internet,
capacitação e avaliação.
Dos governos estaduais e municipais – adesão ao projeto das instâncias
envolvidas, infra-estrutura física de instalação elétrica e lógica, projeto pedagógico
da escola.
Espera-se que essas condições de suporte e da amostra possibilitem uma certa
compreensão do uso pedagógico do laptop nas diferentes realidades regionais, o
desenvolvimento contextualizado de projetos político-pedagógicos, bem como o grau de
aceitação das comunidades escolares às inovações educacionais. Espera-se igualmente
que ocorram benefícios adicionais no desenvolvimento da tecnologia educacional por
parte das instituições de ensino superior envolvidas, além do reforço no processo de
inclusão digital de segmentos da sociedade brasileira.
Caracteriza-se assim a realização de um projeto plural e a possibilidade de obtenção
de dados que subsidiarão definições mais concretas no futuro, a respeito do uso do laptop
educacional conectado, em escala mais ampla.
6
2. Avaliação de Políticas Públicas
O processo de avaliação do Projeto UCA tem por finalidade primeira identificar
sucessos e obstáculos na implementação do Piloto (Fase II), com a conseqüente
proposição de recomendações de ações para sua continuidade, bem como a inserção de
novas propostas.
Para tanto, faz-se necessário conhecer as relações entre a proposta de utilização do
laptop educacional nas escolas, o processo de implementação e os resultados esperados
e desejáveis do referido Projeto. O conhecimento a respeito dessas questões revelará
importantes informações e indicadores que deverão ser utilizados nas seguintes ações:
a) para a melhoria da qualidade das propostas pedagógicas;
b) para a promoção de maior eficiência e eficácia do processo de implementação
das ações do Projeto; e
c) para subsidiar os gestores do Projeto UCA tanto no acompanhamento e
monitoramento do desempenho dessa política, quanto no próprio redesenho
dessa política.
Na vasta literatura acerca da avaliação educacional há inúmeros intentos de
classificação das investigações de cunho avaliativo que fornecem alguns subsídios para
especificar a proposta de avaliação para a Fase II do Projeto UCA. Dentro das diversas
modalidades avaliativas, optou-se por definir as modalidades que, em uma primeira
proposta, parecem necessárias à avaliação da Fase II do Piloto UCA. São elas: avaliação
diagnóstica, avaliação de processo, avaliação formativa, avaliação de resultados e
avaliação de impacto.
A primeira proposta refere-se à avaliação diagnóstica. Esse tipo de avaliação, além
de oferecer elementos importantes sobre a factibilidade do Projeto, produz informações
que podem ser incorporadas, melhorando seu processo de implementação. Neste projeto,
a avaliação diagnóstica ganha importância quando esclarece a situação inicial em relação
à inclusão digital, o uso que se faz das TIC, a qualidade do projeto pedagógico e outras
tantas questões implicadas, que sem a avaliação de impacto não seria possível.
A segunda proposta engloba as avaliações de processo e formativa. A avaliação de
processo possibilitará a identificação do grau de coerência e de perfeição das atividades
(ou dos processos) que estão sendo executadas, acompanhando, observando e
diagnosticando em processo os objetivos do Projeto. A avaliação de um projeto piloto
requer que a avaliação de processo tenha um caráter formativo, onde as informações
levantadas pela avaliação de processo sejam utilizadas para o seu aprimoramento, em
7
muitos casos concomitantemente à sua execução. Este acompanhamento inclui o
diagnóstico das eventuais falhas dos instrumentos, procedimentos, conteúdos e métodos,
bem como da adequação das atividades propostas pelo Projeto UCA em relação a seu
público-alvo.
A terceira proposta se caracteriza como avaliação de resultados. Esse tipo de
avaliação deverá responder se as metas, os objetivos e os públicos-alvos pretendidos
pelo Projeto foram atingidos. Adicionalmente, por se tratar de um projeto piloto
caracterizado pelo grau de pioneirismo do Projeto UCA, a avaliação deverá,
obrigatoriamente, buscar identificar não somente as mudanças previamente definidas
como também outras não esperadas e que acabaram sendo alcançadas como
conseqüência do desenvolvimento de uma série de ações implementadas dentro o
escopo do Projeto UCA.
A quarta e última proposta se refere à avaliação de impacto. Este processo
avaliativo busca identificar as mudanças significativas, positivas ou negativas, promovidas
na realidade sobre as quais as ações do Projeto UCA foram desenvolvidas e por ele
provocadas. Para tanto, a comparação entre os resultados é fundamental, mas não
suficiente. Muito embora a literatura aponte a fragilidade de uma comparação do tipo
“antes – depois”, há alternativas cientificamente mais densas que permitem comparar
participantes do Projeto UCA e não participantes, confrontando objetivos, metas e
realizações alcançadas.
Nesse âmbito, cumpre destacar que o estudo de avaliação do Projeto UCA possui
características marcantes, que exige diagnóstico que o caracterize, inicialmente, como
ação processual/formativa, bem como avaliação de resultados efetivos. Os dados e as
informações que serão gerados pelo estudo avaliativo permitirão, por parte dos gestores e
formuladores, a revisão do Projeto UCA com vistas ao aprimoramento e à adequação ao
público usuário (ANDRIOLA 1999; 2001a; 2001b; 2004).
Desse modo, e para finalizar, cabe recorrer a Therrien e Sobrinho (1983/1984),
para quem a avaliação deverá possibilitar o planejamento eficiente de ações, com vistas a
assegurar a credibilidade (da atividade, do programa ou da política) frente aos olhos dos
usuários e perante a sociedade na qual se insere. Seguem os mencionados autores
afirmando que a avaliação deverá:
(...) mostrar não apenas o somatório de realizações [da atividade, do programa, da política], mas, sobretudo, o efeito ou impacto de sua presença e atuação no contexto social que lhe dá razão de ser. (...) Ao mesmo tempo em que contribui para a unificação efetiva das partes num todo coerente e atuante, a avaliação consolida os
8
empenhos de participação, porque reconhece os princípios da democracia e da responsabilidade conjunta [de usuários, de executores, de gestores e de formuladores] (THERRIEN & SOBRINHO, 1983/1984, p. 19).
3. Desafios para avaliar o Projeto UCA
Por conformar um conjunto de ações de características marcadamente pioneiras e
inovadoras, o Projeto UCA terá pela frente desafios, que não são, obviamente
intransponíveis, mas que exigirão reflexão, amadurecimento, conhecimento e experiência,
por parte da equipe responsável pelo desenho das estratégias de avaliação. Dentre as
principais dificuldades, podem ser destacadas:
Necessidade de oferecer evidências válidas e fidedignas acerca dos resultados
do Projeto UCA;
Necessidade de acompanhar o grau de implementação das ações gerenciais,
de formação e pedagógicas, propostas para cada Escola partícipe do Projeto
UCA (há que se verificar o grau de realização do que foi proposto a priori, bem
como identificar e corrigir problemas que porventura aconteçam nas diversas
fases do projeto em foco).
Necessidade de utilizar as informações coletadas e produzidas pela Sala de
Posição do Projeto UCA no sentido de produzir indicadores que possam auxiliar
o processo de acompanhamento do grau de implementação das ações
gerenciais (especificadas no item anterior).
Necessidade de verificar cientificamente se o Projeto UCA promoveu, de fato,
as mudanças desejadas.
Necessidade de verificar que outras mudanças, além das esperadas, foram
promovidas em decorrência da participação das escolas nas ações do Projeto
UCA.
Necessidade de oferecer evidências a respeito da eficiência, da eficácia e da
efetividade social do Projeto UCA, visando subsidiar a tomada de decisões para
futuros ajustes e/ou para sua continuidade.
Necessidade de consolidar-se uma base de dados relevantes, do ponto de vista
gerencial e educacional, com vistas ao acompanhamento das supostas
mudanças promovidas pelas ações decorrentes da implementação do Projeto
UCA.
9
Com base nas necessidades expostas, haverá que se considerar o uso de dois
tipos principais de designs de pesquisas quase-experimentais: (1) pesquisa com grupos
equivalentes (sócio-economicamente e educacionalmente), porém submetidos a
situações distintas, no que diz respeito ao uso dos insumos e das ações inerentes ao
Projeto UCA, e (2) delineamentos pré e pós-teste e (especialmente nesta fase inicial).
Desse modo, será possível detectar e documentar as mudanças que são esperadas que
ocorram na comunidade (ambiente macro), na escola (ambiente meso), nas salas de aula
(ambiente micro) e nos alunos, em decorrência das ações e mudanças oriundas da
implantação do Projeto UCA (Ver Figura 1 abaixo).
Figura 1 – Fluxo da avaliação
Considerando o número de escolas e de atores que serão paulatinamente
envolvidos no Projeto UCA, bem como o objetivo de se criar um sistema permanente de
acompanhamento e avaliação, se faz necessário desenvolver estudos e projetos para a
implantação de um sistema on-line de monitoramento de uso dos computadores, previsto
para ser implementado através da Sala de Posição do Projeto UCA. Esse sistema
alimentaria em tempo real bancos de dados com indicadores de utilização dos laptops por
10
parte dos usuários do programa. Desta forma garante-se um conjunto de informações
essenciais para se acompanhar, avaliar, aperfeiçoar e desenvolver pesquisas sobre o
projeto UCA.
4. Estrutura da avaliação do Projeto UCA
A avaliação do Projeto UCA será estruturada considerando os seguintes aspectos:
a) O Contexto no qual o Projeto UCA será implementado (macro, meso e micro; a
efetividade das parcerias estabelecidas entre as esferas federal, estadual e
municipal, o modelo de gestão escolar, etc.).
b) Os Insumos utilizados na sua implementação e seu grau de adequação aos
objetivos do referido projeto (os recursos físicos e tecnológicos; a infra-
estrutura; a sala de aula e o material pedagógico).
c) Os Recursos Humanos (formação inicial; características marcantes,
experiências pedagógicas; conhecimento das TIC; uso das TIC em sala de
aula).
d) Os Processos de gestão administrativa e pedagógica do Projeto UCA e o uso
dos equipamentos.
e) Os Resultados (mudanças em indicadores sociais do município e da
comunidade; transformações nos processos escolares; mudanças no
aprendizado discente; transformações das práticas educativas; uso do
computador e de recursos tecnológicos para aprendizagem).
Estes elementos estão representados sinteticamente na Figura 2, que simboliza a
relação funcional entre o grupo que planeja (GT-UCA) e o grupo que avalia (GT-
Avaliação). Esses grupos são responsáveis pelo desenvolvimento de ações de
implementação e de avaliação dos diferentes objetos representados na figura (municípios,
formação, escolas e salas de aula).
11
Figura 2 – Objetos de avaliação
5. Etapas do Processo Avaliativo
A avaliação do Projeto UCA será constituída das cinco etapas abaixo
especificadas.
5.1. Etapa 1 - Organização da base de dados e delineamento amostral do Projeto
UCA.
Antes mesmo de iniciarmos as atividades relativas à avaliação propriamente dita,
será necessário realizar as seguintes atividades:
a) Organização de uma base de dados com indicadores sociais, econômicos e
educacionais dos municípios e das escolas, que deverão ser extraídos de diversas bases
de dados já existentes (IBGE, EDUCACENSO, PROVA BRASIL, etc.). Essa base de
dados deverá ser atualizada ao longo da execução do Projeto UCA, sempre buscando
12
agregar informações e indicadores que deverão ser utilizados nos diversos momentos de
análise dos resultados obtidos.
b) Realização de estudo descritivo do conjunto de escolas incluídas no Projeto
UCA;
c) Elaboração de um plano amostral das escolas1 partícipes, com vistas a alcançar
os objetivos a seguir especificados nas diversas etapas do Projeto UCA.
5.2. Etapa 2 – Acompanhamento e avaliação dos processos formativos do Projeto
UCA.
A proposta de avaliação do Projeto UCA inclui o acompanhamento e avaliação das
diversas atividades de formação inicial que serão proporcionadas às IES Globais, IES
Locais, NTEs e professores. Devido a sua importância, somente após a finalização da
proposta de formação serão definidas as diretrizes gerais para o acompanhamento e
avaliação de suas atividades.
5.3. Etapa 3 - Imediatamente anterior à implementação do Projeto UCA (Avaliação
Diagnóstica).
A avaliação diagnóstica deverá ser realizada antes do início da implantação do
Projeto UCA (ou durante os primeiros meses para alguns levantamentos). A realização
das atividades dessa etapa obedecerá ao plano amostral das escolas proposto no item
5.1. Para essa fase estão propostos os seguintes objetivos:
a) Descrever o ambiente escolar no que diz respeito à adequação da infra-estrutura
física, das instalações e dos equipamentos de informática. Serão empregadas as
seguintes técnicas de coleta de dados: observação in situ, análise documental e
entrevistas com os gestores das escolas;
b) Verificar as parcerias estabelecidas com agentes externos, tais como secretarias
municipais e estaduais, bem como grupos de pesquisa de IES e NTE. Serão empregadas
as seguintes técnicas de coleta de dados: observação in situ, análise documental e
entrevistas com gestores das escolas;
1 Em caso de mais de uma Escola ter iniciado a execução do referido projeto, será escolhida aquela que oferecer cursos nos níveis de E.F. I e II, bem como E.M. No caso de haver mais de uma escola nessa situação far-se-á sorteio.
13
c) Verificar a existência de Projeto Pedagógico e sua adequação aos objetivos do
Projeto UCA. As técnicas de coleta de dados a serem usadas serão: a análise documental
e entrevistas com professores e gestores;
d) Caracterizar a gestão pedagógica da escola. As técnicas de coleta de dados a
serem usadas serão: a análise documental e entrevistas com professores e gestores;
e) Caracterizar as práticas pedagógicas da escola. As técnicas de coleta de dados
a serem usadas serão: entrevistas com professores e gestores;
f) Caracterizar o perfil da equipe responsável pela condução das ações do Projeto
UCA nas escolas (alunos-monitores, professores, coordenadores e gestores). A coleta de
dados dar-se-á através de questionários semi-estruturados;
Além desses aspectos, deverão também ser considerados:
g) As expectativas da comunidade escolar (alunos, professores, diretores e pais). A
coleta de dados dar-se-á através do uso de questionários semi-estruturados, de
entrevistas e/ou grupos focais;
h) O perfil dos alunos em aspectos diversos, tais como: cognição, aspectos
psicológicos e aprendizagem. Serão empregados questionários estruturados e semi-
estruturados, bem como testes padronizados (para avaliar as características
psicológicas);
k) Os indicadores de inclusão digital no município em que o Projeto UCA estará
presente. Será verificado o número de lan houses, uso das TIC na escola, uso do
computador no âmbito familiar, etc.
5.4. Etapa 4 - Implementação do Projeto UCA (Avaliação Processual)
Nesta etapa será efetivado um estudo descritivo através de plano amostral, com
vistas às seguintes ações:
a) Monitoramento da atuação pedagógica dos professores em sala de aula. Serão
realizadas filmagens (de caráter amostral e periódica, pois se trata de procedimento
extremamente caro e complexo, sobretudo no que tange à análise qualitativa das
informações coletadas) e perguntas/questionários on-line (pop-up) dirigidos aos gestores
escolares, professores e alunos;
b) Monitoramento on-line do uso das TIC pelos professores. Serão utilizadas
perguntas/questionários on-line (pop-up) dirigidas aos professores e alunos;
14
c) Monitoramento on-line do uso dos laptops por parte dos alunos e dos
professores (o que fazem, o quanto fazem, como o fazem e onde o utilizam). Serão
utilizadas perguntas on-line (pop-up) acerca de temas relevantes à compreensão do
processo de ensino e aprendizado, além da utilização de informações geradas pela Sala
de Posição do UCA;
d) Monitoramento on-line da satisfação dos usuários relativos à disponibilidade,
facilidade e relevância dos recursos do laptop educacional como instrumento facilitador do
aprendizado. Igualmente como no ponto anterior, serão utilizadas dirigidas aos alunos e
aos professores;
e) Avaliação da gestão acadêmico-pedagógica da escola a partir do uso do laptop
como instrumento facilitador do aprendizado discente. Serão utilizadas perguntas on-line
(pop-up) dirigidas aos professores;
f) Monitoramento full time do funcionamento e da manutenção da rede, dos
equipamentos (incluindo-se os computadores) e dos espaços de aprendizagem
(laboratórios e salas de aula). Serão utilizadas informações decorrentes do
monitoramento do sistema (rede, equipamento e espaços de informática) pela Sala de
Posição;
g) Monitoramente da gestão (execução) do Projeto UCA nas escolas. Para isso
serão utilizadas perguntas on-line (pop-up) dirigidas aos professores;
h) Adequação de parcerias institucionais estabelecidas entre as IES, NTE e
secretarias de educação. Serão utilizados questionários semi-estruturados dirigidos aos
gestores das escolas, bem como aos professores.
5.5. Etapa 5 - Avaliação de resultados
Com vistas a identificar as mudanças ocasionadas pela execução do Projeto UCA
sobre os usuários, repetir-se-ão algumas medidas inicialmente feitas na etapa
diagnóstica, dentre as quais:
a) As expectativas da comunidade escolar (alunos, professores e diretores). A
coleta de dados dar-se-á através do uso de questionários semi-estruturados e de
entrevistas;
b) O perfil dos alunos em aspectos diversos, tais como: cognição, aspectos
psicológicos e aprendizagem. Serão empregados questionários estruturados e semi-
estruturados, bem como testes padronizados (para avaliar as características
psicológicas);
15
c) A relação dos resultados dos alunos das escolas do Projeto UCA com as
informações apresentadas no ponto b, acima descritas. Para tal, far-se-á uso dos
resultados dos referidos aprendizes em sistemáticas de avaliação externa (de
responsabilidade federal, estadual ou municipal – desde que estas permitam a
comparabilidade histórica). Com este propósito, serão utilizadas bases de dados do INEP
com os resultados de sistemáticas avaliativas do aprendizado discente, tais como SAEB e
Provinha Brasil, ou outras bases existentes nos respectivos Estados.
5.6. Etapa 6 - Avaliação de impacto
A avaliação de impacto implica em identificar o grau de mudanças significativas,
positivas ou negativas, ocorridas nos indivíduos, nas famílias e na realidade na qual estão
inseridos, decorrentes das ações desenvolvidas no âmbito do Projeto UCA. Além das
comparações entre os resultados obtidos na avaliação diagnóstica e na avaliação de
resultados, far-se-ão estudos comparativos envolvendo os seguintes aspectos:
a) A percepção das mudanças ocasionadas pelo Projeto UCA, através da opinião
da comunidade escolar. Serão empregados questionários estruturados e semi-
estruturados aos alunos, professores, famílias e gestores;
b) A percepção das mudanças na gestão pedagógica da Escola, através da opinião
dos professores e das famílias dos alunos. Serão empregados questionários estruturados
e semi-estruturados aos professores e às famílias dos alunos;
c) A percepção das inovações pedagógicas introduzidas nas escolas e oriundas do
Projeto UCA, através da opinião dos professores, dos alunos e dos gestores. Serão
empregados questionários estruturados e semi-estruturados dirigidos aos professores,
alunos e gestores;
d) A percepção da inclusão digital ocasionada pelo Projeto UCA, através da opinião
dos professores, dos alunos, dos gestores e dos familiares. Serão empregados
questionários estruturados e semi-estruturados aos professores, alunos, gestores e
familiares.
e) Outros indicadores de inclusão digital no município em que o Projeto UCA
esteve presente. Será verificado a abertura de novas lan houses, uso das TIC na Escola,
uso do computador na família, etc.
f) As mudanças em indicadores educacionais da escola. Serão coletadas
informações a respeito de novas matrículas, evasão discente, reprovação discente, etc.
16
6. Análises dos dados
O processo de avaliação do Projeto UCA prevê a coleta de dados quantitativos e
qualitativos, dependendo da natureza do objeto em questão.
6.1. Análises qualitativas
O processo de avaliação do Projeto UCA prevê a coleta de dados quantitativos e
qualitativos, dependendo da natureza do objeto em questão. A pesquisa relativa às
informações qualitativas é fundamental, dada a natureza do Projeto UCA, posto que
envolve pessoas, suas representações, relações inter-pessoais, interesses e perspectivas
diversas.
É preciso que a avaliação penetre no mundo de significados que esses sujeitos
sociais, envolvidos com o Projeto UCA, atribuem às suas práticas, às iniciativas
institucionais, ao uso do computador, desvelando seus desdobramentos e repercussões
no cotidiano escolar.
Os fenômenos humanos e sociais resultam de inúmeros fatores que se conjugam e
interagem e que devem ser examinados em sua complexidade. A sua compreensão
comporta, pois, uma interpretação que exige um tipo de análise que ultrapasse os
aspectos meramente formais.
Para análise crítica e interpretação de informações qualitativas, serão utilizados os
recursos da análise do discurso que permite desvelar os processos ideológicos e
históricos que se inserem na linguagem dos sujeitos no contexto interativo e social em
que é prolatada.
Necessário se faz, assim, penetrar na rede de significados como forma de
compreensão dos vários cenários e pessoas que se configuram como alvo de estudo. A
apropriação da rede de significados não é uma tarefa mecânica e superficial. A partir das
idéias, dos conceitos, das proposições, pela reflexão, busca-se, na convergência dos
dados coletados, as categorias fundamentais para interpretá-los na intersubjetividade.
Essas categorias gerais se desdobram em itens suficientemente específicos para explicar
a trama que produz as relações individuais e coletivas (CAPPELLETTI, 1994, p. 95).
Para tal, far-se-á uso de softwares desenvolvidos com os propósitos acima
referidos, dentre os quais o CHIC, que analisa relações entre diferentes eventos; o
Qualiquantisoft, que foi desenvolvido para o procedimento metodológico do Discurso do
17
Sujeito Coletivo (DSC), próprio para pesquisas sociais empíricas de cunho qualitativo; o
NUDIST, que identifica padrões qualitativos em textos oriundos de entrevistas.
Além da identificação das categorias, os referidos programas calcularão as
freqüências de aparição dessas categorias qualitativas, em termos absolutos e relativos,
organizando-os em quadros e tabelas. Esses resultados possibilitarão análises e
inferências sobre aspectos qualitativos relacionados ao Projeto UCA.
6.2. Análises quantitativas
Além das análises qualitativas e dada a enorme diversidade de informações, serão
utilizadas as seguintes técnicas estatísticas:
a) Univariadas: que implica na elaboração de tabelas ou gráficos de
freqüência relativa para cada uma das perguntas dos questionários, assim como de
estatísticas descritivas básicas (média, moda, mediana, desvio-padrão, variância,
amplitude, etc.);
b) Bivariadas: que compreende a geração de tabelas e gráficos de
freqüências, relativas ao cruzamento das perguntas integrantes dos questionários com
variáveis de segmentação, como por exemplo: região geográfica, Estado, Escola, dentre
outras;
- Análise de variância e teste de qui-quadrado: visando identificar diferenças (ou
associações) significativas de variáveis métricas ou categóricas em relação às
populações pesquisadas ou segmentos de respondentes, dentro de um mesmo estrato;
c) Multivariadas: que consiste na elaboração de tabelas e gráficos integrando
blocos de perguntas dos questionários. Dentre as técnicas passíveis de serem utilizadas,
dependendo de uma avaliação de cada situação, destacam-se as seguintes:
- Análise fatorial: objetivando identificar avaliar estruturas subjacentes às
correlações existentes entre variáveis;
- Análise de conglomerados: visando identificar grupos homogêneos de
entrevistados (clusters) em relação às variáveis mais relevantes da pesquisa;
- Análise discriminante: visando identificar as variáveis mais relevantes
que diferenciam os clusters multivariados identificados;
- Mapeamento perceptual: tendo por objetivo mostrar qual o perfil de cada
cluster identificado, em termos do conjunto de variáveis de diversidade e
demográficas que compõe os bancos de dados da pesquisa. O uso deste método
18
permitirá uma apresentação visual integrada dos resultados obtidos segundo os
diversos públicos/segmentos de respondentes e variáveis de caracterização
demográfica dos mesmos.
Poderão, ainda, serem empregados modelos para testar relações causais (análise
de regressão múltipla, por exemplo) e de associações entre as variáveis (coeficiente de
correlação, por exemplo). Poderão vir a serem efetivadas análises estatísticas para
identificar possíveis diferenças entre grupos de respondentes (Análise de Variância, por
exemplo). Para a efetivação das análises referidas utilizar-se-á a versão mais recente do
o pacote estatístico Statistical Package for the Social Sciences (SPSS, version 16.0).
Referências
ANDRIOLA, W. B. Avaliação dos Programas Estaduais de Qualificação Profissional
(PEQ's): Uma Revisão Conceitual do Modelo 3ER. Ensaio. Avaliação e Políticas
Públicas em Educação, Rio de Janeiro, (9) 30, 43-56, 2001a.
ANDRIOLA, W. B. Avaliação institucional na Universidade Federal do Ceará (UFC):
organização de sistema de dados e indicadores da qualidade institucional.
Avaliação: Revista da Rede de Avaliação Institucional da Educação Superior,
Campinas, v. 9, n. 4, p. 33-54, 2004.
ANDRIOLA, W. B. Evaluación: La vía para la calidad educativa. Ensaio. Avaliação e
Políticas Públicas em Educação, Rio de Janeiro, 7 (25), 355-368, 1999.
ANDRIOLA, W. B. Factores caracterizadores de centros educativos eficaces. Bordón.
Revista de Pedagogía, Madrid, 53 (2), p. 175-183, 2001b.
THERRIEN, J. & SOBRINHO, J. H. Avaliação institucional em Universidades:
considerações metodológicas. Educação em Debate, Fortaleza, 6/7 (2/1), p. 17-27,
1983/1984.
22
7. Logística da avaliação
Três meses antes do início
do Projeto até dois meses
após o início do Projeto
Dois primeiros meses do
Projeto
Dois últimos meses do Projeto Após o 24o mês do
Projeto
Etapa 1 Etapa 3 Etapa 5
Organização da base
de dados e
delineamento
amostral do Projeto
UCA
Avaliação Diagnóstica
(No início da
implementação do
Projeto)
Avaliação de
Resultados
Etapa 2
Avaliação dos
diversos momentos
de formação
promovidos pelo
Projeto UCA
Do 3o mês até o 24o mês do Projeto
Avaliação Processual (Fase
de execução do Projeto)
Etapa 4
Avaliação de Impacto
Etapa 6
22
8. Estratégias de coleta de dados e avaliação das atividades desenvolvidas pelo Projeto UCA
Análise de documentos referentes à proposta pedagógica do UCA para a escola. Será
realizada pela equipe pedagógica do UCA.
Perguntas on-line direcionada automaticamente aos usuários do laptop educacional
(alunos e professores). Será utilizada em diversas ações de monitoramento e não
necessitará de aplicadores, uma vez que deverá utilizar recursos da rede.
Questionários e entrevistas aplicados a vários públicos (alunos, professores, gestores,
familiares, etc.). Será utilizada para coletar informações através da aplicação de
instrumentos por aplicadores externos à escola.
Testes padronizados, questionários estruturados e semi-estruturados. Será utilizada para
coletar informações através da aplicação de instrumentos por aplicadores externos à
escola.
Rotina especial de coleta de dados em diversas bases de dados.
Rotina especial de filmagem da atuação dos professores em sala de aula
Grupos focais com os pais
22
9. Cronograma de Atividades
Proposta de Cronograma das Atividades a Serem Desenvolvidas nas Diversas Etapas do Projeto UCA
Meses após a implantação do Projeto UCA
-3 -2 -1 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24
ETAPA 1 - Organização da base de dados e delineamento amostral do Projeto UCA
- Organização da base de dados para o Projeto UCA (IBGE, EDUCACENSO, PROVA BRASIL, etc.) - Realização de estudo descritivo do conjunto de escolas UCA
- Elaboração de um plano amostral das escolas UCA ETAPA 2 – Avaliação dos diversos momentos de formação promovidos pelo Projeto UCA
- Avaliação da formação inicial proporcionada aos IES Globais - Avaliação da formação inicial proporcionada aos IES Locais
- Avaliação da formação inicial proporcionada aos NTE
- Avaliação da formação inicial proporcionada aos professores ETAPA 3 - Avaliação Diagnóstica (Na fase de implementação do Projeto) Análise da proposta UCA (a ser realizada pela equipe pedagógica do UCA)
- Verificar a existência de Projeto Pedagógico e sua adequação aos objetivos do Projeto UCA
- Verificar as parcerias estabelecidas com agentes externos Rotina inicial de descrição das condições iniciais do Projeto UCA
- Descrever a adequação da infra-estrutura física, das instalações e dos equipamentos de informática
- Caracterizar a gestão pedagógica da escola
- Caracterizar a prática pedagógica da escola
- Descrever os indicadores educacionais da escola
- Caracterizar o perfil da equipe responsável pela condução das ações do Projeto UCA nas escolas Rotina de caracterização dos participantes do Projeto UCA (será conduzida novamente na fase da Avaliação de
Resultados)
- Caracterizar o perfil dos alunos
- Caracterizar o perfil dos gestores, professores, alunos e pais
- Identificar as expectativas da comunidade escolar
- Identificar as expectativas dos pais ETAPA 4 - Avaliação Processual (Fase de implementação do Projeto) Rotinas de monitoramento dos recursos tecnológicos e da utilização dos laptops
- Monitoramento on-line do uso dos laptops por parte dos alunos e dos professores (perguntas on-line)
- Avaliação do uso dos laptops por parte dos alunos e dos professores (questionários e entrevistas)
- Monitoramento on-line do funcionamento e manutenção da rede, dos equipamentos e dos espaços de aprendizagem
- Avaliação do funcionamento e da manutenção da rede, dos equipamentos e dos espaços de aprendizagem
- Monitoramento on-line da disponibilidade, facilidade e relevância dos recursos do laptop educacional
22
- Avaliação da disponibilidade, facilidade e relevância dos recursos do laptop educacional Rotina de verificação da atuação dos professores
- Monitoramento on-line da atuação pedagógica dos professores em sala de aula (perguntas on-line)
- Avaliação da atuação pedagógica dos professores em sala de aula (questionários e entrevistas)
- Monitoramento da atuação pedagógica dos professores em sala de aula através de filmagem
- Monitoramento on-line do uso das TIC pelos professores (perguntas on-line)
- Avaliação do uso das TIC pelos professores (questionários e entrevistas) Rotina de verificação da gestão escolar
- Avaliação da gestão acadêmico-pedagógica da escola
- Monitoramente da gestão (execução) do Projeto UCA nas escolas (perguntas on-line) Rotina de verificação da gestão escolar
- Adequação de Redes Institucionais entre as IES (NTE) ETAPA 5 - Avaliação de Resultados Rotina de caracterização dos alunos do Projeto UCA (rotina igual à aplicada na Avaliação Diagnóstica)
- Caracterização do perfil dos alunos
- Descrição das expectativas da comunidade escolar
- Identificar as expectativas dos pais ETAPA 6 - Avaliação de Impacto
- Avaliação da percepção das mudanças ocasionadas pelo Projeto UCA, através da opinião da comunidade escolar
- Avaliação da percepção das mudanças na gestão pedagógica da Escola
- Avaliação da percepção das inovações pedagógicas introduzidas nas escolas e oriundas do Projeto UCA
- Avaliação da percepção da inclusão digital ocasionadas pelo Projeto UCA
- Levantamento dos indicadores de inclusão digital no município em que o Projeto UCA está presente - Avaliação das mudanças em indicadores educacionais da Escola
LEGENDA DAS CORES UTILIZADAS NO CRONOGRAMA DE ATIVIDADES
Análise de documentos referentes à proposta pedagógica do UCA para a escola. Será realizada pela equipe pedagógica do UCA.
Perguntas on-line direcionada automaticamente aos usuários do laptop educacional (alunos e professores). Será utilizada em diversas ações de monitoramento e não necessitará de aplicadores, uma vez que deverá utilizar recursos da rede.
Questionários e entrevistas aplicados a vários públicos (alunos, professores, gestores, familiares, etc.). Será utilizada para coletar informações através da aplicação de instrumentos por aplicadores externos à escola.
Testes padronizados, questionários estruturados e semi-estruturados. Será utilizada para coletar informações através da aplicação de instrumentos por aplicadores externos à escola.
Rotina especial de coleta de dados em diversas bases de dados.
Rotina especial de filmagem da atuação dos professores em sala de aula
Grupos focais com os pais