DEFININDO DISPOSITIVOS DE AVALIAÇÃO EM EDUCAÇÃO A DISTÂNCIA

DEFININDO DISPOSITIVOS DE AVALIAÇÃO

EM EDUCAÇÃO A DISTÂNCIA

Thiago Campos Horta

Adriano Lima

MOTIVAÇÃO

•EAD em expansão

•Cursos de EAD trazem modelos de Educação Presencial, inclusive no aspecto de avaliação

•Os cursos de EAD precisam ser avaliados antes mesmo de sua publicação. Mas com que parâmetros? Que referencias?

PROPOSTA

• Propor modelo de referencia para avaliação de ambientes virtuais de aprendizagem

• Identificar critérios de Qualidade necessários para a Educação a Distância

• Apresentar algumas considerações sobre o processo de produção de EAD, resultado do trabalho de conclusão de curso lato sensu em EAD – SENAC MINAS

• Propor sistema de gerenciamento (software) para a Gestão de Cursos de EAD, com foco na gestão de avaliação do curso.

CONTEXTO

Numeros Absolutos

0

200

400

600

800

1000

1200

2003 2004 2005 2006 2007 2008

N° InstituiçõesCredenciadasN° de Alunos (por mil)

Evolução

0

10

20

3040

50

60

70

2003 2004 2005 2006 2007 2008

N° InstituiçõesCredenciadas

N° de Alunos (por mil)

CONTEXTO

CONTEXTO

CONTEXTO

CONTEXTO

CONTEXTO

CONTEXTO

CONTEXTO

CONTEXTO

CONTEXTO

FUNDAMENTAÇÃO TEÓRICA

1. Para que a avaliação da aprendizagem aconteça é preciso elaborar mecanismos investigativos que possibilitem o ajuste a orientação adequada

2. Na avaliação qualitativa, numa abordagem formativa, o processo de avaliação é constante.

3. Alguns aspectos relacionados ao processo educativo, como atitude do aluno, sua participação nas atividades propostas, seu interesse, seu espírito crítico, sua autonomia intelectual e seus níveis de colaboração com os colegas, são analisados e avaliados pelo professor utilizando parâmetros subjetivos.

4. A avaliação deve ser processual e contínua para acompanhar o nível de conhecimentos, as atitudes e o comportamento dos estudantes na fase inicial do processo, e em outras posteriormente, para identificar as mudanças que possam estar acontecendo, e principalmente para ajudar no direcionamento das atividades propostas pelo professor

http://www.moodle.ufba.br/mod/resource/view.php?r=103�





1. O processo de avaliação, especificamente a avaliação na modalidade de ensino a distância - necessidade de compreender como a educação utiliza-se da avaliação, dentro de enfoques distintos.

2. Estudar e desenvolver metodologias a serem empregadas na avaliação a distância e que possibilitem avaliações mais dinâmicas e interativas é um desafio, pois embora o avanço da modalidade a distância no sistema educacional, formas de avaliação inovadoras que se adaptem a este modelo são quase inexistentes.

3. Muitos projetos de educação a distância incorporam o aprendizado cooperativo, projetos colaborativos e interatividade entre grupos de alunos e entre locais diferentes. O processo de avaliação a distância deverá contemplar este tipo de aprendizagem.


1. No caso da educação a distância, sua avaliação necessariamente deverá levar em conta sua estrutura e as relações de sua estrutura com o contexto. Conseqüentemente, a presença de dados quantitativos é fundamental, mas só farão real sentido se forem complementados por explicações, que extrapolam o puramente quantitativo, abrangendo questões referentes a valores, percepções, motivações, intenções.

2. Neste sentido, diante das inúmeras variáveis de um projeto de educação a distância, a avaliação terá que considerar, como dimensões mais significativas:

• A aprendizagem do aluno distante; • O ensino ministrado à distância; a Os meios utilizados e sua adequada aplicação; • O funcionamento do sistema de comunicação; • O desempenho institucional das instâncias responsáveis pelas etapas do projeto.


1. A avaliação em EaD deve ser diagnóstica, formativa e processual e também priorizar as diferentes construções do conhecimento, sejam individuais ou coletivas, envolvendo todo o processo.

2. Implementada por meio de instrumentos, a avaliação em EaD também deve ser reflexiva, crítica e emancipatória; buscando coerência na práxis, ressignificando os processos de ensino e de aprendizagem

3. Quando se aborda a questão da avaliação reflexiva, é necessário dizer que é nessa dinâmica que se pode buscar a qualidade, a conscientização e o comprometimento; desde a implementação até o processo avaliativo na Educação a Distância.

4. Ao se tentar obter um parâmetro acerca dos resultados alcançados por meio da avaliação em EaD, na maioria das vezes, percebe-se a ausência de uma reflexão mais elaborada a respeito dos instrumentos utilizados. As ações se tornam rotineiras, o que dá margem ao desenvolvimento de um trabalho ingênuo que leva a equívocos no processo avaliativo e na busca de resultados que se pretende obter.


Dessa forma, nessa modalidade de ensino, é fundamental selecionar instrumentos que permitam verificar:

• as transformações que possam ocorrer nos processos de ensino

e de aprendizagem; • se houve assimilação e aproveitamento dos estudos; • se foram capazes de modificar o modo de o cursista ver o

mundo; • se lhe propiciaram interferir na sua realidade e, também, abordar,

com êxito, a aprendizagem dos conteúdos estudados.


AVALIAÇÃO DIAGNÓSTICA

Planejamento Do Curso EAD

Implementação Do Curso

Conclusão Do Curso

AVALIAÇÃO SOMATIVA

Resultado

AVALIAÇÃO FORMATIVA

Necessidade, conhecimento

prévio

META AVALIAÇÃO


Cursos EAD Necessidade uma “nova” pedagogia

Refletindo os espaços e a formação da

equipe de produção

Cursos EAD

Devem se avaliados

Antes de sua implantação

OBJETIVOS

Objetivos específicos O que se pretende atingir OE 1 - Verificar a consistência da proposta pedagógica.

Qual a proposta pedagógica do curso e qual a consistência e relação com os objetivos de aprendizagem propostos ?

OE 2 - Identificar o perfil do publico Quem é o público alvo do curso?

0E3- Verificar se os objetivos da unidade didática do curso foram ou não atingidos.

Os objetivos são adequados aos conteúdos planejados? Os objetivos são adequados em relação à linguagem, à clareza e à precisão, para que o aluno saiba exatamente o que se espera dele? Os objetivos são adequados à criação de condições para a aprendizagem do aluno, permitindo sua reflexão e autoavaliação?

OE 4 – Avaliar a atuação da tutoria no Curso

Como se conforma à gestão de tutoria no tocante a mediação pedagógica? Que tipo de postura o tutor assumi em contextos virtuais de aprendizagem?

0E 5 - Avaliar a relação do trabalho do DI com a abordagem pedagógica proposta

O trabalho do DI atendeu a abordagem pedagógica?

0E 6- Avaliar a funcionalidade tecnológica do AVA. O AVA atende aos objetivos do curso?

METODOLOGIA

Desenvolveu-se um desenho esquemático das etapas necessárias para a produção em EAD estratificando cada etapa em sub-etapas, denominadas de “dimensões”. Para cada dimensão, buscou-se vinculá-las criando um desenho em rede favorecendo a visão sistêmica e cíclica que enlaça as etapas de produção de um curso em EAD.

Para cada etapa do processo de produção em EAD, foi estabelecido perguntas avaliativas que apontaram para a definição dos objetivos específicos do presente trabalho manifestando uma clara e sistemática intenção de compreender como tais vínculos se constituem na correlação entre as dimensões e, concomitantemente, entre cada etapa no processo de produção do curso em EAD

METODOLOGIA Desenho Esquemático do

Curso a Distância

METODOLOGIA

Identificação do Objetivo Especifico no desenho esquemático.

Matriz avaliativa: Indicadores e Descritores

Matriz de Correlação: Dimensão x Objetivos Específicos

Matriz de Correlação: Dimensão x Indicadores

3º Modelo de Referencia




Dispositivos Avaliativos

Desenvolvimento dos Modelos de Referencia

METODOLOGIA Desenvolvimento dos Modelos

de Referencia

1º Modelo de Referencia: Recorte do desenho esquemático. Este primeiro modelo de referencia visa focar a pergunta avaliativa apenas nas dimensões e etapas da produção de um curso em EAD, favorecendo a leitura e possibilitando construir as matrizes avaliativas para cada objetivo.

Desenho Esquemático 1º Modelo de Referencia

O que se pretende atingir?

Quais Etapas relacionadas?

Quais Dimensões Relacionadas?


de Referencia

2º Modelo de Referencia: A partir do recorte do desenho esquemático por objetivo especifico, desenvolveu-se as matrizes avaliativas resgatando as dimensões pertencentes a cada etapa de produção de um curso em EAD constituindo, então, os indicadores avaliativos.

1º Modelo de Referencia 2º Modelo de Referencia

Descritores Dimensão Indicadores D1 D2 D3 D4

Matriz Curricular

Ind. 1

Ind. 2


de Referencia

3º Modelo de Referencia: Refere-se a matriz de correlação de cada dimensão com os objetivos específicos visando caracterizar a correlação das dimensões com outros objetivos específicos. Portanto, esta matriz favorece a leitura em rede rechaçando uma visão situacional e estática da avaliação.


2º Modelo de Referencia 3º Modelo de Referencia



Objetivo 1

Objetivo 2

Objetivo 3

Objetivo 4

Objetivo 5

Objetivo 6

Dimensões

D. 1

D. 2

D. 3

D. 4

D. 5

D. 6


de Referencia

4º Modelo de Referencia: Neste modelo é apresentada a matriz de correlação de cada dimensão avaliativa com os indicadores, gerando um maior aprofundamento relativo ao modelo anterior no tocante a uma leitura em rede, poliforma e cíclica






Indicadores Dimensões I.1

I.2

I.3

I.5

I.6

I.7

I.8

I.9

I.1

0 I.1

1 I.1

2 I.1

3 I.1

4 I.1

5 I.1

6 I.1

7 I.1

8 I.1

9 I.2

0 ...

.

D. 1

D. 2

D. 3

D. 4

D. 5

D. 6


de Referencia

Resultado (Exemplos de algumas matrizes)

METODOLOGIA

Objetivo Específico OE 1 - Verificar a consistência da proposta pedagógica

O que se pretende atingir Etapas Dimensões Relacionais

Qual a proposta pedagógica do curso e qual a consistência e relação com os objetivos de aprendizagem propostos?

Concepção / Planejamento

- Abordagem Pedagógica - Matriz Curricular - Designer Instrucional

1º Modelo de Referencia:

METODOLOGIA 2º Modelo de Referencia: Matriz Indicadores

OE1: Verificar a consistência da proposta pedagógica

[1] Baseado em FILATRO, A. “As teorias pedagógicas fundamentais em EAD”. In: LITTO, F. M. & FORMIGA, M. (orgs.) (2008). Educação a distância – o estado da arte. São Paulo, Pearson Education/ABED.

Descritores Dimensão Indicadores Associacionista Construtivista Individual Construtivista Social Situada

Implicação para a aprendizagem

Rotinas de atividades organizadas, progressão através de componentes conceituais e de habilidades, objetivos e feedbacks claros, percursos individualizados correspondentes a desempenhos anteriores.

Construção ativa e integração de conceitos, problemas pouco estruturados, oportunidades para reflexão, domínio da tarefa.

Desenvolvimento conceitual através de atividades colaborativas, problemas pouco estruturados, oportunidades para discussão e reflexão, domínio compartilhado da tarefa.

Participação em práticas sociais de investigação e aprendizagem, aquisição de habilidades em ontextos de uso, desenvolvimento de identidade como aprendiz e como profissional, desenvolvimento de relações de aprendizagem e prática.

Implicação para o ensino

Análise de unidades componentes, seqüências progressivas de componentes para conceitos ou habilidades complexos, abordagem instrucional clara para cada unidade de estudo, objetivos altamente focados.

Ambientes interativos e desafios apropriados, encorajamento à experimentação e à descoberta de princípios, adaptação a conceitos e habilidades existentes, treinamento e modelagem de habilidades metacognitivas.

Ambientes colaborativos e desafios apropriados, encorajamento a experimentação e descoberta compartilhadas, foco em conceitos e habilidades existentes, treinamento e modelagem de habilidades, inclusive sociais.

Criação de ambientes seguros para participação, suporte ao esenvolvimento de identidade pessoal e profissional, facilitação de diálogos e relacionamentos de aprendizagem, elaboração de oportunidades de aprendizagem autênticas.

Abordagem Pedagógica

Implicação para a avaliação

Reprodução acurada de conhecimentos ou habilidades, desempenho de partes ou componentes, feedback rápido e fidedigno.

Compreensão conceitual aplicada a conhecimentos e habilidades, avaliação de processos tanto quanto de resultados, certificados de excelência, auto-avaliação e autonomia na aprendizagem.

Compreensão conceitual (aplicada a conhecimentos e habilidades), avaliação de processos e da participação tanto quanto dos resultados, certificados de excelência, avaliação por pares e responsabilidade compartilhada.

Certificados de participação, incluindo contextos variados, prática autêntica, envolvimento de pares

METODOLOGIA

Descritores Dimensão Indicadores Situação a-didática Aprendizagem por

adaptação Aprendizagem formal

Situações Didáticas e

Resolução de Problemas

Situação Didática

Representa determinados momentos do processo de aprendizagem nos quais o aluno trabalha de forma independente, não sofrendo nenhum tipo de controle direto por parte do professor.

O aluno se defronta com a necessidade de adequar o seu conhecimento a um determinado problema que lhe foi colocado no quadro de uma situação didática.

Procura sobrepor a memorização, a técnica e os processos de automatismo à compreensão verdadeira das idéias.

No processo de ensino-aprendizagem deve haver condições para que o aluno realize suas aproximações, realize seus conhecimentos e seja capaz de explicitar seus procedimentos e raciocínios utilizados.

Descritores Indicadores Design instrucional fixo Design instrucional aberto Design instrucional contextualizado

Matriz Curricular

Modelo do DI

Há uma separação entre as fases de concepção (design) e execução (implementação) que envolve planejamento e produção de todos os componentes de ensino e de aprendizagem antes da ação de aprendizagem, e todo o material desenvolvido é fixo e inalterável.

Todo o material é criado, refinado e modificado durante o andamento do processo de ensino e aprendizagem. O material é desenvolvido em um AVA com opções pré-configuradas que podem ser adaptadas durante o percurso.

Há uma combinação dos dois modelos. Possibilita a criação de unidades fixas, mas também prevê adaptações/criações durante o processo de ensino e aprendizagem e conta com possibilidades e ferramentas da Web 2.0.

2º Modelo de Referencia: Matriz Indicadores

OE1: Verificar a consistência da proposta pedagógica

[1] Baseado em Freitas, José Luiz Magalhães de - Situações Didáticas, Educação Matemática - Uma introdução, Série Trilhas, Editora da PUC-SP. [1] Baseado no conteúdo do Modulo 4 - Processo de Planejamento e Produção de Cursos em Educação a Distância, Unidade 3 - Design Instrucional, do curso de Especialização em Educação a Distância, SENAC-MG.

METODOLOGIA

.....................

METODOLOGIA

1º Modelo de Referencia:

Objetivo Específico OE 2 - Identificar o perfil do público

O que se pretende atingir Etapas Dimensão

Quem é o público alvo do curso e como as características dos alunos interferem na sustentação da abordagem pedagógica do curso?


- Contexto - Matriz Curricular

METODOLOGIA

2º Modelo de Referencia: Matriz Indicadores OE2: Identificar o Perfil do Público

Descritores Dimensão Indicadores D1: Social D1: Geográfico D1: Tecnológico

Contexto Condições socioculturais

“Qual a faixa etária predominante?”; “Qual o sexo dos participantes? Existe alguma predominância do sexo feminino ou masculino?”; “Qual o nível de escolaridade?”; “Qual a área de formação?”.

“Qual a região de atuação do profissional a ser capacitado?”. “Os alunos deste curso tem acesso a

computadores? Onde eles fazem maior número de acessos?”.

Descritores Indicadores Descoberta

imprevista Descoberta por

livre exploração Descoberta

guiada Descoberta

linear/intrínseca Exposição

indutiva Aprendizagem de recepção direcionada

Aprendizagem de recepção imprevista

Matriz Curricular

Uso das Tecnologias

Busca livre na Internet

Busca em programas hipermídia ou rede com tema definido.

Hipermídias adaptativas que privilegiam os interesses dos alunos

Sistemas hipermídia com excursão definida.

Multimídia Apresentação multimídia

Ferramentas de trabalho cooperativo.

[1] Adaptado de SENAC/MG Curso de Pós Graduação em Educação a Distância. Módulo 4, Unidade 1, Semana 4. Contexto e Características das Mídias. Disponível em http://senac.ensinar.org/mod/resource/view.php?id=30948. Acesso em 01/11/2009 [1] De acordo com o contexto, deverão ser criadas estratégias de ensino ou situações didáticas que propiciem aos alunos desenvolver diversas estratégias de aprendizagem [1] Baseado em Campos, F., Designer Instrucional e Construtivismo: Em busca de Modelos para o Desenvolvimento de Software, IV Congresso RIBIE, Brasília, 1998.

METODOLOGIA

2º Modelo de Referencia: Matriz Indicadores OE2: Identificar o Perfil do Público

Descritores Dimensão Indicadores Descoberta

imprevista Descoberta por

livre exploração Descoberta

guiada Descoberta

linear/intrínseca Exposição

indutiva Aprendizagem de recepção direcionada

Aprendizagem de recepção imprevista

Estratégia de Aprendizagem

Aprendizagem não planejada, nenhuma instrução é envolvida diretamente.

Os macro objetivos são fixados, e os alunos ficam livres para explorar métodos, subobjetivos, etc.

Os objetivos de cada passo da aprendizagem são fixados. O aprendiz é livre para explorar métodos, mas com guia e ajuda em cada estágio.

Direcionada rigidamente, guia e reforço são pré programados, baseados no estudante típico.

O aluno recebe o argumento, não tem que descobrir a regra. Pode ser programado.

Exercício e prática. Aprendizagem de fatos, sem entender os conceitos envolvidos. Memorização

Fatos e observações, originalmente não planejados, fornecidas por professores, outras fontes e estudantes

Global: Lidam aleatoriamente com o conteúdo, compreendendo por “insights”.


Seqüencial: Preferem caminhos lógicos. Aprendem melhor o conteúdo de forma linear e encadeada

Seqüencial: Preferem caminhos lógicos. Aprendem melhor o conteúdo de forma linear e encadeada.


Seqüencial: Preferem caminhos lógicos. Aprendem melhor o conteúdo de forma linear e encadeada.


Matriz Curricular

Estilo de Aprendizagem Intuitivo: Preferem

descobrir possibilidades e relações. Sentem mais confortáveis em lidar com novos conceitos.

Intuitivo: Preferem descobrir possibilidades e relações. Sentem mais confortáveis em lidar com novos conceitos.

Racional: Gostam de aprender fatos, memorizam fatos com facilidade, saem bem em trabalhos práticos sendo mais cuidadosos.





[1] Romiszowski propõe uma classificação para os métodos instrucionais de recepção e de descobrimento que podem, hoje, ser exemplificados com o uso das novas tecnologias. Desta forma relaciono, nesta matriz, os tipos de aprendizagem descritos com o uso das redes, hipermídia, multimídia, tutores ferramentas de trabalho cooperativo, na busca de associar estas formas de aprendizagem com os recursos disponíveis para a educação. (ROMISZOWISKI, 1981) [1] Baseado em Campos, F., Designer Instrucional e Construtivismo: Em busca de Modelos para o Desenvolvimento de Software, IV Congresso RIBIE, Brasília, 1998. [1] Baseado em Felder, 2002

METODOLOGIA

.....................

METODOLOGIA

3º Modelo de Referencia: Matriz de Correlação da Dimensão Avaliativa x Objetivos Específicos

Objetivo 1 Objetivo 2 Objetivo 3 Objetivo 4 Objetivo 5 Objetivo 6

Verificar a consistência da proposta pedagógica

Identificar o perfil do publico

Verificar se os objetivos da unidade didática do curso foram ou não atingidos.

Avaliar a atuação da tutoria no Curso

Avaliar a relação do trabalho do DI com a abordagem pedagógica proposta

Avaliar a funcionalidade tecnológica do AVA.


Matriz Curricular

Designer Instrucional

Contexto

AVA

Mídias e Tecnologias

Dimensões

Objetivos

METODOLOGIA

4º Modelo de Referencia: Matriz de Correlação da Dimensão Avaliativa x Indicadores O 1 O 2 O 3 O 4 O 5 O 6

Impl

icaç

ão p

ara

a ap

rend

izag

em

Impl

icaç

ão p

ara

o en

sino

Impl

icaç

ão p

ara

a av

alia

ção

Situ

ação

Did

átic

a

Mod

elo

do D

I

Obj

eto

de A

pren

diza

gem

Con

diçõ

es s

ocio

cultu

rais

Uso

das

Tec

nolo

gias

Estra

tégi

a de

Apr

endi

zage

m

Estil

o de

Apr

endi

zage

m

Obj

etiv

o

Dire

cion

alid

ade

Gra

us d

e in

tera

ção

Med

iaçã

o

Mod

elo

Aspe

cto

da T

utor

ia

Con

vers

ação

did

átic

a

Coe

rênc

ia

Con

text

ualiz

ação

Ên

fase

Abo

rdag

em

Pape

l Pro

fess

or /

Alun

o

Ênfa

se in

stru

cion

al

Aval

iaçã

o da

apr

endi

zage

m

Mét

odo

de e

nsin

o

Aces

so a

o co

nhec

imen

to

Parti

cipa

ção/

Inte

rven

ção

Bidi

reci

onal

idad

e

Perm

utab

ilidad

e/Po

tenc

ialid

ade

Gra

us d

e in

tera

ção


Matriz Curricular


Contexto

AVA


Dimensões

Indicadores

METODOLOGIA Consolidado das Matrizes Avaliativas

Objetivo Específico Etapas Dimensão Indicadores

Implicação para a aprendizagem

Implicação para o ensino


Implicação para a avaliação

Situação Didática Matriz Curricular

Modelo do DI

O1 - Verificar a consistência da proposta pedagógica


Designer Instrucional Objeto de Aprendizagem

Contexto Condições socioculturais

Uso das Tecnologias

Estratégia de Aprendizagem

O2 - Identificar o perfil do publico


Matriz Curricular

Estilo de Aprendizagem

Contexto Direcionalidade 03- Verificar se os objetivos da unidade didática do curso foram ou não atingidos.

Planejamento / Execução

Matriz Curricular Objetivo

METODOLOGIA


Graus de interação

Mediação

Modelo

AVA

Aspecto da Tutoria

O4 – Avaliar a atuação da tutoria no Curso

Produção / Mediação

Designer Instrucional Conversação didática

Coerência

Contextualização Ênfase

05- Avaliar a relação do trabalho do DI com a abordagem pedagógica proposta



Abordagem

Consolidado das Matrizes Avaliativas (cont.)

METODOLOGIA


Papel Professor / Aluno

Ênfase instrucional

Avaliação da aprendizagem

Método de ensino


Acesso ao conhecimento

05- Avaliar a relação do trabalho do DI com a abordagem pedagógica proposta


Matriz Curricular

Participação/ Intervenção

Bidirecionalidade

Permutabilidade/ Potencialidade

AVA

Graus de interação


06- Avaliar a funcionalidade tecnológica do AVA.

Concepção / Mediação / Produção


Consolidado das Matrizes Avaliativas (cont.)

CONCLUSÃO

Ao apresentar os aspectos metodológicos com vistas a constituição dos dispositivos avaliativos (descritos nos modelos de referencia) para aplicações possíveis aos de EAD, sugere-se, ao mesmo tempo, resgatar o caráter imprescindível e candente na gestão de avaliação alicerçado em algumas premissas como a visão cíclica, processual e dinâmica da avaliação

Como resultado, espera-se fornecer capacidade de intervenção institucional viabilizando os propósitos e objetivos apresentados neste trabalho, visando, portanto, a qualidade de ações pedagógicas no curso de EAD.