38
Avaliação da Educação Superior Brasileira: contextualização, desafios e perspectivas Rui Barbosa Brito Junior Diretor de Avaliação da DAES Brasília-DF | Abril 2017

Avaliação da Educação Superior Brasileira ... VIII... · Elaboração. e . revisão de itens para o BNI. ... com produção de estudos e artigos sobre o Enade 2005, ... Cruzamento

Embed Size (px)

Citation preview

Avaliação da Educação Superior Brasileira:

contextualização, desafios e perspectivas

Rui Barbosa Brito Junior

Diretor de Avaliação da DAES

Brasília-DF | Abril 2017

DOU no 80, quinta-feira, 27 de abril de 2017

Portaria Normativa no. 8 de 26 de abril de 2017 Estabelece o regulamento do Exame Nacional de Desempenho dos Estudantes para o ano de 2017 – Enade 2017

26 de novembro de 2017

INEP

Gabinete da Presidência

DAEB (Diretoria de Avaliação da

Educação Básica)

DAES (Diretoria de Avaliação da Educação Superior)

DEED (Diretoria de Estatísticas

Educacionais)

DIRED (Diretoria de Estudos

Educacionais)

DGP (Diretoria de Gestão e

Planejamento)

DTDIE (Diretoria de Tecnologia e

Disseminação de Informações Educacionais)

DIRETORIA DE AVALIAÇÃO DA EDUCAÇÃO SUPERIOR

DAES

CGEnade CGCQES

CGACGIES

Assessoria

FORMAS DO PROCESSO DE AVALIAÇÃO

Instituições

Cursos

Estudantes

Participação da Comunidade nos

Processos Avaliativos

Construção das Matrizes de Prova, seleção de itens para o Banco Nacional de Itens (BNI) e análise dos resultados do Exame: Comissões

Assessoras de Áreas, compostas por especialistas vindos da comunidade acadêmica,

sendo assegurada a representatividade de instituições públicas e privadas e das 5 (cinco)

regiões e a competência acadêmica.

Elaboração e revisão de itens para o BNI. Docentes atuantes

em IES.

AVALIAÇÃO IN LOCO

Construção dos instrumentos:

Consulta pública e participação de

entidades e associações de

área.

Realização das avaliações de IES:

Comissões de especialistas, compostas por docentes atuantes em IES com experiência na docência e na gestão

acadêmica.

Realização das avaliações de cursos de graduação: Comissões de especialistas,

compostas por docentes que atuam em cursos equivalentes ou afins aos que serão avaliados.

Sinaes: avanços e perspectivas

EVOLUÇÃO NOS PROCESSOS DO SINAES

2003 – Apresentação da proposta do Sinaes pela Comissão Especial de Avaliação da Educação Superior (CEA)

2004 – Aprovação da Lei do Sinaes

2005 – Constituição do Banco de Avaliadores (BASis)

2007 – Criação do Sistema e-MEC

2008 – Aplicação do CPC para fins dos processos de renovação de reconhecimento no ciclo avaliativo do Sinaes

Instituição do IGC

2009 – Enade passou a ser censitário

2010 – Criação do Banco Nacional de Itens (BNI) da Educação Superior

Abertura do BASis para novos avaliadores

EVOLUÇÃO NOS PROCESSOS DO SINAES

2011 – Utilização dos dados do Enem para substituir aplicação do Enade aos ingressantes e aplicação do Exame para concluintes - revisão dos indicadores do instrumento de avaliação de curso

2012 – Homologação do novo Instrumento de Avaliação de Cursos

– Avaliação do desempenho dos avaliadores in loco (autoavaliação e das IES) – Revisão dos insumos do CPC – Atuação trienal das CAA com atribuições em todo o ciclo – Revisão do instrumento de avaliação institucional – Definição de metodologia para avaliação dos cursos a distancia – Recapacitação para avaliadores do Basis na plataforma moodle - Implantação de fluxo eletrônico para avaliação EaD com migração de dados da sede para o polo

2013 – Revisão dos Questionários do Estudante e do Coordenador com base no Instrumento de Avaliação de Cursos – Obrigatoriedade de permanência mínima no local de exame de 1 (uma) hora – Análise do ciclos avaliativos CAA, com produção de estudos e artigos sobre o Enade 2005, 2008 e 2011 – Criação do Grupo de Estudos de Indicadores em Educação Superior (GEIES). – Início de Estudos sobre os Dez Anos do Sinaes - Formação continuada para avaliadores de odontologia em parceria com ABENO

EVOLUÇÃO NOS PROCESSOS DO SINAES

2014 Produção do Manual do Estudante

– Obrigatoriedade de resposta ao Questionário do Estudante – Mudança no Questionário de percepção sobre a prova

– Produção de Relatório de Formação Geral (resultado de todas as áreas)

- Seminário Regional das CPAs

2015 – Aprimoramento do processo avaliativo, com enfoque quantitativo e qualitativo – justificativa de todos os indicadores Publicação dos Dez anos do Sinaes Diálogo constante com as áreas de licenciatura e de saúde (CAAs, Conselhos de Classe, Associações de Ensino, IES e sociedade em geral) – Foram constituídas Comissões Técnicas para a elaboração de um Documento Orientador específico para garantir uniformidade e qualidade ao processo de avaliação in loco, também conhecida como avaliação externa, das áreas a saber: Administração; Biblioteconomia; Educação Física; Biomedicina; Terapia Ocupacional; Medicina Veterinária; Engenharia de Produção; Saúde Coletiva; Fisioterapia; Enfermagem e Jornalismo.

2016 - Capacitação de avaliadores ARCU-SUL em Buenos Aires e Bogotá (RANA)

Construção de novo módulo de designação eletrônica a ser implantado Capacitação de novos avaliadores Institucionais e de Curso Cadernos de provas Enade Identificados

2017 – Recadastramento do BASis

Formação Continuada dos Avaliadores do BASis Cooperação Técnica com São Tomé e Príncipe

APRIMORAMENTO DOS PROCESSOS DE

AVALIAÇÃO

Com o objetivo de obter melhorias e inovações em seus

processos avaliativos, o Inep vem:

realizando estudos internos, com a participação de membros da comunidade acadêmica e de

especialistas nas reflexões subsidiárias às tomadas de

decisão;

contratando consultores, para obter novas

perspectivas teórico-metodológicas e

aprimoramento técnico de suas equipes.

APRIMORAMENTO DOS PROCESSOS DE

AVALIAÇÃO

Estudos em andamento na direção de

aprimoramento dos processos avaliativos:

Enade

Resultados do Enade e perfil socioeconômico

dos estudantes

Análises dos resultados – Teoria Clássica e

Teoria de Resposta ao Item (TRI)

Aplicação do Enade no formato eletrônico

Avaliações in loco.

Revisão e adequação de instrumentos orientadores da avaliação in loco de cursos e

IES.

APRIMORAMENTO DOS PROCESSOS DE AVALIAÇÃO

Construção de portal para disseminação dos

resultados das avaliações in loco, que também agregue resultados dos indicadores.

Indicadores de Qualidade da Educação Superior

Cálculo do IDD por estudante e com regressão

multinível

Índice Geral de Cursos Avaliados da Instituição

(IGC)

Análises fatorial e TRI sobre Questionário do Estudante

Composição de banco de dados para estudo da

trajetória dos estudantes.

Indicador(es) de consistência da declaração

feita ao Censup

APRIMORAMENTO DOS PROCESSOS DE

AVALIAÇÃO

Indicadores de trajetória (fluxo): evasão,

permanência, promoção, retenção, conclusão,

transferência.

Integração das bases de dados do Censup e

Enade

Aplicação do Questionário do

Estudante para os concluintes de todos os

cursos de graduação

Cadastro Nacional de Concluintes de Cursos de

Graduação

Os processos instaurados vem avançando no sentido de promover uma cultura

avaliativa nos cursos e IES, em processo permanente de reflexão e questionamento, por meio da integração de instrumentos e

da participação dos diversos atores institucionais e para além da mera

prestação de contas e responsabilização de órgãos, setores e pessoas.

IES por faixa do Conceito Enade 2015 –

curva normal

,427%

14,414%

66,999%

16,643%

1,138% ,379% 0%

10%

20%

30%

40%

50%

60%

70%

1 2 3 4 5 Sem Conceito

Censo e Avaliação da Educação Superior

CENSO E AVALIAÇÃO DA EDUCAÇÃO SUPERIOR

Censo da Educação Superior: é realizado anualmente, “[...] em caráter declaratório e mediante coleta de dados descentralizada,

englobando todos os estabelecimentos públicos e privados de educação superior e adotando alunos,

docentes e instituições como unidades de informação” (Decreto nº 6.425/2008).

O Censo da Educação Superior (Censup) é de responsabilidade

da Diretoria de Estatísticas Educacionais (Deed) do Inep

Avaliação de IES e Cursos: abarca as IES pertencentes ao Sistema Federal de Educação Superior e aquelas dos

Sistemas Estaduais que aderem voluntariamente ao Sinaes.

INDICADORES DE QUALIDADE

Desempenhos como

Concluinte de cursos de graduação

(Enade)

Conceito Enade

Conceito Preliminar de Curso

(CPC)

Desempenhos como Ingressante do curso

do graduação avaliado (Ingressantes de 2011 a 2013/

concluintes após 2013)

(Enem)

Índice Geral de Cursos

(IGC)

IDD

Corpo Docente (Censup)

Questionário do Estudante

(Enade)

Pós-Graduação (Capes)

Componentes dos cálculos

FLUXO DO MACROPROCESSO (e-MEC) PARA AVALIAÇÃO IN LOCO - CTAA

PROTOCOLO

CADASTRAR AVAL.

PREENCH. FORM.

ELETRÔN.

Taxa Compl.

DESIGNAR COMISSÃO

REALIZAR VISITA

FINALIZAR AVAL.

IES

DAES

CO

MIS

SÃO

CT

AA

BASIS

Arquivamento

Arquivamento

Taxa Básica

SERE

S

ANALISAR PROCESSO

Despacho Saneador

PARECER FINAL

Comissão sem

acordo

Reforma ou Manutenç.

Impugna.

PARECER CTAA

Nova Aval.

Validação Comissão

Alguns dados estatísticos

Participação da rede privada na matrícula de educação superior - Brasil 2015

Fonte: Inep/Censo da Educação Superior

6.075.152

76%

De cada 4 estudantes de graduação, 3 estudam em instituições privadas.

Os 10 maiores cursos de graduação em número de matrículas no Brasil

710.778

651.730

513.006

235.142

230.654

130.179

98.290

96.544

91.480

89.870

0 100.000 200.000 300.000 400.000 500.000 600.000 700.000 800.000

Administração

Direito

Pedagogia

Ciências contábeis

Enfermagem

Serviço social

Fisioterapia

Medicina

Formação de professor de educação física

Sistemas de informação

47,8%

853.211

766.859

655.813

358.452

355.998

261.215

223.490

177.823

172.569

170.587

0 100.000 200.000 300.000 400.000 500.000 600.000 700.000 800.000 900.000

Direito

Administração

Pedagogia

Ciências contábeis

Engenharia civil

Enfermagem

Psicologia

Gestão de pessoal / recursos humanos

Serviço social

Engenharia de produção

49,8%

2009

2015

Fonte: Inep/Censo da Educação Superior

176 183 195 207 224 231 248 249 236 245 278 284 304 301 298 295

1004 1208 1442 1652 1789 1934 2022 2032 2016 2069 2100 2081 2112 2090 2070 2069

1180 1391

1637 1859

2013 2165 2270 2281 2252 2314 2378 2365 2416 2391 2368 2364

0

1000

2000

3000

4000

5000

6000

Total Privada Pública

2000 2001 2002 2003 2004 2005 2006 2007 2008 2009 2010 2011 2012 2013 2014 2015

INSTITUIÇÕES DE EDUCAÇÃO SUPERIOR (2000-2015)

2364 IES (87,52% privadas e 12,47% públicas)

MATRÍCULAS POR CATEGORIA ADMINISTRATIVA (1980-2015)

MATRÍCULAS POR MODALIDADE DE ENSINO (2005-2015)

Avaliação Qualidade

0

20.000

40.000

60.000

80.000

100.000

120.000

140.000

2003 2004 2005 2006 2007 2008 2009 2010 2011 2012 2013 2014

Rede Pública

Fonte: MEC/Inep

Na rede pública, as funções docentes em tempo integral tiveram um considerável aumento nos últimos 10 anos. Em 2014, pela primeira vez, as funções docentes da rede privada em tempo parcial superam os

horistas.

Percentual de Docentes por Categoria Administrativa, segundo Regime de Trabalho – Brasil – 2003-2014

2003 2004 2005 2006 2007 2008 2009 2010 2011 2012 2013 2014

Rede Privada

Tempo Integral Tempo Parcial Horista

74,1%

24,4%

14,6%

82,9%

18,3%

40,4%

26,0%

11,4%

7,6% 5,7%

35,2%

59,4%

48,9

33,2 39,3

47,0

11,8

19,8

2003 2004 2005 2006 2007 2008 2009 2010 2011 2012 2013 2014

Rede Privada

Até Especialização Mestrado DoutoradoFonte: MEC/Inep

As funções docentes que possuem no mínimo Doutorado continuam crescendo, tanto na rede pública quanto na rede privada. Por outro lado, aquelas que possuem até Especialização cai a cada ano nas

duas redes.

Percentual de Docentes por Categoria Administrativa, segundo Grau de Formação – Brasil – 2003-2014

33,3

15,4

27,3 28,8

39,5

55,8

0,0

10,0

20,0

30,0

40,0

50,0

60,0

2003 2004 2005 2006 2007 2008 2009 2010 2011 2012 2013 2014

Rede Pública

Acesso a dados para pesquisa

DISPONIBILIZAÇÃO DOS DADOS PARA

PESQUISA SÍTIO OFICIAL DO INEP

Microdados de Exames e Censos portal.inep.gov.br/basica-levantamentos-acessar)

Enade – resultados das edições do Exame e respostas dos

Questionários do Estudante.

Censos - Escolar, Educação Superior e Profissionais do

Magistério.

Censup – Situação das matrículas por estudante, curso e IES.

Planilhas de resultados dos Indicadores de Qualidade (http://portal.inep.gov.br/educacao-superior/indicadores) •Conceito Enade, CPC e IGC.

DISPONIBILIZAÇÃO DOS DADOS PARA PESQUISA

Relatórios do Enade http://portal.inep.gov.br/enade/relatorios

Curso, IES e Síntese de Área.

SALA SEGURA NO INEP (Portaria Inep nº 467/2014)

Cruzamento de informações do Enem, Enade, Censo Escolar e Censo da

Educação Superior por variável de identificação do estudante

POSSIBILIDADES DE PESQUISA

Cruzamento de dados entre: Enade e Enem

Enade e participantes de programas de inclusão

Trajetória de estudantes da Educação Superior: evasão, transferência,

permanência, conclusão, retenção etc.

Enade com Relação Anual de Informações

Sociais (Rais)

Verificação da efetividade e estimação de impactos de políticas públicas sobre

a educação da população atendida.

REVALIDA Revalidação de Diploma Médico

O Exame Nacional de Revalidação de Diplomas Médicos expedidos por Instituição de Educação Superior

Estrangeira (Revalida) foi instituído por meio da Portaria Interministerial nº 278, de 17/03/2011, nos termos do art. 48, § 2º, da Lei nº 9394, de

1996

Outras atividades da Daes

• Aprendizagem • Diagnóstica • Ações

Formativa

• Prática evolutiva • Sistêmica • Integrada

Processual

• Produz autoconhecimento • Construção para uma cultura de avaliação • Permanente tomada de consciência sobre

sua missão

Emancipatória

CONCEPÇÃO DA AVALIAÇÃO X REGULAÇÃO

INDICADORES DE QUALIDADE

• As Notas Técnicas sobre os cálculos e estudos realizados para mudanças dos indicadores e/ou de seus componentes são disponibilizadas no sítio oficial do Inep.

http://portal.inep.gov.br/educacao-superior/indicadores/notas-tecnicas