Avaliação Extensiva Formativa em Medicina – MSP

Relatório I semestre 2015

Joaquim Edson VieiraComissão Permanente de Avaliação

Comissão de Graduação

Congregação da FMUSP – 31 de julho de 2015

APEx – Avaliação Permanente ExtensivaComponente do SisLAu

APEx – Avaliação Permanente ExtensivaEntrada por login (# USP) e senha ∆

APEx – Avaliação Permanente ExtensivaPermite criar/editar e realizar avaliações

# no APEx 363

# respostas 41

# acertos 34

% acertos 83%

Área Processo Saúde

Doença

Dificuldade Fácil

APEx – Avaliação Permanente ExtensivaExemplo de Item/Questão (aplicada em 04/julho)

Pergunta&

Alternativas

# APEx # respostas # acertos % acertos Área Dificuldade

331 42 26 62% Pesquisa Científica

Fácil

APEx – Avaliação Permanente ExtensivaExemplo de Item/Questão (aplicada em 04/julho)

Pergunta&

Alternativas

APEx – Avaliação Permanente ExtensivaAs questões são aleatorizadas

Usuário Hora corrente

Hora final da prova

APEx – Avaliação Permanente ExtensivaAs alternativas são aleatorizadas

Pergunta&

Alternativas

Ação

APEx – Avaliação Permanente ExtensivaO tempo de resposta é de 2 minutos/questão

Questões/Itens não respondidos

ou em dúvida

Questões/Itens respondidos

APEx – Avaliação Permanente ExtensivaResultados preliminares – prova em 04/julho

APEx – Avaliação Permanente ExtensivaResultados preliminares – prova em 04 de julho

13 questões

Áreas / Temas Questões Realizadas por pelo menos um estudante

Não observadas

Biologia Molecular 11 3 8

Bioquímica 15 10 5

Fundamentos Morfofuncionais

34 25 9

Integração Clínica 7 7 0

Introdução à Medicina 14 12 2

Pesquisa Científica 15 8 7

Processo Saúde Doença 4 2 2

Dificuldade (estimada)

Questões Realizadas por pelo menos um estudante

Não observadas (%)

Fácil 41 41 0 (0%)

Média 41 13 28 (68%)

Difícil 18 13 5 (28%)

Apache: conexão do terminal com a Inet…

Ações• Testes de várias horas com 500

usuários simulados enviando respostas a cada 20s.

• 2.000 conexões simultâneas pelo MySQL (o banco de dados).– conexão não é o número de alunos, mas

quantos enviam ao mesmo tempo. • Equipe do HC otimizou o banco e a

indexação das tabelas mais acessadas– tempo que o sistema deposita cada

resposta caiu de 10s para 3s…

“Crash” do APEx no dia 04 de julho foi determinado por“default” de 150 conexões pelo Apache/webserver

Disciplina: Avaliação Extensiva Formativa em MedicinaAPEx – Avaliação Permanente Extensiva

Próximas ações:• Análise da avaliação semestral 1, Turma 103

– Empresa Sciere– Teoria de Resposta ao Item (TRI)

• Atribuição de notas (0 a 10) para composição das notas das Disciplinas do I semestre 2015– Sciere, 02/agosto

• Distribuição dos percentuais de participação dos temas para avaliação semestral 2, Turma 103– Reuniões mensais da CPA, Sextas-f, 8h00 às 11h30

• Propostas de investigações1. Correlação com desempenhos curriculares2. Correlação com desempenhos curriculares e IFOM (2018, 4º ano)3. Mapeamento por RMN na resolução de itens, ao longo da formação médica4. Composição de matrizes curriculares balizadas pelas áreas do conhecimento

Disciplina: Avaliação Extensiva Formativa em MedicinaAPEx – Avaliação Permanente Extensiva

Equipe de NTI (HC e FM)

• Jacson Venancio de Barros /HC• Jorge Futoshi Yamamoto / HC• Aurélio José Vitorino / HC• Pedro José Pimentel / HC• Djavan Nonato / HC• Paulo Simionato / FM• Marcelo Salavee Lemos / FM• Flavio Claudiano / FM• Marcelo Freitas / FM

Comissão Permanente de Avaliação da FMUSP

• Prof. Alexandre Ferraro• Profa. Alicia Matijasevich• Prof. Edson Amaro• Prof. Itamar Santos• Prof. Joaquim Vieira• Profa. Linda Maximiniano• Prof. Marco Galletta• Prof. Marcos Samano• Prof. Paulo Silveira• Prof. Renério Fraguas