24

O que os métodos da abordagem comportamental · 2020. 6. 16. · O que isso pode ensinar ao processo avaliativo? • É preciso mitigar o viés de confirmação dos avaliadores!

  • Upload
    others

  • View
    6

  • Download
    0

Embed Size (px)

Citation preview

Page 1: O que os métodos da abordagem comportamental · 2020. 6. 16. · O que isso pode ensinar ao processo avaliativo? • É preciso mitigar o viés de confirmação dos avaliadores!
Page 2: O que os métodos da abordagem comportamental · 2020. 6. 16. · O que isso pode ensinar ao processo avaliativo? • É preciso mitigar o viés de confirmação dos avaliadores!

O que os métodos da abordagem comportamental podem ensinar para a prática da avaliação em políticas públicas?Ricardo Lins HortaDoutor em Direito (UnB) e Mestre em Neuropsicologia (UFMG)Especialista em Políticas Públicas e Gestão Governamental (EPPGG)

Page 3: O que os métodos da abordagem comportamental · 2020. 6. 16. · O que isso pode ensinar ao processo avaliativo? • É preciso mitigar o viés de confirmação dos avaliadores!

As ciências comportamentais se valem de uma multiplicidade de métodos de pesquisa

Page 4: O que os métodos da abordagem comportamental · 2020. 6. 16. · O que isso pode ensinar ao processo avaliativo? • É preciso mitigar o viés de confirmação dos avaliadores!

Cientistas, como os avaliadores de PPs, sãohumanos e, portanto, exibem vieses

• Viés de confirmação

• Otimismo excessivo

• Polarização de grupos

• Ilusão das pequenas amostras

• Etc.

Page 5: O que os métodos da abordagem comportamental · 2020. 6. 16. · O que isso pode ensinar ao processo avaliativo? • É preciso mitigar o viés de confirmação dos avaliadores!

Linus Pauling

Page 6: O que os métodos da abordagem comportamental · 2020. 6. 16. · O que isso pode ensinar ao processo avaliativo? • É preciso mitigar o viés de confirmação dos avaliadores!
Page 7: O que os métodos da abordagem comportamental · 2020. 6. 16. · O que isso pode ensinar ao processo avaliativo? • É preciso mitigar o viés de confirmação dos avaliadores!

Recentemente, alerta-se que as ciências comportamentais passam por uma “crise de replicação”…

Page 8: O que os métodos da abordagem comportamental · 2020. 6. 16. · O que isso pode ensinar ao processo avaliativo? • É preciso mitigar o viés de confirmação dos avaliadores!
Page 9: O que os métodos da abordagem comportamental · 2020. 6. 16. · O que isso pode ensinar ao processo avaliativo? • É preciso mitigar o viés de confirmação dos avaliadores!
Page 10: O que os métodos da abordagem comportamental · 2020. 6. 16. · O que isso pode ensinar ao processo avaliativo? • É preciso mitigar o viés de confirmação dos avaliadores!
Page 11: O que os métodos da abordagem comportamental · 2020. 6. 16. · O que isso pode ensinar ao processo avaliativo? • É preciso mitigar o viés de confirmação dos avaliadores!

Mas terá sido mesmo uma “crise”?

• Exemplo: a questão da “validade ecológica” dos achados

Page 12: O que os métodos da abordagem comportamental · 2020. 6. 16. · O que isso pode ensinar ao processo avaliativo? • É preciso mitigar o viés de confirmação dos avaliadores!
Page 13: O que os métodos da abordagem comportamental · 2020. 6. 16. · O que isso pode ensinar ao processo avaliativo? • É preciso mitigar o viés de confirmação dos avaliadores!
Page 14: O que os métodos da abordagem comportamental · 2020. 6. 16. · O que isso pode ensinar ao processo avaliativo? • É preciso mitigar o viés de confirmação dos avaliadores!

Mas terá sido mesmo uma “crise”?

• O estímulo à colaboração científica

Page 15: O que os métodos da abordagem comportamental · 2020. 6. 16. · O que isso pode ensinar ao processo avaliativo? • É preciso mitigar o viés de confirmação dos avaliadores!
Page 16: O que os métodos da abordagem comportamental · 2020. 6. 16. · O que isso pode ensinar ao processo avaliativo? • É preciso mitigar o viés de confirmação dos avaliadores!
Page 17: O que os métodos da abordagem comportamental · 2020. 6. 16. · O que isso pode ensinar ao processo avaliativo? • É preciso mitigar o viés de confirmação dos avaliadores!

Crise ou aperfeiçoamento generalizado de métodos?

• Preocupação crescente com a “meta-ciência”

• Maior atenção à ética na pesquisa e a fraudes nos dados

• Pré-registro de protocolos de pesquisa

• Bases de dados coletados em pesquisa abertas para a comunidade

• Melhores métodos estatísticos

• Maior esforço para tentar replicar achados de estudos originais

• Medidas para mitigar o “viés de publicação”

• O duro questionamento aos periódicos pagos e fechados

• Maior abertura ao questionamento de “vacas sagradas” do campo

Page 18: O que os métodos da abordagem comportamental · 2020. 6. 16. · O que isso pode ensinar ao processo avaliativo? • É preciso mitigar o viés de confirmação dos avaliadores!

O que isso pode ensinar ao processo avaliativo?

• É preciso mitigar o viés de confirmação dos avaliadores!

• Revalorização das teorias comportamentais: a “rede nomológica”

• A necessária interação entre teorias e testagem/avaliação

• Busca por melhores amostras e maior validade ecológica natestagem, para que achados sejam generalizáveis

• A sempre complexa interação entre avaliadores/burocratas epolíticos

• A incerteza está sempre presente: faz parte do processo científico

Page 19: O que os métodos da abordagem comportamental · 2020. 6. 16. · O que isso pode ensinar ao processo avaliativo? • É preciso mitigar o viés de confirmação dos avaliadores!
Page 20: O que os métodos da abordagem comportamental · 2020. 6. 16. · O que isso pode ensinar ao processo avaliativo? • É preciso mitigar o viés de confirmação dos avaliadores!

Para acompanhar melhor esse debate

https://statmodeling.stat.columbia.edu/

Page 21: O que os métodos da abordagem comportamental · 2020. 6. 16. · O que isso pode ensinar ao processo avaliativo? • É preciso mitigar o viés de confirmação dos avaliadores!

Para acompanhar melhor esse debate

Page 22: O que os métodos da abordagem comportamental · 2020. 6. 16. · O que isso pode ensinar ao processo avaliativo? • É preciso mitigar o viés de confirmação dos avaliadores!

Perguntas?

Page 23: O que os métodos da abordagem comportamental · 2020. 6. 16. · O que isso pode ensinar ao processo avaliativo? • É preciso mitigar o viés de confirmação dos avaliadores!

Obrigado

Page 24: O que os métodos da abordagem comportamental · 2020. 6. 16. · O que isso pode ensinar ao processo avaliativo? • É preciso mitigar o viés de confirmação dos avaliadores!

Compartilhe Sua Experiência!#gLocalEval2020