IV Semana da escrita Científica do IFSC

Análise bibliométrica da produção científica: dos indicadores individuais aos rankings universitários

IFSC/USP – Auditório “Prof. Sérgio Mascarenhas” 13/11/2013

http://www.biblioteca.ifsc.usp.br/semanadaescrita/4/

Prof Leandro I. Lopes de Faria DCI e NIT/Materiais - UFSCar

Breve histórico do NIT/Materiais

• Implantado em 24/08/1995

• Unidade do DEMa com contribuição do DCI

• Rede de Núcleos de Informação Tecnológica IBICT/MCTI

• Bibliometria como ferramenta analítica

• Ensino: graduação, pós, treinamentos.

• Projetos: FAPESP, Petrobras, Vale, 3M, Alcoa, Eaton, Renault...

• Pesquisa: Métodos e ferramentas para estudos de C&T

Informação para compreender C,T&I Estudo indicadores de C,T&I em SP -2004 e 2010

Capacitação de bibliotecários da USP para elaboração de indicadores de produção científica

Turma FMVZ – São Paulo

Turma FSP – São Paulo

Turma EESC – São Carlos

Turma FFLCH – São Paulo

O que é Bibliometria?

• Bibliometria: técnica de análise quantitativa que trata da medição da comunicação escrita.

• Medição pela contagem de:

– documentos

– palavras de documentos

– palavras/termos/nomes de referências bibliográficas

Lei de Zipf Comportamento Humano e o Principio do Menor Esforço

Bibliometria e análise de conteúdo

21.023 vezes em 45 anos

9.312 vezes em 45 anos

Aplicações da Bibliometria

• Gestão de centros de informação

– Lei de Bradford e Fator de Impacto

– Ex: Avaliação de uso do Comut na BCo

• Criação de bases de dados

– Ex: Web of Science

• Análise e sumarização de documentos integrais

– Ex: Auto-resumo do Word

• Indicadores de C&T para subsídio a Políticas Públicas

– Ex: Fapesp, MCT, Unicamp, OST, NSF, etc

• Text Mining: Prospecção tecnológica e Inteligência Competitiva

– Ex: Monitoramento da empresa Daiwa

Bibliometria e os indicadores de C&T

• Indicadores: medidas indiretas para avaliar algo intangível

$ Economia

Valor do US$

Crescimento do PIB

Desemprego

Taxa de juros

Investimento estrangeiro

Valorização da bolsa

Saúde

Temperatura

Pressão arterial

Batimentos cardíacos

Peso/altura

Nível de subst. no sangue

Ciência e Tecnologia

RH

Investimento

Produção Científica

Patentes

Etc

Indicadores Bibliométricos

Tipos de indicadores de produção científica

• Indicadores de produção

– No. de publicações por ano, país, instituição, área do conhecimento

• Indicadores de citação

– No. de citações recebidas por ano, país, por área do conhecimento

– Fator de impacto por país e área do conhecimento

• Indicadores de ligação

– No. de co-ocorrências de autoria, citações (co-citações) e palavras (co-word)

Indicadores de produção: Número de publicações no Currículo Lattes

Indicadores de produção: Número de citações no Currículo Lattes

Índice H: produtividade e impacto simultaneamente

• Índice H = 24 se o pesquisador tem 24 publicações com 24 ou mais citações recebidas cada.

Índice H baseado em Web of Science Ex: Vanderlei Salvador Bagnato (IFSC/USP)

Fator de impacto Índices de citação aplicados a periódicos

• Indica a média de citações que os artigos de um periódico recebe em um período de 2 anos.

• Avaliação do prestígio de periódicos científicos

• Cálculo a partir de WoS, resultados no Journal Citation Reports

• Muda a cada ano

• Como calcular:

– FI 2011 = A/B, onde:

– A= nº citações feitas em 2011 a artigos publicados em 2009/10

– B= nº artigos publicados em 2009/10

Análise da centralidade de pesquisadores Nanotecnologia no Brasil, WoS, 1998-2010

Exemplos de estudos

Indicadores de CT&I para a FAPESP

Exemplo: Concentração da produção científica brasileira

• Contribuição do Sudeste: 77,2% em 1998 e 77,1% em 2002

• Crescimento: Sul (71%) e Nordeste (65%) maior que Sudeste (54%)

Participação porcentual das regiões no total de publicações brasileiras indexadas na base SCIE e taxa de crescimento – 1998-2002 (acumulado)

Contribuição brasileira para as publicações mundiais por área do conhecimento, 1998-2002, 2002-2006

0,0 1,0 2,0 3,0 4,0

Medicina

Física

Química

Botânica e Zoologia

Biologia e Bioquímica

Engenharia

Neurologia e Comportamento

Ciências Agrárias

Ciência dos Materiais

Ecologia

Microbiologia

Matemática

Farmacologia e Toxicologia

Biologia Molecular e Genética

Ciência da Computação

Geociências

Ciências Sociais

Imunologia

Ciências Espaciais

Psiquiatria e Psicologia

Multidisciplinar

Economia

Contribuição brasileira (%)

1998 - 2002 2002 - 2006 Fonte: Essential Science Indicators, Thomson Reuters, [2008]

Citações de publicações mundiais e brasileiras períodos 1998-2002 e 2002-2006

0

5.000.000

10.000.000

15.000.000

20.000.000

25.000.000

Mundo

Cit

açõ

es

1998-2002 2002-2006

0

50.000

100.000

150.000

200.000

250.000

Brasil

Cita

çõ

es

1998-2002 2002-2006

Fonte: Essential Science Indicators, Thomson Reuters, [2008]

26,7% 79,6%

Indicadores da UFSCar

Exemplo: Análise da produção científica da UFSCar... Dados 2001 - 2005

Média de publicações por docente Número de publicações

Crescimento (%)

Divulgação: indicadores no vídeo institucional Visibilidade para a UFSCar

http://www2.ufscar.br/aufscar/institucionalUFSCar.wmv

Ferramentas para valorização da produção científica

Ferramenta “Google Acadêmico”

Divulgação e Indicadores de produção científica individuais e de Grupos de Pesquisa

Google Acadêmico: indicadores individuais e de GPs

Ferramenta “ResearcherID”

Divulgação e padronização da autoria de produção científica

ResearcherID: Padronização de autoria e divulgação da produção científica

Ferramenta “RefBase”

Repositório para divulgação de produção científica de grupo de pesquisa

Repositório NIT/Materiais usando RefBase

Resultado de pesquisa no Google sobre artigo do NIT indexado no Repositório

Ferramenta “Gráfico Animado”

Indicadores sobre Docentes do IFSC

Gráfico Animado Professores do IFSC (2005-2010)

https://docs.google.com/spreadsheet/ccc?key=0Ahcy3ajMrytidHkySmYzS1FMRWFaQmt6MlhaOXFCMnc&usp=drive_web#gid=2

Ferramenta “VantagePoint”

Criação de indicadores de produção científica personalizados

VantagePoint: Indicadores personalizados

Ferramenta “ScriptLattes”

Indicadores de produção científica a partir dos Currículos Lattes

ScriptLattes: indicadores dos CV Lattes

Ferramentas Gephi, Ucinet, NetDraw, Pajek...

Elaboração de redes de colaboração

Gephi: Rede de colaboração DEMa (1º esboço)

Gephi: Rede de colaboração DEMa (1º esboço)

Produção científica e Rankings Universitários

A bibliometria e os Rankings Universitários

THE World University Ranking Metodologia

• Crítica: peso excessivo de citações e surveys

Webometrics Ranking of World Universities Metodologia

• Não avalia o ensino

Ranking Universitário Folha Metodologia

• Pesquisa acadêmica – 55%

• Qualidade do ensino – 20%

• Avaliação do mercado – 20%

• Inovação – 5%

• Críticas: – Conversão de dados em índices não disponíveis

– Surveys limitados

– Por que não usar ENADE, IGC ?

– Indicador relativo ao 1º colocado da categoria

Considerações finais

• Indicadores bibliométricos como recursos de valorização e visibilidade individual e institucional

• Necessidade de conhecimento sobre técnicas e ferramentas bibliométricas

Fone (16) 3351 8551

http://www.nit.ufscar.br

Obrigado !