das metrias tradicionais às altmétricas na avaliação da produção científica

35
DAS METRIAS TRADICIONAIS ÀS ALTMÉTRICAS: NOVOS MODELOS DE NEGÓCIO NA AVALIAÇÃO CIENTÍFICA Sibele Fausto Disciplina CBD5545 Tecnologias Sociais de Comunicação, Informação e Conhecimento Profs. Fernando Modesto e Marcos Mucheroni Novembro de 2012

Upload: sfausto

Post on 05-Jun-2015

621 views

Category:

Documents


4 download

DESCRIPTION

Seminário apresentado à Disciplina CBD 5545 - Tecnologias Sociais de Comunicação, Informação e Conhecimento do Programa de Pós Graduação em Ciência da Informação da Escola de Comunicações e Artes da Universidade de São Paulo (PPGCI-ECA-USP), em 22 de novembro de 2012.

TRANSCRIPT

Page 1: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

DAS METRIAS TRADICIONAIS ÀS ALTMÉTRICAS:

NOVOS MODELOS DE NEGÓCIO NA AVALIAÇÃO

CIENTÍFICA

Sibele Fausto

Disciplina CBD5545 Tecnologias Sociais de Comunicação, Informação e Conhecimento

Profs. Fernando Modesto e Marcos Mucheroni

Novembro de 2012

Page 2: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

AVALIAÇÃO DA CIÊNCIA

“ [...] as agências de fomento de um país precisam

de sistemas de avaliação da ciência e tecnologia,

não apenas para mapear e saber o que é produzido,

mas para identificar e estimular as melhores

iniciativas, tendo em vista seus programas e

metas.”

(MUELLER, 2008, p. 28)

Page 3: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

METRIAS DA CIÊNCIA

Bibliometria

Cientometria

Webometria

Informetria

(BJÖRNEBORN, 2002; BJÖRNEBORN; INGWERSEN, 2003; THELWALL;

VAUGHAN; BJÖRNEBORN, 2003 apud VANTI, 2005)

Page 4: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

AVALIAÇÃO DA PRODUÇÃO CIENTÍFICA

As metrias desenvolvidas até hoje estão

fortemente vinculadas ao output da atividade

científica: seu produto, representado pelas

publicações, que é o resultado das pesquisas.

Revista científica: surge em 1665

Le Journal des sçavans

The Philosophical Transactions of the Royal Society

Tecnologia impressa de mais de 300 anos

Page 5: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

AVALIAÇÃO DA PRODUÇÃO CIENTÍFICA

“Uma forma de avaliar a qualidade de uma

publicação consiste em verificar o nível de interesse

dos outros pela pesquisa. O método mais simples

para obter esta medida se dá por meio da

quantidade de citações dessa pesquisa na

bibliografia ulterior.”

(MEADOWS, 1999, p. 89)

Page 6: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

AVALIAÇÃO DA PRODUÇÃO CIENTÍFICA

Em 1960, Eugene Garfield, proprietário do então

ISI (Institute for Scientific Information)* cria o

Journal Impact Factor (Fator de Impacto –

FI), e a partir de 1975 o ISI passa a publicá-lo

anualmente no recém criado Journal Citation

Reports (JCR) (STREHL, 2005)

* Atualmente Web of Knowledge, da Thomson Reuters

Page 7: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

FATOR DE IMPACTO

Page 8: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

CRÍTICAS AO FI

Diversidade das áreas

(STREHL, 2005)

Page 9: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

CRÍTICAS AO FI

Diversidade das áreas

(MUGNAINI, 2012)

Page 10: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

CRÍTICAS AO FI

BMJ, 1997

http://www.bmj.com//content/314/7079/497.1

Baixa correlação entre a citação a artigos individuais e o FI da revista

Page 11: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

CRÍTICAS AO FI

A) Percentagem dos 5% de artigos mais citados publicados no grupo top 5% de revistas mais citadas

B) Percentagem de 5% de artigos mais citados que não foram publicados no grupo top 5% de revistas mais citadas

(LOZANO, LARIVÈRE, GINGRAS, 2012)

A queda da relação entre o Fator de Impacto de revistas e as citações

Page 12: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

CRÍTICAS AO FI

Fonte: FENNER, 2012

Page 13: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

NOVAS TECNOLOGIAS – NOVAS METRIAS

Artigos completos online – Livre Acesso

Tecnologias Sociais

Diversificação das formas de publicação

Sofisticação das ferramentas de busca

Page 14: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

DE FATOR DE IMPACTO PARA... IMPACTO!

IMPACTO

USO

Downloads

Visualizações

CITAÇÕES ALCANCE

Arquivamento

Links

Bookmarks

Conversações

Page 15: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

METRIAS ALTERNATIVAS

Índice h

Proposto por Hirsch em 2005

Hoje já adotado por bases de dados (WoS, Scopus)

Passível de ser obtido de forma livre na web, através do Google Acadêmico

Software Publish or Perish, livremente disponibilizado por Anne-Wil Harzing

http://www.harzing.com/

Outras alternativas: Google Scholar Universal Gadget

e Scholar H-index Calculator

Page 16: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

METRIAS ALTERNATIVAS

ÍNDICE H

Page 17: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

METRIAS ALTERNATIVAS

ÍNDICE H

Software Publish or Perish

Page 18: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

METRIAS ALTERNATIVAS

Article-Level Metrics - ALM

(Métricas em Nível de Artigo)

Lançada pela revista científica PLoS

(Public Library of Science)

Conjunto multidimensional de metrias sobre o

artigo

http://article-level-metrics.plos.org/alm-info/

Page 19: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

METRIAS ALTERNATIVAS ARTICLE-LEVEL METRICS PLOS

Page 20: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

METRIAS ALTERNATIVAS ARTICLE-LEVEL METRICS PLOS

Page 21: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

METRIAS ALTERNATIVAS ARTICLE-LEVEL METRICS PLOS

Page 22: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

METRIAS ALTERNATIVAS

Altmetrics Conjunto de Metrias baseadas na Web Social,

utilizando uma gama variada de fontes e recursos

online

http://altmetrics.org/manifesto/

Page 23: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

METRIAS ALTERNATIVAS

ALTMETRICS

Page 24: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

METRIAS ALTERNATIVAS

ALTMETRICS http://www.impactstory.org/

Page 25: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

METRIAS ALTERNATIVAS

ALTMETRICS

Page 26: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

METRIAS ALTERNATIVAS

ALTMETRICS

Page 27: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

METRIAS ALTERNATIVAS

ALTMETRICS http://www.plumanalytics.com/

Page 28: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

METRIAS ALTERNATIVAS

ALTMETRICS

Page 29: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

METRIAS ALTERNATIVAS

ALTMETRICS

Primeiro cliente: Biblioteca da Pittsburgh University, EUA

Page 30: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

METRIAS ALTERNATIVAS

ALTMETRICS http://www.altmetric.com

Page 31: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

METRIAS ALTERNATIVAS

ALTMETRICS

Trial (pede senha): http://www.altmetric.com

Page 32: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

METRIAS ALTERNATIVAS

Novos modelos de negócio na avaliação da ciência,

impulsionados pelas novas

Tecnologias Sociais de Comunicação,

Informação e Conhecimento

Fator de Impacto

Impacto!

ScienceCard

CitedIn

Page 33: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

METRIAS ALTERNATIVAS

NOVOS MODELOS DE NEGÓCIO

Natureza

Responsável

Tipo de

produto

Sem fins

lucrativos

Editor

Estatísticas

extraídas pelo

próprio editor

Sem fins

lucrativos

Provedor de

serviço

Cobertura de

revistas online

Cobertura de

recursos online

Serviços com

valor agregado

Com fins

lucrativos

Com fins

lucrativos

Page 34: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

“Não há nada tão poderoso como uma ideia

cujo tempo finalmente chegou”

Victor Hugo

[email protected]

OBRIGADA!

Page 35: Das Metrias Tradicionais às Altmétricas na Avaliação da Produção Científica

BIBLIOGRAFIA FENNER, M. Article-Level Metrics at PLOS. In: NISO Webinar, Baltimore, 2012.

LOZANO, G. A.; LARIVIÈRE, V. ; GINGRAS, Y. The weakening relationship between the Impact Factor and citation rates in the digital age. JASIST, v.63, n.11, p. 2140–2145, 2012.

MEADOWS, A. J. A comunicação científica. Brasília, DF: Briquet de Lemos, 1999. 268 p.

MUELLER, S.P.M. Métricas para a ciência e tecnologia e o financiamento da pesquisa: algumas reflexões. Enc. Bibli: R. Eletr. Bibliotecon. Ci. Inf., n. esp., p. 24-38, 2008.

MUGNAINI, R. Compreendendo os principais indicadores bibliométricos: conceitos e aplicações nas diversas áreas. Aula proferida em 16/05/2012 no PPGCI-ECA-USP.

STREHL, L. O fator de impacto do ISI e a avaliação da produção científica: aspectos conceituais e metodológicos. Ci. Inf., Brasília, v. 34, n. 1, Jan. 2005.

VANTI, N. Os links e os estudos webométricos. Ci. Inf., Brasília, v. 34, n. 1, Jan. 2005.

Why the impact factor of journals should not be used for evaluating research. BMJ, v. 314, n. 497, 1997. doi: ttp://dx.doi.org/10.1136/bmj.314.7079.497