Avaliacão CAPES e Classificacão Qualis em Odontologia

(1)

Avaliacão CAPES e

Classificacão Qualis em

Odontologia

Isabela Almeida Pordeus

Maio 2009

Evolução do qualis e impacto na

produção quantitativa e qualitativa da

Pós-Graduação na Área de

Odontologia

(2)

Avaliação CAPES e Qualis CA

Odontologia: Papel indutor na

qualificação dos periódicos

brasileiros?

(3)

A

A Produção

Produção Científica

Científica

Brasileira

Publicação

Publicação Científica

Científica Brasileira

Brasileira

(JCR)

((19811981--2004 , ISI)2004 , ISI)

(4)

País

Produção Científica Mundial (%)

1. EUA 32.7 2. Japão 8.5 3. Alemanha 8.4 4. Inglaterra 7.4 5. China 6.7 6. França 5.9 7. Canadá 4.8 8. Italia 4.4 9. Espanha 3.3 10. Austrália 3.0 17. Brasil (15. Brasil - 2007) 1.8 (2.0)

(Revista Fapesp, 2006; www.capes.gov.br, 16 Feb 2008)

Os 20

Os 20 países

países mais

mais produtivos

produtivos

(2007)(2007)

Web of Science País Artigos Citações 1. USA 2,864,275 39,027,838 2. Japão 777,992 6,612,826 3. Alemanha 738,067 7,935,567 4. Inglaterra 653,177 7,955,521 5. França 529,636 5,414,557 6. China 471,890 1,894,810 7. Canadá 393,143 4,377,986 17. Brasil 137,159 720,131 www.incites.com(Feb 15, 2008)

(5)

Os 20

Os 20 países

países mais

mais produtivos

produtivos

(2007)(2007)

Web of Science País Artigos Citaçoes 1. USA 2,864,275 39,027,838 2. Inglaterra 653,177 7,955,521 3. Alemanha 738,067 7,935,567 4. Japão 777,992 6,612,826 5. França 529,636 5,414,557 6. Canadá 393,143 4,377,986 20. Finlandia 82,001 948,501 www.incites.com(Feb 15, 2008) Brasil 137,159 720,131

Brasil é o 13º entre os maiores

produtores de conhecimento

Publicada por Assessoria de Imprensa da Capes Terça, 05 de Maio de 2009 18:03

O Brasil alcançou a 13ª posição na classificação mundial em produção científica em 2008 - ultrapassou a Rússia (15ª) e a Holanda (14ª). De 19.436 artigos em 2007, essa produção subiu para 30.451 publicações em 2008.

Estados Unidos, China, Alemanha, Japão e Inglaterra são os cinco primeiros colocados, seguidos da França, Canadá, Itália, Espanha, Índia, Austrália e Coréia do Sul. Com esse aumento na produção científica, o Brasil passa a contribuir com 2,12% dos artigos de todos os 183 países.

O desempenho alcançado pelo Brasil é resultado da atuação das universidades e centros de pesquisa que atuam na pós-graduação universitária. Outro fator relevante no desempenho científico brasileiro é o apoio das agências federais no fomento à pesquisa e na formação de recursos humanos nos últimos anos, por meio da concessão de bolsas de estudo para cursos de pós-graduação stricto sensu e a disponibilidade do acesso livre ao conhecimento gerado mundialmente, oferecido pelo Portal de Periódicos da Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (Capes).

(6)

Fatores

Responsáveis

Processo de avaliação

Portal Periódicos

Crescimento da

Pós-Graduação

Programa forte de IC

Financiamento Público

AVALIAÇÃO DA QUALIDADE AVALIAÇÃO DA QUALIDADE

Instrument

o ?

Peso?

Produçã

o

(7)

O Impacto da Avaliação Capes na

Produção Científica e Qualidade das

Revistas Brasileiras na Área Médica

Prof. Dr. Jair de Jesus Mari

Coordenador da Pós Graduação da UNIFESP/EPM Coordenador da Pós Graduação da UNIFESP/EPM

Pressupostos

A pós-graduação é reconhecidamente o componente mais bem sucedido do sistema educacional brasileiro. Esse êxito deve-se em grande parte ao fato de as ações governamentais voltadas para o desenvolvimento desse nível de ensino terem-se calcado, no decorrer das duas últimas décadas, em um processo sistemático e bem conduzido de acompanhamento e avaliação do desempenho dos cursos de mestrado e de doutorado existentes no país.

(8)

Avaliação da Pós-Graduação

n

Avaliar o Processo ou o Produto?

n

Avaliação por Pares or Avaliação

Independente?

n

Uniformidade ou Homogeneidade?

n

Regras Intransponíveis ou Diretrizes?

A

A Produção

Produção Científica

Científica Brasileira

Brasileira: :

Área

(9)

(Zorzetto et al., 2006)

(10)

A

A Pós

Pós--Graduação

Graduação em

em

Odontologia

Evolução da Pesquisa Odontológica Brasileira

Cury JA. The evolution of dental research in Brazil. Pesqui Odontol Bras 18(2), 2004

1. O numero de publicações Medline relacionando affiliation,

Dentistry, Brazil no triênio 2001-2003 (758) foi maior que a

de todo o século passado (423);

2.

Na minha opinião,

estes números refletem a reação da

Odontologia Brasileira aos parâmetros de qualidade

estabelecidos

, pois houve empenho para atingir as metas. Por outro lado, o reflexo disto não é só no sentido que hoje podemos sonhar com o que queremos ser no futuro. Sonhar com justiça nas competições universitárias, nos estimula a lutar mais, a crescer, enfim viver!

Neste triênio, em termos de ISI Web of Science,

relacionando address, article, Dent, Brazil, houve

mais publicações no triênio 2001/03 (898) que em todo

século XX (854).

(11)

OBJETIVOS DO QUALIS

n

Realizar tratamento mais sistemático e

qualitativo

da

produção

científica

dos

Programas

de

Pós-graduação,

visando

aperfeiçoar os indicadores que subsidiam a

avaliação desses Programas

Infocapes,10(2),2002

•BASE DE INFORMAÇÃO QUALIS:

os títulos

classificados no Qualis

correspondem a todos e

exclusivamente a periódicos que contém a produção

relatada nos respectivos períodos de avaliação dos

Programas

Evolução do Programas de Pós

Evolução do Programas de Pós--Graduação em Odontologia: Graduação em Odontologia: período 1998

período 1998--20062006

Evolução dos Programas: Odontologia

(12)

Produção Intelectual: Odontologia

0 0,5 1 1,5 2 1987 1990 1993 1996 1999 2001 2002 2003 2004 2005 2006

Nacional

Internacional

Produção intelectual anual por docente durante o período 1987-2006

(Braga, 2002; Cury & Pordeus, 2007)

Produção intelectual docente total durante o triênio 98/00 e anos 2001 a 2006

(Cury & Pordeus, 2007)

442426 605677 1004 1126 1253 1717 635 1179 106111011073 976 0 500 1000 1500 2000 Internacional Nacional 98/00 2001 2002 2003 2004 2005 2006

Produção Intelectual: Odontologia

(13)

Rank do Brasil nas áreas do Deluxe NSI período 2003-2007 no

Mundo:

somente da 10ª posição em diante.

Nº Área Posição no Mundo Nº Artigos

1 Veterinary 4 3421

2 Zoology 7 2264

3 Dentistry, Oral Surgery & Medicine 4 2203

4 Biology 4 1999

5 Psychiatry 9 1794

6 Parasitology 2 1635

7 Entomology 3 1629

8 Agriculture, Multidisciplinary 3 1627

9 Agriculture, Dairy & Animal Science 3 1617

10Medicine, Research & Experimental 10 1561

11 Tropical Medicine 2 1433

12 Toxicology 10 1188

13 Agriculture, Soil Science 7 947

14 Mycology 8 331

15 Biodiversity Conservation 8 326

16 Materials Science, Characterization & Testing 10 226

17Integrative & Complementary Medicine 9 194

18 Agricultural Engineering 9 148

19Education, Scientific Disciplines 7 145

20 Microscopy 10 133

21Psychology, Psychoanalysis 8 41

22Literature, African, Australian, Canadian 9 7

Fonte: ISI - Institute for Scientific Information. National Science Indicators, USA. Base Deluxe - SCI (2007).

Produção Intelectual:

internacional

Produção internacional por docente total durante o triênio 98/00 e anos 2001 a 2006

(Cury & Pordeus, 2007)

Odontologia

0 0,2 0,4 0,6 0,8 1 1,2 1,4 1,6 1,8

Pat Clin Orto/Ped S.Col Dent Cir

98/00 2001 2002 2003 2004 2005 2006

(14)

Produção nacional por docente total durante o triênio 98/00 e anos 2001 a 2006

(Cury & Pordeus, 2007)

Odontologia

0 0,5 1 1,5 2 2,5

Pat Clin Orto/Ped S.Col Dent Cir

98/00 2001 2002 2003 2004 2005 2006

Produção Científica Odontologia

2012 423 1100 643 2632 1256 2004-2006 IA IB IC NA NB NC

(15)

Produção Odontologia 2004-06

IA-IB; 2435 IC-NC; 5631 0 1000 2000 3000 4000 5000 6000

Artigos por docente - evolução

0,44

1,17

2,21

1998-2000 2001-2003 2004-2006

(16)

Teses & Dissertações - Odontologia 2004-06

0 500 1000 1500 2000 2500 Teses Dissertacoes

CONCLUSÕES

n “O VENENO NÃO MATOU O DOENTE”

n “HOJE ELE CONHECE OS MECANISMOS PARA

CONTROLAR A DOENÇA USANDO DOSES HOMEOPÁTICAS

n “ELE TEM CONHECIMENTO PARA TER ALTA QUALIDADE

DE VIDA

n “VENENOS MAIS POTENTES PODEM SER NECESSÁRIOS

NO FUTURO DEVIDO AO CONHECIDO FENOMENO DE RESISTÊNCIA OU DESEQUILÍBRIO ECOLÓGICO”

(17)

Conclusões

É bem verdade que ao longo desses mais de 30 anos de pós-graduação, um grande número de soluções criativas foram encontradas de maneira que vemos, por todo o país, programas de pós-graduação de bom nível.

O sistema de avaliação e seu progressivo

aprimoramento tem contribuído sobremaneira para o incremento da produção científica de qualidade no país.

Jair Mari

Conclusões

Com a valorização da produção científica no país,

houve uma maior disponibilidade de artigos

científicos de bom nível, refletindo na melhora da

qualidade das revistas científicas brasileiras.

O número de revistas na base Medline práticamente

cresceu em 2001 havia 17 títulos brasileiros e em

2008 são 38 títulos na base Medline.

(18)

Conclusões

A avaliação Capes ao hierarquizar a

produção científica através dos bancos de

literatura, tem contribúido para que os

editores de revistas científicas busquem um

melhor nível de indexação de revistas,

provendo maior visibilidade da ciência

produzida na área da saúde no país.

Jair Mari

Odontologia nas Bases de Dados

0 10 20 30 40 50 60 70 80

LILACS SCIELO MEDLINE SCOPUS WEB OF SCIENCES

(19)

FICHA DE AVALIAÇÃO

Triênio 2007-9

PROPOSTA EM DISCUSSÃO

O que avaliar?

Capacidade de qualificar docentes e formar

pesquisadores

Produção científica (qualidade e impacto)

Inserção social

(20)

Processo de Avaliação: 2 fases

FASE 1: Avaliação dos quesitos

FASE 1: Avaliação dos quesitos –– Conceitos 1

Conceitos 1--55

Proposta do Programa

Corpo Docente

(20%)

Corpo Discente , Teses e Dissertações

(30%)

Produção Intelectual

(40%)

Inserção Social

(10%)

FASE 2: Perfil de excelência

FASE 2: Perfil de excelência –– Conceitos 6

Conceitos 6--77

IV Produção Intelectual

(40%)

1 Publicações qualificadas do Programa por Docente

Permanente

(50%)

2 Distribuição de publicações qualificadas em

relação ao corpo docente permanente

(40%)

3 Outras produções consideradas relevantes:

produção técnica, patentes, produtos, etc

(10%)

(21)

Expectativa

Expectativa QUALIS

QUALIS

Que os estratos (6 nas avaliações

anteriores) diferenciassem as

publicações de forma QUALITATIVA

(22)

Triênio

Triênio 2007

2007--2009

2009

Proposta estratificação QUALIS

1. IA

2. IB

3. IC

4. NA

5. NB

6. NC

1. 1. A1

A1

2. 2. A2

A2

3. 3. B1

B1

4. 4. B2

B2

5. 5. B3

B3

6. 6. B4

B4

7. 7. B5

B5

8. 8. C

C

(23)

(24)

(25)

Expectativa

Expectativa QUALIS

QUALIS

n

Aspectos observados

(

CTC-ES/CAPES, em 04/03/2009):

1. O percentual de periódicos classificados no estrato A1 é

menor do que ao dos classificados em A2;

2. A soma dos percentuais dos periódicos classificados no

estrato A1 e A2 não ultrapassa 26%;

3. Pelo menos cinco estratos sejam representativos

4. O número de artigos em periódicos classificados como

C fique próximo a zero, pois esses serão excluídos no

cálculo dos percentuais mencionados acima

(26)

A1

Periódicos com valores j* e h* ≥1,43 (j≥3,08 e h≥52)

A2

Periódicos com valores j* e h* entre 1,15 e 1,42 _{(j entre 2,02-3,07 e h entre 34-51)}

B1

Periódicos com valores j* e h* entre 1,01 e 1,14 _{(j entre 1,54-2,01 e h entre 26-33)}

B2

Periódicos com valores j* ≤ 1,0 (j ≤ 1,53) _{e h* entre 0,77 e 1,0 (h entre 15-25)}

B3

Periódicos com valores h* ≤ 0,76 (h≤ 14) ou periódicos catalogados empelo menos uma das seguintes bases: Medline, PubMed, International Pharmaceutical Abstracts (IPA), SciELO

B4

Periódicos indexados em pelo menos uma das bases: LILACS, _{EMBASE, EXCERPTA MÉDICA, PSYCLIT}

B5

Periódicos indexados na base BBO ou que sejam editados por _{sociedades científicas nacionais representativas da Área}

C

Periódicos considerados impróprios ou que não atendam aos critérios _{explicitados anteriormente}

ODONTOLOGIA

ODONTOLOGIA: :

Proposta

Proposta Q

Q

UALIS

Ocorrendo

discrepância entre os indicadores (j e h),

tomou-se como critério de decisão os seguintes pontos de

corte:

1. Em caso de um nível de discrepância, adotou-se o

estrato superior,

2. Quando da discrepância com dois níveis, adotou-se o

estrato intermediário,

3. Quando da discrepância com três níveis, adotou-se o

estrato imediatamente inferior ao indicador mais alto.

(27)

ODONTOLOGIA

ODONTOLOGIA: :

Proposta

Proposta Q

Q

UALIS

PERIÓDICOS:

ano base 2007 ano base 2007 (n = 799)(n = 799)

ODONTOLOGIA

ODONTOLOGIA: :

Proposta

Proposta Q

Q

UALIS

ARTIGOS:

(28)

classificação durante o período de

Avaliação(Triênio)

Os

periódicos

somente

serão

reclassificados

para

uma

classificação superior,

nunca para

inferior

, evitando-se dessa forma

mudanças bruscas na classificação e

prejuízos aos Programas, o que não

é desejável

.

(29)

Recebemos seu último artigo...

Por que nos mandou ?

O que fizemos para você ?

Seu trabalho foi recusado para publicação?

... Não se desespere!!!

BMJ 1979: de 1551 artigos submetidos sucessivamente, 1223 (79%)

foram recusados!!!

§ ... 68% destes (836 de 1223) foram publicados ... em outras

revistas...

§

§ ... Portanto ... mesmo sendo recusado... a estatística nos ... Portanto ... mesmo sendo recusado... a estatística nos

favorece !!! favorece !!!

(30)

¨

_O

_{O tolo coleta os}

_{tolo coleta os}

fatos; o homem

sábio os seleciona...

sábio os seleciona...¨¨

(W. Powell, 1888)

n

Flavio F. Demarco

¤ Graduado em Odontologia – UFPel - 1989 ¤ Doutor em Dentística – USP – 1998

¤ _{Pós-Doutor –área Engenharia de Tecidos - UMICH – 2008} ¤ Professor Associado – UFPel

¤ Pesquisador 1C CNPq

¤ Coordenador do Programa de Pós-Graduação em Odontologia

– UFPel

¤ Membro da Comissão de Avaliação Área de Odontologia

-CAPES

UNIVERSIDADE FEDERAL DE PELOTAS FACULDADE DE ODONTOLOGIA

flavio.demarco@pq.cnpq.br

Engenharia tecidual aplicada a Odontologia (Disciplina de PG – 8 a 12 de dezembro

(31)

isabelapordeus@ufmg.br

The Growing Competition in

Brazilian Science

n The discrepancy between the scarcity of funds and the need

for publication is leading to the “publish or perish” condition experienced in the USA during the seventies, with the difference that in the USA this occurred at a time when science was well established, while in Brazil it is taking place at an early stage of its scientific development.

n Thus, if this pattern is not reversed in the near future,

Brazilian science may go from growth to decay without ever realizing its full potential.

n De Meis et al. (2003). The growing competition in Brazilian science: rites of passage,

(32)

Teses Dissertacoes - Odontologia

2004-06

0 500 1000 1500 2000 2500 Teses Dissertacoes