ÁREA: GESTÃO
SUB-ÁREA: GESTÃO DA INFORMAÇÃO E INTELIGÊNCIA COMPETITIVA TíTULO: CRIAÇÃO DE INDICADORES SOBRE O SERVIÇO DE EMPRÉSTIMO ENTRE BIBLIOTECAS DA BCO/UFSCAR ATRAVÉS DE ANÁLISE
BIBLIOMÉTRICA AUTOMATIZADA
Roniberto Morato do Amaral - roniberto@nit.ufscar.br 1234 Ronildo Santos Prado - ronisp@power.ufscar.br 1 Lígia Maria Silva e Souza - ligia@power.ufscar.br 1
Aisten Baldan – aisten@terra.com.br12
José de Carvalho Assumpção neto@power.ufscar.br1
Leandro Innocentini Lopes de Faria - leandro@nit.ufscar.br 23
1 – Biblioteca Comunitária BCo/UFSCar
Universidade Federal de São Carlos - UFSCar
Rodovia Washington Luís, km 235 – CEP 13565-905 - São Carlos - SP - Brasil (16) 33518424
http://www.bco.ufscar.br
2 – Departamento de Ciência da Informação - DCI Universidade Federal de São Carlos - UFSCar
Rodovia Washington Luís, km 235 – CEP 13565-905 - São Carlos – SP - Brasil (16) 33615547 ou 33613188
http://www.dci.ufscar.br
3 – Núcleo de Informação Tecnológica em Materiais - NIT/Materiais Universidade Federal de São Carlos - UFSCar
Rodovia Washington Luís, km 235 – CEP 13565-905 - São Carlos - SP - Brasil (16) 33615547 ou 33613188
http://www.nit.ufscar.br
4 – Departamento de Engenharia de Produção - DEP Universidade Federal de São Carlos - UFSCar
Rodovia Washington Luís, km 235 – CEP 13565-905 - São Carlos - SP - Brasil (16) 33615547 ou 33613188
RESUMO: Este trabalho apresenta um estudo dos atendimentos e solicitações realizados pelo Serviço de Empréstimo Entre Bibliotecas - EEB da Biblioteca Comunitária da Universidade Federal de São Carlos - BCo/UFSCar em 2006-2007. O objetivo do estudo foi construir indicadores sobre os atendimentos e solicitações feitos pela BCo/UFSCar através do EEB para analisar a evolução desse serviço. Para a construção dos indicadores foi utilizada a análise bibliométrica automatizada. Como dados iniciais, foram utilizados 521 formulários, entre atendimentos e solicitações realizados pela BCo/UFSCar em 2006-2007, obtidos na base de dados EEB. Os formulários foram tratados com o software Vantagepoint para construção de indicadores a partir dos campos "situação do pedido", "data do pedido", "data do atendimento", "biblioteca", "material bibliográfico" e "usuário" entre outros. Como resultados, foram construídos indicadores relacionados ao tempo de atendimento, à freqüência de solicitação e atendimento, aos materiais bibliográficos solicitados e aos usuários. Como o procedimento desenvolvido é automatizado, será possível atualizar periodicamente os indicadores para seu acompanhamento ao longo do tempo.
PALAVRAS-CHAVE: Empréstimo entre bibliotecas; Bibliometria; Indicadores. 1 INTRODUÇÃO
Reconhecidamente nas universidades brasileiras concentra-se o maior número de pesquisas e a geração de novas tecnologias desenvolvidas no país. Ás bibliotecas universitárias compete fornecer serviços de informação científica e tecnológica em níveis compatíveis com as necessidades dos usuários servindo de apoio imprescindível a essas atividades.
O controle bibliográfico, através dos catálogos on line, tem permitido uma maior cobertura dos documentos e assegurado um acesso mais rápido e eficaz às referencias bibliográficas. Atualmente a tecnologia da informação permite acesso às bases de dados nacionais e internacionais e constitui-se em importante fator para a produção de novas ferramentas bibliográficas. Porém o acesso ao documento primário não se encontra na mesma situação, já que as pressões econômicas têm obrigado as bibliotecas a reduzirem suas aquisições (JESUS & GOMES, 2001).
Foi neste estágio que o empréstimo entre bibliotecas começou a adquirir maior importância, uma vez que a experiência tem indicado que a única solução plausível é a de uma determinada biblioteca apoiar-se nos recursos de outras (EVARISTO, 1982).
Propõe-se por meio deste estudo dar continuidade aos trabalhos apresentados por Amaral et al (2005; 2006), de analise dos serviços prestados pela Biblioteca Comunitária da Universidade Federal de São Carlos - BCo/UFSCar, através do uso de métodos de estudos bibliométricos e tratamento automatizado dos dados extraídos a partir das base de dados do serviço de Empréstimo Entre Bibliotecas - EEB da BCo/UFSCar, focando a criação de indicadores. Com a visibilidade das informações sobre o serviço foi possível identificar, através da construção de gráficos e quadros, quais as instituições que mais atenderam e solicitaram material bibliográfico a BCo/UFSCar, quais os principais usuários do serviço, qual a tipologia do material solicitado, a freqüência de solicitações por periódico. Os estudos bibliométricos combinados a outros indicadores podem ajudar tanto na avaliação do estado atual da ciência como na tomada de decisão e no gerenciamento da pesquisa, importantes em estudos para a área acadêmica (WORMELL, 1998).
2 REFERENCIAL TEÓRICO
O empréstimo entre bibliotecas foi definido por Campelo (1986), como o ato de uma biblioteca ceder indiretamente a um individuo, através de outra biblioteca, materiais de seu acervo. Isso pode ser feito pelo empréstimo do próprio original ou de reprodução dele. O empréstimo entre bibliotecas assume uma importância cada vez mais relevante no conjunto de atividades dos serviços de documentação nas bibliotecas universitárias, pois aprimora o compartilhamento dos acervos, garantindo aos usuários o acesso a um diversificado e maior número de documentos. Mediante a revisão de literatura, constata-se que as bibliotecas não têm condições de atender à sua comunidade, pois possuem seus acervos defasados ou incompletos e quando se utilizam do empréstimo entre bibliotecas, reduzem seus gastos com obras que poderiam ter pouca ou temporária utilidade (SANTOS, 2002).
Toda uma argumentação foi elaborada a respeito do compartilhamento de acervos por Silva (2001). Baseado em uma revisão de literatura explanou os motivos pelos quais as bibliotecas podem optar pelo compartilhamento de acervos. São arrolados os benefícios que as bibliotecas venham a desfrutar do
compartilhamento no tocante a economia de custos, desenvolvimento de coleções, progresso da biblioteca e divulgação da informação.
O Brasil não dispõe de mecanismos formais que viabilizem o empréstimo sistemático entre bibliotecas. Assim, todos os recursos aplicados pelas próprias Instituições de Ensino Superior (IES) ou por Agências de fomento na aquisição de livros, beneficiam apenas a comunidade local. Para que o empréstimo entre bibliotecas seja desenvolvido o Ministério da Educação (MEC) afirma que é necessário dispor de instrumentos próprios que assegurem o transito do livro de uma biblioteca para outra, em condições satisfatórias de prazo, segurança e confiabilidade no serviço oferecido. A falta de infra-estrutura é apontada como um empecilho para o bom funcionamento do empréstimo entre bibliotecas no Brasil, ocasionando um serviço feito á base da informalidade, da boa vontade, quase sempre a nível local ou institucional (BRASIL, 1990).
Atualmente a informação é matéria-prima para o desenvolvimento tecnológico. Assume um novo papel como fator de produção que, aliado ao trabalho, matéria-prima e capital se torna o elemento indutor das mudanças tecnológicas essenciais para as empresas que lutam por sua sobrevivência (FUJINO, 1994). A valorização da informação trouxe benefícios para o desenvolvimento e emprego de técnicas voltadas para a análise da informação, entre elas a bibliometria, que possibilita realizar estudos a organização dos setores científicos e tecnológicos a partir de fontes bibliográficas para identificar os autores, suas relações e tendências (SPINAK, 1998).
A bibliometria analisa a comunicação escrita, através da contagem de palavras. Atualmente está relacionada à contagem não apenas de elementos textuais presentes no suporte de papel, mas principalmente de informações extraídas de base de dados bibliográficos. Tarapanoff (1995) define a bibliometria como o estudo de aspectos quantitativos da produção, distribuição e uso da informação registrada, a partir de modelos matemáticos, para o processo de tomada de decisão.
Alguns pesquisadores observaram que a distribuição de freqüência dos dados em um texto ou em um conjunto de referências bibliográficas segue certos padrões. Essas observações deram origem às leis bibliométricas: Lei de Lotka determina a contribuição de cada autor para o avanço da Ciência; Lei de
Bradford, um método para selecionar os periódicos mais representativos para uma área da ciência; e a Lei de Zipf, verificou que se as palavras que ocorrem em um texto forem contadas e classificadas em ordem decrescente de número de ocorrências, a multiplicação do número de ocorrências pela posição no ranking para cada palavra é uma constante. A lei de Zipf é valida para todas as contagens feitas em textos, conjunto de textos ou referências bibliográficas, tanto para contagem de palavras, como de elementos bibliográficos como: autores, data de publicação, fonte da publicação entre outros (WORMELL, 1998).
Através da bibliometria, conjuntos de centenas ou milhares de registros bibliográficos de artigos científicos, patentes, notícias e outros documentos podem ser analisados para dar origem a novas informações bastante sintéticas e de alto valor agregado, chamados indicadores, que não dizem respeito a um documento em particular, mas ao conjunto dos documentos analisados. Os indicadores bibliométricos podem ser usados para estudos de prospecção tecnológica, inteligência competitiva e análise da produção cientifica (FARIA, 2001).
Indicadores é uma forma indireta de avaliar algo intangível, como ciência e tecnologia. Considerando a ciência e tecnologia como sistema gerador de informação, conhecimento e inovação, que requer insumos para funcionar e produz resultados, podem-se construir indicadores de ciência e tecnologia a partir da medição dos insumos aplicados e os resultados obtidos (SPINAK, 1998).
Os indicadores bibliométricos são classificados em indicadores de uma ou de duas dimensões. Os indicadores de duas dimensões são chamados de indicadores de ligação e os indicadores de uma dimensão são divididos em indicadores de atividades (contagem de publicações) e indicadores de impacto (contagem de citações recebidas). Os indicadores de ligação têm sido aplicados para elaboração de mapas descritivos do conhecimento e de redes de relacionamento entre pesquisadores, instituições e países (FARIA, 2001). Eles são de fundamental importância, pois contam os relacionamentos entre os diversos campos de uma base de dados. Por exemplo, são importantes para a identificação das parcerias entre autores ou entre instituições e para mostrar ligações entre temas ou áreas de pesquisa. Os indicadores de atividade são criados a partir da contagem de publicações e visam à elaboração de listas de freqüência ou ranking de pesquisadores, instituições, empresas, países, e outros
(FARIA, 2001). Este tipo de indicador permite identificar os autores mais produtivos de uma determinada área, analisar sua evolução no decorrer dos anos e mapear quais são os temas de pesquisa prioritários de cada país, dentre outras possibilidades. Os indicadores de impacto, que são criados a partir da contagem de citações. O Indicador de impacto mais conhecido é o Fator de Impacto. Calculado freqüentemente pelo Institute for Scientific Information (ISI, 2007) para os periódicos indexados na base Science Citation Index, com base nas citações recebidas pelos artigos publicados nesses periódicos nos últimos anos.
Na década de 80, começaram a ser desenvolvidas ferramentas (softwares) para permitir automatização da análise bibliométrica, que consiste em produzir os indicadores bibliométricos a partir de dados extraídos de base de dados eletrônicas com o auxilio do computador. A análise automatizada conta com as etapas: a) recuperação dos dados; b) preparação dos dados; c) tratamento bibliométrico dos dados para a contagem de ocorrências de palavras nos registros recuperados e criação de listas e matrizes; d) tratamento estatístico; e e) representação gráfica para facilitar o entendimento da análise (FARIA, 2001). Para estudos sistemáticos e de duração mais longa, como a produção de indicadores para a avaliação da produção cientifica, se é necessário à criação de um sistema de informação perene, aprimorado ao longo do tempo com a experiência resultante de sucessivas aplicações (VAN RAAN, 1997).
Diversos pesquisadores brasileiros já desenvolveram estudos a cerca da bibliometria. Quoniam (2001) mostrou em seu trabalho, de análise das teses brasileiras inseridas na base de dados francesa Doc Thèses, que é possível obter conhecimento, a partir do tratamento automatizado, para auxiliar o processo decisório em todos os níveis, pois oferecem subsídios para a consolidação, investimento e desenvolvimento de ações políticas e cientificas.
3 MÉTODO
Para analisar os atendimentos e solicitações de material bibliográfico feitos pela BCo/UFSCar, através do EEB, e construir indicadores sobre esse serviço, foi utilizado o método desenvolvido por Quoniam (2001). Como dados iniciais foram utilizados os 521 formulários de atendimentos e solicitações realizados pela
BCo/UFSCar em 2006-2007, obtidos nas bases de dados do EEB. Optou-se por extrair registros referentes aos formulários, pela quantidade de informações presentes a respeito do serviço de EEB, que opera com duas bases de dados: USER e PEDIDO, sua estrutura proporciona uma eficiente gestão do serviço e um alto nível de detalhamento das características dos seus usuários, assim como do material solicitado. Estas informações complementam os estudos de uso e usuários que a BCo/UFSCar realiza periodicamente, com o intuito de manter atualizado seu acervo, identificando futuras demandas.
Para a análise dessas informações foi necessária a recuperação de 521 formulários em 2006-2007, tendo em vista os dados relevantes sobre cada operação (solicitação ou atendimento) (Dia atendimento; Usuário; Dia do pedido; Biblioteca; Titulo do material bibliográfico; e etc.). O sistema informatizado de gestão do EEB fornece informações em um formato bibliométrico, adequado ao tratamento automatizado, conforme visualizado no quadro 1, não sendo necessário a fase de tratamento sugerida por Faria (2001).
QUADRO 1 – Formato bibliométrico.
Nome: Sheila Abadia Rocha Carvalho Autor: CHALHOUB, Sidney
Titulo: Trabalho, lar e botequim: o cotidiano dos trabalhos do Rio de Janeiro Ano: 2001
Tipo: Livro
Status: cancelado
Biblioteca: UNESP/FCL - Faculdade de Ciências e Letras - Araraquara Data: 17/03/2006
Usuário: usuário
Obs.: Não encontra-se na biblioteca Curso: Ciências Sociais
Grau: Graduação
As informações obtidas sobre o EEB foram processadas pelo software VantagePoint (capaz de, a partir de um arquivo texto contendo registros bibliográficos, produzir indicadores de uma ou duas dimensões, além de representar gráficos através de mapas estatísticos). O software Vantagepoint foi usado para fazer o tratamento bibliométrico, que resultou na criação de listas de freqüência, matrizes de relacionamentos e mapas. Por fim, o software Microsoft
Excel foi utilizado para importar os dados obtidos com o Vantagepoint e representar graficamente os indicadores bibliométricos. A figura 1 abaixo sintetiza todas as etapas do trabalho.
FIGURA 1 – Síntese do método (QUONIAM, 2001).
Este estudo foi realizado em parceria com o Núcleo de Informação Tecnológica em Materiais – NIT/Materiais e o Departamento de Ciência da Informação – DCI/UFSCar. A estrutura utilizada para desenvolver o trabalho, tanto hardware como software, foi disponibilizada pelo NIT/Materiais. O núcleo é especializado em Inteligência Competitiva (NIT, 2007).
4 RESULTADOS
No período analisado, entre 2006-2007, foram efetuados 521 solicitações/atendimentos (Pedidos) pelo EEB, 440 em 2006 e 81 em 2007. A figura 2 apresenta a evolução do serviço no período de 2006. Em setembro foi registrado um “pico” no atendimento, nos meses de janeiro, fevereiro e março o EEB fica suspenso, o serviço tem seu funcionamento atrelado ao ano letivo da UFSCar.
Os usuários do EEB foram classificados em quatro grupos: alunos de Pós-graduação (doutorandos ou mestrandos), alunos de Graduação, Docentes e Técnicos administrativos. No quadro 2 é possível visualizar que a demando pelo serviço esta concentrada nos alunos, representando cerca de 67% do total demandado. O quadro 2 também apresenta uma alta porcentagem de pedidos cancelados. Os principais motivos de cancelamento levantados são: a biblioteca possui o material solicitado (19 ocorrências), a biblioteca não empresta o material
solicitado (19 ocorrências), usuário cancelou (18 ocorrências) material não localizado (9 ocorrências). Com essas informações foi possível desenvolver um treinamento específico para solucionar estes cancelamentos.
1 0 26 26 45 47 30 84 75 58 39 9 0 20 40 60 80 100 Jan Fev Mar Abr Maio Jun
JULH Ago STE Out No v Dez Mês N º de p edid o s 2006
Figura 2 – Evolução dos pedidos no período de 2006.
Quadro 2 – Classificação dos usuários do EEB.
Total de pedidos Grau cancelado
197 Pós-Graduação 36,55%
151 Graduação 34%
49 Docente 32%
14 Não identificado 7%
6 Técnico Administrativo 0%
Entre os alunos de graduação, os cursos que mais tiveram ocorrências de pedidos foram os cursos de Engenharia Urbana e Biblioteconomia. Conforme pode ser visualizado no quadro 3, estes cursos merecem uma atenção especial por parte dos responsáveis pelo desenvolvimento de coleções da biblioteca, afim de verificar a qualidade do seu acervo, quanto as necessidades da demanda.
Quanto à tipologia dos materiais solicitados foram 418 pedidos para livros e 102 para teses/dissertações. Os principais títulos pedidos podem ser visualizados no quadro 4. As informações apresentadas no quadro 4 podem ser usadas pelo departamento de aquisição, para verificar a possibilidade de compra do material, atualizando o acervo da biblioteca com a orientação de seus usuários.
Quadro 3 – Cursos de graduação.
Total de pedidos CURSO DE GRADUACAO
36 Biblioteconomia e Ciência da Informação 30 Engenharia Urbana 21 Engenharia de Produção 21 Engenharia Civil 20 Ciências Sociais 16 LETRAS 16 Física 13 Ciências Biológicas 10 Engenharia Física 9 Matemática Quadro 4 – Principais títulos pedidos.
Total de pedidos Título pedido
3 Aspectos humanos de la forma urbana 3 Introdução a isostática
3 Paleontologia 2 a lírica trovadoresca
2 Anatomia do aparelho locomotor : osteologia, artrologia, miologia, 2 Anatomia do Aparelho Locomotor, Osteologia, Artrologia, Miologia, 2 Compreender e transformar o ensino
2 Construzioni Metalliche
2 Fundamentos de espectroscopia raman e infravermelho 2 Fundamentos de Transferencia de calor e massa 2 Física para cientistas e engenheiros
2 Hilda Furacão
2 historia de portugal medievo 2 Imagem da Cidade
2 Microbiologia dos alimentos 2 Mécanique analytique
2 O método nas ciências naturais e sociais: pesquisa quantitativa e 2 O método nas ciências naturais e sociais: pesquisa quantitativa e 2 O segredo de Luisa
2 Perturbation theory for linear operators 2 Principles of Farm Machinery
2 Química do Processamento de Alimentos 2 Solvable Models in Quantum Mechanics 2 Statistical methods for reliability data 2 Zoologia dos Invertebrados
A BCo/UFSCar tem convênio firmado com 66 bibliotecas, que no período recebera, 432 pedidos de empréstimo da BCo/UFSCar. O quadro 5 foi construído com as bibliotecas que receberam mais de 10 pedidos. A BCo/UFSCar foi solicitada 89 vezes por suas parceiras, isto mostra uma relação vantajosa proporcionada pelo EEB a BCo/UFSCar.
Quadro 5 – Bibliotecas parceiras da BCo/UFSCar.
Total de pedidos Biblioteca parceira
79 USP/EESC - Escola de Engenharia de São Carlos 40 Centro de Ciências Agrárias - Araras - BSCA
35 UNESP/FCL - Faculdade de Ciências e Letras - Araraquara 34 USP/ICMC - Instituto de Ciências Matemáticas e Computação 19 UNICAMP/BCCE - Biblioteca Central Cesar Lattes
17 UNESP/BRC - Campus Rio Claro
15 UNICAMP/FE - Faculdade de Educação (sedex) 12 UNICAMP/BC - Biblioteca Central
11 USP/IFSC - Instituto de Física de São Carlos
10 UFSC - Universidade Federal de Santa Catarina - Central 10 USP/FE - Faculdade de Educação
10 USP/POLI - Engenharia de Produção 5 CONCLUSÃO
Com os resultados foi possível a BCo/UFSCar melhorar o seu serviço de EEB junto aos usuários, promovendo treinamentos direcionados aos seus principais usuários e visando novos usuários. Os resultados permitiram uma melhor seleção das instituições na hora de efetuar as futuras solicitações, pois é possível visualizar a eficiência do atendimento de cada instituição. Também foi possível um melhor controle do acervo, já que algumas publicações solicitadas encontram-se em nosso acervo com algum tipo de problema e outras puderam ser indicadas para aquisição devido ao seu volume de solicitações.
Conforme foi citado no referencial teórico, os trabalhos desenvolvidos com o tratamento bibliométrico tendem a evoluir conforme a sua aplicação. O presente artigo é parte de uma série abordando o desenvolvimento do EEB, o trabalho se caracteriza por seus resultados, em um mecanismo de verificação e controle do desenvolvimento do EEB. Como o procedimento desenvolvido é automatizado, será possível atualizar periodicamente os indicadores para seu acompanhamento ao longo do tempo, podendo a BCO/UFSCar melhorar o seu próprio indicador de eficiência, no atendimento a outras instituições.
6 REFERÊNCIAS
AMARAL, R. M. et al. Criação de indicadores sobre o serviço de comutação bibliográfica da BCo/UFSCar através de análise bibliométrica automatizada. In:
CONGRESSO BRASILEIRO DE BIBLIOTECONOMIA, DOCUMENTAÇÃO E CIÊNCIA DA INFORMAÇÃO – CBBD, 21., 2005, Curitiba. Anais... Curitiba: [s.n.], 2005. 1 CD-ROM. AMARAL, R. M. et al. Desenvolvimento e aplicação de uma ferramenta para o uso e gestão do serviço de empréstimo entre bibliotecas na BCo/UFSCar. In: SEMINÁRIO NACIONAL DE BIBLIOTECAS UNIVERSITÁRIAS, 14., 2006, Salvador. Anais... Salvador:UFBA, 2006. 1 CD-ROM.
BRASIL. Ministério da Educação. Ministério da Ciência e Tecnologia. Modelos alternativos de empréstimos-entre-bibliotecas. Brasília: O Programa, 1990.
CAMPELO, B. S. Empréstimo entre bibliotecas. Revista da Escola de Biblioteconomia da Universidade Federal de Minas Gerais, Belo Horizonte, v. 15, n. 1, p. 7-34, mar., 1996.
EVARISTO, M. F. Sistemas nacionais de acesso ao documento: um modelo para o Brasil. Revista Brasileira Biblioteconomia Documentação, v, 10, n. 1, p. 19-32, jan.-jun., 1982.
FARIA, L. I. L. Prospecção tecnológica em materiais: aumento da eficiência do tratamento bibliométrico. 225 f. 2001. Tese (Doutorado em Engenharia de Materiais) – Universidade Federal de São Carlos, São Carlos, 2001.
FUJINO, A. A informação e o lucro da empresa. Palavra-Chave, n.7, p.15, 1994. INSTITUTE FOR SCIENTIFIC INFORMATION - ISI. Disponível em: <http:// www.isinet.com/isi>. Acesso em:12 mar. 2007.
JESUS, A. P.; GOMES, J. J. Criação do sistema integrado de bibliotecas do Sistema ACAFE: utilizando JAVA e XML. [SI: sn], 2005.
NÚCLEO DE INFORMAÇÃO TECNOLÓGICA EM MATERIAIS - NIT. Disponível em: <http://www.nit.ufscar.br> Acesso em: 04 mar. 2007.
QUONIAM, L. et al. Inteligência obtida pela aplicação de data mining em base de teses francesas sobre o Brasil. Ciência da Informação, Brasília, v.30, n.2, p.24, 2001.
SANTOS, P. R. F. Empréstimos entre bibliotecas: biológicas, exatas e humanidades. 54 f. Marília: UNESP/Curso de Biblioteconomia, 2002.Trabalho de Conclusão de Curso. SILVA, T. Compartilhar é a solução. Nova Friburgo: UERJ/Instituto Politécnico, 2001. SPINAK, E. Indicadores cienciométricos. Ciência da Informação, Brasília, v.27, n.2, p.141-148, maio/ago., 1998.
TARAPANOFF, K.; MIRANDA, D. M.; ARÁUJO JÚNIOR, R. H. Técnicas para tomada de decisão nos sistemas de informação. Brasilia: Thesaurus, 1995.
VAN RAAN, A. F. J. Scientometrics: state-of-the-art. Scientometrics, v. 38, n. 1, p. 205-218, 1997.
WORMELL, I. Informetria: explorando bases de dados como instrumentos de análise. Ciência da Informação, Brasília, v.27, n.2, p.210-216, 1998.
