• Nenhum resultado encontrado

Possibilidades de Publicação em Contabilidade: Periódicos em Língua Inglesa, Espanhola e Portuguesa de Acordo com os Requisitos de Avaliação da CAPES

N/A
N/A
Protected

Academic year: 2021

Share "Possibilidades de Publicação em Contabilidade: Periódicos em Língua Inglesa, Espanhola e Portuguesa de Acordo com os Requisitos de Avaliação da CAPES"

Copied!
16
0
0

Texto

(1)

Possibilidades de Publicação em Contabilidade: Periódicos em Língua

Inglesa, Espanhola e Portuguesa de Acordo com os Requisitos de

Avaliação da CAPES

Autoria: André Carlos de Souza, Guillermina Tannuri

Resumo

O objetivo desse trabalho é verificar o nível de adequação de periódicos de contabilidade em língua inglesa, espanhola e portuguesa às diretrizes de avaliação da Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES). Adicionalmente observou-se também características secundárias como o país de origem dos periódicos e base de dados na qual os mesmos foram recuperados. Estudos anteriores discutem a questão da percepção do que vem a ser qualidade em pesquisa, tratam da avaliação de periódicos nacionais e internacionais de contabilidade e sugerem as possibilidades de publicações. Os periódicos analisados em língua espanhola e inglesa foram recuperados de acordo com a sua indexação em uma das 3 bases utilizadas no trabalho (Latindex, ISI WOS e Scopus). Adicionalmente foram incluídos periódicos em língua portuguesa listados no Qualis da CAPES como uma forma de verificar se os mesmos, por já se encontrarem avaliados, cumprirão significativamente com os requisitos mínimos. Excluídos periódicos não acadêmicos e as repetições entre as bases, foram recuperados 68 periódicos submetidos a uma avaliação através de um checklist elaborado com base nas Diretrizes de Avaliação de Periódicos disponíveis no endereço eletrônico da CAPES. O checklist conta com 24 questões verificadas como adequadas ou não. Apenas um dos periódicos observados cumpriu todos os requisitos mínimos que habilitam o mesmo a ser avaliado pela CAPES e ser classificado em um dos estratos disponíveis. Em geral os periódicos em língua portuguesa apresentaram-se mais adequados, seguidos daqueles em língua inglesa e os de língua espanhola. Os resultados, em vez de consolidar a qualidade dos periódicos em português, acabam por surgir uma dúvida sobre como esses requisitos são aplicados, uma vez que já se encontram avaliados, o esperado é que os mesmos estejam completamente adequados. Os requisitos observados dividem-se em três grupos: informações disponíveis no site dos periódicos, relatório anual de gestão ou no início de cada um dos artigos. Apenas dois requisitos foram observados em todos os periódicos (possuir registro no ISSN apresentado no site e apresentar o nome dos autores no inicio de cada artigo). Por outro lado, o nome dos consultores ad hoc (7%) e informações sobre a distribuição dos periódicos (3%), foram os menos atendidos, ambos devendo constar no relatório de gestão. Quanto aos países de origem dos periódicos, o Brasil apresentou o maior número (15), seguido pelo Reino Unido (14) e Estados Unidos (12). Porém, em relação ao idioma desses periódicos os em maior quantidade são aqueles em língua inglesa (42). Ressaltando que os requisitos mínimos observados não classificam os periódicos nos estratos, e sim habilitam os periódicos a serem submetidos posteriormente a esse processo, a não adequação dos periódicos em língua estrangeira acaba por desestimular o pesquisador que, por estar vinculado a um programa de pós graduação e ter que cumprir suas publicações em veículos avaliados pela CAPES, deixará de submeter suas pesquisas a outros meios que, apesar de não possibilitar pontuação, possibilitaria mais facilmente repercussão a nível mundial.

(2)

1 Introdução

Para a construção do conhecimento científico, o reconhecimento pelos pares é uma das etapas pela qual uma pesquisa acadêmica usualmente tem que ser submetida. Silva, Menezes e Pinheiro (2003) e Oliveira (2002) observam que, para obter esse reconhecimento, é necessário a sua exposição nos meios de comunicação científicos formais, tais como dissertações, teses, anais, apresentações em eventos acadêmicos e o seu posterior envio para publicação em periódicos.

Oliveira (2002, p.69), chama de indispensável a comunicação entre pesquisadores no meio científico, pois “sem ela não existiria ciência e não se poderiam somar os esforços individuais dos membros das comunidades científicas”.

De acordo com a pesquisa de Young e Oakes (2009), que analisou os fatores que motivam a pesquisa acadêmica, dentre os fatores que motivam a condução das pesquisas em programas de doutorado que oferecem ou não bolsas aos pesquisadores, estão decisões relacionadas ao tenure e incentivos monetários.

Para a consecução das pesquisas também é possível verificar a influência de fatores externos as instituições de ensino que também impactam na produtividade. Um exemplo é a ação das agências de fomento à pesquisa acadêmica. Oliveira Filho et al (2005) comenta a importância do financiamento para pesquisas acadêmicas por parte das agências de fomento para as áreas de ciência e tecnologia. Segundo o autor, que em seu trabalho analisa a participação da Coordenação de Aperfeiçoamento de Pessoal de Nível Superior (CAPES), o Conselho Nacional de Desenvolvimento Científico e Tecnológico (CNPq) e Fundação de Amparo à Pesquisa do Estado de São Paulo (FAPESP) na produção científica brasileira, a publicação das pesquisas é essencial, porém faz um apelo à avaliação das agências quanto à produtividade científica, que deveria considerar como requisitos para a avaliação um peso mais equilibrado entre as revistas científicas.

Ao analisar periódicos internacionais de contabilidade disponibilizados no portal periódicos da CAPES, Murcia e Borba (2008) objetivaram apresentar características desses meios de comunicação acadêmica visando a potencialização dos trabalhos dos pesquisadores. Os resultados apontaram a existência de uma demanda não satisfeita por essas publicações e que o pesquisador estaria mais inclinado a publicar em periódicos no exterior se conhecesse melhor a classificação desses periódicos. Nesse sentido, Beuren e Souza (2008) também analisaram periódicos internacionais de contabilidade no mesmo portal, porém, baseando-se em critérios como número de citações recebidas, indexação nas bases de dados Scopus e ISI, encontra-se classificado no Journal Citations Report (e consequentemente possuir fator de impacto) e apresentaram uma proposta para a classificação desses periódicos, atribuindo notas “A”, “B” ou “C” a fim de atualizar a classificação adotada. Dessa forma, segundo os autores, o número de periódicos classificados como “B” e “C” na época do estudo, aumentaria de 12 para 26.

O objeto de análise do presente trabalho são os periódicos de Contabilidade em língua inglesa, espanhola e portuguesa. Periódicos em língua espanhola foram observados por constituírem uma potencialidade de publicação para pesquisadores brasileiros. Por sua vez, periódicos em língua inglesa foram incluídos no presente trabalho porque, além de constituírem naturalmente oportunidades de publicação conforme discutido em trabalhos anteriores, as principais publicações na área são produzidas nesse idioma. Logo, pode-se supor um certo padrão de qualidade a nível internacional.

Nesse sentido este trabalho objetiva avaliar o nível de adequação de periódicos de contabilidade em língua espanhola e inglesa indexados em bases de dados eletrônicas às diretrizes para a avaliação dos mesmos pela CAPES segundo seus critérios para a área de administração, contabilidade e turismo. Adicionalmente também foram observados periódicos

(3)

em língua portuguesa já avaliados pelo Qualis. Ressalta-se que o trabalho não pretende inferir classificações para periódicos (A1, A2, ...) e sim questionar a aplicação de critérios mínimos que capacitam ou excluem periódicos de serem submetidos a uma avaliação. Para a consecução desse estudo, têm-se como objetivos secundários identificar as características dos periódicos de Contabilidade de acordo com as bases em que se encontram indexados e países de origem, identificar as características intrínsecas desses periódicos que permitem a sua submissão às diretrizes mínimas para avaliação da CAPES; e discutir a aplicabilidade dos requisitos mínimos para a avaliação pela CAPES de acordo com o observado no grau de adequação dos periódicos.

2 Fundamentação Teórica

Nessa sessão é apresentado o embasamento teórico do presente trabalho. Inicialmente são resgatados e discutidos estudos anteriores que tratam da quantificação de pesquisas acadêmicas através da avaliação de periódicos. Em seguida as bases de dados utilizadas para a recuperação de periódicos estrangeiros são brevemente apresentados e por último discute-se o Qualis, que nesse trabalho, através do aplicativo WebQualis, foi utilizado critério para a inclusão de periódicos em língua portuguesa nas análises e resultados.

2.1 Estudos Anteriores

Alguns estudos foram utilizados para fundamentar a questão da avaliação da qualidade de periódicos. Fundamentalmente, a figura 1 apresenta as pesquisas mais próximas do presente trabalho, tratando de questões como possibilidades de publicação em Contabilidade, características dos periódicos e classificação segundo os critérios exigidos pela instituição mencionada.

Autor(es) Pesquisa

Frezatti e Borba (2000) Análise das possibilidades de publicação, observando entre periódicos internacionais a baixa participação dos papers de autores brasileiros Oliveira (2002) Análise de forma e características dos periódicos brasileiros de Contabilidade e temas e autoria dos artigos publicados. Lowe e Locke (2006)

Analisa a percepção da qualidade de periódicos de contabilidade de acordo com acadêmicos. A medida utilizada para avaliar a qualidade foi nota atribuída e a variabilidade desse valor de acordo com os participantes da pesquisa.

Bean e Bernardi (2007)

Desenvolve uma metodologia de avaliação de periódicos em contabilidade omitidos em artigos de avaliação de qualidade anteriores. As hipóteses do trabalho incluem a idade do periódico, proporção de artigos aceitos para publicação e classificação do periódico como profissional.

Beuren e Souza (2008) Proposta para a classificação dos journals internacionais de contabilidade disponíveis no Portal CAPES baseando-se no número de citações dos papers publicados em journals indexados no Scopus

Murcia e Borba (2008)

Características dos Journals de contabilidade constantes no Portal de Periódicos da CAPES com o objetivo de potencializar a publicação dos trabalhos dos pesquisadores em periódicos acadêmicos em língua inglesa.

Matherly e Shortridge (2009) Análise da qualidade dos periódicos de contabilidade de acordo com, tipo de público-alvo, tamanho do artigo, disponibilidade, inclusão no e valor cobrado por submissão

Fonte: Elaborado pelos autores

(4)

A adoção de um padrão para a avaliação de periódicos, a exemplo das diretrizes utilizadas nesses trabalhos, traz em si uma questão maior: O que é uma pesquisa de qualidade? Essa questão é mais comumente relacionada ao uso do termo “impacto” em pesquisa. Beyer (1978), apresenta em sua pesquisa uma comparação de políticas editoriais e o impacto das mesmas na percepção de qualidade dos principais periódicos de 4 diferentes áreas da ciência (física, química, sociologia e ciência política). Os resultados também destacaram diferenças entre as ciências naturais e sociais no que se refere a falta de consenso sobre padrões de qualidade nas ciências sociais, o que caracteriza uma desvantagem quanto as oportunidades de publicação em relação ao observado nas ciências naturais. Testa (2003) comenta a seleção de periódicos sujeitos a indexação pelo Institute for Scientific Information (ISI), destacando os padrões mínimos para o processo de avaliação. Ainda na mesma pesquisa é mencionada a lei bibliométrica de Bradford para explicar a questão da seleção restrita dos materiais da base de dados.

Bonner et al (2006), revisou estudos anteriores que relacionaram quais são os principais periódicos de contabilidade. Saha, Saint e Christakis (2003) questionam a utilização do fator de impacto, que leva em conta basicamente a quantidade de citações recebidas por um periódico em determinado período de tempo, como critério para a avaliação de periódicos de medicina, confrontando-o com a opinião de profissionais e pesquisadores da área.

2.2 Bases de dados utilizadas

Para a recuperação dos periódicos em língua estrangeira (inglesa e espanhola) objetos de estudo do presente trabalho, foram utilizadas 3 bases de dados: Latindex (língua espanhola) e Scopus e ISI Web of Science (língua inglesa).

Latindex é um sistema de informação que abrange periódicos científicos e técnico-profissionais nos países da América Latina, Espanha e Portugal. Todos os seus periódicos compõem um diretório de cerca de 20.000 revistas. O um nível mais restrito é chamado de catálogo, com cerca de 5.000 periódicos, submetidos a determinados critérios de qualidade. Tematicamente suas revistas estão classificadas em 7 grandes grupos: artes y humanidades (2.571 periódicos), ciencias agrícolas (1.246 periódicos), ciencia de la ingeniería (1.251 periódicos), ciencias exactas y naturales (2.487 periódicos), ciencias médicas (3.295 periódicos), ciências sociales (8.609 periódicos) e multidisciplinarias (842 periódicos). Sua criação data de 1997. Seu objetivo é o de difundir e elevar a qualidade dos periódicos acadêmicos editados nas regiões abrangidas pela sua cobertura. (LATINDEX, 2010)

Scopus é uma base de dados multidisciplinar, que cobre resumos e citações de cerca de 18.000 títulos de aproximadamente 5.000 editoras internacionais que representam todas as áreas do conhecimento (SCOPUS, 2010). Foi desenvolvida pela editora Elsevier para servir como uma ferramenta para estudos e avaliações de produção científica. A base disponibiliza recursos que permitem a análise de autores, citações e periódicos (Souza et al, 2008). A CAPES disponibiliza, em seu portal de periódicos, essa ferramenta para instituições de ensino superior e pesquisa. Ball e Tunger (2006) comentam o surgimento do Scopus e sua repercussão em relação à única base multidisciplinar até então oferecida desenvolvida pelo ISI, a Science Citation Index (SCI). Ball e Tunger (2006) também asseveram que, ao contrário do SCI, que indexa títulos seguindo uma seleção mais restrita a fim de destacar a qualidade do material selecionado, o Scopus adota uma estratégia de indexar o máximo possível, não se limitando a apenas artigos acadêmicos propriamente ditos, mas incluindo também livros, artigos no prelo, anais de conferências e publicações técnicas (SCOPUS 2010).

Por sua vez, o Web of Science (WOS) é uma base de dados multidisciplinar desenvolvida pelo Institute for Scientific Information (ISI) e disponibilizada através do portal

(5)

Web of Knowledge, que se encontra disponível no portal de periódicos da CAPES. A partir de dados disponibilizados referentes as citações recebidas ou feitas nos materiais indexados é produzido o Journal Citation Reports (JCR), que mede o impactos dos periódicos, além de outros indicadores bibliométricos diversos. As informações contidas abrangem 256 disciplinas, cobrindo cerca de 10.000 dos mais importantes periódicos acadêmicos. A cobertura disponível apresenta dados desde o ano de 1900 (ISI WEB OF KNOWLEDGE, 2010). Testa (2003) comenta que um periódico, ao ser indexado pelo ISI, estará contribuindo para o enriquecimento da base de dados, caso a área do conhecimento relacionada ainda não esteja adequadamente coberta. Targino e Garcia (2000), afirmam, ao caracterizar a ciência brasileira na base de dados do ISI, que a quantidade de periódicos indexados nessa base, dado o prestígio científico da mesma, pode servir como um indicador da maturidade da comunidade científica local.

2.2 Qualis

O Qualis, disponibilizado na internet através do aplicativo WebQualis, diz respeito a uma classificação dos veículos de produção acadêmica no Brasil. Segundo CAPES (2010), o sistema foi concebido para atender as necessidades do sistema de avaliação dos programas de pós graduação stricto sensu. A produção é classificada por estratos (A1, A2, B1, B2, B3, B4, B5 e C), sendo A1 o mais alto e C com peso nulo. Silva (2009, p.118) comenta que um periódico possuir Qualis, além de atestar ou não “a qualidade do veículo da produção acadêmica é o que proporciona a sua existência”. A afirmação é feita no contexto de que fundamentalmente o periódico é constituído daqueles que o compõem (editores, avaliadores, autores de trabalhos, leitores, etc) e também dos “resultados que alcança ao angariar o apoio, a colaboração e o respeito dos seus leitores”.

Silva (2009, p.118) critica esse modelo de avaliação ao questionar se esses critérios “são capazes de medir o alcance de um periódico” e se é possível “mensurar a influência e o significado real dos artigos das revistas sobre os leitores”. Rocha-e-Silva (2009, p.1) comenta que, para a área médica esse modelo de avaliação utilizando os estratos anteriormente mencionados já não tem mais serventia, por conta do “evidente crescimento em qualidade da pesquisa científica brasileira”. Ainda segundo Silva (2009, p. 120) o Qualis:

Funda-se 1) Na necessidade de produção, na exigência de produtividade cada vez maior; e, 2) no poder burocrático (as instituições que detém o controle dos recursos necessários à pesquisa e a produção intelectual e o poder de decidir normas que influenciam decisivamente sobre a carreira docente.

3 Metodologia

Esta seção encontra-se subdividida em 3 partes: A primeira apresenta a seleção dos periódicos utilizados na análise apresentada na seção 4 desse trabalho. A segunda apresenta os critérios que compõem o checklist utilizado na avaliação dos periódicos analisados e a última sumariza as delimitações a serem observadas nesse trabalho.

3.1 Seleção dos periódicos

Para a seleção dos periódicos de Contabilidade em língua espanhola realizou-se uma pesquisa na base de dados Latindex utilizando palavras chave em língua espanhola (contabilidad, contable, contaduría e auditoría) as quais devem constar no título da publicação. Foram recuperados 15 periódicos, já excluindo aqueles que foram identificados como descontinuados. Posteriormente foram levantados de maneira semelhante periódicos em

(6)

língua inglesa indexados no Scopus e ISI WOS, com as palavras chave accounting e auditing. E por último foram recuperados os periódicos em língua portuguesa listados no aplicativo WebQualis pertencentes a área de Administração, Contabilidade e Turismo com as palavras contabilidade e auditoria no título (22 resultados). Após eliminar do total de resultados aqueles periódicos que não apresentam caráter científico e sim constituem periódicos de natureza profissional. Por último foram eliminados 18 registros relativos a entradas de periódicos que constam em mais de uma base utilizada na pesquisa. Dessa forma chegou-se a um total de 68 diferentes periódicos a serem analisados no presente trabalho. A figura 2 apresenta um breve resumo de como foi realizada seleção dos periódicos.

Bases de dados ISI WOS SCOPUS QUALIS LATINDEX Total de periódicos Resultados com as palavras chave no título 19 50 22 13 104 (-) Periódicos não acadêmicos eliminados - 9 7 2 18

(-) Periódicos em mais de uma base de dados utilizadas na pesquisa 18

Total de periódicos selecionados para análise 68

Fonte: Elaborado pelos autores

Figura 2 Seleção dos periódicos de contabilidade

Os valores referentes aos periódicos não acadêmicos eliminados em língua portuguesa (Qualis) e língua espanhola (Lantindex) referem-se aqueles pertencentes a agremiações profissionais, seguindo a distinção quanto a categoria de publicação de periódicos feita por Gutiérrz e Martín (apud Segawa, Crema e Gava, 2003). Por sua vez, os resultados em língua inglesa eliminados referem-se aos materiais indexados pelo Scopus que são artigos científicos, como livros, por exemplo.

3.2 Critérios para avaliação de periódicos

Para a avaliação dos periódicos selecionados, foram observados os requisitos mínimos para um periódico ser avaliado, identificados no documento Diretrizes de Avaliação de Periódicos 2007-2009, disponibilizado pela CAPES (2010). A partir dos requisitos mínimos descritos, foi elaborado um checklist com inicialmente 26 pontos a serem observados na avaliação. Essas questões levam em conta 3 dimensões na avaliação de periódicos:

1) Informações apresentadas no endereço eletrônico do periódico;

2) Informações constantes no Relatório anual de gestão, que deve ser publicado no primeiro fascículo do ano e disponibilizado no sítio eletrônico; e

3) Informações constantes no início de cada artigo.

A figura 3 apresenta as características observadas, a respectiva dimensão de avaliação e a descrição dos mesmos.

Requisito Dimensão Descrição

1 Circulação ininterrupta Sítio eletrônico Ter circulado ininterruptamente nos anos de 2008 e 2009 2 Publicação mínima Sítio eletrônico Ter publicado no mínimo 15 artigos inéditos por ano 3 Missão Sítio eletrônico Apresentar no sítio eletrônico a missão do periódico 4 ISSN Sítio eletrônico Ter registro no ISSN

5 Dados da organização responsável Sítio eletrônico Informar os dados da organização responsável pela publicação 6 Corpo editorial Sítio eletrônico Apresentar informações sobre os editores do periódico e suas respectivas filiações institucionais 7 Indexação Sítio eletrônico Informar as indexações do periódico, com endereço

(7)

Requisito Dimensão Descrição

eletrônico respectivo

8 Endereço Sítio eletrônico Indicar endereço físico e eletrônico da publicação 9 Ficha catalográfica Sítio eletrônico Incluir ficha catalográfica do periódico

10 Tiragem e data efetiva da circulação Sítio eletrônico Informar a tiragem e a data efetiva de circulação

11 Política editorial Sítio eletrônico Informar a política editorial do periódico, incluindo a descrição dos procedimentos e a informação dos idiomas de submissão e publicação oficiais do periódico

12 Instruções de submissão e avaliação Sítio eletrônico

Informar norma de submissão completa e as fichas de avaliação e respectivas instruções em todos os idiomas oficiais do periódico

13 Mecanismo de preservação Sítio eletrônico

Descrição dos mecanismos que visam à preservação do conteúdo científico ao longo do tempo, contemplando a integridade física da informação e a garantia de que ela permaneça acessível diante da evolução tecnológica.

14 Consultores Relatório anual Informar a nominata dos consultores ad hoc e suas respectivas filiações 15 Intervalo entre recepção, avaliação e

publicação Relatório anual

Informar o intervalo médio entre o recebimento, aprovação e publicação

16 Nº de artigos submetidos Relatório anual Informações sobre o número de artigos submetidos, rejeitados, retirados, aceitos e em avaliação 17 Informação sobre distribuição Relatório anual Informação sobre a distribuição do periódico

18 Legenda bibliográfica Início do artigo Informar o nome do periódico, volume/ano, número e páginas 19 Título, resumo e palavras chave Início do artigo Informar nos idiomas em que for oferecido o texto e em inglês 20 Autores Início do artigo Nome dos autores e filiação institucional completa

21 Datas de submissão e aceitação Início do artigo Datas de submissão, aceitação e quando o artigo ficou disponível 22 Endereço do(s) autor (es) Início do artigo Endereço físico ou eletrônico de pelo menos um dos autores 23 Nome do periódico e ISSN Início do artigo Nome por extenso do periódico e ISSN

24 Organização responsável Início do artigo Nome da organização responsável pelo periódico 25 Editor principal Início do artigo Informar o nome do editor principal responsável 26 Tipo de revisão Início do artigo Informar o tipo de revisão a qual o artigo foi submetido Fonte: Adaptado de CAPES (2007)

Figura 2 Critérios mínimos para a avaliação dos periódicos

Dos critérios apontados na figura 3, dois deles (Ficha catalográfica e Tiragem e data efetiva da circulação) foram julgados como característicos dos periódicos em versão impressa. Uma vez que esse trabalho se limita a analisar os periódicos recuperados através de bases de dados eletrônicas e os respectivos sítios eletrônicos dos mesmos, os dois mencionados critérios foram excluídos. Dessa forma, foram utilizados os 24 critérios restantes na análise efetuada no presente trabalho.

3.3 Delimitações do estudo

A realização deste estudo levou em conta algumas delimitações de pesquisa. A mais importante diz respeito às bases de dados utilizadas. Foram admitidos apenas os periódicos indexados nas bases Latindex, Scopus, ISI WOS e periódicos relacionados na classificação Qualis da CAPES relativa a área de adminsitração, contabilidade e turismo.

(8)

Uma segunda delimitação diz respeito a seleção dos periódicos. Os termos utilizados foram “contabilidad”, “auditoría”, “contables” e “contaduria” para os periódicos em língua espanhola (indexados na Latindex), “accounting” e “auditing” em periódicos de língua inglesa (indexados no Scopus e/ou ISI WOS) e “contabilidade” e “auditoria” (em língua portuguesa listados no WebQualis). Dessa forma foram desconsiderados para os fins desse estudo periódicos que publiquem materiais relacionados a contabilidade que não satisfizessem essas condições, como por exemplo, periódicos de negócios e finanças.

4 Análise dos resultados

Após a aplicação dos procedimentos descritos na metodologia, foram recuperados 68 periódicos. A figura 4 apresenta os periódicos analisados nesse estudo, apontando também o país de origem e a base de dados utilizada na pesquisa.

Título do Periódico País de Origem Indexação

1 ABACUS Australia ISI WOS

2 Academy of Accounting and Financial Studies Journal EUA Scopus 3 Accounting and Business Research Reino Unido Scopus/ISI WOS

4 Accounting and Finance Australia Scopus/ISI WOS

5 Accounting Forum Australia Scopus

6 Accounting History Reino Unido Scopus

7 Accounting Horizons EUA Scopus/ISI WOS

8 Accounting Perspectives Canada Scopus

9 Accounting Research Journal Reino Unido Scopus

10 Accounting Review EUA Scopus/ISI WOS

11 Accounting, Auditing and Accountability Journal Reino Unido Scopus 12 Accounting, Business and Financial History Reino Unido Scopus 13 Accounting, Organizations and Society Holanda Scopus/ISI WOS

14 Actualidad Contable Faces Venezuela Latindex

15 Advances in Accounting EUA Scopus

16 Afro-Asian Journal of Finance and Accounting Reino Unido Scopus 17

Asian Academy of Management Journal of Accounting

and Finance Malasia Scopus

18 Asian Review of Accounting Reino Unido Scopus

19 Asia-Pacific Journal of Accounting and Economics China Scopus/ISI WOS

20 Auditing EUA Scopus/ISI WOS

21 Australian Accounting Review Reino Unido Scopus/ISI WOS

22 British Accounting Review EUA Scopus

23 Contabilidad y Auditoria Argentina Latindex

24 Contabilidad y Negocios Perú Latindex

25 Contabilidade e Informação (UNIJUI) Brasil Capes - Webqualis

26 Contabilidade Vista & Revista Brasil Capes - Webqualis

27 Contabilidade, Gestão e Governança Brasil Capes - Webqualis

28 Contaduría y Administración México Latindex

29 Contemporary Accounting Research Canada Scopus/ISI WOS

30 Critical Perspectives on Accounting EUA Scopus

31 Cuadernos de Contabilidad Colombia Latindex

32 Enfoque: Reflexão Contábil (Impresso) Brasil Capes - Webqualis

33 European Accounting Review Reino Unido Scopus/ISI WOS

34 Foundations and Trends in Accounting EUA Scopus

35 International Journal of Accounting Holanda Scopus

36 International Journal of Accounting Information Systems Holanda Scopus 37 International Journal of Accounting, Auditing and Performance Evaluation Reino Unido Scopus 38 Journal of Accounting and Economics Holanda Scopus/ISI WOS 39 Journal of Accounting and Public Policy Holanda Scopus/ISI WOS

(9)

40 Journal of Accounting Education Holanda Scopus

41 Journal of Accounting Research Reino Unido Scopus/ISI WOS

42 Journal of Accounting, Auditing and Finance EUA Scopus

43 Journal of Business Finance and Accounting Reino Unido Scopus/ISI WOS 44 Journal of Contemporary Accounting and Economics Holanda Scopus

45 Journal of International Accounting, Auditing and Taxation Holanda Scopus

46 Journal of International Financial Management and Accounting Australia Scopus/ISI WOS

47 Management Accounting Research EUA Scopus/ISI WOS

48 Managerial Auditing Journal Reino Unido Scopus

49 Pensar Contábil Brasil Capes - Webqualis

50 RACE : Revista de Administração, Contabilidade e Economia Brasil Capes - Webqualis 51

RACI. Revista de Administração e Ciências Contábeis do

IDEAU Brasil Capes - Webqualis

52 Research in Accounting Regulation EUA Scopus

53 Review of Accounting Studies Reino Unido Scopus/ISI WOS

54 Review of Quantitative Finance and Accounting EUA Scopus

55 Revista Contabilidad y Dirección Espanha Latindex

56 Revista Contabilidad y Sistemas Chile Latindex

57 Revista Contabilidade & Finanças (Online) Brasil Capes - Webqualis 58 Revista Contaduría - Universidad de Antioquia Colombia Latindex 59 Revista Contemporânea de Contabilidade (UFSC) Brasil Capes - Webqualis 60 Revista de Contabilidad - Spanish Accounting Review Espanha Latindex

61 Revista de Contabilidade da UFBA Brasil Capes - Webqualis

62 Revista de Contabilidade do Mestrado em Ciências Contábeis Brasil Capes - Webqualis 63 Revista de Contabilidade e Organizações Brasil Capes - Webqualis 64 Revista de Educação e Pesquisa em Contabilidade Brasil Capes - Webqualis 65 Revista de Informação Contábil (UFPE) Brasil Capes - Webqualis 66 Revista Española de Financiación y Contabilidad Espanha ISI WOS 67 Revista Iberoamericana de Contabilidad de Gestión Espanha Latindex

68 Revista Universo Contábil Brasil Capes - Webqualis

Fonte: Elaborado pelos autores

Figura 3 Nome, país de origem e base indexada dos periódicos analisados

De acordo com figura 4, de um total de 68 periódicos selecionadas observou-se que mais da metade pertencem a apenas 3 países, Brasil, Estados Unidos e Reino Unido , com 15, 12 e 14 periódicos respectivamente. A distribuição dos periódicos de acordo com o país de origem dos mesmos é melhor evidenciada na figura 5.

(10)

Fonte: Elaborado pelos autores

Figura 5 País de origem dos periódicos

Na figura 5 é possível verificar que entre os periódicos analisados o país com o maior número é o Brasil, com 15 periódicos.

Os países seguintes em quantidade de periódicos analisados são o Reino Unido com 14 periódicos e os Estados Unidos com 12. Observa-se que 7 países apresentam apenas um periódico incluído no trabalho, como Argentina, China e Venezuela.

Apesar de ser o Brasil o país com o maior número de periódicos na seleção, 15 no total, a maior quantidade de periódicos de acordo com o idioma oficial de publicação é dada pelos periódicos em língua inglesa, sendo 42 periódicos, que se encontram distribuídos em 7 países. E por sua vez os periódicos em língua espanhola totalizam a menor quantidade, 11 em total, distribuídos também em 7 países.

4.2 Atendimento aos critérios CAPES

Nas figuras 6, 7 e 8 estão dispostos os periódicos analisados e a quantidade de requisitos para avaliação cumpridos. O objetivo é verificar se algum periódico está alinhado com os critérios de qualidade da CAPES, segregando-os ainda de acordo com a base dados que possibilitou a sua inclusão no trabalho.

Requisitos cumpridos Título do Periódico

Quantidade %

Accounting Review 20 83

Auditing 19 79

Contemporary Accounting Research 18 75

Accounting Horizons 17 71

European Accounting Review 17 71

Accounting, Auditing and Accountability Journal 16 67

Accounting, Business and Financial History 16 67

Journal of Accounting and Economics 16 67

Journal of Business Finance and Accounting 16 67

Managerial Auditing Journal 16 67

ABACUS 15 63

Accounting and Finance 15 63

Accounting Forum 15 63

Accounting History 15 63

(11)

Accounting, Organizations and Society 15 63

Asian Review of Accounting 15 63

Australian Accounting Review 15 63

British Accounting Review 15 63

Critical Perspectives on Accounting 15 63

International Journal of Accounting 15 63

International Journal of Accounting Information Systems 15 63

Journal of Contemporary Accounting and Economics 15 63

Management Accounting Research 15 63

Research in Accounting Regulation 15 63

Advances in Accounting 14 58

Asia-Pacific Journal of Accounting and Economics 14 58

International Journal of Accounting, Auditing and Performance Evaluation 14 58

Journal of Accounting and Public Policy 14 58

Journal of International Accounting, Auditing and Taxation 14 58

Review of Accounting Studies 14 58

Review of Quantitative Finance and Accounting 14 58

Accounting and Business Research 13 54

Journal of Accounting Education 13 54

Journal of Accounting Research 13 54

Journal of International Financial Management and Accounting 13 54

Accounting Perspectives 12 50

Afro-Asian Journal of Finance and Accounting 12 50

Asian Academy of Management Journal of Accounting and Finance 12 50

Journal of Accounting, Auditing and Finance 11 46

Foundations and Trends in Accounting 10 42

Academy of Accounting and Financial Studies Journal 9 38 Fonte: Elaborado pelos autores

Figura 6 Periódicos analisados em língua inglesa e número de requisitos cumpridos

 

Verifica-se na figura 6 que o nível máximo de adequação dos periódicos em língua inglesa foi de 83%. Logo nenhum dos periódicos em inglês observados atende em sua totalidade aos requisitos mínimos para a avaliação da CAPES. Verifica-se também que o nível de atendimento de 63% (15 requisitos) foi o mais observado nesse grupo, observado em 15 periódicos. Por sua vez, o nível mínimo de atendimento aos requisitos foi de 38%. 

Requisitos cumpridos Título do Periódico

Quantidade %

Revista Española de Financiación y Contabilidad 17 71

Actualidad Contable Faces 15 63

Contaduría y Administración 15 63

Revista Contabilidad y Dirección 15 63

Revista Contaduría - Universidad de Antioquia 15 63

Contabilidad y Negocios 14 58

Revista de Contabilidad - Spanish Accounting Review 14 58

Cuadernos de Contabilidad 13 54

Contabilidad y Auditoria 12 50

Revista Iberoamericana de Contabilidad de Gestión 11 46

Revista Contabilidad y Sistemas 7 29

Fonte: Elaborado pelos autores

Figura 7 Periódicos analisados em língua espanhola e número de requisitos cumpridos

 

Dos periódicos em espanhol analisados, verifica-se que a quantidade máxima de requisitos cumpridos foi de 17, representando um 71% do total exigido. Sendo que a quantidade mínima observada foi de 7 requisitos o que equivale a um nível de atendimento de 29%. 

(12)

Requisitos cumpridos Título do Periódico

Quantidade %

Revista Universo Contábil 24 100

Revista Contemporânea de Contabilidade (UFSC) 21 88

Contabilidade Vista & Revista 20 83

Revista de Contabilidade e Organizações 19 79

Contabilidade, Gestão e Governança 18 75

Revista de Contabilidade do Mestrado em Ciências Contábeis 18 75 RACE : Revista de Administração, Contabilidade e Economia 16 67

Revista Contabilidade & Finanças (Online) 16 67

Enfoque: Reflexão Contábil 16 67

Pensar Contábil 16 67

Revista de Informação Contábil (UFPE) 16 67

Revista de Contabilidade da UFBA 15 63

Revista de Educação e Pesquisa em Contabilidade 14 58 RACI. Revista de Administração e Ciências Contábeis do IDEAU 10 42

Contabilidade e Informação (UNIJUI) 10 42

Fonte: Elaborado pelos autores

Figura 8 Periódicos analisados em língua portuguesa e número de requisitos cumpridos No caso dos periódicos em português observa-se que a Revista Universo Contábil atendeu a todos os 24 requisitos da CAPES. Por sua parte o nível mínimo de atendimento aos requisitos foi de 42%. Conclui-se em termos gerais que dentre os três grupos de periódicos observados, os periódicos em português tendem em media a apresentar-se mais adequados aos requisitos mínimos para avaliação da CAPES.

Em média os periódicos em português se adéquam um 69% a ditos requisitos. Sendo que a media de atendimento dos periódicos em inglês é de 61% e dos periódicos em espanhol de 56%.

Com respeito aos percentuais mínimos e máximos de atendimento observados, cabe destacar que o único periódico que alcançou o nível máximo de 100% de adequação aos requisitos da CAPES foi um periódico em português e o periódico com o menor nível de atendimento foi um periódico em espanhol que atendeu apenas um 29%.

Em geral foram poucos os casos dos periódicos que ficaram com um nível de atendimento abaixo de 50%, sendo 7 dos 68 periódicos observados. Por outro lado também foram muito poucos os periódicos que atenderam um nível acima de 80%, sendo esses somente 4 periódicos do total analisado.

Cabe esclarecer que todos os critérios possuem o mesmo peso para fins dessa avaliação, uma vez que só foi observada a sua adequação ou não-adequação a cada requisito para logo avaliar o nível de adequação de acordo à quantidade de requisitos cumpridos por cada periódico observado.

Dessa forma, não é possível concluir se aqueles que cumprem 100% (ou 24 de 24 critérios) são necessariamente os mais adequados de um ponto de vista qualitativo. Ou que todos aqueles periódicos que cumprem a mesma quantidade de requisitos são iguais em termos de qualidade científica. O que se pode concluir é que alguns se apresentam mais alinhados com o entendimento de qualidade mínima exigido pela CAPES e por conseqüência

Naturalmente alguns critérios podem ser mais relevantes para quantificar um grau de qualidade que outros. A diferença entre os critérios e o resultado de sua verificação nos periódicos é apresentada na figura 9.

Os critérios se encontram agrupados em três grupos: Requisitos Gerais, Requisitos contidos no Relatório Anual de Gestão e Requisitos no inicio de cada artigo.

(13)

Periódicos que se apresentam adequados Categoria Requisitos Quantidade % Circulação ininterrupta 62 91 Publicação mínima 53 78 Missão 65 96 ISSN 68 100

Dados da organização responsável 66 97

Corpo editorial 65 96

Indexação 49 72

Endereço 36 53

Política editorial 62 91

Instruções de submissão e avaliação 66 97

Requisitos Gerais

Mecanismo de preservação 6 9

Consultores 5 7

Intervalo entre recepção, avaliação e publicação 9 13

Nº de artigos submetidos 12 18

Relatório Anual de Gestão

Informação sobre distribuição 2 3

Legenda bibliográfica 66 97

Título, resumo e palavras chave 60 88

Autores 68 100

Datas de submissão e aceitação 31 46

Endereço do(s) autor (es) 56 82

Nome do periódico e ISSN 36 53

Organização responsável 51 75 Editor principal 10 15 No início de cada artigo Tipo de revisão 5 7

Fonte: Elaborado pelos autores

Figura 9 Requisitos observados

Na figura 9 é possível observar quais requisitos foram atendidos um maior número de ocasiões. Os mais atendidos pelos periódicos foram: ter registro de ISSN, apresentar o nome dos autores no início dos artigos, apresentar dados da organização responsável pela publicação, assim como informação sobre a submissão dos artigos e a legenda bibliográfica no início de cada artigo.

Esses critérios são características básicas para uma publicação científica, não representando um diferencial em pesquisa acadêmica. Ou seja, não é possível concluir que a apresentação do nome dos autores e a legenda bibliográfica no início de cada artigo seja um indicador de excelência para o periódico.

Observa-se também que os requisitos menos atendidos foram principalmente aqueles incluídos no relatório anual de gestão, como a nomina dos consultores ad hoc e a informação sobre a distribuição do periódico, que foram atendidos somente por um 7% e 3% dos periódicos respectivamente. Cabe destacar que os requisitos da nomina dos consultores ad hoc, a distribuição do periódico e o tipo de revisão no início de cada artigo foram somente atendidos por periódicos em português.

Verificou-se que os requisitos gerais são atendidos por quase todos os periódicos. Uma vez que esses requisitos são referentes a informações que devem se encontrar disponibilizadas no sítio eletrônico do periódico, não deixa de ser curiosa a não-adequação de todos os periódicos à política editorial e ao título, resumo e palavras chave no início dos artigos. Outro, como mínimo de artigos por ano, troca a qualidade dos trabalhos pela quantidade de material acadêmico disponibilizado.

(14)

Os requisitos exigidos no inicio de cada artigo representam como um todo o nível de exigência mais baixo entre os requisitos mínimos, também não representam a qualidade em pesquisa. Trata-se mais de uma questão de formatação dos artigos.

5. Conclusões

O presente estudo objetivou analisar o grau de adequação de periódicos em língua espanhola, inglesa e portuguesa de contabilidade às diretrizes mínimas de avaliação da CAPES para a área de Administração, Contabilidade e Turismo. A inclusão de periódicos em língua estrangeira justifica-se como um meio de identificar potencialidades de publicação para os pesquisadores brasileiros. Já a inclusão de periódicos em língua portuguesa já avaliados pelo Qualis justifica-se como uma forma de verificar se esses periódicos estão realmente habilitados a serem avaliados pela instituição. Os periódicos em língua espanhola foram recuperados na base de dados Latindex, os periódicos em língua inglesa foram recuperados nas bases Scopus e ISI WOS. Por último, para os periódicos em língua portuguesa optou-se por aqueles listados no WebQualis. Dessa forma foram analisados 68 diferentes periódicos indexados em bases de dados eletrônicas.

O critério principal para a seleção dos periódicos foi a identificação no título dos mesmos palavras chaves relacionadas à contabilidade. Feito isso, algumas considerações preliminares podem ser feitas.

Dentre os periódicos analisados nesse trabalho, o país com o maior número é o Brasil, com 15 periódicos, seguido por Reino Unido (14) e Estados Unidos (12). Porém quanto ao idioma desses periódicos, a maior quantidade é referente à língua inglesa (42).

Quanto às diretrizes para avaliação da CAPES, observou-se que apenas um periódico apresenta-se completamente adequado para ser submetido ao processo de avaliação (Revista Universo Contábil). Em geral, segregando os periódicos de acordo com o seu idioma oficial, foi possível verificar que os periódicos em português apresentaram-se em média mais adequados (aproximadamente 69% de adequação aos requisitos observados), seguido pelos periódicos em língua inglesa (61%) e os periódicos em língua espanhola (56%).

Apesar dos periódicos em português apresentarem-se adequados a um número maior de requisitos do que os em língua estrangeira, esse resultado é na verdade abaixo do esperado, já que por esses periódicos encontrarem-se avaliados pelo Qualis, é de se esperar que o nível de adequação aos requisitos mínimos que habilitam um periódico a ser avaliado fosse mais próximo de 100%, ressaltando que esses requisitos são anteriores a classificação dos periódicos em estratos (A1, A2, B1...).

A aplicação de requisitos mínimos para avaliação pressupõe a qualidade dos periódicos e conseqüentemente os artigos por eles publicados. Porém como exposto por Ferreira e Krzyzanowski (2003) essa noção de qualidade se divide basicamente em aspectos de conteúdo e normalização da produção acadêmica. O que se observou foi que a questão da normalização estar tão fortemente vinculada aos critérios mínimos desconsidera publicações que possuam mérito científico. Essa observação é reforçada pelo fato de que nenhum dos periódicos identificados por Bonner et al (2006) como sendo os principais na área de contabilidade e que fizeram parte desse estudo não são considerados adequados. Como apenas um dos periódicos foi verificado como sendo 100% adequado sendo ele em língua portuguesa, sugere-se a revisão desses requisitos para a área de Contabilidade, pois a não inclusão de periódicos internacionais acaba por desestimular a inserção dos pesquisadores na pesquisa em nível internacional. Ou seja, o fomento a pesquisa limita-se a cobrar uma quantidade de publicações que por maior que seja o seu mérito, dificilmente fará repercussão a nível mundial.

(15)

Referências

BALL, R.; TUNGER, D. Science Indicators Revised - Science Citation Index versus

SCOPUS: A Bibliometric Comparison of Both Citation Databases. Information Services &

Use, n. 26, p.293-301, 2006.

BEAN, D.F.; BERNARDI, R.A. Estimating the Quality Ratings of Accounting Journals Omitted in Prior Research. Advances in Accounting Education. v.7, p.109-127, 2005 BEUREN, I. M.; SOUZA, J.C. Em Busca de um Delineamento de Proposta para

Classificação dos Journals Internacionais de Contabilidade para o Qualis CAPES. Revista de

Contabilidade e Finanças, São Paulo, n.46, p.44-58, 2008.

BEYER, J. M. Editorial Policies and Practices among Leading Journals in Four Scientific Fields. The Sociological Quarterly, v.19, n.1, p.68-88, 1978

BONNER S.E.; HESFORD J.W.; STEDE, W.A.VD., YOUNG S.M. The most influential journals in academic accounting. Accounting, Organizations and Society n.31, p.663-685, 2006

CAPES. Comissão de Administração, Ciências Contábeis e Turismo

Diretrizes de Avaliação de Periódicos 2007-2009. Brasília, 31 de dezembro de 2007.

Disponível em: <

http://oficina-seer.wikidot.com/local--files/referencias/capes_aval_adm.pdf >

FREZATTI, F.; BORBA, J. A. Análise dos Traços de Tendência de Uma Amostra das Revistas Científicas da Área de Contabilidade Publicadas na Língua Inglesa. Cadernos de

Estudos: FIPECAFI, São Paulo, v. 13, n. 24, p.50-78, dez. 2000.

ISI WEB OF KNOWLEDGE. Disponível em:

http://images.isiknowledge.com/WOK48B5/help/WOK/h_database.html Acesso em:

28/04/2010.

LATINDEX. ¿Qué es Latindex? Disponível em:

http://www.latindex.unam.mx/latindex/queesLatindex.html Acesso em: 27/06/2011. LOWE A; LOCKE J.; Constructing an “efficient frontier” of accounting journal quality.

British Accounting Review n.38, p.321-341, 2006

MATHERLY M.; SHORTRIDGE R.T.; A pragmatic model to estimate journal quality in accounting. Journal of Accounting Education n.27, p.14-29, 2009

MURCIA, F. Dal-ri; BORBA, J. A. Possibilidades de Inserção da Pesquisa Contábil

Brasileira no Cenário Internacional: Uma Proposta de Avaliação dos Journals Científicos de Contabilidade e Auditoria Publicados em Língua Inglesa e Disponibilizados no

Portal de Journals da CAPES. Journal Contabilidade e Finanças, São Paulo, v. 43, n. 30, p.498-502, 2008.

OLIVEIRA, M. C. Análise dos Periódicos Brasileiros de Contabilidade. Revista

Contabilidade & Finanças, n.29, p.68 - 86, 2002

OLIVEIRA FILHO R.S.; HOCHMAN B.; NAHAS F.X.; FERREIRA L.M. Fomento à publicação científica e proteção do conhecimento científico. Acta Cir Bras [periódico na internet] 2005;20 Suppl. 2:35-9. Disponível em URL: http://www.scielo.br/acb

ROCHA-E-SILVA, Mauricio. O novo Qualis, ou a tragédia anunciada. Clinics[online], 2009, vol.64, n.1, p. 1-4, 2009

SAHA S.; SAINT S.; CHRISTAKIS D.A.; Impact factor: a valid measure of journal quality?

Journal of the Medical Library Association v.91, n.1, p.42-46, 2003

SCOPUS What is Scopus? Disponível em: http://info.Scopus.com/about/ Acesso em: 28/04/2010.

SEGAWA, H.; CREMA, A.; GAVA, M. Revistas de arquitetura, urbanismo,

(16)

v. 32, n.3, p. 120-127, set./dez. 2003.

SILVA, E. L. da; MENEZES, E. M.; PINHEIRO, Li. V. Avaliação da Produtividade Científica dos Pesquisadores nas Áreas de Ciências Humanas e Sociais Aplicadas.

Informação e Sociedade: Estudos, João Pessoa, v. 13, n. 2, p.193-222, 2003.

SOUZA, F.C.de; BORBA, J.A.; COSTA JUNIOR, N.C.A.; MURCIA, F.D. Finance Journals: Características dos Principais Journals, Autores Importantes e Artigos mais Citados. Revista

Brasileira de Finanças, v. 6, n. 1, p.113-132, 2008.

SPAGNOLO, F. ; SOUZA, V.C. O que mudar na avaliação da Capes? Revista Brasileira de

Pós-Graduação v.1, n.2, p.8-34, 2004

TARGINO, M.G.; GARCIA, J.C.R. Ciência brasileira na base de dados do Institute for Scientific Information (ISI). Ciência da Informação, Brasília, v. 29, n. 1, p.103-117, 2000. TESTA, J. The Thomson ISI Journal Selection Process. Serials Review , v.29, n. 3, p.210-212, 2003

VILHENA, V.; CRESTANA, M. F. Produção científica:critérios de avaliação de impacto. Rev. Assoc. Med. Bras. [online], vol.48, n.1, p. 20-21, 2002

YOUNG, J.J.; OAKES, L.S. Reflections on the practice of research. Accounting Forum, v.33, n.4 p.280-284, 2009.

Referências

Documentos relacionados

DATA: 17/out PERÍODO: MATUTINO ( ) VESPERTINO ( X ) NOTURNO ( ) LOCAL: Bloco XXIB - sala 11. Horário Nº Trabalho Título do trabalho

1 Instituto de Física, Universidade Federal de Alagoas 57072-900 Maceió-AL, Brazil Caminhadas quânticas (CQs) apresentam-se como uma ferramenta avançada para a construção de

Todavia, nos substratos de ambos os solos sem adição de matéria orgânica (Figura 4 A e 5 A), constatou-se a presença do herbicida na maior profundidade da coluna

a) AHP Priority Calculator: disponível de forma gratuita na web no endereço https://bpmsg.com/ahp/ahp-calc.php. Será utilizado para os cálculos do método AHP

A Figura 17 apresenta os resultados obtidos por meio da análise de DSC para a amostra inicial da blenda PBAT/PHBH-0 e para as amostras PBAT/PHBH-4, PBAT/PHBH-8 e

Nas leituras de falhas efetuadas, foram obtidos códigos de anomalia por meio de dois diferentes protocolos de comunicação: o ISO 14230 KWP (2000) e o ISO 15765-4 CAN. A seguir, no

Não obstante, o encontro de Sandra com outros colegas produz outros tipos de afeto (solidariedade, compaixão), como é o caso do encontro com um colega

Este trabalho se justifica pelo fato de possíveis aportes de mercúrio oriundos desses materiais particulados utilizados no tratamento de água, resultando no lodo