O sistema de avaliação da Capes foi estabelecido em 1976 e, desde então, vem cumprindo papel fundamental na pós-graduação nacional (CAPES, 2009). Para Sá (2009), a avaliação da Capes tem influenciado os rumos da pós- graduação no Brasil. De acordo com Capes (2014), o Sistema Nacional de Pós- graduação (SNPG) é um produto da CAPES constituído por sua presidência,
conselhos e diretorias responsáveis pela política de gestão, financiamento, indução e ampliação de programas e pós-graduação no Brasil e, consequentemente, de produção de ciência. Grande parte das ações do SNPG é orientada pelo “Plano Nacional de Pós-Graduação do Brasil (2011-2020)”, no qual estão traçadas as metas, os desafios e a direção que deve tomar a pós- graduação brasileira até 2020.
A avaliação do SNPG é orientada pela Diretoria de Avaliação/Capes e realizada com a participação da comunidade científica por meio de consultores
ad hoc (CAPES, 2014). Até dezembro de 2014, a avaliação ocorria trienalmente
e, a partir de então, passou a acontecer a cada quatro anos, conforme a CAPES (2014), “a primeira avaliação quadrienal está prevista para ser realizada em março de 2017, versando sobre dados e informações dos anos 2013, 2014, 2015 e 2016”. O processo de avaliação ocorre por meio dos documentos de área, tanto na elaboração e submissão de propostas de cursos novos quanto na avaliação dos cursos em funcionamento. Neles estão descritos o estado atual, as características e as perspectivas, assim como os quesitos considerados prioritários na avaliação dos programas de pós-graduação pertencentes a cada uma das 48 áreas de avaliação. Assim, foi desenvolvida uma ferramenta para coletar informações, realizar análises e avaliações e ser a base de referência do SNPG (CAPES, 2014). Conhecida como Plataforma Sucupira, em homenagem ao professor Newton Sucupira, autor do documento que institucionalizou a pós-graduação brasileira nos moldes atuais, a ferramenta executa o gerenciamento operacional de todos os processos. Na plataforma Sucupira, existe um módulo específico para coletar dados dos cursos de pós-graduação, conhecido como Coleta de
Dados. Eentre os dados que podem ser extraídos desse aplicativo estão
informações sobre os veículos utilizados pelos programas de pós-graduação para pesquisa e a divulgação de sua produção.
A coleta de dados da Plataforma Sucupira, de acordo com Capes (2014), alimenta as informações que geram uma lista Qualis com a classificação dos
veículos utilizados pelos programas de pós-graduação para a divulgação da sua produção. Essa lista é conhecida como Qualis, e segundo a Capes (2014), é o resultado dos procedimentos utilizados por essa agência para estratificação da qualidade da produção intelectual dos programas de pós-graduação. A estratificação da qualidade dessa produção é realizada de forma indireta. Assim, o Qualis afere a qualidade dos artigos e de outros tipos de produção a partir da análise da qualidade dos veículos de divulgação (CAPES, 2014). Para este trabalho interessam os periódicos científicos.
A classificação de periódicos é realizada pelas áreas de avaliação e passa por processo anual de atualização. Esses veículos são enquadrados em estratos indicativos da qualidade - A1, o mais elevado; A2; B1; B2; B3; B4; B5; C - com peso zero. De acordo com Capes (2014), o mesmo periódico, ao ser classificado em duas ou mais áreas distintas, pode receber diferentes avaliações. Isso não constitui inconsistência, mas expressa o valor atribuído, em cada área, em pertinência ao conteúdo veiculado. Assim, segundo a Capes (2014), não se pretende com essa classificação definir qualidade de periódicos de forma absoluta.
Para divulgar a classificação resultante dessa estratificação, está disponível o aplicativo Web Qualis, com o qual, por meio do sítio da Capes, qualquer usuário pode acessar a classificação dos veículos de divulgação da produção científica dos programas de pós-graduação. Atualmente, estão disponíveis no Web Qualis apenas a qualificação da produção divulgada em periódicos e anais de eventos. Os demais veículos são qualificados, mas não estão disponíveis, sendo exclusivos para fins de processos de avaliação.
O coordenador da área, ao chancelar as listagens com a classificação dos periódicos, disponibiliza no Web Qualis as listas para acesso de todos os usuários interessados. Segundo a Capes (2009), para fins de avaliação da produção, as áreas podem classificar revistas típicas de outros segmentos, mas não precisam indicá-las para publicação no Qualis da área.
Para manter informação clara aos interessados, a própria Capes orienta que sejam indicados todos os periódicos considerados como típicos da área. Ou seja, um periódico de economia classificado e publicado como “A1” em educação pode ser incluído também como “C” no Qualis da disciplina de economia. Para fins de pontuação da produção, a disciplina de economia deve classificar o periódico conforme seus critérios, mas não precisa indicá-lo para integrar a lista a ser publicada. Ainda segundo a Capes (2009), a transparência do processo de avaliação continuará garantida, pois, no Caderno de Avaliação, pode-se identificar a qualificação da produção sem que o periódico figure nos respectivos Qualis das áreas.
Conforme a Capes (2009), a atualização do Qualis ocorre quando há inclusão de novos veículos, a saber:
a) novos veículos citados na Coleta de Dados e ainda não classificados; b) outros veículos não citados na Coleta de Dados, mas que a área deseja incluir para compor um cenário mais amplo de publicações de seu campo;
c) classificação nos estratos correspondentes de veículos já citados em coletas anteriores, mas que ainda não foram classificados pela comissão de área.
A reclassificação no Qualis ocorre quando há mudança na categoria em que o veículo foi enquadrado. Deve acontecer no primeiro ano de cada triênio de avaliação, exceto nos casos considerados relevantes pela área ou ainda na classificação anteriormente realizada.
O aprimoramento dos processos de avaliação a partir dos critérios das áreas faz do Qualis um referencial para o pesquisador se orientar na escolha do local de publicação de sua pesquisa.
Nem todos os periódicos listados no Qualis da Capes são de acesso livre. Assim, pesquisadores e estudantes, com filiação em instituições de ensino e pesquisa brasileiras, para acessar livremente o conteúdo dos periódicos pagos, podem utilizar a rede Comunidade Acadêmica Federada (CAFe). A CAFe é um serviço de gestão de identidade que reúne instituições de ensino e pesquisa
brasileiras através da integração de suas bases de dados. Isso significa que, por meio de uma conta única (modelo single sign-on), o usuário pode acessar, de onde estiver, os serviços de sua própria instituição e os oferecidos pelas outras organizações que participam da federação. Essa autenticação elimina a necessidade de múltiplas senhas de acesso e processos de cadastramento, gerando uma relação de confiança. Serviços de ensino a distância, acesso a publicações científicas e atividades de colaboração estão entre os maiores beneficiários das infraestruturas oferecidas por federações (RNP, 2014).
Assim, para atingir os objetivos desta pesquisa, as listas de periódicos Qualis da Capes foram utilizadas como fonte de dados. A lista Qualis da Capes está disponível no Portal da Capes. Esta pesquisa utilizou a rede CAFe para busca dos artigos, disponíveis no período da coleta, segundo semestre de 2014, na referida rede. Todas as buscas da pesquisa feitas na rede CAFe, utilizaram o campo “Título do periódico”.