4.2 Разработка методики определения значимости научных публикаций
4.2.1 Определение значимости публикаций в различных областях знания по показателю цитируемости
Одним из наиболее значимых показателей значимости научных публикаций является их индекс цитируемости. Однако при использо- вании показателя цитируемости в качестве основного индикатора существует опасность некорректного сравнения публикаций, принад- лежащих к разным научным областям, так как каждая имеет свои ха- рактерные темпы цитируемости. Поэтому при сопоставлении показа- телейИЦ целесообразен ввод нормировочного коэффициентаN, кото- рый рассчитывается с учетом тематической принадлежности статьи, года издания публикации и среднего уровня цитируемости публикаций в данной области знаний за тот же год, что и анализируемая статья.
Надо отметить, что для реализации данной методики всем необхо- димым требованиям отвечают только ресурсы компании «Thomson Reuters»: «Web of Science», «Journal Citation Reports», «Essential Science Indicators» благодаря единой системе индексации и набору всех необходимых опций и данных (см. табл. 3.4).
Теперь рассмотрим алгоритм действий, который подразумевается предлагаемой методикой, и какие результаты мы можем с ее помощью получить.
На первом этапе поток публикаций подвергается библиометриче- скому анализу по следующим критериям:
· определяется область знания, к которой относится публикация (используется классификация «Thomson Reuters»);
· выявляется суммарный индекс цитирования публикации;
· определяется год издания публикации;
· определяется средний показатель цитируемости статей по дан- ной специальности, опубликованных в том же году в соответствии с данными, представленными в БД «Essential Science Indicators» [487]
(«Thomson Reuters») – [Average Citation Rates (Средний уровень цити- рования) (ACR)] (табл. 4.4).
Данные, представленные в табл. 4.4, показывают, как цитируются статьи по 22 научным направлениям в зависимости от года их опубли- кования. Так, например, среднее значение цитируемости публикации по биологии и биохимии, опубликованной в 1998 г. составило 26,55, в то время как среднее цитирование одной статьи по математике, из- данной в том же году, – 5,07. Очевидным является некорректность сравнивания статей по математике и биохимии по суммарному показа- телю цитируемости, так как разница в цитировании (26,55:5,07=5,24) весьма существенна. Поэтому необходимо нормировать показатели ИЦ таким образом, чтобы можно было сравнивать между собой публикации
по показателю их цитируемости независимо от их тематической на- правленности и году издания.
Таблица 4.4 Средний уровень цитируемости публикаций по 22 научно-тематическим
направлениям, опубликованных за период 1997–2007 гг.
(данные ESI «Thomson Reuters», обновление 1 февраля 2008 г.)
Область
исследования 1997 1998 1999 2000 2001 2002 2003 2004 2005 2006 2007 За все годы Molecular
Biology &
Genetics 44,27 42,90 40,28 37,13 33,11 28,31 22,52 17,07 10,67 4,57 0,65 24,79 Immunology 33,15 33,45 30,00 29,26 26,53 22,29 18,22 14,39 8,97 3,80 0,59 20,08 Neuroscience &
Behavior 30,82 29,45 28,09 25,82 23,42 19,48 15,08 11,42 7,19 2,98 0,41 17,33 Biology &
Biochemistry 28,69 26,55 24,73 23,37 20,61 17,45 14,15 10,63 6,58 2,70 0,40 15,95 Microbiology 25,95 25,51 23,46 21,48 19,12 16,31 13,33 10,29 6,81 2,71 0,38 14,51 Space Science 20,79 19,35 20,82 15,97 16,97 12,92 12,59 9,54 6,72 3,19 0,75 12,45 Clinical
Medicine 19,42 18,59 17,73 16,55 14,98 13,17 10,88 8,29 5,30 2,16 0,33 11,32 Pharmacology
& Toxicology 17,21 16,08 16,08 15,40 14,19 12,81 9,99 8,11 4,90 2,12 0,29 10,26 Psychiatry/
Psychology 17,22 15,93 15,52 13,74 12,40 10,07 8,37 6,12 3,60 1,37 0,23 9,14 Chemistry 14,82 14,81 13,89 13,53 11,80 10,88 8,88 6,96 4,58 1,96 0,30 8,94 Geosciences 16,42 15,78 14,09 12,39 11,05 8,71 7,25 5,33 3,30 1,47 0,28 8,16 Physics 12,83 12,52 11,92 11,47 10,15 8,67 7,22 5,88 3,89 1,76 0,30 7,63 Plant & Animal
Science 12,12 11,31 10,67 9,93 8,76 7,48 6,05 4,59 2,75 1,11 0,19 6,61 Agricultural
Sciences 9,64 9,76 9,43 9,16 7,98 6,85 5,76 4,23 2,53 0,99 0,15 5,69 Materials
Science 8,42 8,43 8,14 8,07 7,24 6,23 5,41 4,08 2,52 1,05 0,14 5,04 Economics &
Business 9,77 8,66 7,69 6,87 5,81 5,26 3,97 2,80 1,56 0,56 0,12 4,69 Social
Sciences, general
6,86 6,65 6,25 5,83 5,01 4,41 3,52 2,70 1,66 0,64 0,14 3,82 Engineering 6,57 6,01 5,82 5,48 5,06 4,29 3,55 2,77 1,66 0,64 0,10 3,62 Multidisciplina
ry 2,51 3,22 3,32 3,05 5,30 6,33 6,12 4,58 3,96 3,05 0,79 3,55 Mathematics 5,53 5,07 4,93 4,29 3,62 3,28 2,58 1,93 1,20 0,49 0,08 2,85 Computer
Science 6,07 6,32 5,56 4,96 4,98 4,76 2,84 1,81 1,12 0,36 0,10 2,79 All Fields 16,70 15,94 15,11 14,10 12,60 10,87 8,77 6,69 4,21 1,73 0,28 9,35
Для нормирования показателей, относящихся к публикациям по различным научным тематикам, вместо суммарного показателя цити- руемости публикации предлагается использовать коэффициент норми- рованияN:
N= ИЦпубл /ACR,
где ИЦпубл – суммарный индекс цитируемости публикации за оп- ределенный год;
ACR(Average Citation Rates) – среднемировой уровень цитируемо- сти одной публикации по соответствующей тематике, в зависимости от года опубликования статьи (по БД «Essential Science Indicators»
«Thomson Reuters»).
Коэффициент N может явиться тем нормировочным показателем, по которому можно будет производить ранжирование статей по тако- му критерию как цитируемость независимо от их тематики и года опубликования.
Если статья соответствует среднемировому уровню цитирования публикации по соответствующей тематике за аналогичный год изда- ния, –N=1. В случае если N> 1, – цитируемость статьи превосходит среднемировую статью по этому показателю во столько раз, во сколь- ко раз N>1. Если статья имеетN< 1, то ее цитируемость ниже сред- немирового уровня.
Данная методика была апробирована при оценке публикаций од- ного из НИИ РАН – ИФПБ РАН.
Объектом исследования являлись публикации сотрудников ИФПБ РАН за 2000–2007 гг. Предметом исследования являлся анализ цити- руемости научных публикаций. Основной задачей исследования явля- лось определение уровня научной значимости публикаций сотрудни- ков ИФПБ РАН по такому индикатору как ИЦ публикаций.
В качестве основных информационных ресурсов служили БД
«Web of Science» и «Essential Science Indicators».
На первом этапе данного исследования были выявлены все публи- кации ИФПБ РАН, включая их индексы цитируемости. Далее все пуб- ликации были отсортированы по годам опубликования. На следующем этапе все публикации были разнесены по 22 научным направлениям (в соответствии с предметными рубриками БД ESI компании «Thom- son Reuters»). Далее определялся средний показатель цитируемости публикаций в соответствии с данными ресурса ESI («Thomson Reuters») [опция: Baselines (базисные линии) – Average Citation Rates (средний уровень цитирования)]. В соответствии с предлагаемой нами формулойN=CI / ACR, определялся нормировочный коэффициентN.
На заключительном этапе был сформирован проранжированный пере- чень статей сотрудников исследуемого НИИ в соответствии с уровнем значимости публикаций в соответствии с коэффициентомN(табл. 4.5).
Таблица 4.5 Десять наиболее рейтинговых публикаций сотрудников ИФПБ РАН
(N ≥ 1) (критерий оценки – уровень цитируемости)
Статья
ИЦпубл Год Область знания
Область знания
по ESI ACR1 ACR2 Коэф- фици- статьиент Dismukes G.C.et al. The origin of at-
mospheric oxygen on Earth: The inno- vation of oxygenic photosynthesis //
Proc. of the Nat. Acad. of Sciences USA. – 2001. – 98 (5). – P. 2170–2175.
60 2001 Multidis- ciplinary Sciences
Multidis- ciplinary Sciences
5,3 11,32
Kosourov S. et al. A comparison of hydro- gen photoproduction by sulfur-deprived Chlamydomonas reinhardtii under differ- ent growth conditions // J. of biotechnol. – 2007. – 128(4). – P. 776–787.
3 2007 Biotech- nology &
Applied Microbi- ology
Microbio-
logy 0,38 7,89
Schutz K. et al Cyanobacterial H-2 production – a comparative analysis //
Planta. – 2004. – 218(3). – P. 350–359
34 2004 Plant
Sciences Plant &
Animal Science
4,59 7,40
Allakhverdiev S.I. et al. Systematic analysis of the relation of electron transport and ATP synthesis to the photodamage and repair of photosystem II in Synechocystis // Plant Phys. – 2005. – 137(1). – P. 263–273
16 2005 Plant
Sciences Plant &
Animal Science
2,75 5,82
Balashov S.P. et al. Xanthorhodopsin: A proton pump with a light-harvesting carotenoid antenna // Science. – 2005. – 309(5743). – P. 2061–2064
23 2005 Multidis- ciplinary Sciences
Multidis- ciplinary Sciences
3,96 5,81
Allakhverdiev S.I. et al. Salt stress inhibits the repair of photodamaged photosystem II by suppressing the tran- scription and translation of psbA genes in Synechocystis // Plant Phys. – 2002.
– 130(3). – P. 1443–1453
43 2002 Plant
Sciences Plant &
Animal Science
7,48 5,75
Allakhverdiev S.I. et al. Ionic and os- motic effects of NaCl-induced inactiva- tion of photosystems I and II in Syne- chococcus sp. // Plant Phys. – 2000. – 123(3). – P. 1047–1056
53 2000 Plant
Sciences Plant &
Animal Science
9,93 5,34
Allakhverdiev S.I. et al. Inactivation of photosystems I and II in response to osmotic stress in Synechococcus. Con- tribution of water channels // Plant Phys. – 2000. – 122(4). – P. 1201–1208.
41 2000 Plant
Sciences Plant &
Animal Science
9,93 4,13
Nishiyama Y. et al. new paradigm for the action of reactive oxygen species in the photoinhibition of photosystem II //BBA. – 2006. – 1757(7). – P. 742–
749.
11 2006 Bioche- mistry &
Molecular Biology;
Biophy- sics
Biology &
Biochem- istry;
Molecular Biology &
Genetics
2,7 4,57 4,07
Bukhov N.G. et al. Energy dissipation in photosynthesis: Does the quenching of chlorophyll fluorescence originate from antenna complexes of photosystem II or from the reaction center? // Planta. – 2001.
– 212(5–6). – P. 749–759.
32 2001 Plant
Sciences Plant &
Animal Science
8,76 3,65
В табл. 4.5 представлены наиболее рейтинговые по коэффициен- туN публикации научных сотрудников ИФПБ РАН за 2000–2007 гг.
Следует уточнить, что многие журналы публикуют статьи сразу по нескольким научно-тематическим направлениям, берется среднее значение цитируемости того тематического направления, к которому относится статья (ACR1, ACR2, …).
Проанализировав таким образом доступный в «Web of Science»
массив публикаций сотрудников ИФПБ РАН за 1997–2007 гг., и при- ведя данные по цитируемости этих публикаций в соответствие с нор- мировочным коэффициентомN, получены следующие данные:
· N ≥ 1 – 76 статей (20% от общего числа проиндексированных в «Web of Science» статей ИФПБ за 1997–2007 гг.);
· N<1– 148 статей (39,4% );
· 152 статьи (40%) не имеют цитирования, из которых 139 статей (37% от общего количества) – статьи 2006–2007 гг. и их суммарный ИЦпубл еще не достиг максимума.
Из приведенных данных видно, что большое количество публи- каций (37% от исследованных) датируются 2006 и 2007 гг. Публикации текущего и предшествующего годов еще не набирают достаточного цитирования, поэтому при определении значимости таких публика- ций целесообразно учитывать импакт-фактор журнала, в котором была опубликована статья. Применение данного критерия в качестве индикатора вполне оправдано, так как величина IF существенно влияет на дальнейшую цитируемость публикации (см. далее в разделе 4.2.2).
Таким образом, с помощью данной методики, предоставляется возможность сравнения публикаций, принадлежащих к различным тематическим направлениям с одновременным учетом года издания.
Это позволяет определятьуровень публикаций по такому индикатору как ИЦ без принижения публикаций, относящихся к научным на- правлениям с невысокими темпами цитируемости перед публика- циями по высокоцитируемым научным направлениям. Кроме того, учитывая год издания, устраняется некорректность сравнения ИЦ статей, опубликованных в недавнем прошлом с публикациями более ранних лет издания.
Таким образом, благодаря использованию данной методики, пользователь получает представление об уровне цитируемости пуб- ликаций, что имеет бóльшую информативность, чем суммарный по- казатель ИЦ.
4.2.2 Определение значимости публикаций по показателю импакт-