Исследование измерения и анализа науки, технологий и инноваций
Наукометрика – это область исследования, которая занимается измерением и анализом научной литературы . Наукометрика — это подраздел информметрики . Основные вопросы исследований включают измерение влияния исследовательских работ и академических журналов, понимание научных цитат и использование таких измерений в контексте политики и управления. [1] На практике существует значительное совпадение между наукометрией и другими научными областями, такими как информационные системы , информатика , наука о научной политике , социология науки и метанаука . Критики утверждают, что чрезмерная зависимость от наукометрии создала систему порочных стимулов , создающую среду «публикуй или исчезни» , которая приводит к низкокачественным исследованиям.
Историческое развитие
[2] [3] [4] [5]
Современная наукометрия в основном основана на работах Дерека Дж. де Солла Прайса и Юджина Гарфилда . Последний создал Индекс научного цитирования [1] и основал Институт научной информации , который активно используется для наукометрического анализа. Специализированный академический журнал Scientometrics был основан в 1978 году. Индустриализация науки увеличила количество публикаций и результатов исследований, а появление компьютеров позволило эффективно анализировать эти данные. [6] В то время как социология науки фокусируется на поведении ученых, наукометрия фокусируется на анализе публикаций. [1] Соответственно, наукометрику также называют научным и эмпирическим исследованием науки и ее результатов. [7] [8]
Международное общество наукометрии и информаметрики, основанное в 1993 году, представляет собой ассоциацию профессионалов в этой области. [9]
Позже, на рубеже веков, оценка и ранжирование ученых и учреждений стали уделять больше внимания. На основе библиометрического анализа научных публикаций и цитирования Академический рейтинг университетов мира («Шанхайский рейтинг») был впервые опубликован в 2004 году Шанхайским университетом Цзяо Тун . Импакт-факторы стали важным инструментом выбора между различными журналами. Такие рейтинги, как Академический рейтинг университетов мира и Мировой рейтинг университетов Times Higher Education (THE-рейтинг), стали индикатором статуса университетов. Индекс Хирша стал важным показателем продуктивности и результативности работы ученого. Однако были предложены альтернативные показатели на уровне автора . [10] [11]
Примерно в то же время возрос интерес правительств к оценке исследований с целью оценки воздействия финансирования науки. Поскольку инвестиции в научные исследования были включены в Закон о восстановлении и реинвестировании Америки 2009 года (ARRA), крупный пакет экономических стимулов, были созданы такие программы, как STAR METRICS , для оценки того, действительно ли произойдет положительное влияние на экономику. [12]
Методы и результаты
Методы исследования включают качественный, количественный и вычислительный подходы. Основное внимание в исследованиях уделялось сравнению институциональной производительности, рейтингам институциональных исследований, рейтингам журналов [7] [8] [13] установлению производительности преподавателей и стандартам пребывания в должности, [14] оценке влияния ведущих научных статей, [15] и разработке профили ведущих авторов и учреждений с точки зрения результатов исследований. [16]
Одним из важных открытий в этой области является принцип эскалации затрат, согласно которому достижение дальнейших результатов на данном уровне важности экспоненциально увеличивает затраты усилий и ресурсов. Однако новые алгоритмические методы поиска, машинного обучения и интеллектуального анализа данных показывают, что для многих задач поиска и извлечения информации это не так. [ нужна цитата ]
Более поздние методы основаны на открытом исходном коде и открытых данных для обеспечения прозрачности и воспроизводимости в соответствии с современными требованиями открытой науки . Например, индекс Unpaywall и сопутствующие исследования тенденций открытого доступа основаны на данных, полученных с конечных точек OAI-PMH из тысяч открытых архивов , предоставленных библиотеками и учреждениями по всему миру. [17]
Рекомендации по предотвращению распространенных ошибок в наукометрии включают: выбирать темы с достаточным количеством данных; используйте интеллектуальный анализ данных и парсинг веб-страниц, комбинируйте методы и устраняйте «ложные срабатывания». [18] [19] Также необходимо понимать ограничения поисковых систем (например, Web of Science, Scopus и Google Scholar), которые не могут индексировать тысячи исследований в небольших журналах и слаборазвитых странах. [20]
Общие наукометрические индексы
Индексы можно классифицировать как метрики уровня статьи , метрики уровня автора и метрики уровня журнала в зависимости от того, какую функцию они оценивают.
Фактор воздействия
Импакт-фактор (IF) или импакт-фактор журнала (JIF) академического журнала — это показатель, отражающий среднегодовое количество цитирований недавних статей, опубликованных в этом журнале. Его часто используют как показатель относительной важности журнала в своей области; журналы с более высоким импакт-фактором часто считаются более важными, чем журналы с более низким импакт-фактором. Импакт-фактор был разработан Юджином Гарфилдом , основателем Института научной информации (ISI).
Индекс научного цитирования
Индекс научного цитирования (SCI) — это индекс цитирования , первоначально разработанный Институтом научной информации (ISI) и созданный Юджином Гарфилдом . Официально он был запущен в 1964 году. Сейчас он принадлежит Clarivate Analytics (ранее подразделение Thomson Reuters в области интеллектуальной собственности и науки ). [21] [22] [23] [24] Более крупная версия (расширенный индекс научного цитирования) охватывает более 8500 известных и значимых журналов по 150 дисциплинам с 1900 года по настоящее время. Их также называют ведущими мировыми журналами по науке и технологиям из-за строгого процесса отбора. [25] [26] [27]
Индекс подтверждения
Индекс признания (British Acknowledgement Index) [28] представляет собой метод индексации и анализа благодарностей в научной литературе и, таким образом, количественно оценивает влияние благодарностей . Обычно в научной статье есть раздел, в котором авторы отмечают такие организации, как финансирование, технический персонал, коллеги и т. д., которые предоставили материалы или знания или повлияли или вдохновили их работу. Подобно индексу цитирования , он измеряет влияние на научную работу, но в другом смысле; он измеряет институциональное и экономическое влияние, а также неформальное влияние отдельных людей, идей и артефактов. В отличие от импакт-фактора, он не дает единой общей метрики, а анализирует компоненты по отдельности. Однако можно измерить общее количество благодарностей признанному объекту, а также количество цитирований на статьи, в которых появляется это признание. Отношение этого общего количества цитирований к общему количеству статей, в которых появляется признанный объект, можно истолковать как влияние этого признанного объекта. [29] [30]
Альтметрика
В научных и научных публикациях альтметрики — это нетрадиционные библиометрические показатели [31] , предлагаемые в качестве альтернативы [32] или дополнения [33] к более традиционным показателям цитируемости , таким как импакт-фактор и индекс Хирша . [34] Термин «альтметрика» был предложен в 2010 году, [35] как обобщение показателей уровня статьи , [36] и уходит своими корнями в хэштег #altmetrics . Хотя альтметрики часто воспринимаются как метрики статей, их можно применять к людям, журналам, книгам, наборам данных, презентациям, видео, репозиториям исходного кода, веб-страницам и т. д. Альтернативные метрики используют общедоступные API на разных платформах для сбора данных с помощью открытых скриптов. и алгоритмы. Первоначально альтметрика не учитывала количество цитирований [37] , а рассчитывала влияние ученых на основе различных результатов онлайн-исследований, таких как социальные сети, онлайн-новостные СМИ, онлайн-менеджеры ссылок и т. д. [38] [39] Он демонстрирует как воздействие, так и детальный состав воздействия. [35] Альтернативные метрики можно применять для исследовательских фильтров, [35] досье по продвижению и сроку пребывания в должности, заявок на гранты [40] [41] и для ранжирования недавно опубликованных статей в академических поисковых системах . [42]
Критика
Критики утверждают, что чрезмерная зависимость от наукометрии создала систему порочных стимулов , создающую среду «публикуй или исчезни» , которая приводит к низкокачественным исследованиям. [43] [44]
В популярной культуре
Главный герой романа Майкла Фрейна «Скиос» — профессор наукометрии.
Смотрите также
Журналы
Ссылки и сноски
- ^ abc Лейдесдорф, Л. и Милоевич, С., «Scientometrics» arXiv:1208.4566 (2013), готовится к выпуску: Линч, М. (редактор), Международная энциклопедия социальных и поведенческих наук , подраздел 85030. (2015)
- ^ Налимов, Василий Васильевич; Мульченко, Б. М. (1969). "«Наукометрия». Исследования науки как информационного процесса». Наука . Москва, Россия.
- ^ Гарфилд, Юджин (2009). «От науки к наукометрии, визуализирующей историю науки с помощью программного обеспечения HistCite» (PDF) . Журнал информаметрики . 3 (3): 173–179. дои : 10.1016/j.joi.2009.03.009. ISSN 1751-1577 . Проверено 15 мая 2021 г.
- ^ Валеев, Д. Х.; Голубцов, В. Г. (2018). Юридическая наукометрия и цивилистические исследования. Методологические проблемы Цивилистических Исследований(на русском): 45–57 . Проверено 15 мая 2021 г.
- ^ Борисов, М. Б.; Майсуразде, А. И. (2014). Восстановление связей в научном рубрикаторе на основе кластеризации гетерогенной сети (PDF) (Диссертация). Московский государственный университет имени М. В. Ломоносова . Проверено 15 мая 2021 г.
- ^ Де Солла Прайс, Д. , редакционное заявление . Наукометрика, том 1, выпуск 1 (1978)
- ^ аб Лоури, Пол Бенджамин; Римляне, Дентон; Кертис, Аарон (2004). «Глобальный журнальный престиж и поддерживающие дисциплины: наукометрическое исследование журналов по информационным системам». Журнал Ассоциации информационных систем . 5 (2): 29–80. дои : 10.17705/1jais.00045 . ССНН 666145.
- ^ аб Лоури, Пол Бенджамин; Муди, Грегори Д.; Гаскин, Джеймс; Галлетта, Деннис Ф.; Хамферис, Шон; Барлоу, Джордан Б.; и Уилсон, Дэвид В. (2013). «Оценка качества журналов и корзины журналов старших ученых Ассоциации информационных систем (AIS) с помощью библиометрических показателей: повышают ли экспертные оценки журналов ценность?», MIS Quarterly (MISQ), vol. 37 (4), 993–1012. Также посмотрите видеорассказ об этой статье на YouTube: https://www.youtube.com/watch?v=LZQIDkA-ke0.
- ^ «О» . Международное общество наукометрии и информаметрики . Проверено 18 января 2021 г.
- ^ Беликов, А.В.; Беликов, В.В. (2015). «Логарифмический индекс, основанный на цитировании, нормализованный по автору и возрасту, для оценки отдельных исследователей независимо от количества публикаций». F1000Исследования . 4 : 884. doi : 10.12688/f1000research.7070.1 . ПМЦ 4654436 .
- ^ Киноучи, О. (2018). «Простой индекс центральности научного общественного признания». Физика А: Статистическая механика и ее приложения . 491 : 632–640. arXiv : 1609.05273 . Бибкод : 2018PhyA..491..632K. doi :10.1016/j.physa.2017.08.072. S2CID 22795899.
- ^ Лейн, Дж (2009). «Оценка влияния финансирования науки». Наука . 324 (5932): 1273–1275. дои : 10.1126/science.1175335. PMID 19498153. S2CID 206520769.
- ^ Лоури, Пол Бенджамин; Хамфрис, Шон; Мальвиц, Джейсон; Никс, Джошуа С (2007). «Наукометрическое исследование воспринимаемого качества журналов о бизнесе и технических коммуникациях». Транзакции IEEE по профессиональной коммуникации . 50 (4): 352–378. дои : 10.1109/TPC.2007.908733. S2CID 40366182. SSRN 1021608.Лауреат премии Рудольфа Йоенка за лучшую статью, опубликованную в журнале IEEE Transactions по профессиональным коммуникациям в 2007 году.
- ^ Дин, Дуглас Л; Лоури, Пол Бенджамин; Хамферис, Шон (2011). «Профилирование исследовательской продуктивности штатных преподавателей информационных систем в учреждениях США». МИС Ежеквартально . 35 (1): 1–15. дои : 10.2307/23043486. JSTOR 23043486. SSRN 1562263.
- ^ Каруга, Гилберт Г.; Лоури, Пол Бенджамин; Ричардсон, Вернон Дж. (2007). «Оценка влияния ведущих исследований информационных систем с течением времени». Сообщения Ассоциации информационных систем . 19 (7): 115–131. дои : 10.17705/1CAIS.01907 . ССНН 976891.
- ^ Лоури, Пол Бенджамин; Каруга, Гилберт Г.; Ричардсон, Вернон Дж. (2007). «Оценка ведущих учреждений, преподавателей и статей в ведущих журналах по исследованию информационных систем». Сообщения Ассоциации информационных систем . 20 (16): 142–203. дои : 10.17705/1CAIS.02016 . ССНР 1021603.
- ^ Пивовар, Хизер; Прим, Джейсон; Орр, Ричард (09 октября 2019 г.). «Будущее открытого доступа: крупномасштабный анализ, прогнозирующий публикации и читательскую аудиторию в открытом доступе». bioRxiv 10.1101/795310 .
- ^ Цзявэй, Х., Камбер, М., Хан, Дж., Камбер, М., Пей, Дж. 2012. Интеллектуальный анализ данных: концепции и методы. Морган Кауфманн, Wlatham, EE.UU.
- ^ Кинтеро, Эрика; Сааведра, Далис; Мурильо, Дэнни (2018). «Извлечение данных из файлов в Google Scholar с использованием алгоритма на языке R для получения полезных ископаемых данных». I+D Tecnológico . 14 : 94–104. дои : 10.33412/idt.v14.1.1807 . S2CID 165340425.
- ^ Аньино Рамос, Йостин Хесус; Монж Нахера, Джулиан; Мурильо-Гонсалес, Дэнни; Мичан-Агирре, Лейла (2021). «Как приложение к науке и экологическим исследованиям». Экосистемы . 30 (2): 1–4. дои : 10.7818/ECOS.2256 . S2CID 238733389.
- ^ Гарфилд, Э. (1955). «Индексы цитирования науки: новое измерение документации посредством ассоциации идей». Наука . 122 (3159): 108–111. Бибкод : 1955Sci...122..108G. дои : 10.1126/science.122.3159.108. ПМИД 14385826.
- ^ Гарфилд, Юджин (2011). «Эволюция индекса научного цитирования» (PDF) . Международная микробиология . 10 (1): 65–69. дои : 10.2436/20.1501.01.10. ПМИД 17407063.
- ^ Гарфилд, Юджин (1963). «Индекс научного цитирования» (PDF) . Библиотека Гарфилда Пенсильванского университета . стр. v – xvi . Проверено 27 мая 2013 г.
- ^ «История индексирования цитирования». Клариват Аналитика . Ноябрь 2010 года . Проверено 4 ноября 2010 г.
- ^ «Расширенный индекс научного цитирования» . Проверено 17 января 2017 г.
- ^ Ма, Цзюпэн; Фу, Хуэй-Чжэнь; Хо, Ю-Шан (декабрь 2012 г.). «Самые цитируемые статьи о водно-болотных угодьях в расширенном индексе научного цитирования: характеристики и горячие точки». Экологические науки о Земле . 70 (3): 1039. Бибкод : 2009EnGeo..56.1247D. doi : 10.1007/s12665-012-2193-y. S2CID 18502338.
- ^ Хо, Ю-Шан (2012). «Наиболее цитируемые исследовательские работы в расширенном индексе научного цитирования» (PDF) . Наукометрия . 94 (3): 1297. doi :10.1007/s11192-012-0837-z. S2CID 1301373.
- ^ «Подтверждение против подтверждения». 22 сентября 2012 г.
- ^ Советл, Исаак Г.; Джайлз, К. Ли ; Хан, Хуэй; Манавоглу, Эрен (2005). «Индексация автоматического подтверждения: расширение семантики вклада в цифровую библиотеку CiteSeer». Материалы 3-й международной конференции по захвату знаний . К-КАП '05. стр. 19–26. CiteSeerX 10.1.1.59.1661 . дои : 10.1145/1088622.1088627. ISBN 1-59593-163-5.
- ^ Джайлз, CL ; Каунсилл, ИГ (15 декабря 2004 г.). «Кто получает признание: измерение научного вклада посредством автоматической индексации подтверждений» (PDF) . Учеб. Натл. акад. наук. США 101 (51): 17599–17604. Бибкод : 2004PNAS..10117599G. дои : 10.1073/pnas.0407743101 . ПМК 539757 . ПМИД 15601767.
- ^ "Коллекции ПЛОС" . Публичная научная библиотека (ПЛОС) . 3 ноября 2021 г.
Альтметрика — это исследование и использование нетрадиционных показателей научного воздействия, основанных на активности в веб-среде.
- ^ «Альтернативный» действительно означает «альтернативный»», Джейсон Прим, ведущий автор комментария 592 к манифесту Altmetrics.
- ^
- ^ Чавда, Яника; Патель, Аника (30 декабря 2015 г.). «Измерение воздействия исследований: библиометрия, социальные сети, альтметрика и BJGP». Британский журнал общей практики . 66 (642): е59–е61. дои : 10.3399/bjgp16X683353. ПМЦ 4684037 . ПМИД 26719483.
- ^ abc Прием, Джейсон; Тараборелли, Дарио; Грот, Пол; Нейлон, Кэмерон (28 сентября 2011 г.). «Альтметрика: манифест (v 1.01)». Альтметрика .
- ↑ Бинфилд, Питер (9 ноября 2009 г.). «Метрики уровня статьи в PLoS — что это такое и почему вас это должно волновать?» (Видео) . Калифорнийский университет в Беркли . Архивировано из оригинала 12 декабря 2021 г.
- ^ Бартлинг, Зёнке; Фризике, Саша (2014). Открытие науки: развивающееся руководство о том, как Интернет меняет исследования, сотрудничество и научные публикации. Чам: Международное издательство Springer. п. 181. дои : 10.1007/978-3-319-00026-8. ISBN 978-3-31-900026-8. OCLC 906269135.
Альтернативные метрики и метрики уровня статьи иногда используются как взаимозаменяемые, но есть важные различия: метрики уровня статьи также включают данные о цитировании и использовании; ...
- ^ Макфедрис, Пол (август 2012 г.). «Измерение влияния альтметрики [технически говоря]». IEEE-спектр . 49 (8): 28. doi :10.1109/MSPEC.2012.6247557. ISSN 0018-9235.
- ^ Галлиган, Финбар; Диас-Коррейя, Шарон (март 2013 г.). «Альтметрика: переосмысление способов измерения». Обзор сериалов . 39 (1): 56–61. doi :10.1016/j.serrev.2013.01.003.
- ^ Мохер, Дэвид; Нодет, Флориан; Кристеа, Иоана А.; Мидема, Фрэнк; Иоаннидис, Джон П.А.; Гудман, Стивен Н. (29 марта 2018 г.). «Оценка ученых для найма, продвижения по службе и пребывания в должности». ПЛОС Биология . 16 (3): e2004089. дои : 10.1371/journal.pbio.2004089 . ISSN 1545-7885. ПМЦ 5892914 . ПМИД 29596415.
- ^ Нариани, Раджив (24 марта 2017 г.). «Дополнение традиционных способов измерения научного воздействия: путь альтметрики». Материалы конференции ACRL 2017 . hdl : 10315/33652.
- ^ Мехзар, Марьям; Клинг, Кристоф Карл; Лемке, Штеффен; Мазаракис, Афанасиос; Питерс, Изабелла (08 апреля 2018 г.). «Можем ли мы рассчитывать на показатели социальных сетей? Первые сведения об активном использовании социальных сетей в научных целях». Материалы 10-й конференции ACM по веб-науке . п. 215. arXiv : 1804.02751 . дои : 10.1145/3201064.3201101 . ISBN 978-1-4503-5563-6.
- ^ Рош, Кристофер (31 августа 2022 г.). «Спектр исследований для хирургов: ваша карьера в их власти, сгибая руки?». Булл Рой Колл Surg Engl . 104 (6): 274–277. дои : 10.1308/rcsbull.2022.112 .
- ^ Вайнгарт, Питер (1 января 2005 г.). «Влияние библиометрии на научную систему: непреднамеренные последствия?». Наукометрия . 62 (1): 117–131. дои : 10.1007/s11192-005-0007-7. ISSN 0138-9130. S2CID 12359334.
Внешние ссылки
- Харнад, С. (2009). «Наукометрия открытого доступа и оценка исследований в Великобритании». Наукометрия . 79 (1): 147–156. arXiv : cs/0703131 . CiteSeerX 10.1.1.561.7204 . doi : 10.1007/s11192-009-0409-z. S2CID 3183215.
- Харнад, С. (2008). «Проверка показателей эффективности исследований на соответствие рейтингам коллег». Этика в науке и экологической политике . 8 (11): 103–107. дои : 10.3354/esep00088 .
- Выставка «Места и пространства: картографическая наука» в Американском музее науки и энергетики , 7 сентября 2007 г. - 7 января 2008 г.
- Чрезмерная оптимизация показателей академических публикаций: соблюдение закона Гудхарта в действии GigaScience, том 8, выпуск 6, июнь 2019 г.