В научных публикациях альтметрики — это нетрадиционные библиометрические показатели [2], предложенные в качестве альтернативы [3] или дополнения [4] к более традиционным показателям цитируемости , таким как импакт-фактор и индекс Хирша . [5] Термин альтметрики был предложен в 2010 году [1] как обобщение показателей уровня статей [6] и берет свое начало в хэштеге #altmetrics . Хотя альтметрики часто рассматриваются как показатели статей, их можно применять к людям, журналам, книгам, наборам данных, презентациям, видео, репозиториям исходного кода, веб-страницам и т. д.
Altmetrics использует общедоступные API на разных платформах для сбора данных с помощью открытых скриптов и алгоритмов. Altmetrics изначально не охватывал количество цитирований , [7] но вычислял влияние ученых на основе разнообразных результатов онлайн-исследований, таких как социальные сети, онлайн-новостные СМИ, онлайн-менеджеры ссылок и т. д. [8] [9] Он демонстрирует как влияние, так и подробный состав влияния. [1] Altmetrics можно применять для фильтрации исследований, [1] досье по продвижению и постоянству, заявок на гранты [10] [11] и для ранжирования недавно опубликованных статей в академических поисковых системах . [12]
Со временем разнообразие источников, упоминающих, цитирующих или архивирующих статьи, сократилось. Это произошло из-за прекращения существования сервисов, таких как Connotea, или из-за изменений в доступности API. Например, PlumX удалил показатели Twitter в августе 2023 года. [13]
Развитие веб 2.0 изменило поиск и распространение исследовательских публикаций в академии или за ее пределами, но также предоставило новые инновационные конструкции для измерения широкого научного влияния научной работы. Хотя традиционные метрики полезны, их может быть недостаточно для измерения немедленного и нецитируемого влияния, особенно за пределами сферы рецензирования. [1]
Такие проекты , как ImpactStory [14] [15] и различные компании, включая Altmetric [14] [ 16 ] Plum Analytics [14] [17] [18] [19] и Overton [20], вычисляют альтметрики. Несколько издателей начали предоставлять такую информацию читателям, включая BioMed Central , Public Library of Science (PLOS) , [21] [22] Frontiers , [23] Nature Publishing Group [ 24] и Elsevier . [25] [26] Библиотека журналов NIHR также включает данные альтметрики вместе со своими публикациями. [27]
В 2008 году Журнал медицинских интернет-исследований начал систематически собирать твиты о своих статьях. [28] Начиная с марта 2009 года Публичная научная библиотека также ввела метрики на уровне статей для всех статей. [21] [22] [29] Спонсоры начали проявлять интерес к альтернативным метрикам, [30] включая Совет по медицинским исследованиям Великобритании. [31] Альтметрики использовались исследователями в заявках на рассмотрение при продвижении. [32] Кроме того, несколько университетов, включая Питтсбургский университет, экспериментируют с альтметриками на уровне института. [32]
Однако также отмечено, что статье требуется немного внимания, чтобы попасть в верхний квартиль ранжированных статей, [33] что говорит о том, что в настоящее время недостаточно источников альтметрик, чтобы дать сбалансированную картину влияния большинства статей.
Важно для определения относительного влияния статьи, сервис, который вычисляет статистику альтметрики, нуждается в базе знаний значительного размера. В следующей таблице показано количество артефактов, включая статьи, охваченных услугами:
Альтметрики — это очень широкая группа метрик, охватывающих различные части влияния, которое может иметь статья или работа. Классификация альтметрик была предложена ImpactStory в сентябре 2012 года, [38] и очень похожая классификация используется Публичной научной библиотекой: [39]
Одной из первых альтернативных метрик, которые стали использоваться, было количество просмотров статьи. Традиционно автор хотел бы опубликоваться в журнале с высоким уровнем подписки, чтобы многие люди имели доступ к исследованию. С появлением веб-технологий стало возможным фактически подсчитать, как часто просматривалась одна статья. Обычно издатели подсчитывают количество просмотров HTML и PDF. Еще в 2004 году BMJ опубликовал количество просмотров своих статей, которое, как выяснилось, в некоторой степени коррелировало с цитированием. [41]
Обсуждение статьи можно рассматривать как метрику, которая фиксирует потенциальное влияние статьи. Типичные источники данных для расчета этой метрики включают Facebook , Google+ , Twitter , научные блоги и страницы Википедии. Некоторые исследователи рассматривают упоминания в социальных сетях как цитаты. Например, цитаты на платформе социальных сетей можно разделить на две категории: внутренние и внешние. Например, первая включает ретвиты, вторая относится к твитам, содержащим ссылки на внешние документы. [42] Была изучена корреляция между упоминаниями и лайками и цитированием в первичной научной литературе, и в лучшем случае была обнаружена небольшая корреляция, например, для статей в PubMed . [4]
В 2008 году журнал Journal of Medical Internet Research начал публиковать просмотры и твиты . Эти «твиты» оказались хорошим индикатором высокоцитируемых статей, что побудило автора предложить «фактор Twimpact», который представляет собой количество твитов, полученных в течение первых семи дней публикации, а также Twindex, который является ранговым процентилем фактора Twimpact статьи. [28] Однако, если внедрять использование фактора Twimpact, исследования показывают, что баллы в высокой степени предметно-специфичны, и, как следствие, сравнения факторов Twimpact должны проводиться между статьями одной и той же предметной области. [28] Хотя прошлые исследования в литературе продемонстрировали корреляцию между твитами и цитированиями, это не причинно-следственная связь. На данный момент неясно, являются ли более высокие цитирования результатом большего внимания СМИ через Twitter и другие платформы или просто отражают качество самой статьи. [28]
Недавние исследования, проведенные на индивидуальном уровне, а не на уровне статей, подтверждают использование Twitter и социальных сетей в качестве механизма для повышения ценности воздействия. [43] Результаты показывают, что исследователи, чьи работы упоминаются в Twitter, имеют значительно более высокие индексы h, чем исследователи, чьи работы не упоминаются в Twitter. Исследование подчеркивает роль использования дискуссионных платформ, таких как Twitter, для повышения ценности традиционных метрик воздействия.
Помимо Twitter и других потоков, блогинг показал себя мощной платформой для обсуждения литературы. Существуют различные платформы, которые отслеживают, о каких статьях пишут в блогах. Altmetric.com использует эту информацию для расчета метрик, в то время как другие инструменты просто сообщают, где происходит обсуждение, например ResearchBlogging и Chemical blogspace.
Платформы могут даже предоставлять формальный способ ранжирования статей или рекомендации статей иным образом, например, Faculty of 1000. [44 ]
Также информативно подсчитать, сколько раз страница была сохранена или добавлена в закладки. Считается, что люди обычно выбирают закладки на страницы, которые имеют высокую релевантность для их собственной работы, и в результате закладки могут быть дополнительным индикатором влияния для конкретного исследования. Поставщиками такой информации являются специализированные службы социальных закладок, такие как CiteULike и Mendeley .
Категория цитирования — это узкое определение, отличное от обсуждения. Помимо традиционных метрик, основанных на цитатах в научной литературе, таких как полученные из Google Scholar , CrossRef , PubMed Central и Scopus , альтметрики также принимают цитаты во вторичных источниках знаний. Например, ImpactStory подсчитывает количество ссылок на статью в Wikipedia. [45] Plum Analytics также предоставляет метрики для различных академических публикаций, [46] стремясь отслеживать продуктивность исследований. PLOS также является инструментом, который можно использовать для использования информации о вовлеченности. [46]
Многочисленные исследования показали, что научные статьи, распространяемые через каналы социальных сетей (например, Twitter, Reddit, Facebook, YouTube и т. д.), имеют существенно более высокие библометрические оценки (загрузки, прочтения и цитирования), чем статьи, не рекламируемые через социальные сети. В областях пластической хирургии [47] , хирургии кисти [48] и других, более высокие баллы Altmetric связаны с лучшими краткосрочными библиометрическими показателями.
Хотя существует меньше консенсуса относительно обоснованности и последовательности альтметрик, [49] в частности обсуждается интерпретация альтметрик. Сторонники альтметрик ясно дают понять, что многие из метрик показывают внимание или вовлеченность, а не качество воздействия на прогресс науки. [39] Даже метрики, основанные на цитировании, не указывают, подразумевает ли высокая оценка положительное воздействие на науку; то есть статьи также цитируются в статьях, которые не согласны с цитируемой статьей, проблема, например, решаемая проектом Citation Typing Ontology. [50]
Альтметрики можно было бы более правильно интерпретировать, предоставив подробный контекст и качественные данные. Например, чтобы оценить научный вклад научной работы в разработку политики с помощью альтметрики, качественные данные, такие как кто цитирует онлайн [12] и в какой степени онлайн-цитирование имеет отношение к разработке политики, должны быть предоставлены в качестве доказательств. [51]
Что касается относительно низкой корреляции между традиционными метриками и альтметриками, альтметрики могут измерять взаимодополняющие перспективы влияния ученых. Разумно объединить и сравнить два типа метрик при интерпретации общественного и научного влияния. Исследователи построили структуру 2*2 на основе взаимодействия между альтметриками и традиционными цитированиями. [4] Дополнительные пояснения должны быть предоставлены для двух групп с высокими альтметриками/низкими цитированиями и низкими альтметриками/высокими цитированиями. [28] [4] Таким образом, альтметрики предоставляют удобные подходы для исследователей и учреждений для мониторинга влияния их работы и избегания ненадлежащих интерпретаций.
Полезность метрик для оценки научного воздействия является спорной. [52] [53] [54] [55] Исследования показали, что онлайн-шумиха может усилить влияние других форм охвата на научное воздействие исследователей. Для наноученых, упомянутых в Twitter, их взаимодействие с репортерами и неучеными положительно и значительно предсказывало более высокий индекс Хирша, тогда как не упомянутая группа потерпела неудачу. [43] Altmetrics расширяет измерение научного воздействия для сдерживания быстрого восприятия, более широкого спектра аудитории и разнообразных результатов исследований. Кроме того, сообщество демонстрирует четкую потребность: спонсоры требуют измеримых показателей воздействия своих расходов, таких как участие общественности.
Однако существуют ограничения, которые влияют на полезность из-за технических проблем и систематической предвзятости конструкции, таких как качество данных, неоднородность и особые зависимости. [53] С точки зрения технических проблем данные могут быть неполными, поскольку сложно собирать эти результаты онлайн-исследований без прямых ссылок на их упоминания (например, видео) и идентифицировать различные версии одной исследовательской работы. Кроме того, не решен вопрос о том, приводит ли API к каким-либо отсутствующим данным. [4]
Что касается систематической предвзятости, как и другие метрики, альтметрики склонны к самоцитированию, игре и другим механизмам для повышения своего очевидного влияния, таким как выполнение спама цитирования в Википедии. Альтметрики можно подтасовать : например, можно купить лайки и упоминания. [56] Альтметрики может быть сложнее стандартизировать, чем цитирования. Одним из примеров является количество твитов, ссылающихся на статью, где число может сильно различаться в зависимости от того, как собираются твиты. [57] Кроме того, популярность в Интернете может не соответствовать научным ценностям. Некоторые популярные онлайн-цитирования могут быть далеки от ценности генерации дальнейших исследовательских открытий, в то время как некоторые теоретически обоснованные или ориентированные на меньшинства исследования большой научной важности могут быть маргинализированы в Интернете. [28] Например, самые популярные статьи в Твиттере по биомедицине в 2011 году были связаны с любопытным или забавным контентом, потенциальным применением в здравоохранении и катастрофами. [4] Altmetric заявляют, что у них есть системы для обнаружения, идентификации и исправления игр. [58] Наконец, недавние исследования показали, что Altmetrics воспроизводят гендерные предубеждения, обнаруженные в дисциплинарных публикациях и практиках цитирования: например, журнальные статьи, написанные исключительно женщинами-учеными, в среднем оцениваются на 27% ниже, чем статьи, написанные исключительно мужчинами. В то же время, это же исследование показывает, что 0 баллов внимания более вероятны для статей, написанных мужчинами. [59]
Altmetrics для более поздних статей могут быть выше из-за растущего использования социальной сети и потому, что статьи могут упоминаться в основном тогда, когда они опубликованы. [60] В результате, может быть несправедливо сравнивать оценки altmetrics статей, если они не были опубликованы в одно и то же время. Исследователи разработали тест знаков, чтобы избежать смещения использования поглощения, сравнивая метрики статьи с двумя статьями, опубликованными непосредственно до и после нее. [60]
Следует помнить, что метрики являются лишь одним из результатов отслеживания того, как распространяются и используются исследования. Альтметрики следует интерпретировать осторожно, чтобы преодолеть предвзятость. Еще более информативным, чем знание того, как часто цитируется статья, является то, какие статьи ее цитируют. Эта информация позволяет исследователям видеть, как их работа влияет на область (или нет). Поставщики метрик также обычно предоставляют доступ к информации, на основе которой были рассчитаны метрики. Например, Web of Science показывает, какие статьи цитируют, ImpactStory показывает, какие страницы Википедии ссылаются на статью, а CitedIn показывает, какие базы данных извлекли данные из статьи. [61]
Еще одна проблема альтметрик или любых метрик заключается в том, как университеты или учреждения используют метрики для ранжирования своих сотрудников, принятия решений о продвижении по службе или финансировании [62] , и цель должна быть ограничена измерением вовлеченности. [63]
Общий объем онлайн-исследований очень мал и различается в зависимости от дисциплин. [28] [4] Это явление может быть связано с использованием социальных сетей среди ученых. Опросы показали, что почти половина респондентов придерживались неоднозначного отношения к влиянию социальных сетей на академическое воздействие и никогда не объявляли о своей исследовательской работе в социальных сетях. [64] С изменением сдвига в открытой науке и использовании социальных сетей, более вероятно, что будут приняты последовательные альтметрики между дисциплинами и институтами.
Конкретные варианты использования и характеристики являются активной областью исследований в библиометрии , предоставляя столь необходимые данные для измерения влияния самих альтметрик. Публичная научная библиотека имеет коллекцию альтметрик [65] , а также Information Standards Quarterly и Aslib Journal of Information Management недавно опубликовали специальные выпуски по альтметрикам. [66] [67] Серия статей, в которых подробно рассматриваются альтметрики, была опубликована в конце 2015 года. [68] [69] [70]
Существуют и другие исследования, изучающие валидность одной альтметрики [4] [28] или проводящие сравнения на разных платформах. [60] Исследователи изучают корреляцию между альтметриками и традиционными цитированиями в качестве теста на валидность. Они предполагают, что положительная и значимая корреляция показывает точность альтметрик для измерения научного воздействия как цитирования. [60] Низкая корреляция (менее 0,30 [4] ) приводит к выводу, что альтметрики играют дополнительную роль в измерении научного воздействия, как в исследовании Ламбы (2020) [71], который изучил 2343 статьи, имеющие как альтметрические оценки внимания, так и цитирования, опубликованные 22 основными преподавателями политики здравоохранения в Гарвардской медицинской школе, и значимая сильная положительная корреляция (r> 0,4) наблюдалась между агрегированными ранжированными альтметрическими оценками внимания и ранжированными значениями цитирования/увеличения цитирования для всех преподавателей в исследовании. Однако остается нерешенным, какие альтметрики наиболее ценны и какая степень корреляции между двумя метриками оказывает более сильное влияние на измерение. Кроме того, сам тест на валидность также сталкивается с некоторыми техническими проблемами. Например, репликация сбора данных невозможна из-за мгновенно меняющихся алгоритмов поставщиков данных. [72]
Альтметрики — это изучение и использование нетрадиционных показателей научного воздействия, основанных на активности в веб-средах.
Альтметрики и метрики на уровне статьи иногда используются как взаимозаменяемые, но существуют важные различия: метрики на уровне статьи также включают данные о цитированиях и использовании;...
{{cite journal}}
: Цитировать журнал требует |journal=
( помощь ){{cite journal}}
: Цитировать журнал требует |journal=
( помощь )