Научное рецензирование или академическое рецензирование (также известное как рецензирование ) — это процесс рассмотрения черновой версии методов и результатов исследователя (обычно анонимно) экспертами (или «коллегами») в той же области. Рецензирование широко используется, чтобы помочь академическому издателю (то есть главному редактору , редакционной коллегии или программному комитету ) решить, следует ли принять работу, считать ее приемлемой с исправлениями или отклонить ее для официальной публикации в академическом издании . журнале , монографии или в материалах научной конференции . Если личности авторов не раскрываются друг другу, процедура называется двойным анонимным рецензированием.
Академическая рецензирование требует сообщества экспертов в определенной (и часто узко определенной) академической области , которые имеют квалификацию и способны выполнять достаточно беспристрастную рецензию. Беспристрастный обзор, особенно работ в менее узко определенных или междисциплинарных областях, может оказаться трудным, а значение (хорошее или плохое) идеи никогда не сможет получить широкое признание среди ее современников. Рецензирование обычно считается необходимым для академического качества и используется в большинстве крупных научных журналов. Тем не менее, рецензирование не предотвращает публикацию недействительных исследований, [1] и, поскольку экспериментально контролируемые исследования этого процесса трудно организовать, прямых доказательств того, что рецензирование улучшает качество опубликованных статей, недостаточно. [2]
Научная экспертная оценка подвергалась ряду критических замечаний, и на протяжении многих лет предлагались различные предложения по реформированию системы. Многие исследования подчеркивают проблемы, присущие процессу экспертной оценки. [3] Более того, Рагон и др., [4] показали, что существует низкая корреляция между результатами рецензирования и будущим влиянием, измеряемым цитированием. Брезис и Бируку также показывают, что процесс экспертной оценки не работает должным образом. Они подчеркивают, что рейтинги не являются надежными, например, смена рецензентов может оказать существенное влияние на результаты обзора. Два основных элемента влияют на предвзятость в коллегиальном процессе: [5]
Равноправный процесс также используется для принятия проектов. (Для проектов уровень принятия невелик и составляет от 1% до 20%, в среднем 10%. В европейских конкурсах H2020 уровень принятия составляет 1,8%). финансируется, поскольку инновационные проекты не имеют высокого рейтинга в существующем процессе экспертной оценки. Процесс рецензирования приводит к согласованности, т. е. к выбору менее спорных проектов и статей. Это может даже повлиять на тип предложений, которые будут предлагать ученые, поскольку ученым необходимо найти финансирование для своих исследований, как обсуждалось Мартином, 1997: [6] «Распространенное неофициальное мнение состоит в том, что легче получить средства для обычных проектов. Те, кто стремятся получить финансирование, вряд ли предложат радикальные или неортодоксальные проекты. Поскольку вы не знаете, кто будет судьями, лучше всего предположить, что они занимают промежуточную позицию. внедорожное применение безопаснее». [5]
Другие попытки реформировать процесс рецензирования исходят, среди прочего, из областей метанауки и журналистики . Реформаторы стремятся повысить надежность и эффективность процесса экспертной оценки и обеспечить ему научную основу. [7] [8] [9] Были проверены альтернативы общепринятым практикам рецензирования, [10] [11] в частности , открытое рецензирование , где комментарии видны читателям, как правило, с указанием личности рецензентов. также раскрыты, например, F1000 , eLife , BMJ и BioMed Central . [12] В случае с eLife рецензирование используется не для принятия решения о публикации статьи, а для оценки ее важности и надежности. [13] Аналогичным образом, признание и набор рецензентов по-прежнему остаются важной проблемой в области научных публикаций. [14]
Первая запись о редакционной рецензии перед публикацией относится к 1665 году Генри Ольденбургу , редактору-основателю «Философских трудов Королевского общества» Лондонского королевского общества . [15] [16] [17]
Первой рецензируемой публикацией, возможно, были « Медицинские очерки и наблюдения» , опубликованные Королевским обществом Эдинбурга в 1731 году. Современная система рецензирования возникла в результате этого процесса, имевшего место в 18 веке, [18] начали привлекать внешних рецензентов к работе. середине 19-го века, [19] и не стал обычным явлением до середины 20-го века. [20]
Рецензирование стало пробным камнем научного метода , но до конца XIX века часто осуществлялось непосредственно главным редактором или редакционной комиссией. [21] [22] [23] Редакторы научных журналов в то время принимали решения о публикации, не обращаясь за внешним мнением, то есть к внешней группе рецензентов, предоставляя авторитетным авторам свободу действий в своих журналистских усмотрениях. Например, четыре революционные статьи Альберта Эйнштейна Annus Mirabilis в номере журнала Annalen der Physik за 1905 год были рецензированы главным редактором журнала Максом Планком и его соредактором Вильгельмом Веном , будущими лауреатами Нобелевской премии. и вместе экспертов по темам этих статей. Гораздо позже Эйнштейн подверг резкой критике процесс внешнего рецензирования, заявив, что он не уполномочил главного редактора показывать свою рукопись «специалистам перед ее печатью», и сообщив ему, что он «опубликует статью в другом месте». — что он и сделал, а ведь ему позже пришлось отозвать публикацию. [24]
Хотя некоторые медицинские журналы начали систематически назначать внешних рецензентов, только с середины 20-го века эта практика получила широкое распространение, и внешние рецензенты получили некоторую известность в академических журналах, в том числе получили благодарность от авторов и редакторов. [21] [25] В редакционной статье журнала Nature в 2003 году говорилось, что в начале 20-го века «бремя доказывания обычно лежало на противниках, а не на сторонниках новых идей». [26] Сама природа ввела официальную рецензию только в 1967 году. [27] Такие журналы, как Science и American Journal of Medicine, в 1950-х и 1960-х годах все чаще полагались на внешних рецензентов, отчасти для того, чтобы уменьшить редакционную нагрузку. [25] В 20 веке экспертная оценка также стала обычным явлением при распределении финансирования науки. Этот процесс, судя по всему, развивался независимо от процесса редакционной рецензирования. [15] : 221
Годе [28] [ самостоятельный источник? ] представляет социологический взгляд на историю рецензирования, тщательно обращая внимание на то, что расследуется, в данном случае рецензирование, а не только рассматривая поверхностные или самоочевидные общие черты между инквизицией, цензурой и рецензированием журналов. Он основан на исторических исследованиях Гулда, [29] Бьяджоли, [30] Спайера, [23] и Рипа. [31] Первый Конгресс рецензирования состоялся в 1989 году. [32] Со временем доля статей, посвященных рецензированию, неуклонно снижалась, что позволяет предположить, что как область социологических исследований она была заменена более систематическими исследованиями предвзятости и ошибки. [2] Параллельно с определениями «общего опыта», основанными на изучении рецензирования как «заранее сконструированного процесса», некоторые социологи рассматривали рецензирование, не считая его заранее сконструированным. Хиршауэр предположил, что рецензирование журнала можно понимать как взаимную ответственность за суждения среди коллег. [33] Годе предположил, что рецензирование журнала можно понимать как социальную форму граничного суждения – определения того, что можно считать научным (или нет) в сравнении с всеобъемлющей системой знаний, и следовать предшествующим формам инквизиции и цензуры. [28] [ собственный источник? ]
С прагматической точки зрения рецензирование относится к работе, проделанной во время проверки представленных рукописей . Этот процесс поощряет авторов соответствовать принятым стандартам их дисциплины и уменьшает распространение нерелевантных выводов, необоснованных утверждений, неприемлемых интерпретаций и личных взглядов. Публикации, не прошедшие рецензирование, скорее всего, будут восприняты с подозрением со стороны ученых и специалистов. [ нужна цитата ] Работа, не рецензируемая, не способствует или вносит меньший вклад в академический кредит ученого (например, индекс Хирша ), хотя это во многом зависит от области.
[П]рэкспертиза в своей идеальной форме является одновременно и актом альтруизма, и актом инвестирования в продолжение научного начинания наших коллег. Вот почему так важно участвовать в вдумчивой экспертной оценке как ученому, и именно поэтому важно делать это хорошо, действуя не как привратник, а как коллега, вносящий вклад в создание знаний. Коллективная мудрость.
Анна Мари Роос , главный редактор журнала Notes and Records: the Royal Society Journal of the History of Science , 2022 г. [34]
Авторам и исследователям, индивидуально или в команде, трудно обнаружить каждую ошибку или недостаток в сложной работе. Это не обязательно отражается на тех, кого это касается, но потому, что в случае новой и, возможно, эклектичной темы возможность улучшения может быть более очевидной для человека, обладающего специальными знаниями или просто смотрящего на нее свежим взглядом. Таким образом, демонстрация работы другим увеличивает вероятность того, что слабые стороны будут выявлены и устранены. Как для грантового финансирования, так и для публикации в научном журнале обычно также требуется, чтобы тема была одновременно новой и существенной. [35] [36]
Решение о том, публиковать научную статью или нет, или о том, что следует изменить перед публикацией, в конечном итоге принимает издатель ( главный редактор или редколлегия ), которому была представлена рукопись. Аналогичным образом, решение о том, финансировать предлагаемый проект или нет, принимается должностным лицом финансирующего агентства. При принятии решения эти люди обычно опираются на мнение одного или нескольких рецензентов. В первую очередь это происходит по трем причинам :
Рецензенты часто анонимны и независимы . Однако некоторые рецензенты могут отказаться от своей анонимности, а в других ограниченных обстоятельствах, таких как рассмотрение официальной жалобы на рефери или постановления суда, может потребоваться раскрытие личности рецензента. Анонимность может быть односторонней или взаимной (одиночное или двойное слепое рецензирование). [ нужна цитата ]
Поскольку рецензенты обычно выбираются из числа экспертов в областях, обсуждаемых в статье, процесс рецензирования помогает исключить некоторые необоснованные или необоснованные утверждения из опубликованных исследований и знаний. Ученые будут читать опубликованные статьи, выходящие за рамки их ограниченной области детальных знаний, а затем в некоторой степени полагаться на процесс рецензирования, чтобы обеспечить надежные и заслуживающие доверия исследования, на которые они смогут опираться для последующих или связанных исследований. Серьезный скандал возникает, когда выясняется, что автор фальсифицировал исследование, включенное в статью, поскольку другие ученые и сама область исследования могли полагаться на недействительные исследования. [ нужна цитата ]
Для университетов США рецензирование книг перед публикацией является требованием для полноправного членства в Ассоциации американских университетских издательств . [37]
В случае предлагаемых публикаций издатель ( главный редактор или редакционная коллегия , часто с помощью соответствующих или ассоциированных редакторов) отправляет предварительные копии авторской работы или идей исследователям или ученым, которые являются экспертами в данной области (известные как «рецензенты» или «рецензенты»). В настоящее время общение обычно осуществляется по электронной почте или через веб-систему обработки рукописей, такую как ScholarOne , Scholastica или Open Journal Systems . В зависимости от области исследований и конкретного журнала на одну статью обычно насчитывается от одного до трех рецензентов. Например, Спрингер утверждает, что на каждую статью приходится два или три рецензента. [38]
Процесс рецензирования включает в себя три этапа: [39]
Редактор оценивает рукопись, чтобы решить, будет ли статья передана рецензентам журнала. На этом этапе многие статьи получают «отказ от рассмотрения», то есть редактор решает не передавать статью. Авторы могут получить или не получить объяснительное письмо.
Отклонение редакционных статей должно стать упрощенным процессом, позволяющим редакторам быстро избавиться от нежизнеспособных рукописей и предоставить авторам возможность найти более подходящий журнал. Например, редакторы журнала European Accounting Review задают каждую рукопись тремя вопросами, чтобы решить, будет ли рукопись передана рецензентам: 1) соответствует ли статья целям и объему журнала, 2) является ли содержание статьи (например, обзор литературы, методы , выводы) достаточны, и вносит ли статья достойный вклад в большую литературу, и 3) соответствует ли она формату и техническим характеристикам? Если «нет» на любой из этих вопросов, рукопись будет отклонена. [40]
Уровень отклонения редакционных материалов зависит от журнала. Например, в 2017 году исследователи Всемирного банка подсчитали процент отказов от нескольких журналов по мировой экономике; процент отказов от столов колебался от 21% ( Economic Lacea ) до 66% ( Журнал экономики развития ). [41] Американская психологическая ассоциация публикует показатели отказов для нескольких крупных публикаций в этой области, и хотя они не уточняют, является ли отказ до- или после-кабинетной оценкой, их цифры в 2016 году варьировались от низкого уровня в 49% до высокого 90%. [42]
Если статья не отклонена, редакторы отправляют рукопись рецензентам, выбранным с учетом их опыта и удаленности от авторов. На этом этапе рецензенты могут отклонить, принять без изменений (редко) [43] или поручить авторам внести изменения и отправить повторно.
Причины принятия статьи редакторами различаются, но Elsevier опубликовал статью, в которой три редактора взвешивают факторы, влияющие на принятие статьи. Эти факторы включают в себя: дает ли рукопись «новое понимание важного вопроса», будет ли она полезна для практиков, развивает или предлагает новую теорию, поднимает ли она новые вопросы, содержит ли соответствующие методы и выводы, представляет ли хороший аргумент, основанный на литературе, и рассказывает хорошую историю. Один редактор отмечает, что ему нравятся статьи, которые он «хотел бы написать» сам. [44]
Каждый из этих рецензентов возвращает редактору оценку работы, отмечая слабые места или проблемы, а также предлагая предложения по улучшению. Как правило, большинство комментариев рецензентов в конечном итоге видны автору, хотя рецензент также может отправлять комментарии « только для ваших глаз » издателю; научные журналы соблюдают это соглашение почти повсеместно. Затем редактор оценивает комментарии рецензентов, свое собственное мнение о рукописи, прежде чем передать решение автору (авторам), обычно с комментариями рецензентов. [45]
Оценки рецензентов обычно включают в себя явные рекомендации о том, что делать с рукописью или предложением, часто выбираемые из вариантов, предоставленных журналом или финансирующим агентством. Например, Nature рекомендует четыре варианта действий: [46]
Во время этого процесса роль судей носит консультативный характер. Редактор(ы), как правило, не обязан принимать мнение рецензентов, [47] хотя чаще всего он или она так и поступает. Более того, рецензенты научных публикаций не действуют как группа, не общаются друг с другом и обычно не знают личности или оценок друг друга. Сторонники утверждают, что если рецензенты статьи неизвестны друг другу, редактору(ам) будет легче проверить объективность рецензий. Обычно не требуется, чтобы рецензенты достигли консенсуса , вместо этого решение часто принимает редактор(ы) на основе своего лучшего суждения об аргументах.
В ситуациях, когда несколько рецензентов существенно расходятся во мнениях относительно качества работы, существует ряд стратегий принятия решения. Статья может быть полностью отклонена, или редактор может выбрать, к какому мнению рецензента следует обратиться авторам. [48] Когда издатель получает очень положительные и очень отрицательные отзывы на одну и ту же рукопись, редактор часто просит одну или несколько дополнительных рецензий в качестве решающего фактора. В качестве еще одной стратегии в случае ничьей издатель может предложить авторам ответить на критику рецензента и разрешить убедительное опровержение, чтобы разорвать ничью. Если издатель не чувствует себя уверенно, чтобы взвесить убедительность опровержения, он может запросить ответ у рецензента, вынесшего первоначальную критику. Редактор может передавать сообщения между авторами и рецензентом и обратно, фактически позволяя им обсуждать точку зрения. [49]
Однако даже в этих случаях издатели не позволяют нескольким рецензентам общаться друг с другом, хотя каждый рецензент часто может видеть более ранние комментарии, представленные другими рецензентами. Целью процесса явно является не достижение консенсуса или убеждение кого-либо изменить свое мнение, а предоставление материала для принятия обоснованного редакционного решения. Одно раннее исследование, посвященное разногласиям рецензентов, показало, что согласие было выше случайности, если не намного выше случайности, по шести из семи характеристик статьи (например, обзор литературы и окончательная рекомендация о публикации) [50] , но это исследование было небольшим, и оно было проведено. только в одном журнале. По крайней мере, одно исследование показало, что разногласия между рецензентами не являются обычным явлением, но это исследование также небольшое и посвящено только одному журналу. [51]
Традиционно рецензенты часто оставались анонимными для авторов, но этот стандарт меняется как со временем, так и в зависимости от научной области. В некоторых научных областях большинство журналов предлагают рецензенту возможность оставаться анонимным или нет, или рецензент может решить подписать рецензию, тем самым отказываясь от анонимности. Опубликованные статьи иногда содержат в разделе благодарностей анонимные или названные рецензенты, которые помогли улучшить статью. Например, журналы Nature предоставляют такую возможность. [46]
Иногда авторы могут исключать определенных рецензентов: одно исследование, проведенное в журнале Journal of Investigative Dermatology, показало, что исключение рецензентов удвоило шансы на принятие статьи. [52] Некоторым учёным эта идея не нравится, утверждая, что она искажает научный процесс. Другие утверждают, что это защищает от судей, которые в той или иной степени предвзяты (например, из-за профессионального соперничества, обид). [53] В некоторых случаях авторы могут выбирать рецензентов для своих рукописей. mSphere , журнал открытого доступа по микробиологии, перешел на эту модель. Главный редактор Майк Империале говорит, что этот процесс призван сократить время, необходимое для рецензирования статей, и позволить авторам выбирать наиболее подходящих рецензентов. [54] Но скандал 2015 года показывает, как такой выбор рецензентов может способствовать созданию мошеннических рецензий. Поддельные обзоры были отправлены в Журнал ренин-ангиотензин-альдостероновой системы от имени рецензентов, рекомендованных автором, в результате чего журнал исключил эту опцию. [55]
Если рукопись не была отклонена при рецензировании, она возвращается авторам на доработку. На этом этапе авторы решают проблемы, поднятые рецензентами. Уильям Стаффорд Ноубл предлагает десять правил ответа рецензентам. Его правила включают: [56]
В издательстве журнала или книги задача выбора рецензентов обычно возлагается на редактора . [57] Когда рукопись поступает, редактор запрашивает рецензии у ученых или других экспертов, которые, возможно, уже выразили или не выразили готовность рецензировать этот журнал или книжный отдел. Грантирующие агентства обычно набирают комиссию или комитет рецензентов до поступления заявок. [58]
Рецензенты обязаны информировать редактора о любом конфликте интересов , который может возникнуть. Журналы или отдельные редакторы могут предложить авторам рукописи назвать людей, которые, по их мнению, имеют право рецензировать их работу. Для некоторых журналов это является обязательным требованием. Авторам иногда также предоставляется возможность назвать естественных кандидатов, которые должны быть дисквалифицированы , и в этом случае их могут попросить предоставить обоснование (обычно выражающееся в виде конфликта интересов). [ нужна цитата ]
Редакторы просят авторов внести свой вклад при выборе рецензентов, поскольку академические статьи обычно очень специализированы. Редакторы часто курируют множество специальностей и не могут быть экспертами по всем из них. Но после того, как редактор выбирает рецензентов из числа кандидатов, он обычно обязан не раскрывать личности рецензентов авторам, а в научных журналах - друг другу. Политика по таким вопросам различается в зависимости от академических дисциплин. [ нужна цитата ] Одна из трудностей, связанных с некоторыми рукописями, заключается в том, что может быть мало ученых, которые действительно могут считаться экспертами, людей, которые сами проделали работу, подобную той, что рассматривается. Это может помешать достижению целей анонимности рецензента и предотвращения конфликта интересов. Низкопрестижные или местные журналы и грантовые агентства, которые выделяют мало денег, особенно испытывают трудности с привлечением экспертов. [ нужна цитата ]
Потенциальным препятствием при наборе судей является то, что им обычно не платят, в основном потому, что это само по себе может создать конфликт интересов . Кроме того, рецензирование отнимает время у их основной деятельности, например, собственных исследований. К преимуществу потенциального рекрутера, большинство потенциальных рецензентов — это сами авторы или, по крайней мере, читатели, которые знают, что система публикаций требует, чтобы эксперты жертвовали своим временем. Работа рефери может даже быть условием получения гранта или членства в профессиональной ассоциации. [59] В целом, из-за бурного роста электронной информации и непропорционального увеличения числа журналов по сравнению с постоянным увеличением числа ученых возник кризис рецензирования. Существующая в настоящее время система не отвечает современным потребностям и неизбежно погибнет, если не будут проведены срочные радикальные реформы. Академическая система должна произвести революцию и установить строгие критерии экспертной оценки, необходимые для продвижения по службе и пребывания в должности, на основе установленных универсальных показателей. То есть вознаграждайте рецензентов в академическом плане так же, как вознаграждают исследователей, чего в настоящее время нет. Все остальные стимулы потерпели неудачу. [59]
Рецензенты имеют возможность предотвратить публикацию работ, не соответствующих отраслевым стандартам, что предполагает определенную ответственность. Редакторы имеют особое преимущество при приеме на работу ученого, если они контролировали публикацию его или ее работы или если ученый надеется в будущем представить рукописи издательству этого редактора. Грантовые агентства также склонны искать судей среди своих нынешних или бывших получателей грантов. [ нужна цитата ]
Peerage of Science представляла собой независимую службу и сообщество, в котором набор рецензентов происходит посредством открытого взаимодействия: авторы отправляют свою рукопись в службу, где она становится доступной для любого стороннего ученого, а «проверенные пользователи» сами выбирают, что они хотят рецензировать. Мотивация к участию в качестве рецензента исходит от системы репутации , в которой качество рецензирующей работы оценивается и оценивается другими пользователями, а также учитывается в профилях пользователей. Peerage of Science не взимает никаких гонораров с ученых и не платит рецензентам. Однако издатели-участники платят за использование услуги, получают доступ ко всем текущим процессам и возможность делать предложения о публикации авторам. [ нужна цитата ]
При использовании услуг независимого рецензирования автор обычно сохраняет за собой право на работу на протяжении всего процесса рецензирования и может выбрать наиболее подходящий журнал для отправки работы. [60] [61] Службы рецензирования также могут предоставить советы или рекомендации по наиболее подходящим журналам для работы. Журналы по-прежнему могут захотеть провести независимое рецензирование без потенциального конфликта интересов, который может вызвать финансовое возмещение, или без риска того, что автор заключил контракт с несколькими услугами рецензирования, но предлагает только наиболее выгодную из них. [ нужна цитата ]
Альтернативная или дополнительная система рецензирования предполагает оплату автора за его проведение.Примером такого поставщика услуг был Rubriq (2013–2017), который для каждой работы назначал рецензентов, получавших финансовое вознаграждение за свои усилия. [62] [63]
Для большинства научных публикаций личность рецензентов сохраняется анонимной (это также называется «слепым рецензированием»). Альтернативное рецензирование предполагает раскрытие личности рецензентов. Некоторые рецензенты предпочитают отказаться от своего права на анонимность, даже если форматом журнала по умолчанию является слепое рецензирование.
При анонимном рецензировании рецензенты известны редактору журнала или организатору конференции, но их имена не сообщаются автору статьи. В некоторых случаях личность автора также может быть анонимизирована для процесса рецензирования, при этом идентификационная информация удаляется из документа перед рецензированием. Система предназначена для уменьшения или устранения предвзятости. [23]
Некоторые эксперты предложили процедуры слепого обзора для рассмотрения спорных тем исследований. [64]
В двойном слепом рецензировании , которое было разработано социологическими журналами в 1950-х годах [ 65] и остается более распространенным в социальных и гуманитарных науках, чем в естественных науках, личность авторов скрывается от рецензентов. (« ослепленный »), и наоборот, чтобы знание авторства или опасения по поводу неодобрения со стороны автора не повлияли на их обзор. [66] Критики процесса двойного слепого рецензирования отмечают, что, несмотря на любые редакционные усилия по обеспечению анонимности, процесс часто не обеспечивает этого, поскольку определенные подходы, методы, стили письма, обозначения и т. д. указывают на определенную группу людей в исследовательском потоке и даже конкретному человеку. [67] [68]
Во многих областях « большой науки » общедоступные графики работы основного оборудования, такого как телескопы или синхротроны , сделают имена авторов очевидными для любого, кто захочет их найти. Сторонники двойного слепого обзора утверждают, что он работает не хуже, чем одинарный слепой, и что он создает ощущение справедливости и равенства в академическом финансировании и публикациях. [69] Простое слепое рецензирование сильно зависит от доброй воли участников, но не в большей степени, чем двойное слепое рецензирование с легко идентифицируемыми авторами.
В качестве альтернативы одиночному и двойному слепому рецензированию авторам и рецензентам рекомендуется заявлять о конфликте интересов, когда имена авторов, а иногда и рецензентов, известны друг другу. Когда сообщается о конфликтах, рецензенту, находящемуся в конфликте, может быть запрещено рецензировать и обсуждать рукопись, или вместо этого его или ее рецензия может быть интерпретирована с учетом заявленного конфликта; последний вариант чаще используется, когда конфликт интересов незначителен, например, предыдущие профессиональные связи или дальние семейные отношения. Стимул рецензентов к заявлению о конфликте интересов является вопросом профессиональной этики и личной честности. Даже если рецензии не являются публичными, они по-прежнему фиксируются, и авторитет рецензента зависит от того, как он представляет себя среди коллег. Некоторые журналы по разработке программного обеспечения, такие как IEEE Transactions on Software Engineering , используют неслепые обзоры, сообщая редакторам о конфликтах интересов как авторов, так и рецензентов. [ нужна цитата ]
Более строгий стандарт подотчетности известен как аудит . Поскольку рецензентам не платят, нельзя ожидать, что они потратят на проверку столько времени и усилий, сколько требуется для аудита. Поэтому академические журналы, такие как Science , такие организации, как Американский геофизический союз , и такие агентства, как Национальные институты здравоохранения и Национальный научный фонд, поддерживают и архивируют научные данные и методы на случай, если другой исследователь захочет повторить или проверить исследование после публикация. [70] [71] [72]
Традиционное анонимное рецензирование подвергалось критике за отсутствие подотчетности, возможность злоупотреблений со стороны рецензентов или тех, кто управляет процессом рецензирования (то есть редакторов журналов), [ 73] его возможную предвзятость и его непоследовательность, [74] ] наряду с другими недостатками. [75] [76] Евгений Кунин , старший исследователь Национального центра биотехнологической информации , утверждает, что система имеет «хорошо известные недуги» и выступает за « открытую экспертную оценку ». [77]
Открытое рецензирование — это различные возможные модификации традиционного процесса научного рецензирования. Три наиболее распространенные модификации, к которым применяется этот термин: [78]
Процесс рецензирования не ограничивается процессом публикации, управляемым академическими журналами. В частности, некоторые формы рецензирования могут проводиться до подачи статьи в журнал и/или после ее публикации в журнале.
Рукописи обычно проверяются коллегами перед отправкой, и если рукопись загружается на серверы препринтов, такие как ArXiv , BioRxiv или SSRN , исследователи могут читать и комментировать рукопись. Практика загрузки на серверы препринтов и активность обсуждения во многом зависят от области [82] [83] и позволяют проводить открытое рецензирование перед публикацией . Преимуществом этого метода является скорость и прозрачность процесса рассмотрения. Любой может оставить отзыв, обычно в форме комментариев и обычно не анонимно. Эти комментарии также являются публичными, и на них можно ответить, поэтому общение автора и рецензента не ограничивается типичными 2–4 раундами обмена мнениями в традиционных публикациях. Авторы могут включать комментарии широкого круга людей вместо отзывов обычно 3–4 рецензентов. Недостаток заключается в том, что гораздо большее количество статей представляется сообществу без каких-либо гарантий качества.
После публикации рукописи процесс рецензирования продолжается по мере чтения публикаций, известный как рецензирование после публикации . Читатели часто отправляют письма редактору журнала или переписываются с редактором через журнальный онлайн-клуб. Таким образом, все «коллеги» могут предлагать обзоры и критику опубликованной литературы. Введение во многих журналах практики « epub перед печатью» сделало возможным одновременную публикацию нежелательных писем в редакцию вместе с оригинальной статьей в печатном выпуске. [ нужна цитата ]
Разновидностью этой темы являются открытые экспертные комментарии , при которых к опубликованным статьям запрашиваются комментарии специалистов, а авторам предлагается ответить. Журналы, использующие этот процесс, запрашивают и публикуют неанонимные комментарии к «целевой статье» вместе с самой статьей и, естественно, с оригинальными ответами авторов. Открытые экспертные комментарии были впервые реализованы антропологом Солом Таксом , который основал журнал Current Anthropology в 1957 году. [84] Журнал Behavioral and Brain Sciences , издаваемый издательством Cambridge University Press , был основан Стеваном Харнадом в 1978 году [85] и создан по образцу Функция открытых комментариев коллег Current Anthropology . [86] Психология (1990–2002) [87] была основана на той же функции, но на этот раз реализована онлайн. С 2016 года открытые экспертные комментарии также предоставляет журнал Animal Sentience .
Помимо журналов, размещающих обзоры собственных статей, существуют также внешние независимые веб-сайты, посвященные рецензированию после публикации, такие как PubPeer , который позволяет анонимно комментировать опубликованную литературу и побуждает авторов отвечать на эти комментарии. [88] Было предложено также редакционно рассматривать обзоры с этих сайтов после публикации. [89] Мегажурналы F1000Research и ScienceOpen открыто публикуют как имена рецензентов, так и отчет рецензента рядом со статьей.
Некоторые журналы используют рецензирование после публикации в качестве формального метода рецензирования вместо рецензирования перед публикацией. Впервые это было представлено в 2001 году организацией « Атмосферная химия и физика» (ACP). [90] Совсем недавно F1000Research , Qeios и ScienceOpen были запущены как мегажурналы с проверкой после публикации в качестве формального метода проверки. [91] [92] [93] В ACP, F1000Research и Qeios рецензенты официально приглашаются, как и в журналах, посвященных предварительному обзору публикаций. Статьи, прошедшие рецензирование в этих трех журналах, включаются во внешние научные базы данных. [94] [95]
В 2006 году небольшая группа британских академических психологов запустила Philica , мгновенный онлайн-журнал Journal of Everything, чтобы исправить многие из того, что они считали проблемами традиционного рецензирования. Все присланные статьи публикуются немедленно и могут быть впоследствии просмотрены. Любой исследователь, желающий написать рецензию на статью, может это сделать, и рецензии анонимны. Рецензии отображаются в конце каждой статьи и используются для того, чтобы дать читателю критические замечания или рекомендации по поводу работы, а не для того, чтобы решить, будет ли она опубликована или нет. Это означает, что рецензенты не могут подавлять идеи, если они с ними не согласны. Читатели используют обзоры, чтобы ориентироваться при чтении, и легко определить особенно популярные или непопулярные произведения. [ нужна цитата ]
Недавние исследования привлекли внимание к использованию технологий социальных сетей и научных блогов в качестве средства неформальной экспертной оценки после публикации, как в случае с полемикой вокруг #arseniclife (или GFAJ -1 ). [96] В декабре 2010 года статья, опубликованная в Scienceexpress (предварительная версия журнала Science ), вызвала как волнение, так и скептицизм, поскольку ее авторы – во главе с астробиологом НАСА Фелисой Вулф-Саймон – утверждали, что открыли и культивировали определенный бактерии, которые могли бы заменить фосфор мышьяком в физиологических строительных блоках. На момент публикации статьи НАСА опубликовало заявления для прессы, предполагающие, что это открытие повлияет на поиски внеземной жизни, что вызвало ажиотаж в Твиттере под хэштегом #arseniclife, а также критику со стороны коллег-экспертов, которые выразили скептицизм в своих личных блогах. [97] В конечном итоге, разногласия вокруг этой статьи привлекли внимание средств массовой информации, [98] и одной из самых ярых научных критиков – Розмари Редфилд – официально опубликованной в июле 2012 года [99] относительно неудачной попытки ее и ее коллег повторить работу ученых НАСА. 'оригинальные выводы.
Исследователи, проследив за влиянием дела #arseniclife на дискуссии в социальных сетях и процессы экспертной оценки, пришли к следующему выводу:
Наши результаты показывают, что интерактивные технологии онлайн-коммуникаций могут позволить членам более широкого научного сообщества выполнять роль рецензентов журналов для легализации научной информации после ее прохождения по формальным каналам рецензирования. Кроме того, с помощью этих технологий разнообразная аудитория может следить за научными спорами и наблюдать за неформальным процессом рецензирования после публикации. (с. 946) [96]
Исследования, которые сообщают о положительных или статистически значимых результатах, с гораздо большей вероятностью будут опубликованы, чем те, которые этого не делают . Противодействие этой предвзятости в отношении позитива состоит в том, чтобы скрыть или сделать недоступными результаты, что делает принятие журналов более похожим на агентства по научным грантам , рассматривающие предложения по исследованиям. Версии включают в себя:
Следующие журналы использовали рецензирование без учета результатов или предварительно принятые статьи:
Расширенная экспертная оценка — это процесс включения людей и групп с опытом, выходящим за рамки опыта работающих ученых, в процессы обеспечения качества исследований. Если проводить это систематически, это может привести к более надежным или применимым результатам, чем процесс рецензирования, проводимый исключительно учеными. [133]
Различные биомедицинские редакторы подвергли критике рецензирование. [134] [135] Кроме того, Кокрейновский обзор обнаружил мало эмпирических доказательств того, что экспертная оценка обеспечивает качество биомедицинских исследований, [136] в то время как второй систематический обзор и метаанализ выявили необходимость научно обоснованной экспертной оценки в биомедицине, учитывая недостаточная оценка мер, направленных на улучшение этого процесса. [137]
Для постороннего процесс анонимного рецензирования перед публикацией непрозрачен. Некоторые журналы обвиняются в том, что они не проводят строгое рецензирование с целью облегчить расширение своей клиентской базы, особенно в журналах, где авторы платят гонорар перед публикацией. [138] Ричард Смит, доктор медицинских наук, бывший редактор Британского медицинского журнала , заявил, что рецензирование «неэффективно, в основном представляет собой лотерею, антиинновационно, медленно, дорого, расточительно тратит научное время, неэффективно, легко злоупотреблять, склонно к предвзятости». , неспособны обнаружить мошенничество и не имеют отношения к делу; Несколько исследований показали, что рецензирование предвзято направлено против рецензентов из провинций и стран с низким и средним уровнем дохода; Многие журналы публикуют месяцы и даже годы, и этот процесс тратит время исследователей. стоимость, Research Information Network оценила глобальную стоимость экспертной оценки в 1,9 миллиарда фунтов стерлингов в 2008 году». [139]
Кроме того, австралийская группа инновационных исследовательских университетов (коалиция семи комплексных университетов, приверженных инклюзивному совершенству в преподавании, обучении и исследованиях в Австралии) обнаружила, что «экспертная оценка ставит исследователей в невыгодное положение в начале их карьеры, когда они полагаются на конкурсные гранты для покрывают их зарплату, а неудачные заявки на финансирование часто означают конец исследовательской идеи». [140]
Продолжается дискуссия о кризисе экспертной оценки. В 2022 году Inside Higher Ed сообщила о серьезной нехватке ученых для проверки представленных статей и более серьезных структурных проблемах, усугубленных пандемией COVID-19. [141]
Медицинский исследователь Джон Иоаннидис утверждает, что, поскольку экзамены и другие тесты, которые люди сдают на пути от «непрофессионала» к «эксперту», сосредоточены на том, чтобы вовремя и в соответствии со списком ответов ответить на вопросы, а не на проведении точных разграничений ( последний из которых был бы неузнаваем для экспертов с более низкой когнитивной точностью), существует столько же индивидуальных различий в способности отличать причинно-следственную связь от корреляции среди «экспертов», как и среди «непрофессионалов». Иоаннидис утверждает, что в результате научная рецензирование, проводимая многими «экспертами», пропускает только статьи, которые понятны на широком диапазоне уровней когнитивной точности, включая очень низкие, что приводит к смещению публикаций в сторону статей, которые выводят причинно-следственную связь из корреляции, в то же время неправильно маркируя статьи, которые считают это различие «некомпетентной переоценкой своих способностей» со стороны авторов, поскольку некоторые из рецензирующих «экспертов» когнитивно неспособны отличить это различие от предполагаемой рационализации конкретных выводов. Иоаннидис утверждает, что это делает рецензирование причиной выборочной публикации ложных результатов исследований, в то же время прекращая публикацию их строгой критики, и что дальнейшая рецензия после публикации повторяет ту же предвзятость, выборочно отказываясь от нескольких строгих статей, которые, возможно, сделали это. посредством первоначального рецензирования перед публикацией, оставляя при этом в печати низкопробные материалы, которые путают корреляцию и причинно-следственную связь. [142]
Начиная с 18 века, исследователи различными способами рецензировали рукописи перед их публикацией. [143] [144] Основная цель этой практики — повысить актуальность и точность научных дискуссий. Несмотря на то, что эксперты часто критикуют экспертную оценку по ряду причин, этот процесс по-прежнему часто считается «золотым стандартом» науки. [145] Однако иногда экспертная оценка одобряет исследования, которые позже оказываются ошибочными, и редко до публикации обнаруживаются обманчивые или фальсифицированные результаты. [146] [147] Таким образом, кажется, существует элемент разногласия между лежащей в основе идеологией и практикой экспертной оценки. Не имея возможности эффективно сообщить о том, что рецензирование несовершенно, до широкой общественности доносится сообщение о том, что исследования, опубликованные в рецензируемых журналах, «правдивы» и что рецензирование защищает литературу от ошибочной науки. В отношении многих элементов экспертной оценки существует ряд устоявшихся критических замечаний. [148] [149] [150] Ниже мы описываем случаи более широкого воздействия, которое несоответствующая рецензирование может оказать на общественное понимание научной литературы.
Множество примеров из разных областей науки показывают, что ученые повысили важность экспертной оценки для исследований, которые были сомнительными или испорченными. Например, отрицатели изменения климата опубликовали исследования в журнале «Энергия и окружающая среда» , пытаясь подорвать массив исследований, показывающих, как деятельность человека влияет на климат Земли. Политики в Соединенных Штатах, отвергающие устоявшуюся науку об изменении климата, затем несколько раз цитировали этот журнал в своих выступлениях и отчетах. [151]
Иногда экспертную оценку представляли как процесс, организованный для достижения предвзятого результата. The New York Times получила доступ к конфиденциальным документам экспертной оценки исследований, спонсируемых Национальной футбольной лигой (НФЛ), которые были названы научным доказательством того, что травмы головного мозга не причиняют долгосрочного вреда игрокам. [152] В ходе рецензирования авторы исследования заявили, что все игроки НФЛ участвовали в исследовании. Это утверждение журналисты сочли ложным, изучив базу данных, использованную для исследования. Более того, The Times отметила, что НФЛ стремилась узаконить методы и выводы исследований, ссылаясь на «строгий, конфиденциальный процесс рецензирования», несмотря на доказательства того, что некоторые рецензенты, казалось, «отчаялись» остановить их публикацию. Недавние исследования также показали, что широкомасштабное финансирование публикуемых медицинских исследований промышленностью часто остается незаявленным, и такие конфликты интересов не рассматриваются должным образом в ходе рецензирования . известны личности авторов. [155]
Еще одна проблема, которую не удается выявить при рецензировании, — это написание статей — процесс, при котором компании пишут статьи для ученых, которые затем публикуют их в журналах, иногда с небольшими изменениями или вообще без них. [156] Эти исследования затем могут быть использованы в политических, нормативных и маркетинговых целях. В 2010 году Финансовый комитет Сената США опубликовал отчет, в котором выяснилось, что эта практика широко распространена, что она искажает научную литературу и увеличивает количество рецептов. [157] Призрачные статьи появились в десятках журналов с участием профессоров нескольких университетов. [158]
Точно так же, как эксперты в определенной области лучше понимают ценность статей, опубликованных в их области, считается, что ученые лучше понимают ценность опубликованных статей, чем широкая общественность, и рассматривают рецензирование как человеческий процесс, в котором участвуют люди. недостатки, [159] и что «несмотря на его ограниченность, он нам нужен. Это все, что у нас есть, и трудно представить, как мы обходились бы без него». [160] Но эти тонкости упускаются из виду широкой публикой, которая часто вводится в заблуждение, полагая, что публикация в журнале с рецензированием является «золотым стандартом» и может ошибочно приравнивать опубликованные исследования к истине. [159] Таким образом, необходимо уделять больше внимания тому, как экспертная оценка и результаты рецензируемых исследований доводятся до неспециализированной аудитории; особенно в то время, когда появляется ряд технических изменений и более глубокое понимание сложностей экспертной оценки. [161] [162] [163] [164] Это будет необходимо, поскольку системе научных публикаций придется столкнуться с более широкими проблемами, такими как опровержения [147] [165] [166] и «кризисы» репликации или воспроизводимости. [167] [168] [169]
Рецензирование часто считается неотъемлемой частью научного дискурса в той или иной форме. Предполагается, что его контролирующая роль необходима для поддержания качества научной литературы [170] [171] и предотвращения риска получения ненадежных результатов, неспособности отделить сигнал от шума и замедления научного прогресса. [172] [173]
Недостатки экспертной оценки были встречены призывами к еще более жесткой фильтрации и усилению контроля. Распространенным аргументом в пользу таких инициатив является убеждение, что этот фильтр необходим для поддержания целостности научной литературы. [174] [175]
Призывы к усилению надзора имеют как минимум два последствия, противоречащие тому, что, как известно, является истинной наукой. [159]
Другие утверждают [159] , что авторы более всего заинтересованы в качестве того или иного произведения. Только авторы могли обладать, как выразился Фейнман (1974) [176] , «дополнительным типом честности, выходящим за рамки того, чтобы не лгать, а изо всех сил стараться показать, как вы, возможно, ошибаетесь, и который вам следует иметь, действуя как ученый." Во всяком случае, нынешний процесс экспертной оценки и академическая система могут наказать или, по крайней мере, не стимулировать такую честность.
Вместо этого доверие, обеспечиваемое ярлыком «рецензируемого», может уменьшить то, что Фейнман называет культурой сомнения, необходимой науке для осуществления самокорректирующегося процесса поиска истины. [177] Последствия этого можно увидеть в продолжающемся кризисе репликации , мистификациях и широко распространенном возмущении по поводу неэффективности нынешней системы. [148] [143] Распространено мнение, что ответом является усиление надзора, поскольку рецензенты вовсе не лишены скептицизма. Но проблема не в скептицизме, разделяемом немногими избранными, которые определяют, пройдет ли статья через фильтр. Это подтверждение и сопровождающее его отсутствие скептицизма, которое приходит потом. [178] И здесь усиление надзора только усиливает впечатление, что рецензирование обеспечивает качество, тем самым еще больше уменьшая культуру сомнений и противодействуя духу научного исследования. [179]
Качественные исследования – даже некоторые из наших самых фундаментальных научных открытий – возникли столетия назад, задолго до того, как экспертная оценка приняла свою нынешнюю форму. [143] [180] [144] Какая бы рецензия ни существовала столетия назад, она приняла другую форму, чем в наше время, без влияния крупных коммерческих издательских компаний или широко распространенной культуры «публикуй или исчезни» . [180] Хотя в первоначальной концепции это часто было трудоемкой и трудоемкой задачей, исследователи, тем не менее, проводили рецензирование не из-за обязательств, а из-за обязанности поддерживать целостность своей собственной науки. Им удалось сделать это, по большей части, без помощи централизованных журналов, редакторов или какого-либо формализованного или институционализированного процесса. Сторонники современных технологий утверждают [159] , что они позволяют мгновенно общаться с учеными по всему миру, облегчают такой научный обмен и возвращают рецензирование в более чистую научную форму как дискурс, в котором исследователи взаимодействуют друг с другом, чтобы лучше прояснять, понимать и сообщать свои идеи. [162] [181]
Такая современная технология включает размещение результатов на серверах препринтов , предварительную регистрацию исследований, открытое рецензирование и другие открытые научные практики. [168] [182] [183] Во всех этих инициативах роль контроля доступа остается заметной, как если бы это была необходимая особенность всей научной коммуникации, но критики утверждают, [150] что правильная реализация в реальных условиях могла бы проверить и опровергнуть это предположение; продемонстрировать стремление исследователей к большему, чем могут предложить традиционные журналы; показывают, что исследователям можно поручить осуществлять собственный контроль качества независимо от рецензий в журналах. Джон Теннант также утверждает, что протесты по поводу неэффективности традиционных журналов основаны на их неспособности обеспечить достаточно строгий контроль и передаче критического мышления скрытому и плохо понимаемому процессу. Таким образом, предположение о том, что журналы и рецензирование необходимы для защиты научной честности, похоже, подрывает сами основы научных исследований. [159]
Чтобы проверить гипотезу о том, что фильтрация действительно не нужна для контроля качества, необходимо пересмотреть многие традиционные методы публикации, перепрофилировать редакционные коллегии, если не расформировать их, а авторам предоставить контроль над рецензированием своих собственных работ. Возложение на авторов ответственности за собственное рецензирование рассматривается как преследующее двойную цель. [159] С одной стороны, это устраняет присвоение качества в рамках традиционной системы, тем самым устраняя престиж, связанный с простым актом публикации. Возможно, как ни парадоксально, устранение этого барьера может на самом деле привести к повышению качества публикуемых работ, поскольку оно устраняет репутацию публикации ради самой публикации. С другой стороны, читатели знают, что фильтра не существует, поэтому они должны интерпретировать все, что читают, со здоровой дозой скептицизма, тем самым естественным образом восстанавливая культуру сомнения в научной практике. [184] [185] [186]
Помимо опасений по поводу качества работ, проводимых исследователями из лучших побуждений, существуют опасения, что по-настоящему открытая система позволит наполнять литературу мусором и пропагандой теми, кто заинтересован в определенных проблемах. Контраргумент заключается в том, что традиционная модель рецензирования умаляет здоровый скептицизм, который является отличительной чертой научных исследований, и, таким образом, придает доверие подрывным попыткам проникнуть в литературу. [159] Разрешение публикации такого «мусора» может сделать отдельные статьи менее надежными, но сделать литературу в целом более надежной, способствуя «культуре сомнения». [184]
Посредничество редакторов и рецензентов между авторами и читателями может позволить посредникам действовать как привратники . [187] Некоторые социологи науки утверждают, что рецензирование делает возможность публикации подверженной контролю со стороны элиты и личной зависти. [188] Процесс экспертной оценки иногда может препятствовать прогрессу и может быть предвзятым в отношении новизны. [26] [189] Лингвистический анализ отчетов о проверке предполагает, что рецензенты сосредотачиваются на отклонении заявок путем поиска слабых мест, а не на поиске новаторских идей с высоким риском и высокой выгодой, которые могут содержаться в предложении. [190] Рецензенты склонны особенно критично относиться к выводам, противоречащим их собственным взглядам , [191] [192] и снисходительно относиться к тем, которые им соответствуют. В то же время авторитетные ученые с большей вероятностью, чем другие, будут востребованы в качестве рецензентов, особенно престижные журналы/издатели. В результате идеи, которые гармонируют с мнениями признанных экспертов, с большей вероятностью увидят печать и появятся в ведущих журналах, чем идеи иконоборчества или революционные идеи. Это согласуется с известными наблюдениями Томаса Куна относительно научных революций . [193] Была создана теоретическая модель, моделирование которой предполагает, что экспертная оценка и сверхконкурентное финансирование исследований способствуют монополизации общественного мнения. [194]
Критики традиционного анонимного рецензирования утверждают, что оно лишено ответственности, может привести к злоупотреблениям со стороны рецензентов, а также может быть предвзятым и непоследовательным. [76] [74] [195]
Также высказывались предположения о гендерной предвзятости при рецензировании: авторы-мужчины, скорее всего, получат более благосклонное отношение. [196] Однако исследование 2021 года не обнаружило никаких доказательств такой предвзятости (и обнаружило, что в некоторых отношениях к авторам-женщинам относились более благосклонно). [197] [198] [199]
Большинство академических издателей не выплачивают финансовую компенсацию рецензентам за их участие в процессе рецензирования, что подвергается критике со стороны академического сообщества. [200] В то время как некоторые издатели утверждают, что платить рецензентам экономически нецелесообразно, [200] некоторые журналы начали платить рецензентам через такие платформы, как Research Square, когда они не могут получать бесплатные рецензии. Другие издатели, такие как Advances.in, сделали оплату рецензентов неотъемлемой частью своей бизнес-модели. [201]
Некоторые критики журналов открытого доступа (ОД) утверждают, что, по сравнению с традиционными журналами по подписке, журналы открытого доступа могут использовать некачественную или менее формальную практику рецензирования, и, как следствие, качество научной работы в таких журналах пострадает. [202] [ ненадежный источник? ] В исследовании, опубликованном в 2012 году, эта гипотеза была проверена путем оценки относительного «влияния» (с использованием подсчета цитирования) статей, опубликованных в журналах с открытым доступом и по подписке, на том основании, что члены научного сообщества, по-видимому, с меньшей вероятностью будут цитировать некачественная работа, и поэтому количество цитирований может служить одним из индикаторов того, действительно ли формат журнала влияет на рецензирование и качество опубликованных научных исследований. [203] В конечном итоге это исследование пришло к выводу, что «журналы открытого доступа, индексируемые в Web of Science и/или Scopus, приближаются к тому же научному воздействию и качеству, что и журналы по подписке, особенно в области биомедицины и для журналов, финансируемых за счет платы за обработку статей», и, следовательно, авторы утверждают, что что «у авторов нет причин не публиковаться в журналах открытого доступа только из-за ярлыка «открытого доступа».
Рецензирование не проходит, если рецензируемая статья содержит фундаментальные ошибки, которые подрывают хотя бы один из ее основных выводов и которые могли бы быть выявлены более внимательными рецензентами. Во многих журналах нет процедуры реагирования на неудачи в рецензировании, кроме публикации писем в редакцию. [204] Рецензирование в научных журналах предполагает, что рецензируемая статья была подготовлена добросовестно. Этот процесс иногда обнаруживает мошенничество, но не предназначен для этого. [205] Если рецензирование не удалось и статья публикуется с поддельными или иным образом невоспроизводимыми данными, статья может быть отозвана . Эксперимент 1998 года по рецензированию вымышленной рукописи показал, что рецензенты не смогли обнаружить некоторые ошибки в рукописи, и большинство рецензентов могут не заметить, что выводы статьи не подтверждаются ее результатами. [206]
Были случаи, когда предполагалось, что экспертная оценка будет проведена, но на самом деле ее не было; это было задокументировано в некоторых хищнических журналах открытого доступа (например, в деле «Кто боится рецензирования? ») или в случае спонсируемых журналов Elsevier . [207]
В ноябре 2014 года статья в журнале Nature показала, что некоторые ученые отправляли в журналы поддельные контактные данные рекомендованных рецензентов, так что, если издатель связывался с рекомендованным рецензентом, они были первоначальными авторами, рецензирующими свою работу под вымышленным именем. [208] Комитет по публикационной этике выступил с заявлением, предупреждающим о мошенничестве. [209] В марте 2015 г. BioMed Central отозвал 43 статьи [210] , а Springer отозвал 64 статьи в 10 журналах в августе 2015 г. [211] Журнал «Tumor Biology» — еще один пример мошенничества с рецензированием. [207]
В 2020 году Журнал исследований наночастиц стал жертвой «организованной мошеннической сети редакторов», которая выдавала себя за уважаемых ученых, создала тематический выпуск и опубликовала 19 некачественных статей (из 80 представленных). [212] [213] Журнал получил высокую оценку за открытое и прозрачное противодействие мошенничеству. [212]
Рецензенты, как правило, не имеют доступа к необработанным данным, но видят полный текст рукописи и, как правило, знакомы с недавними публикациями в этой области. Таким образом, они имеют больше возможностей обнаружить плагиат прозы, чем фальсифицированные данные. Например, широкую огласку получили несколько случаев такого текстового плагиата со стороны историков. [214]
Что касается науки, опрос 3247 ученых, профинансированный Национальными институтами здравоохранения США , показал, что 0,3% признали фальсификацию данных и 1,4% признали плагиат. [215] Кроме того, 4,7% участников того же опроса признались в самоплагиате или автоплагиате, когда автор повторно публикует один и тот же материал, данные или текст без ссылки на свою более раннюю работу. [215] [ необходимы разъяснения ] Самоплагиат с меньшей вероятностью будет обнаружен при двойном слепом рецензировании. [155]
В 2017 году в Высшей школе экономики в Москве открылся «Памятник анонимному рецензенту». Он имеет форму большого бетонного куба или игральной кости с надписью «Принять», «Незначительные изменения», «Основные изменения», «Пересмотреть и повторно отправить» и «Отклонить» на пяти видимых сторонах. Социолог Игорь Чириков, придумавший памятник, сказал, что, хотя у исследователей и существуют отношения любви и ненависти к рецензированию, рецензенты, тем не менее, делают ценную, но по большей части невидимую работу, и памятник — это дань уважения им. [224]
Текст был скопирован из этого источника, который доступен по международной лицензии Creative Commons Attribution 4.0.Научная экспертная оценка определяется как оценка
результатов исследования
на компетентность, значимость и оригинальность квалифицированными экспертами.
Эти коллеги выступают в роли стражей на пути научных открытий и публикаций.
Процесс рецензирования был двойным слепым, чтобы обеспечить анонимность как авторов, так и рецензентов, но в остальном проводился аналогично тому, который используется в научных журналах.
Следующая политика была принята для публикаций AGU, чтобы гарантировать, что они могут эффективно и результативно выполнять расширенную роль в предоставлении базовых данных для статей исследователям сейчас и в будущем.
... они могут решительно сопротивляться гипотезе соперника, которая бросает вызов их собственной