논문 평가 동료 평가는 얼마나 오래 걸릴까요?

논문 평가 동료 평가는 얼마나 오래 걸릴까요?

이미지 : "최적의"동료 평가에 대한 저자의 기대 : Nguyen et al. (2015) PLoS ONE 10 (8) : e0132557.

지난 주에 내가 본 두 가지는 오늘날의 포스트에 동기를 부여했습니다. 첫 번째는 Amy Parachnowitsch의 흥미로운 블로그 게시물 이었습니다. 피어 리뷰가 때때로 원하는 것보다 빠르지 않을지 궁금합니다. 잠시 동안 멀리 원고를 가져 가면서 머리를 깨끗이하는 관점을 얻으려면 너무 빠릅니다. 두 번째 논문은 Nguyen et al. 피어 리뷰의 소요 기간에 대한 저자 의견을보고합니다. 그 의견들 중 일부는 절대적으로 놀라운 것입니다.

나는 순간에 내 놀라움을 얻을 것이다, 그러나 첫째 : 얼마나 오래 해야 리뷰 걸릴 피어?필자는 피어 리뷰에 두 가지 기능, 즉 문지기 기능 (논문의 출판 여부에 대한 판단을 통과)과 원고 개선 기능 (출판 된 논문을 출판물보다 더 좋게 만드는 주석 제공)의 두 가지 기능이 있음을 이해한다고 가정합니다. 제출 된 원고). 나는 주장거야 그 가끔 사마귀에도 불구하고, 피어 검토 과정이 전반적으로 아주 잘 모두 이러한 기능을 수행 하고, 우리는 두 가지 기능을 계속 수행 할 것인지. 따라서 동료 평가를 통해 원고를 얻으려면 어떤 시간이 필요합니까?

나는 전형적인 저널의 흐름을, 프로세스의 각 단계 수 있도록 우리가한다고 최소한의 합리적인 시간을 짐작으로 견적거야 * . 이것은 주어진 단계가 때때로 더 빨리 일어날 수 없다는 것을 말하는 것은 아니지만, 나의 추측은 그러한 경우가 드물 것이라고 생각합니다. 따라서, 피어 리뷰가 그 기능을 수행 할 수있게하면서, 더 빠른 것을 기대하는 것은 명백히 비합리적 입니다. 여기에 간다. 원고를 업로드하고 "제출"을 펀치 한 다음 허용하십시오 :

• 1 업무 일 ** 저널 오피스가 귀하의 제출물을 처리 (포맷 검사 등)

• 3 편집자 (Ai)에게 빠른 읽기와 배정을하는 편집장 (EiC)
• 3 AE가 원고를 읽고, 검토해야하는지 결정하고, 검토자를 초대하십시오.
• 저널 사무실이 검토 자에게 연락하고 검토에 동의 할 정도로 7
• 리뷰 작성자가 리뷰를 완료 할 수 있도록 10
• 저널 사무소가 검토를 처리하고 AE에 통보하도록 1
• 5 AE가 검토를 고려하고, MS를 더 철저히 읽고, 자신의 검토 및 결정 권고안을 작성하십시오
• 4 EIC가 MS를 읽을 수 있는지, AE의 권장 사항을 고려하고 최종 결정을 내릴지
• 저널 사무국이 서류를 작성하고 결정 서신을 발행하는 1

이는 근무일 기준으로 35 일 (7 일)이 소요됩니다 (법정 휴가 추첨에 따라 다름). 개별 시간 중 일부가 길게 보인다면 저널 사무실 직원을 제외한 모든 사람이 무급으로 일하고 다른 모든 업무를 수행하면서 저널 업무를 수행한다는 것을 기억하십시오. 물론, 나는 (때때로) 반나절 안에 원고를 검토 할 수있다. 그러나 내가 리뷰를받을 때, 그것은 내 접시에있는 다른 것들과 함께 큐에 들어갑니다. 결국, 오늘 아침에 부탁 받았던 리뷰가 지난 주에 제 학생들이 저에게 보낸 6 개의 논문 챕터보다 더 중요한 이유가 없습니다.

따라서 7 주는 예상 할 수있는 절대 최소값입니다. 평균값이 아니라 최소값입니다. 그리고 온라인 기술은 지난 10 년 또는 2 년 동안 피어 리뷰 시간을 대폭 줄 였지만 (필자는 대학원생이었을 때 16 주가 당신이 기대할 수있는 최선의 결과 였을 때), 나는 어떤 기술로도 그들을 잘라낼 것이라고 생각하지 않습니다. 더욱이. 이제 제약 조건은 시스템과 관련 이 없습니다 . 그들은 프로세스와 관련이 있습니다. 내 생각에 그 과정 은우리가 원하면 오래 걸릴 것입니다. 즉, 7 주보다 빠른 동료 검토 회신에 대한 주장으로 경쟁하는 저널은 제공 할 수없는 것을 약속하거나 심각한 동료 검토를 통해 제공되는 품질을 포기합니다. (피어 리뷰의 양도 가능성과 같은 개선 사항은 동일한 원고에 대한 후속 고려 사항에 대한 시간을 단축시킬 수 있지만 첫 번째 문제에 대한 대폭적인 삭감의 가능성은 보이지 않으며 저널 간행물 전체를 완전히 재구성 할 것을 요구합니다. 시스템이지만, 아직 설득력있는 경우가 있습니다.)

따라서 동료 리뷰는 우리가 원하는 것보다 더 빠를 것 같지 않습니다 (여러분을 환영합니다, Amy). 우리가 원하는 것보다 느린 가요 ? 여기 Nguyen et al. 종이 가 들어온다. 내가했던 것처럼 놀랄 준비를하십시오. Nguyen et al. 보존 생물학 ***의 저자를 대상으로 전형적인 피어 리뷰 시간 (위의 내 분석에서와 같이 제출에서 결정까지 모든 것으로 정의 됨)에 대한 질문과 짧고 최적의 긴 리뷰 시간에 대해 질문했습니다. 결과는 나를 멀리 날려 버렸다.

저자는 무엇을 원합니까? 그들의 평균 "최적"리뷰 시간 (위에 재현 된 Nguyen 외. 그림 1)은 6 주 였는데, 최소한 합리적인 시간 이라고 생각하는 7 주보다 적은 주였습니다 . 5 명의 응답자는 일주일 이 최적 이라고 생각 했습니다. (아마도 각자는 조랑말도 원했습니다.)

저자는 "느린"동료 검토로 간주합니까? 평균 14 주 - 상당수의 저자는 엄격한 기준을 갖고 있습니다. 50 명 (전체 응답자의 10 %)은 "느린"리뷰가 7 주 이하를 의미한다고 생각했습니다! 한 응답자는 말했다 하나의 주에 "느린"검토했다 - 합리적인 의심의 여지가 시연 중 펑크 조사 연구와 같은 일부 사람들은 어떤 사람들은 순진 현저하게, 또는 있다는 것을 ****가 . 불행히도, 2 주와 3 주에 대한 투표의 중요하지 않은 숫자는 후자를 제안합니다.

나는 단지 이러한 기대에 대해 머리를 감쌀 수 없다. 보세요 : 동료 평가에는해야 할 일이 있으며 그 일을하는 데는 시간이 필요합니다. 풀 타임 유료 전문가가 전체 프로세스를 처리하더라도 시간이 걸릴 것입니다. 그러나 그것은 다른 일들로 바쁜 자원 봉사자들에 의해 대부분 처리됩니다. 몇 달이 걸리려는 피어 리뷰는 시스템 고장의 증거가 아니며 대안을 찾아야하는 이유가 아닙니다. 물론 저는 제 논문 모두가 과학에 대한 중요한 진보라고 생각합니다. 그러나 동료 평가를 통해 세계가 일반적으로 2 개월을 기다릴 수 있다고 생각합니다.

제출 된 물량이 계속 사용 가능한 검토 자 (및 AE) 풀보다 빠르게 증가하는 것은 사실이며, 피어 리뷰 시스템에 대한 압박입니다. 프로세스의 속도에 대한 부당한 기대로 인해 이러한 압력이 더욱 악화됩니다. 이러한 압력을 완화하는 확실한 방법은 7 주간의 동료 검토 과정이 "느린"사람이라면 누구나 초대하여 매월 추가 원고를 검토하거나 AE 로 서명 하도록 초대하는 것 입니다. 우리는 도움을 사용할 수 있습니다.

업데이트 : 테리 맥 글리린 (Terry McGlynn) 의 밀접한 관련 게시물을보십시오. 테리 맥 글리린 (Terry McGlynn )은 독자적인 분석을 실시합니다.

업데이트 # 2 : 주제에 대한 더 심한 경우, 이번에는 저자보다는 저널을 목표로하고, 원고를 검토하는 것보다 내게 더 중요한 것들을 참조하십시오 .

© Stephen Heard ( sheard@unb.ca ) 2015 년 8 월 31 일

관련 게시물:

• 평론가들은 미친가, 아니면 성도입니까?
• 왜 누군가 (동료) 편집자가되고 싶습니까?

---

* ^ 내 생각에 내가 경험 한 단계 (리뷰 작성자와 편집자 단계)에 꽤 도움이된다고 생각한다. 그것들은 내가 아는 단계 (저널 ​​사무실과 편집장)에 대한 과소 평가 일 수 있습니다. 적어도, 나는 항상 내가 다른 사람의 일이 얼마나 힘든지를 과소 평가한다고 가정한다.

** ^ 예, 저는 자주 주말과 공휴일을 처리하며 원고를 다루거나 검토합니다; 하지만 나는 그것을 자랑스럽지 않습니다. 그리고 당신은 분명히 내가 당신의 원고를 다루기 위해 휴일을 잡을 것이라고 가정하지 않습니다!

*** ^ 여부 다른 저자 비슷한 답을 알 수 준 것이다; 그러나 일화에 엄격하게 기초를 두어, 나는 많은 분야가보다 적게 참을 것이라는 점을 예상 할 것입니다.

**** ^ "Naïve"는 마음에 떠오르는 첫 단어가 아니었지만 의심의 여지가 조금 있습니다.