Зареєстровані звіти: як рецензування до результатів змінює стимули дослідження
Зареєстрований звіт (Registered Report) — це формат наукової публікації, у якому ключові елементи дослідження проходять рецензування до того, як результат може визначити редакційне рішення. Автори спочатку подають дослідницьке питання, теоретичне обґрунтування, дизайн, план вибірки або збирання даних і план аналізу. Після рецензування журнал може надати принципову згоду на публікацію — in-principle acceptance, або IPA. Якщо погоджений протокол належно виконано, контроль якості пройдено, відхилення прозоро пояснено, а висновки відповідають даним, напрям і статистична значущість результату самі по собі не мають визначати публікацію. Саме так формат описують Center for Open Science та огляд Chambers і Tzavella.
Головна методологічна ідея формату полягає у зміні моменту, коли наукова робота отримує редакційну цінність. У звичайному процесі рецензент бачить завершений рукопис разом із результатами. У Registered Reports ключове рішення переноситься на етап, коли можна оцінити запитання і метод без спокуси підвищити або знизити цінність роботи через «красивий», статистично значущий, неочікуваний чи нульовий результат.
Це робить зареєстровані звіти одним із інструментів відкритої науки в психології. Формат пов’язаний із пререєстрацією, реплікацією, прозорістю аналізу та боротьбою з публікаційним упередженням, але має власний канонічний зміст: це передусім модель рецензування і публікаційного рішення, а не просто спосіб зафіксувати план.
Коротка відповідь: що змінює Registered Report
Зареєстрований звіт змінює стимули дослідження чотирма пов’язаними механізмами. По-перше, питання «чи варто публікувати цю роботу?» значною мірою вирішується до отримання основного результату. По-друге, рецензенти можуть виправити критичні проблеми дизайну тоді, коли дослідження ще можна змінити без ретроспективного переписування історії. По-третє, автору стає менш вигідно шукати будь-який статистично значущий результат лише для того, щоб робота виглядала публікаційно привабливою. По-четверте, заздалегідь погоджений план створює чітку межу між підтверджувальними аналізами та подальшими дослідницькими аналізами.
Формат не робить окреме дослідження автоматично правильним. Він не гарантує вдалої теорії, репрезентативної вибірки, якісного вимірювання, відсутності помилок чи широкої узагальнюваності. Його сила структурна: редакційна система менше винагороджує певний тип результату і більше винагороджує якість запитання, дизайну та наперед сформульованого плану.
Тому Registered Reports слід розуміти як зміну архітектури наукового рішення. Вони не «скасовують» людське судження, а переносять його туди, де воно менше залежить від уже відомого результату.
Як працює зареєстрований звіт: два етапи рецензування
Stage 1: рецензування до основних результатів
На першому етапі автори подають рукопис, у якому вже є вступ, дослідницькі питання або гіпотези, детальний метод, план вибірки, критерії включення та виключення, основні змінні, процедура і запланований аналіз. Конкретний набір вимог залежить від журналу й методології. Наприклад, правила Scientific Reports і Nature Methods прямо передбачають перевірку обґрунтованості дослідницького питання, методологічної строгості, здійсненності дизайну, плану аналізу та достатності деталей для виконання дослідження.
Цей етап принципово відрізняється від рецензування завершеної статті. Рецензент може запитати, чи справді дизайн відповідає поставленому питанню, чи визначено головні результати, чи достатньо обґрунтований розмір вибірки або інший критерій точності, чи закладено належні контрольні умови, чи наперед описано обробку пропущених даних, виключень і можливих розгалужень аналізу. Якщо проблема виявлена тут, її можна виправити до того, як збирання даних перетворить невдале рішення на незворотну частину дослідження.
In-principle acceptance: принципова згода на публікацію
Після успішного Stage 1 редакція може надати IPA. Це зобов’язання журналу розглядати завершену роботу як таку, що має право на публікацію незалежно від того, підтвердилися гіпотези чи ні, якщо автори виконали погоджений план і пройшли визначені журналом перевірки. Center for Open Science визначає дві мінімальні ознаки справжнього Registered Report: рецензування до спостереження результатів і принципова згода, яку не відкликають через сам напрям отриманого результату.
Після IPA погоджений Stage 1 протокол зазвичай фіксують у реєстрі або сховищі. Конкретна політика публічності, ембарго та моменту відкриття протоколу різниться між виданнями.
Stage 2: перевірка виконання та інтерпретації
Після завершення дослідження автори додають результати й обговорення та подають повний рукопис на другий етап. Рецензенти перевіряють, чи виконано погоджений протокол, чи задокументовано відхилення, чи проведено зареєстровані аналізи, чи пройдено контроль якості і чи випливають висновки з отриманих даних. У Scientific Reports фінальна прийнятність не повинна залежати від того, чи вийшов очікуваний результат; у Nature Methods також прямо зазначено, що публікація після Stage 2 відбувається незалежно від результату за умови виконання погодженого дизайну, контролю якості та обґрунтованої інтерпретації.
Чому рецензування до результатів змінює стимули
Публікаційна цінність відокремлюється від «позитивного» результату
У методологічній літературі «позитивним» часто називають результат, який підтримує перевірювану гіпотезу; це не означає «добрий» результат. Коли рішення про публікацію приймається після результатів, у системі може виникати перевага для статистично значущих, очікуваних або ефектних висновків. Це один із механізмів публікаційного упередження.
IPA переносить редакційне зобов’язання до моменту, коли результат ще не є підставою для відбору. Нульовий, суперечливий або непідтверджувальний результат перестає бути автоматично менш публікаційно привабливим, якщо питання було важливим, а метод — достатньо інформативним.
Якість планування стає видимим об’єктом рецензування
У традиційному процесі рецензент часто бачить проблеми дизайну тоді, коли дані вже зібрано. Registered Report створює окремий інституційний момент для методологічного зворотного зв’язку до виконання дослідження. Це не гарантує, що всі рецензенти знайдуть усі проблеми, але підвищує цінність зауважень, які можна реально втілити до збору чи аналізу даних.
Зменшується винагорода за аналітичну гнучкість після результату
Коли ключові аналізи, правила виключення, основні змінні й критерії інтерпретації погоджені наперед, стає складніше непомітно перебирати численні допустимі рішення й подати лише той маршрут, який дав бажаний висновок. Це зменшує простір для p-hacking, вибіркового звітування та HARKing — формулювання гіпотези після того, як результат уже відомий. Nature Neuroscience прямо називає зменшення таких практик однією з цілей Registered Reports.
Водночас формат не доводить, що жодної дослідницької гнучкості не залишилося. Вона може виникати у виконанні протоколу, обробці непередбачених ситуацій, вимірюванні, моделюванні або інтерпретації. Саме тому важливі прозорі відхилення і другий етап рецензування.
Несподівані результати перестають бути загрозою, але залишаються науково цікавими
Registered Reports не забороняють відкриття. Додаткові незареєстровані аналізи можуть бути проведені й опубліковані, якщо їх чітко позначено як дослідницькі. Така структура зберігає серендипність, але не дозволяє безслідно перетворювати післяфактум знайдений патерн на нібито наперед передбачений підтверджувальний тест.
Зареєстрований звіт і пререєстрація — різні практики
Пререєстрація дослідження — це завчасна, датована фіксація плану до того, як результат може впливати на дослідницькі рішення. Вона може існувати без журналу, без зовнішнього рецензування і без будь-якого зобов’язання опублікувати дослідження. Center for Open Science прямо розрізняє пререєстрацію і Registered Reports за наявністю змістовного Stage 1 рецензування та IPA.
Registered Report зазвичай включає проспективну реєстрацію погодженого протоколу, але додає інституційний механізм. Редакція і рецензенти оцінюють план до результатів, а редакційне рішення перестає залежати від того, чи вийшов статистично значущий або теоретично зручний ефект.
Практична різниця проста. Пререєстрація відповідає на запитання: «Що саме ми вирішили зробити до того, як побачили результат?» Registered Report додає друге запитання: «Чи пройшов цей план незалежну редакційну оцінку і чи було публікаційне зобов’язання прийняте до результату?»
З цього випливає важлива межа: пререєстрована стаття не є автоматично Registered Report, а Registered Report не слід зводити до самого факту наявності реєстрації.
Що означає IPA і чого вона не гарантує
In-principle acceptance іноді спрощують до фрази «журнал гарантує публікацію». Точніше говорити про умовне редакційне зобов’язання. Результат сам по собі не має бути причиною відмови, але автори повинні виконати погоджений протокол або належно пояснити допустимі відхилення, пройти передбачені перевірки якості та подати висновки, які підтримуються даними.
Політики різняться. Мінімальні критерії COS допускають відкликання IPA через проблеми контролю якості, невиконання зареєстрованого протоколу або нерозв’язні проблеми ясності звітування. Nature Methods попереджає, що значні відхилення від погодженого експериментального плану можуть стати підставою для відмови на Stage 2. Це означає, що IPA захищає роботу від результат-залежного відбору, а не від усіх вимог наукової якості.
Не кожне відхилення руйнує Registered Report. Реальні дослідження стикаються з поломками обладнання, змінами доступу до вибірки, непередбаченими властивостями даних та іншими обставинами. Багато журналів дозволяють обґрунтовані зміни, особливо якщо автори повідомляють редактора завчасно, документують причину і чітко відділяють погоджений план від фактичного виконання. Саме політика конкретного видання визначає межу між допустимою поправкою та зміною, що потребує нового Stage 1.
Що оцінюють на Stage 1
Stage 1 має сенс лише тоді, коли рецензування здатне оцінити інформативність дослідження до результату. У кількісному дослідженні рецензенти можуть перевіряти логіку гіпотез, дизайн, контроль альтернативних пояснень, план вибірки, обґрунтування статистичної потужності або точності, визначення основних результатів, план аналізу, правила виключення, обробку пропущених даних, множинність аналізів і заздалегідь визначені умови для різних аналітичних рішень.
Ці критерії не перетворюють Registered Reports на один універсальний статистичний шаблон. Якщо дослідження якісне, змішане, методологічне, вторинне або має іншу епістемічну логіку, оцінювати його слід за критеріями відповідної методології. Вимога «зробити аналіз потужності» там, де класична потужність не відповідає дослідницькій логіці, не є ознакою методологічної строгості. Формат визначає час і структуру рецензування, а не нав’язує кожному дослідженню один набір кількісних процедур.
Важливо також відрізняти Registered Reports від стандартів звітування. APA Journal Article Reporting Standards визначають, яку інформацію слід прозоро повідомляти про кількісні, якісні та змішані дослідження. JARS — це стандарт звітування; Registered Report — це публікаційний процес із рецензуванням до результату та IPA. Одна практика може доповнювати іншу.
Що перевіряють на Stage 2
Другий етап не є повторенням першого. Рецензент уже не має заново вирішувати, чи подобається йому дослідницьке питання після того, як стало відомо, що гіпотеза не підтвердилася. Основні завдання інші: звірити виконання з Stage 1, перевірити контроль якості, переконатися, що зареєстровані аналізи подані, оцінити прозорість відхилень і перевірити відповідність висновків даним.
Це особливо важливо для інтерпретації нульових або неоднозначних результатів. IPA не перетворює «немає статистичної значущості» на доказ відсутності ефекту. Сила висновку все одно залежить від дизайну, точності оцінок, невизначеності, валідності вимірювання та припущень аналізу. Registered Report змінює правила публікаційного відбору, а не правила статистичного висновування.
Так само підтримка гіпотези не отримує автоматичного статусу сильного доказу лише тому, що дослідження зареєстроване. Stage 2 має оцінювати, чи дані справді дозволяють заявлений висновок, чи не виходить інтерпретація за межі дизайну і чи не підміняється асоціація причинним ефектом без відповідної ідентифікаційної стратегії.
Що показують дослідження самого формату
У Registered Reports значно менше «позитивних» результатів
Одне з найвідоміших метадосліджень порівняло 71 опублікований Registered Report у психології з випадковою вибіркою 152 звичайних статей, що перевіряли гіпотези. Scheel, Schijen і Lakens виявили підтримку першої перевірюваної гіпотези приблизно у 44% Registered Reports і приблизно у 96% стандартних статей. Така різниця узгоджується з тим, що результат-незалежне публікаційне рішення робить непідтверджувальні результати значно видимішими.
Це сильний описовий сигнал, але його не слід перетворювати на чистий причинний експеримент над видавничою системою. Самі автори підкреслювали, що порівняння не може довести, яка частка розриву спричинена саме зменшенням публікаційного упередження, яка — зменшенням інфляції помилки I роду, а яка — відмінностями в темах, авторах або дизайнах, що потрапляють у Registered Reports.
Рецензенти оцінювали методологію Registered Reports вище
У дослідженні Soderberg та співавторів 353 дослідники оцінювали пари робіт із психології та нейронауки: 29 Registered Reports і 57 зіставлених стандартних статей. Registered Reports отримували вищі оцінки методологічної та аналітичної строгості й загальної якості. Для новизни та креативності переконливої різниці не виявили.
Це не доводить, що сам формат завжди створює кращі дослідження. Автори Registered Reports можуть відрізнятися від інших дослідників, а журнали й теми — від інших публікацій. Результат підтримує користь формату, але зберігає потребу в подальшій метанауці.
Масштаб поширення зростає, а політики залишаються неоднорідними
Актуальна сторінка Center for Open Science повідомляє про понад 300 журналів, які використовують Registered Reports як постійну опцію або в межах спеціальних випусків. Це показник інституційного поширення, а не доказ ефективності.
Дослідження політик журналів Montoya, Krenzer і Fossum показало значну різноманітність правил щодо дослідницьких аналізів, вторинних даних, публічності протоколів та інших деталей. Тому назва «Registered Report» задає спільне ядро, але не робить усі редакційні процедури однаковими.
Які проблеми формат зменшує, а які залишаються
Публікаційне упередження
Механізм Registered Reports безпосередньо спрямований на результат-залежний відбір: якщо IPA отримано до результату, редакція не повинна відмовляти через те, що ефект виявився нульовим, меншим за очікуваний або протилежним прогнозу. Саме тому формат є одним із найпряміших інструментів проти «шухляди» неопублікованих нульових результатів.
Вибіркове звітування, p-hacking і HARKing
Заздалегідь погоджені аналізи й видимий протокол роблять ретроспективну зміну історії дослідження помітнішою. Проте абсолютного захисту немає. Дослідники все одно приймають рішення під час очищення даних, можуть помилятися, можуть мати неповно визначені правила або додавати нові аналізи. Якість залежить від конкретності Stage 1 і прозорості Stage 2.
Слабкий дизайн
Раннє рецензування створює можливість знайти слабкість до збору даних. Воно не гарантує, що рецензенти її знайдуть. Невдала теорія, погано визначений конструкт, нерепрезентативна вибірка, систематична помилка вимірювання або конфаундинг можуть залишитися навіть після Stage 1.
Реплікація і відтворюваність
Registered Reports часто використовують для реплікацій досліджень, тому що результат-незалежне прийняття добре відповідає перевірці попереднього ефекту. Проте «Registered Report» не означає «реплікація»: формат може використовуватися для нового дослідження, а реплікація може публікуватися й у звичайному форматі.
Так само Registered Report не тотожний відтворюваності досліджень. Відтворюваність стосується можливості отримати той самий результат із тих самих даних, коду і процедур обчислення. Registered Reports можуть стимулювати кращу документацію, але відкриті дані, код і обчислювально відтворюваний аналіз залишаються окремими практиками.
Чи можна змінювати план після IPA
Методологічна дисципліна не означає, що дослідник повинен механічно виконувати план, який став непридатним. Хороший Registered Report передбачає розумні контингенції наперед: наприклад, що робити, якщо припущення моделі не виконуються, якщо якість даних нижча за визначений поріг або якщо технічна процедура не працює.
Непередбачені зміни теж можливі. Їхня допустимість залежить від політики журналу, масштабу зміни й моменту, коли проблема виникла. Загальний принцип такий: не приховувати зміну, не видавати її за первинний план і, коли це можливо, узгоджувати суттєві поправки з редакцією до того, як нове рішення буде залежати від результатів.
На Stage 2 читач повинен мати можливість відновити дві версії історії: що було погоджено і що фактично сталося. Саме ця прозорість дозволяє оцінити, чи відхилення створює нову свободу вибору, яка могла вплинути на висновок.
Чи дозволені дослідницькі аналізи
Так. Registered Reports розрізняють підтверджувальне і дослідницьке, а не забороняють дослідницьке. Якщо під час роботи виник новий патерн, автори можуть його проаналізувати, сформулювати нову гіпотезу і показати додатковий результат. Методологічно важливо позначити, що цей аналіз не був частиною Stage 1.
Таке маркування змінює спосіб інтерпретації. Заздалегідь визначений тест перевіряє прогноз у рамках погодженого плану. Післяфактум знайдений патерн генерує нову гіпотезу, яку доцільно перевірити на нових даних. Обидва типи роботи потрібні науці, але вони несуть різну доказову вагу.
Це одна з причин, чому Registered Reports не слід представляти як систему, що протистоїть відкриттю. Вона створює чеснішу граматику для повідомлення, коли і як саме виникла ідея.
Чи можливі Registered Reports із уже наявними даними
Іноді так. Визначальна умова стосується не буквального факту існування файлу з даними, а того, чи може знання результату вплинути на Stage 1. У переписі журнальних політик Montoya та співавторів вторинні аналізи розглядаються як один із варіантів, за якого Stage 1 може відбутися до аналізу вже зібраних даних. Деякі сучасні програми Registered Reports також використовують контрольований доступ, щоб автори отримали повні дані лише після IPA.
Однак правила відрізняються. Якщо автор уже бачив ключові результати, перевіряв багато моделей або знає зв’язки, які планує представити як проспективні, стандартна логіка результат-сліпого Stage 1 послаблюється. Потрібно читати політику конкретного журналу і прозоро описувати, який доступ до даних був до реєстрації.
Тому формула «Registered Report завжди до збору даних» занадто вузька. Точніше: Stage 1 має відбутися до того, як дослідники й рецензенти отримають знання про релевантні результати, яке може зробити редакційне рішення результат-залежним.
Для яких досліджень формат особливо корисний
Найприродніше Registered Reports працюють там, де до результату можна чітко сформулювати інформативне запитання і дизайн, здатний на нього відповісти. Це підтверджувальні експерименти, перевірки теоретичних прогнозів, прямі й концептуальні реплікації, багато проспективних спостережних досліджень, де наперед визначено моделі й припущення, а також деякі вторинні аналізи з контрольованим доступом до даних.
Формат також поширюється на систематичні огляди, методологічні дослідження та інші типи робіт, якщо конкретне видання має відповідну політику. Тут важливо не переносити критерії одного дизайну на інший: Registered Report для систематичного огляду має передусім фіксувати питання, критерії включення, пошук, відбір, оцінювання ризику упередження і план синтезу; якісне дослідження потребує критеріїв, відповідних його методології.
Менш природний формат для роботи, де цінність принципово виникає через відкритий пошук без наперед визначеного підтверджувального компонента, для сильно ітеративної розробки нового методу або для ситуацій, де затримка Stage 1 робить дослідження неможливим. Це не ієрархія «кращої» і «гіршої» науки. Вибір формату має відповідати типу запитання.
Витрати й обмеження Registered Reports
Більше роботи переноситься на початок
Автори повинні раніше визначити деталі, які в традиційному процесі могли залишатися відкритими до аналізу. Stage 1 потребує часу на редакційний відбір, рецензування і доопрацювання, тому старт збору даних може відкластися. Для грантів із коротким терміном, сезонних вибірок, швидкоплинних природних подій або контрактних досліджень це може бути суттєвим обмеженням.
Редакційні політики не уніфіковані
Одні журнали оцінюють на Stage 1 насамперед методологічну якість, інші також застосовують критерії новизни, широти інтересу або значущості питання. Десь протокол публікують після IPA, десь реєструють під ембарго. Десь вторинні дані дозволені за чітких умов, десь ні. Тому методологічне слово «Registered Report» слід читати разом із політикою конкретного видання.
Формат не усуває селекцію до подання
Навіть якщо журнал не відбирає статті за результатом після IPA, дослідники й команди можуть самі вирішувати, які ідеї подавати у форматі Registered Report, а які залишати в традиційному процесі. Самовідбір означає, що спостережні порівняння RR і звичайних статей не можна автоматично трактувати як чистий причинний ефект формату.
IPA не гарантує завершення проєкту
Дослідження може не відбутися через фінансування, набір вибірки, технічну несправність, етичне обмеження чи інші причини. Це створює окрему проблему неповного виконання вже схвалених протоколів. Політики щодо withdrawn registrations і публічності незавершених Stage 1 матеріалів покликані зробити такі випадки видимішими, але вони не всюди однакові.
Як підготувати сильний Stage 1
Підготовка починається не з форми реєстрації, а з журналу. Спочатку потрібно переконатися, що видання приймає Registered Reports для вашого типу дослідження, з’ясувати його критерії Stage 1, правила для пілотних і вже наявних даних, політику щодо відхилень, відкритих даних, коду й строків.
Далі варто сформулювати причинно й статистично коректний ланцюг: дослідницьке питання → дизайн → операціоналізація → вибірка → план аналізу → можливі результати → інтерпретація. Якщо з одного й того самого результату автор може післяфактум обрати кілька несумісних висновків, Stage 1 ще недостатньо визначений.
Для кількісного дослідження потрібно заздалегідь описати головні та вторинні результати, критерії виключення, правила зупинки набору, обробку пропусків, трансформації, основні моделі, перевірки припущень і рішення на випадок їх порушення. Розмір вибірки слід обґрунтувати відповідно до задачі — через потужність, бажану точність оцінки, симуляцію або інший доречний підхід.
Для причинних висновків Stage 1 має зробити видимими припущення, які потрібні для ідентифікації ефекту: часовий порядок, контроль конфаундингу, механізм призначення умов, селекцію та проблеми вимірювання. Сам факт Registered Report не перетворює кореляційний або поперечний дизайн на причинний.
Для якісної методології потрібно заздалегідь описати дослідницьку логіку, стратегію добору, процедуру збирання і аналізу матеріалу, рефлексивність та критерії якості, доречні саме для обраного підходу. Перетворювати такий Stage 1 на псевдокількісний чекліст означало б втратити методологічний сенс.
Що робити після IPA
Після принципової згоди варто зберегти точну версію погодженого протоколу, дату IPA і всі редакційно схвалені поправки. Далі дослідження виконується за цією версією, а кожне відхилення фіксується у робочому журналі із причиною та моментом прийняття рішення.
Під час аналізу зареєстрований і дослідницький шари краще вести окремо. Спочатку виконати погоджені аналізи й зберегти повний результат, а потім досліджувати додаткові питання. Якщо дані або код можуть бути відкриті без порушення етики, конфіденційності та прав учасників, їх підготовка підсилює прозорість, але сама по собі не є визначальною ознакою Registered Report.
На Stage 2 потрібно не «пояснити, чому все вийшло», а показати повний ланцюг від плану до результату. Непідтримана гіпотеза, ширший за очікуваний інтервал невизначеності чи відсутність ефекту — нормальні наукові результати, якщо дослідження було інформативним.
Як читачеві оцінювати Registered Report критично
Мітка Registered Report є корисною інформацією про процес, але не замінює читання методу. Для оцінки конкретної статті варто перевірити кілька речей.
• Чи справді Stage 1 і IPA передували доступу авторів до релевантних результатів?
• Чи доступний зареєстрований протокол або принаймні чітко вказано, де і коли його зафіксовано?
• Чи виконані всі зареєстровані основні аналізи, а пропуски пояснені?
• Чи позначені відхилення від Stage 1, і чи могли вони змінити висновок?
• Чи відокремлені підтверджувальні аналізи від дослідницьких?
• Чи відповідає сила висновків дизайну, точності й невизначеності?
• Чи не робиться причинний висновок лише з асоціації без достатніх причинних припущень?
• Чи доступні дані, матеріали й код там, де це можливо та етично, і чи можна відтворити ключові обчислення?
Останній пункт пов’язує Registered Reports із ширшим циклом відкритої науки. Рецензування до результатів зменшує один клас стимулів; реплікація, відтворюваність, прозоре звітування і синтез доказів відповідають за інші частини наукової надійності.
Registered Reports і стандарти звітування: як вони поєднуються
Зареєстрований звіт визначає часову послідовність рецензування і публікаційного рішення. Стандарт звітування визначає, яку інформацію читач повинен отримати у фінальній статті. Ці функції доповнюють одна одну.
APA JARS для психології охоплюють кількісні, якісні та змішані дослідження й допомагають прозоро описувати дизайн, учасників, аналіз та інтерпретацію. Інші типи робіт мають власні стандарти. Registered Report не звільняє автора від повного звітування, а хороший стандарт звітування не створює IPA і не захищає від результат-залежного рішення про публікацію.
Тому логіка така: Stage 1 покращує план до результату; реєстрація зберігає погоджений план; Stage 2 перевіряє виконання й інтерпретацію; стандарти звітування допомагають повно описати фінальну роботу; відкриті дані й код за можливості підтримують перевірку; подальші реплікації перевіряють стійкість висновку.
Поширені помилки в розумінні зареєстрованих звітів
«Registered Report — це просто пререєстрація»
Ні. Пререєстрація фіксує план. Registered Report додає до цього Stage 1 peer review і IPA.
«Після IPA журнал зобов’язаний надрукувати будь-що»
Ні. IPA є умовним зобов’язанням: протокол має бути виконаний або відхилення мають бути прийнятно пояснені, контроль якості пройдений, а інтерпретація — відповідати даним.
«У Registered Reports не можна робити нові аналізи»
Можна. Додаткові аналізи слід чітко позначати як незареєстровані або дослідницькі.
«Нульовий результат автоматично доводить відсутність ефекту»
Ні. Registered Report захищає публікацію нульового результату, але його зміст усе одно залежить від точності, дизайну, статистичної моделі та інших припущень.
«Мітка Registered Report означає, що стаття безпомилкова»
Ні. Формат зменшує певні стимули й дає раннє методологічне рецензування. Помилки теорії, вимірювання, виконання, вибірки, аналізу та інтерпретації залишаються можливими.
Часті запитання
Чи завжди Registered Report починається до збору даних?
Найчастіше так, але не універсально. Для вторинних даних деякі журнали дозволяють Stage 1 до аналізу або до доступу до релевантних результатів. Вирішальне значення має результат-сліпий характер початкового рецензування.
Чи може журнал відхилити роботу, якщо гіпотеза не підтвердилася?
За належного Registered Report сам факт непідтриманої гіпотези не повинен бути причиною відмови після IPA. Підстави можуть стосуватися невиконання протоколу, проваленого контролю якості, істотних неврегульованих відхилень або необґрунтованої інтерпретації.
Чи треба публікувати Stage 1?
Політики різняться. Одні видання публікують Stage 1 окремо, інші реєструють погоджений протокол у сховищі публічно або під ембарго, а потім інтегрують його у фінальну статтю.
Чи Registered Reports автоматично означають відкриті дані та код?
Ні. Це окремі практики. Деякі журнали вимагають їх разом із Registered Reports, інші застосовують винятки через конфіденційність, етику або правові обмеження.
Чи формат підходить лише для психології?
Ні. Він широко поширився за межі психології. Center for Open Science наразі перелічує понад 300 журналів у різних дисциплінах, які використовують Registered Reports як регулярний формат або в спеціальних випусках.
Чи Registered Report усуває p-hacking?
Він зменшує простір і стимули для непомітної післяфактум зміни аналізу, але не створює абсолютного захисту. Результат залежить від деталізації Stage 1, якості виконання, прозорості відхилень і Stage 2.
Чи можна зареєстрований звіт використати для реплікації?
Так, і це природне поєднання: реплікація перевіряє стійкість попереднього результату, а IPA робить публікацію менш залежною від того, «повторився» ефект чи ні.
Чому формат не став стандартом для всіх досліджень?
Через різну придатність до типів дослідження, додаткове раннє навантаження, часові обмеження, неоднорідність журнальних політик і те, що дослідницька наука часто потребує гнучкого ітеративного пошуку. Registered Reports є сильним інструментом для певних задач, а не універсальною формою для кожного наукового проєкту.
Висновок
Зареєстровані звіти змінюють не результат дослідження, а систему винагород навколо нього. Рецензування до результатів і IPA роблять якість запитання, дизайну та аналізу центральними підставами для редакційного рішення, а статистично значущий або теоретично зручний результат — менш важливою валютою публікації.
Найсильніша риса формату — результат-незалежне зобов’язання за умови виконання погодженого протоколу. Найважливіше обмеження — це все ще людська наукова система: рецензенти можуть помилятися, дизайни можуть бути слабкими, вимірювання — неточними, а політики журналів — неоднаковими. Тому Registered Report варто оцінювати як структурний механізм проти певних упереджень, а не як сертифікат істинності окремої статті.
Для читача практичний висновок простий: мітка Registered Report підвищує інформативність про те, коли були прийняті ключові рішення, але доказову силу потрібно оцінювати за дизайном, виконанням, невизначеністю, прозорістю відхилень і відповідністю висновку даним.
Пов’язані статті
• Пререєстрація дослідження: що фіксують до збору або аналізу даних і чого preregistration не гарантує
• Відтворюваність досліджень: чи можна отримати той самий результат з тих самих даних, коду і процедур
Джерела
American Psychological Association. APA Style JARS: What are they? https://www.apa.org/pubs/journals/resources/publishing-tips/apa-style-jars
Center for Open Science. Preregistration. https://www.cos.io/initiatives/prereg
Center for Open Science. Registered Reports. https://www.cos.io/initiatives/registered-reports
Chambers, C. D., & Tzavella, L. (2022). The past, present and future of Registered Reports. Nature Human Behaviour, 6, 29–42. https://doi.org/10.1038/s41562-021-01193-7
Montoya, A. K., Krenzer, W. L. D., & Fossum, J. L. (2021). Opening the Door to Registered Reports: Census of Journals Publishing Registered Reports (2013–2020). Collabra: Psychology, 7(1), 24404. https://doi.org/10.1525/collabra.24404
Nature Methods. Registered Reports: submission guidelines. https://www.nature.com/nmeth/submission-guidelines/registered-reports
Nature Neuroscience. (2024). Reducing publication bias with Registered Reports. Nature Neuroscience, 27, 1635. https://doi.org/10.1038/s41593-024-01762-9
Scheel, A. M., Schijen, M. R. M. J., & Lakens, D. (2021). An Excess of Positive Results: Comparing the Standard Psychology Literature With Registered Reports. Advances in Methods and Practices in Psychological Science, 4(2). https://doi.org/10.1177/25152459211007467
Scientific Reports. Registered Reports: journal policy and submission guidelines. https://www.nature.com/srep/journal-policies/registered-reports
Soderberg, C. K., Errington, T. M., Schiavone, S. R., Bottesini, J., Thorn, F. S., Vazire, S., Esterling, K. M., & Nosek, B. A. (2021). Initial evidence of research quality of registered reports compared with the standard publishing model. Nature Human Behaviour, 5, 990–997. https://doi.org/10.1038/s41562-021-01142-4