Впровадження програми: точність виконання та контроль якості
Український психологічний ХАБ · 22 жовтня 2026 року · Редакційна політика
Впровадження програми — це організований перехід від затвердженого задуму суспільного втручання до фактичних дій установ, працівників і учасників. Якість цього переходу визначає, чи отримають люди передбачені послуги, повідомлення, можливості або підтримку, чи дотримуватимуться виконавці істотних компонентів програми, які зміни вноситимуть у відповідь на місцеві умови та як ці зміни позначаться на результатах. Точність виконання програми, або відповідність реалізації початковому задуму (implementation fidelity), — одна з центральних характеристик цього процесу.
Контроль якості впровадження дає змогу встановити, що саме було зроблено, для кого, ким, у який спосіб, з якою інтенсивністю і за яких обставин. Він охоплює перевірку дотримання протоколу, доступності послуг, якості взаємодії, безпеки, етичних вимог, прийнятності змін і достовірності даних. Такий контроль потрібен і під час невеликого випробування, і при розгортанні державної програми в багатьох громадах. Концептуальну основу оцінювання точності реалізації запропонували Carroll та співавтори, а сучасні рекомендації щодо складних втручань пов’язують аналіз реалізації з контекстом, механізмами й наслідками Moore та співавтори.
Що означає точність впровадження програми
Точність впровадження описує відповідність фактично наданого втручання його визначеним основним компонентам. У суспільній програмі такими компонентами можуть бути конкретна послідовність дій посадовця, передбачений канал інформування, надання консультації, можливість оскаржити рішення, повторний контакт із заявником, перевірка доступності або забезпечення матеріального ресурсу. Перед оцінюванням необхідно встановити, які з цих компонентів є визначальними для механізму дії, а які допускають обґрунтоване пристосування.
Відповідність задуму та результат програми
Успішне завершення запланованих заходів саме по собі не доводить досягнення суспільної мети. Установа може провести всі інформаційні зустрічі, проте охопити переважно людей, які й раніше користувалися послугою. І навпаки, програма може дати певний позитивний результат навіть за часткової реалізації, якщо паралельно змінилися законодавство, інфраструктура чи доступність ресурсів. Саме тому оцінювання впровадження та оцінювання ефективності відповідають на різні дослідницькі запитання. Proctor та співавтори розрізняють результати впровадження, результати функціонування послуг і результати для їхніх користувачів.
Чому назва «контроль якості» охоплює більше, ніж перевірка інструкції
Формальне дотримання інструкції може співіснувати з незрозумілим поясненням, принизливою взаємодією, невиправданим збором даних або фактичною недоступністю послуги. Тому якість означає також професійну компетентність, безпечність, повагу до людини, організаційну спроможність та здатність установи своєчасно виправляти виявлені недоліки. Надто жорстка вимога однакового виконання за відмінних умов може навіть послаблювати суспільну користь.
Які компоненти точності потрібно вимірювати
Дотримання змісту та ключових процедур
Насамперед оцінюють, чи відбулися всі дії, які становлять необхідну частину втручання: чи надано передбачену інформацію, чи виконано процедуру перевірки, чи збережено право відмови, чи запропоновано альтернативний спосіб доступу. Показник зазвичай визначають як частку виконаних обов’язкових дій серед дій, що мали бути виконані. Однак кожен крок має різне значення: пропуск обов’язкової перевірки згоди значно важливіший, ніж дрібна відмінність у формулюванні повідомлення. Доцільно розрізняти критичні вимоги і другорядні елементи протоколу.
Доза, тривалість і частота
Дозою називають обсяг реально наданого втручання: кількість контактів, тривалість занять, частоту нагадувань, обсяг індивідуального супроводу або час доступності сервісу. Варто окремо фіксувати заплановану дозу, доставлену дозу та отриману дозу. Наприклад, відправлене повідомлення ще не означає його прочитання, а проведена консультація — засвоєння її змісту. У рамці Carroll та співавторів дотримання змісту, частоти, тривалості й охоплення входить до оцінювання точності реалізації.
Охоплення та рівність доступу
Охоплення показує, яку частку визначеної цільової групи фактично залучено. До знаменника повинні входити люди, для яких призначена програма, а не лише ті, хто добровільно звернувся або пройшов реєстрацію. Дані бажано розглядати за територією, віком, інвалідністю, мовними потребами, доступом до цифрових засобів, соціально-економічними умовами та іншими доречними характеристиками, якщо збір таких відомостей законний і належно захищений. Рамка RE-AIM допомагає поєднувати оцінювання охоплення з ефективністю, прийняттям, упровадженням і підтриманням програми.
Якість надання і реакція учасників
Наявність контакту ще не характеризує його якості. Варто спостерігати, чи була інформація зрозумілою, чи виконавець залишав простір для запитань, чи дотримувався прав людини, чи міг належно допомогти в складній ситуації. Реакцію користувача оцінюють за зрозумілістю, прийнятністю, довірою та досвідом взаємодії. Оцінка задоволеності залишається допоміжною: людина може бути задоволена ввічливим спілкуванням, хоча послуга фактично не виконала своєї функції.
Відмінність програми від звичайних процедур
Необхідно встановити, що нове втручання справді відрізняється від стандартного процесу, який діяв раніше. Якщо контрольна установа використовує те саме нагадування або однакову процедуру підтримки, порівняння груп послаблюється. Документування відмінностей між умовами допомагає інтерпретувати причинні результати та виявляти перенесення компонентів між підрозділами.
Як визначити незамінні компоненти програми
Теорія змін як вихідна карта
До запуску потрібно описати причинний ланцюг: суспільна проблема, інституційні обмеження, ресурсні умови, дії виконавців, безпосередній досвід людини, проміжні психологічні механізми і кінцеві суспільні результати. Кожне твердження про механізм слід пов’язати з перевірюваним показником. Наприклад, якщо програма має зменшити пропуск важливих строків, механізмом може бути своєчасне нагадування, а інституційною умовою — наявність достовірних контактів і можливість виконати дію після нагадування.
Теорія змін є робочою гіпотезою про причинні зв’язки. У рекомендаціях Skivington та співавторів для складних втручань центральне місце посідають контекст, теорія програми, взаємодія компонентів, участь зацікавлених сторін і невизначеність результатів.
Незамінне ядро і змінна оболонка
До ядра слід відносити компоненти, від яких за наявними доказами залежить дія програми або безпека її учасників. Мова прикладів, місце проведення, канал повідомлення чи години роботи можуть бути змінними, якщо їхнє пристосування зберігає механізм і законні гарантії. Протокол має пояснювати, хто й за якою процедурою дозволяє адаптацію. Жоден компонент не варто оголошувати «критичним» лише за звичкою керівництва: статус має випливати з механізму, наукових даних і вимог безпеки.
Межі стандартизації
Загальнодержавна програма потребує зіставних стандартів, однак різні громади можуть мати нерівні транспортні можливості, кадрове забезпечення, цифрове покриття та структуру потреб. Однакова процедура, яка фактично виключає частину громадян, означає нерівну якість доступу. Точність упровадження потрібно поєднувати з обґрунтованою адаптацією та відстеженням її наслідків.
Поведінкові механізми та організаційні умови
Можливості, мотивація і реальне середовище
Працівник може знати протокол і підтримувати його мету, але не мати достатньо часу, обладнання або повноважень для якісного виконання. Користувач може усвідомлювати користь програми, проте бути позбавленим можливості дістатися установи. Тому під час аналізу поведінки розглядають компетентність, увагу, пам’ять, мотивацію й звички разом із фізичними та соціальними можливостями. Перекладати структурні бар’єри на «неправильну поведінку» людей означало б спотворити проблему.
Норми організації, керівництво й робоче навантаження
Якість впровадження залежить від ясності обов’язків, підтримки керівництва, стабільності команд, навчання, зворотного зв’язку і того, чи можна повідомляти про помилки без покарання за добросовісне повідомлення. Докази узагальненого огляду Durlak і DuPre вказують на роль якості реалізації та численних чинників громади, виконавців і організаційних систем; причинний вплив кожного чинника відрізняється залежно від контексту.
Складність, ресурси й зовнішні правила
Чим більше взаємозалежних установ, каналів і процесів передбачає програма, тим важче забезпечити сталу якість. Зміни фінансування, кадровий дефіцит, воєнні ризики, переривання зв’язку та зміни нормативних процедур можуть впливати на реалізацію незалежно від ставлення працівників. Для інтерпретації розбіжностей між майданчиками необхідно збирати дані про контекст, а не обмежуватися рейтингом «хороших» і «поганих» установ.
Від підготовки до виконання: практичний цикл
Етап 1. Опис проблеми та вихідного стану
Зберіть вихідні дані про фактичні дії, час очікування, причини відмов, результати звернень, територіальні відмінності й наявні обмеження. Розмови з працівниками та користувачами допоможуть відокремити незручність інтерфейсу від відсутності законних підстав, інфраструктури або ресурсів. Визначте, якій саме зміні поведінки чи роботи системи має сприяти програма.
Етап 2. Протокол і стандарт реалізації
Для кожного істотного компонента зафіксуйте зміст дії, відповідальну роль, умову запуску, очікувану частоту, часові межі, критерії безпечності та спосіб документування. Окремо визначте допустимі адаптації, механізм повідомлення про них і правило тимчасового припинення небезпечної процедури. Протокол має бути придатним до застосування в реальному робочому процесі.
Етап 3. Навчання та перевірка готовності
Навчання повинно завершуватися демонстрацією вміння виконати критичні дії на прикладах. Достатньо прослухати лекцію — замало для складної взаємодії з громадянами. Доцільні практичні сценарії, пояснення типових збоїв, тренування доступної комунікації, інструкції з конфіденційності та чіткий канал консультацій. Оцінюйте готовність персоналу за поведінковими показниками і наявністю ресурсів.
Етап 4. Пілотне випробування
У невеликій кількості установ перевірте реальну послідовність операцій, реєстрацію даних, тривалість контакту, навантаження на працівників і доступність альтернативних каналів. Пілот потрібний для виявлення організаційних та етичних дефектів до масштабного розгортання. Якщо на цьому етапі змінюється ядро втручання, зафіксуйте нову редакцію протоколу і перегляньте обґрунтування очікуваного ефекту.
Етап 5. Поточне спостереження й коригування
У процесі роботи використовуйте вибірковий аудит виконаних дій, спостереження, журнал критичних відхилень, аналіз зворотного зв’язку та оцінювання результатів. Регулярне обговорення даних має завершуватися конкретним рішенням: змінити розклад, донавчити виконавців, виправити технічну процедуру, забезпечити доступність або переглянути початкове припущення. Для кожного рішення призначають відповідального та дату повторної перевірки.
Етап 6. Перевірка підтримання результатів
Після завершення початкової підтримки оцінюйте, чи збереглися потрібні практики, чи включені вони до звичних бюджетних і кадрових процесів, чи не зросли витрати для користувачів та чи лишився доступ справедливим. Сталість програми означає здатність організації підтримувати обґрунтовану діяльність, а не безстрокове збереження кожної початкової деталі.
Показники: як скласти систему вимірювання
Показники процесу
Доцільно визначити щонайменше три рівні: надання компонентів, досвід користувачів і системні результати. Прикладами є частка випадків, у яких виконано всі критичні дії; частка контактів, проведених у запланований строк; час до завершення звернення; частка учасників, які отримали доступний канал; частота несанкціонованого збору даних; кількість відхилень, виправлених після аудиту. Кожен показник потребує чіткого чисельника, знаменника, джерела даних, періоду спостереження й відповідального за перевірку.
Приклад розрахунку
Якщо у вибірці зі 120 випадків усі п’ять обов’язкових процедур виконано у 96 випадках, частка повного дотримання становить 96 / 120 = 80 %. Цей умовний приклад описує процес, а не ефективність. Якщо 24 випадки стосуються людей, які не мали доступного способу відповісти на повідомлення, одна загальна частка приховає системну проблему. Необхідний аналіз причин кожного типу пропуску і відмінностей між групами.
Показники результату та небажаних наслідків
Оцінюйте не лише кількість надісланих повідомлень чи консультацій, а й досягнення цілі: успішно завершені звернення, реальне використання послуг, зменшення необґрунтованих відмов або підвищення доступності. Поряд із користю фіксуйте помилкові спрацювання, додаткові витрати часу, скарги, випадки стигматизації, неочікувані адміністративні бар’єри та порушення приватності. Наперед визначте, які негативні сигнали зупиняють програму до перевірки.
Якість самих показників
Показник має відображати потрібний конструкт, вимірюватися надійно та мати значення для користувача. Автоматична статистика платформи може бути точною щодо натискань, але слабкою щодо розуміння повідомлення. Оновлений систематичний огляд Mettert та співавторів продемонстрував, що психометричне обґрунтування багатьох інструментів вимірювання результатів впровадження залишається обмеженим. Перед використанням шкал в Україні потрібна перевірка мовної та контекстної придатності.
Методи збору даних і перевірка достовірності
Адміністративні записи та цифрові журнали
Записи дають змогу стежити за часом, статусами, обсягом послуг і послідовністю операцій. Їхня перевага — доступність у звичайній роботі, а обмеження — пропущені події, неоднакові визначення полів і можливість формального заповнення заднім числом. Слід перевіряти узгодженість журналів із незалежною вибіркою випадків та встановлювати чіткі правила доступу.
Спостереження та аудит випадків
Структуроване спостереження дозволяє оцінити поведінку виконавця і фактичну якість пояснення. Аудит завершених справ виявляє пропуски критичних етапів. Спостереження може тимчасово змінювати поведінку персоналу, тому його результати необхідно зіставляти з іншими джерелами. Для надійності корисні стандартизовані критерії та перевірка узгодженості оцінок кількох незалежних експертів.
Опитування, інтерв’ю та скарги
Опитування характеризують досвід і сприйняття, інтерв’ю пояснюють причини труднощів, а скарги можуть виявити серйозні порушення. Водночас мовчання людей, які не змогли скористатися сервісом, не свідчить про їхню задоволеність. До збору якісних даних слід залучати групи з найбільшими бар’єрами, забезпечивши безпечну можливість відмовитися від участі.
Поєднання різних джерел
Перехресна перевірка адміністративних даних, спостереження і свідчень учасників знижує залежність від одного джерела, хоча не усуває всіх упереджень. Протокол аналізу визначає, як реагувати на розбіжності: наприклад, коли в журналі послугу позначено завершеною, але людина повідомляє, що фактично результату не отримала. Згідно з рекомендаціями Moore та співавторів, оцінювання процесу має охоплювати реалізацію, механізми впливу та контекст.
Адаптація програми: коли зміна підтримує якість
Планова адаптація
Адаптація є виправданою, коли покращує відповідність локальним умовам і зберігає визначальні компоненти програми. Для повідомлень це може бути зрозумілий переклад чи формат, доступний для екранного читача; для прийому громадян — інший графік або альтернативний канал. Потрібно задокументувати причину зміни, її зміст, учасників рішення та очікуваний механізм.
Незаплановані відхилення
Відхилення можуть виникати через несправну інфраструктуру, дефіцит кадрів, непередбачену юридичну ситуацію чи спробу працівника полегшити роботу. Журнал змін відокремлює безпечну адаптацію від випадкового пропуску ключових процедур. Рамка FRAME пропонує фіксувати, коли відбулася зміна, хто її запропонував, що саме змінено, на якому рівні, з якою метою і наскільки зміна узгоджується з основою втручання.
Як оцінити наслідки адаптації
Порівнюйте дані до й після зміни, оцінюйте досягнення процесних критеріїв і результати для різних груп. Якщо зміни відбувалися одночасно з реформою фінансування або кадрового забезпечення, просте порівняння періодів не встановить причинний вплив адаптації. Для переконливішого висновку потрібні відповідний порівняльний дизайн, незалежні вимірювання та чутливість до змін контексту.
Контроль якості в різних суспільних програмах
Державні послуги та адміністративні процедури
У програмі полегшення доступу до державної послуги слід перевіряти зрозумілість кроків, законність рішень, своєчасність відповіді, наявність допомоги та можливість скористатися офлайн-каналом. Якщо кампанія підвищує частку заповнених заяв, але збільшує відмови через неповний пакет документів, це сигнал для перегляду інструкцій і реальної організації процесу. Показник поданих заяв не замінює показника завершених правомірних звернень.
Громадське здоров’я
У програмах профілактики необхідно розрізняти доставлену інформацію, фактично доступні послуги та використання ефективних способів допомоги. Наприклад, нагадування про обстеження не має практичної цінності, якщо в установі відсутній запис або немає безбар’єрного маршруту. Поряд із точністю повідомлень оцінюють наявність кадрів, матеріалів, відповідної клінічної процедури і безпечність втручання. Ця вимога узгоджується з рамкою складних втручань Skivington та співавторів.
Освітні та громадські програми
Для освітніх програм суттєвими будуть тривалість занять, підготовка викладача, регулярність участі та фактичне застосування навичок. Для місцевих програм участі — прозорість відбору, доступний формат обговорення, здатність врахувати пропозиції і своєчасне повідомлення про ухвалені рішення. Перенесення інструменту між секторами вимагає перегляду механізму, критеріїв безпеки й системи оцінювання.
Як відокремити якість реалізації від причинного ефекту
Показники виконання не доводять результативність
Зростання точності виконання та зростання бажаного результату можуть бути пов’язаними, проте цей зв’язок не обов’язково причинний. Установи з кращими ресурсами можуть одночасно якісніше виконувати протокол і мати інші переваги: досвідчені команди, менше звернень, вищу доступність. Аналіз має враховувати такі змішувальні чинники, часову послідовність та спосіб відбору учасників.
Рандомізовані, квазіекспериментальні й описові підходи
Рандомізований дизайн може оцінювати наслідки призначення програми або різних стратегій її впровадження. Квазіекспериментальні підходи корисні там, де рандомізація неможлива, але потребують обґрунтованих припущень щодо порівнянності. Описовий моніторинг виявляє дефекти процесу, проте сам по собі не встановлює контрфактичний результат. Методологія має відповідати питанню, а не бажаному рівню переконливості звіту.
Чому не варто аналізувати тільки «ідеальні» випадки
Відбір лише установ із високою точністю реалізації може створити хибний висновок про користь втручання: на якість упровадження та кінцеві результати здатні впливати ті самі невиміряні характеристики. В експериментах основний аналіз зазвичай має зберігати логіку початкового призначення, а додаткові аналізи за фактичним виконанням потребують спеціальних причинних припущень. Це особливо важливо, коли якість реалізації вимірюють уже після початку втручання.
Практична та статистична значущість
Навіть переконлива статистична різниця може означати мінімальну зміну для громадян, якщо абсолютний виграш становить кілька секунд чи декілька десятих відсотка без відчутного полегшення. Подавайте абсолютні величини, довірчі інтервали, витрати, можливу шкоду і наслідки для різних груп. Поріг практично значущого покращення бажано визначити до аналізу спільно з користувачами та відповідальними установами.
Масштабування та підтримання якості
Чому успіх пілоту не гарантує успіху в усій країні
Пілот часто підтримують досвідчені фахівці, додаткове фінансування та посилений контроль. Під час розгортання навантаження розподіляється між установами з різними ресурсами; змінюються мотивація, навчання, склад населення і доступність допомоги. Тому слід повторно оцінювати охоплення, якість надання, адаптації, витрати та сталість, а не екстраполювати одну оцінку ефекту на всі території.
Спільний стандарт і локальна відповідальність
Центральний координатор визначає мінімальний стандарт безпеки, показники та спосіб звітування; місцеві виконавці відповідають за реалізацію і документовані адаптації. Регіональні відмінності потрібні для розуміння причин і вдосконалення програми. Публічний рейтинг без пояснення різниці ресурсів і потреб може стимулювати приховування складних випадків.
Бюджет, витрати і реалістичні ресурси
План контролю якості має враховувати витрати часу на навчання, супровід, аудит, захист даних, забезпечення доступності та коригування. Програма, яка формально вимагає дотримання стандарту без виділення потрібних ресурсів, створює хибну відповідальність виконавців і загрозу якості. Реальні бюджетні обмеження потрібно включати до оцінювання життєздатності програми.
Етичний і правовий контроль в Україні
Автономія, прозорість і право на вибір
Учасник має розуміти мету повідомлення чи послуги, доступні альтернативи та наслідки свого рішення. Для дослідницького збору інформації, психологічних оцінок і процедур, що впливають на права людини, необхідно встановити належні підстави, форму інформування та можливість відмови відповідно до характеру втручання. Етичний контроль включає перевірку прихованого тиску, маніпулятивних формулювань і нерівності доступу.
Персональні дані
Моніторинг не виправдовує необмежений збір і поєднання персональних відомостей. В українському праві обробку персональних даних регулює Закон України «Про захист персональних даних». Проєкт оцінювання має визначати мету й правову підставу обробки, мінімально необхідні категорії даних, коло доступу, строки зберігання, заходи безпеки та процедуру реагування на порушення. Дані про вразливі групи потребують особливо уважного захисту від повторної ідентифікації.
Доступ до інформації та підзвітність
Результати бюджетних суспільних програм доцільно пояснювати зрозумілою мовою: цілі, спосіб оцінювання, реальні результати, витрати й виявлені обмеження. Обсяг розкриття визначають чинні норми, зокрема Закон України «Про доступ до публічної інформації», з урахуванням законних обмежень і захисту персональних відомостей. Прозорий звіт має повідомляти також про зміни протоколу та негативні наслідки.
Рівність і недискримінація
Застосування єдиних цифрових процедур може створювати непрямі бар’єри для людей з інвалідністю, літніх людей або громадян без стабільного доступу до інтернету. Оцінювання якості повинно визначати такі наслідки і пропонувати доступні альтернативи. Закон України «Про засади запобігання та протидії дискримінації в Україні» установлює правові засади рівності можливостей і заборони дискримінаційних форм поведінки. Розподільча оцінка перевіряє, кому дістається користь програми та хто несе її витрати.
Інформування про помилки
Потрібні зрозумілі канали оскарження й повідомлення про збої. Працівники мають мати можливість фіксувати порушення без стимулу приховувати їх, а люди — отримувати належну відповідь. Дані про скарги слід розглядати як джерело сигналів для перевірки, а не автоматичне підтвердження провини чи якості роботи установи.
Типові помилки контролю впровадження
Плутанина між діяльністю й досягнутим результатом
У звіті зазначають тисячі надісланих повідомлень, проведених занять або відкритих форм, але не встановлюють, чи люди змогли скористатися послугою. Вихід — пов’язати кожен показник виконання з проміжним механізмом і суспільною метою та окремо оцінювати кожну ланку.
Один загальний індекс якості
Підсумковий бал може приховати критичне порушення конфіденційності за високої оцінки швидкості обробки. Необхідно представляти профіль якості за компонентами й установити безумовні вимоги до безпеки та прав людини.
Контроль заради покарання
Якщо працівники очікують, що будь-яке повідомлення про помилку погіршить їхнє становище, частина відхилень може залишитися прихованою. Корекційний підхід передбачає незалежну перевірку, зворотний зв’язок, навчання й відповідальність, пропорційну характеру порушення.
Безконтрольні адаптації
Локальне вдосконалення може бути цінним, проте без опису змін стає неможливо встановити, яка саме версія програми працювала і які ризики вона створила. Для цього потрібний доступний журнал адаптацій та порівняння результатів до й після важливих змін.
Як підготувати план оцінювання точності: робоча схема
Почніть з конкретного формулювання цільової дії та механізму впливу. Для кожного необхідного компонента вкажіть відповідального виконавця, доступні ресурси, критерій якості, метод перевірки, допустиме відхилення й умову реагування. Узгодьте часовий графік вимірювань і способи забезпечення якості самих даних. Передбачте незалежне перевіряння вибірки випадків і окремий аналіз справедливості доступу.
Далі визначте, хто розглядає відхилення, хто може змінити протокол, як перевіряється ефект змін і як повідомлятимуться результати. Для багатокомпонентних втручань корисно поєднувати кількісні показники з інтерв’ю та описом контексту. На завершення зафіксуйте вимоги до безпечності, правових підстав обробки даних, незалежності оцінювання та своєчасного зупинення шкідливих процедур.
Поширені запитання
Чим точність упровадження відрізняється від ефективності програми?
Точність показує, наскільки фактичні дії відповідають визначеним істотним компонентам. Ефективність характеризує зміни, яких програма досягла для людей або суспільства, з належним урахуванням альтернативних пояснень. Обидва показники необхідні для інтерпретації суспільного втручання.
Чи завжди потрібно виконувати протокол дослівно?
Протокол визначає критичні компоненти, гарантії безпеки та межі припустимих змін. Зміна каналу доступу, мови або графіка може покращувати реалізацію, якщо зберігає механізм і права учасників. Адаптації документують та оцінюють.
Хто має здійснювати контроль якості?
Безпосередні виконавці ведуть поточний облік, керівники забезпечують ресурси та реагування, а для важливих висновків про якість і ефективність потрібна незалежна перевірка. Розподіл повноважень установлюють заздалегідь, щоб уникнути конфлікту інтересів.
Як часто перевіряти точність виконання?
Частота залежить від ризиків, тривалості й складності програми. Критичні вимоги безпеки контролюють упродовж виконання, інші показники — відповідно до обґрунтованого календаря. Після великої адаптації або розширення програми частоту перевірок переглядають.
Що робити, якщо програма має хороші показники, але частина груп не отримує допомоги?
Загальні результати розглядають разом із розподілом охоплення, бар’єрами та небажаними наслідками. Потрібно з’ясувати, чи пов’язані розбіжності з географією, доступністю, фінансуванням або процедурою, і усунути перешкоди. Таку програму не слід оцінювати лише за середнім ефектом.
Чи можна за якісним моніторингом довести причинний ефект?
Належний моніторинг показує, що й за яких умов відбувається, проте для причинного висновку необхідна обґрунтована стратегія порівняння з тим, що сталося б без програми. Це можуть бути рандомізовані або належно спроєктовані квазіекспериментальні оцінювання.
Пов’язані статті
Для ширшого контексту прочитайте «Поведінкова державна політика: як психологія допомагає проєктувати суспільні рішення» та «Суспільне поведінкове втручання: визначення, види та механізми». Методичну основу створення процедури розкрито у статті «Проєктування поведінкових втручань у державних послугах», методи перевірки результатів — у «Оцінювання поведінкових суспільних втручань: дизайн і показники», а принципи випадкових випробувань — у «Польові A/B-тести державних комунікацій і сервісів».
Джерела
Carroll, C., Patterson, M., Wood, S., Booth, A., Rick, J., & Balain, S. (2007). A conceptual framework for implementation fidelity. Implementation Science, 2, 40. https://doi.org/10.1186/1748-5908-2-40
Durlak, J. A., & DuPre, E. P. (2008). Implementation matters: A review of research on the influence of implementation on program outcomes and the factors affecting implementation. American Journal of Community Psychology, 41, 327–350. https://doi.org/10.1007/s10464-008-9165-0
Glasgow, R. E., Vogt, T. M., & Boles, S. M. (1999). Evaluating the public health impact of health promotion interventions: The RE-AIM framework. American Journal of Public Health, 89(9), 1322–1327. https://doi.org/10.2105/AJPH.89.9.1322
Hasson, H. (2010). Systematic evaluation of implementation fidelity of complex interventions in health and social care. Implementation Science, 5, 67. https://doi.org/10.1186/1748-5908-5-67
Mettert, K., Lewis, C., Dorsey, C., Halko, H., & Weiner, B. (2020). Measuring implementation outcomes: An updated systematic review of measures’ psychometric properties. Implementation Research and Practice, 1. https://doi.org/10.1177/2633489520936644
Moore, G. F., Audrey, S., Barker, M., Bond, L., Bonell, C., Hardeman, W., et al. (2015). Process evaluation of complex interventions: Medical Research Council guidance. BMJ, 350, h1258. https://doi.org/10.1136/bmj.h1258
Proctor, E., Silmere, H., Raghavan, R., Hovmand, P., Aarons, G., Bunger, A., et al. (2011). Outcomes for implementation research: Conceptual distinctions, measurement challenges, and research agenda. Administration and Policy in Mental Health, 38, 65–76. https://doi.org/10.1007/s10488-010-0319-7
Skivington, K., Matthews, L., Simpson, S. A., Craig, P., Baird, J., Blazeby, J. M., et al. (2021). A new framework for developing and evaluating complex interventions: Update of Medical Research Council guidance. BMJ, 374, n2061. https://doi.org/10.1136/bmj.n2061
Wiltsey Stirman, S., Baumann, A. A., & Miller, C. J. (2019). The FRAME: An expanded framework for reporting adaptations and modifications to evidence-based interventions. Implementation Science, 14, 58. https://doi.org/10.1186/s13012-019-0898-y
Верховна Рада України. (2010). Закон України «Про захист персональних даних» № 2297-VI (чинна редакція). https://zakon.rada.gov.ua/laws/show/2297-17
Верховна Рада України. (2011). Закон України «Про доступ до публічної інформації» № 2939-VI (чинна редакція). https://zakon.rada.gov.ua/laws/show/2939-17
Верховна Рада України. (2012). Закон України «Про засади запобігання та протидії дискримінації в Україні» № 5207-VI (чинна редакція). https://zakon.rada.gov.ua/laws/show/5207-17