2. Відмінності оцінки від моніторинга
Оцінка в соціальному проекті – це процес детального аналізу результатів та їх співвіднесення з певними запланованими у проекті критеріями.
Моніторинг Оцінка
- проводиться на ключових
- проводиться постійно етапах реалізації проекту (вхідна,
в процесі реалізації проекту поточна підсумкова)
- отримана інформація використовується - дає можливість оцінити ефективність
для зміни або поліпшення роботи проекту проекту та сформувати рекомендації
фокусує на процес реалізації соціального - аналізує основні причини успіхів чи
проекту для порівняння інформації зі станом недоліків результатів які було
що був запланованим заплановано
Оціночні дослідження оцінюють та пояснюють причини та наслідки змін щоб:
усунути непотрібне гальмуюче
максимізувати користі від поточної роботи
вдосконалити роботу партнерських організацій їх взаємодію
подтвердити що види діяльності безпосередньо пов’язані з програмою яка реалізується і є обертом моніторингу.
Оцінювання це систематичний аналіз даних спостереження за обертом моніторингу. Виділяють три основні типи оцінювання:
оцінювання ситуації
оцінка процесу втручання
оцінка реакції та втручання
Отримання базової інформації про обекту моніторингу для розробки програми втручання, після проведення якої проводиться оцінювання того наскільки ця програма досягла поставленої цілі, тобто оцінюється реакція обекта на втручання)
Незалежно від того яке оцінювання проводиться воно мае передбачати такі стадії:
аналіз документальних даних
порівняння результатів та перевірка даних
формулювання попередніх висновків та їх перевірка методом експертних оцінок
проведення додаткових досліджень ( за необхідністю)
формулювання остаточних висновків та оформлення звіту.
Відомі дві методологічні стратегії оцінювання:
якісний аналіз ( дає можливість визначити наявність чи відсутність причин-наслідкових зв’язків між явищами а також визначити основні типи мотивацій відносин думок окремих осіб та певних соціальних груп.) для отримання первинних якісних даних використовують неструктуровані спостереження, неформалізований аналіз текстів, інтерв’ю фокус групи. Суть якісного аналізу – дослідник – наперед не розробляє жорсткої схеми суджень та не намагається забезпечити статистичну презентабельність даних. Замість того від прагне до більш повного на глибокого розуміння та пояснення соціальних явищ. Передбачає детальне вивчення порівняно малих вибірок чи навіть спеціально відібраних одиничних випадків.
кількісний аналіз (застосовуються кількісні методи аналізу даних. Кількісне дослідження можна використовувати тоді коли структура та зміст процесу вже добре відомі. Передбачає вивчення на більш великих кількостях елементів які переважно відібрані випадково.
Види оцінки діяльності соціального обекта:
За охопленням: - комплексна (оцінка всіх основних сторін діяльності 0)
За часом: - періодична, , ситуативна,
За відношенням до спеціаліста соціальної сфери: - командна, індивідуальна.)
Критерії до інформації при проведенні оцінки в соц. роботі:
відповідність – здатність інформації описувати ті чи інші сторони ситуації
достовірність – надійність отриманої інформації
Повнота – здатність відображати всі складові обекта дослідження
Своєчасність
Виділяють три підходи до оцінки соціальних програм та проектів:
наукове дослідження( вивчення взаємодії змінних)
скерована соціальна зміна ( акцентує увагу на використанні результатів оцінки у взаємодії з потенційними користувачами
від теорії соціальної справедливості.
Для проведення оцінки необхідна така послідовність дій:
аналіз змісту проекту з метою виявлення очікуваних результатів на кожному етапі реалізації
пераціоналізаія очікуваних результатів та визначення їх якісних та кількісних критеріїв
розробка інструментарію
аналіз емпіричних даних
розробка висновків та рекомендацій.
Відомо дві форми контролю проектної діяльності: моніторинг та оцінка. Поняття "моніторинг" і "оцінка" багато в чому збігаються.
"Моніторинг - це процес постійного накопичення інформації з усіх аспектів проекту з метою визначення ходу виконання і кінцевого завершення запланованих дій, а також стосовно їх сприяння досягненню поставлених цілей" (18; стор.15). Як бачимо, істотною характеристикою моніторингу є регулярність збору інформаційних даних протягом усього періоду реалізації проекту. Мета моніторингу, як і всякої оцінки, одержання зворотного зв'язку для корекції і забезпечення ефективного використання ресурсів у досягненні поставлених задач.
"Оцінка - це процес збору й аналізу інформації з метою визначення відповідності заходів, що використовуються в ході реалізації, якою мірою ці заходи сприяють досягненню сформульованої в проекті мети" (18; опор. 15). Оцінка в порівнянні з моніторингом відрізняється більшою глибиною аналізу. Оцінка - це більш систематизоване дослідження. У результаті оцінки створюються рекомендації з поліпшення не тільки проектної діяльності, але і для коректування планів на майбутнє.
Моніторинг проводиться для одержання оперативної інформації про стан справ, він повинен відповідати на запитання: "Чи вірно реалізується проект?", тому в процесі моніторингу встановлюється, наприклад, чи проведено той чи інший захід, скільки клієнтів отримали послуги, скільки витрачено було роздаткових матеріалів і т.п. Іншими словами: у процесі моніторингу здійснюється поточний контроль проектної діяльності, що дозволяє вчасно корегувати напрямки проектної діяльності. Оцінка повинна відповідати на інше питання, а саме: "Чи вірно проект реалізується?"
Menegment System International і Центр підтримки НКО розробили матеріали по оцінці проектів (10), у яких вказується на наступні розходження моніторингу й оцінки:
Таблиця 1. Відмінності моніторингу й оцінки
Моніторинг |
Оцінка
|
Проводиться постійно |
Проводиться на ключових етапах проекту
|
Модель приймається в існуючому вигляді без змін |
Модель належить оптимізувати з метою її покращення |
Фактична діяльність та результати порівнюються із запланованими |
Аналізуються причини досягнення (недосягнення) запланованих результатів
|
Отримана інформація використовується для покращення роботи по проекту
|
Отримана інформація використовується як для покращення діяльності по проекту, так і для уточнення планів на майбутнє
|
|
|
Моніторинг, як постійне вивчення ходу робіт у рамках проекту, забезпечує керівника необхідною інформацією для:
- аналізу даної ситуації;
- визначення проблем і знаходження шляхів її вирішення;
- дотримання плану виконання проекту;
- прийняття рішень стосовно людських, фінансових і матеріальних ресурсів;
Система моніторингу включається в проект з самого початку. При цьому необхідно:
- визначити вимірювані показники (індикатори), за якими можливо буде від слідкувати хід проекту;
- визначити джерела інформації для проведення моніторингу;
- визначити методи збору інформації;
- визначити частоту і графік збору інформації з урахуванням інтенсивності діяльності, що проводиться;
- призначити відповідальних за отримання необхідної інформації і домовитися з тими, хто цю інформацію буде постачати;
- врахувати в бюджеті витрати, необхідні для проведення моніторингу. Такі витрати, наприклад, можуть бути пов'язані з відрядженням чи з телефонними розмовами;
Оцінка,як більш глибока аналітична діяльність, визначає:
- адекватність проекту потребам клієнтів;
- напрямки корекції для підвищення ефективності соціальної діяльності;
- ступінь впливу проекту на оточуюче середовище. У тренінгових матеріалах Counterpart наведено таблицю, використання якої допоможе в моніторингу та оцінці:
Таблиця 2. Інформація для моніторингу та оцінки запланованих дій
Категорії інформації
|
Що підлягає оцінці |
Яку інформацію збирати
|
Хто збирає інформацію |
Хто використовує інформацію
|
Як використовувати інформацію
|
Які рішення можна приймати
|
Робочий план заходів
|
Час виконання заходів; Наявність працівників, ресурсів
|
щомісячні (щоквартальні) плани; Розклад заходів
|
Менеджер проекту, керівник |
Менеджер проекту; Організація, що фінансує проект
|
Отримати підтвердження про наявність працівників та ресурсів
|
Перепрограмував ти заходи і використання ресурсів
|
Кошти і випрати
|
Надані кошти, кошти на рахунку; Баланс в бюджеті затверджених витрат
|
Підтвердження; Перерахування грошей; Фінансові звіти спонсорам
|
Фінансові органи, Посадова особа (бухгалтер)
|
Менеджер проекту Аудитор; Організація, що фінансує проект
|
Впевнитися в наявності коштів; Впевнитися у відповідності з фінансовим регулюванням; Визначити структуру виплат за послуги, якщо такі передбачені |
Дозволити витрати; переглянути бюджет і проект, Шукати інші джерела фінансування
|
Працівники і керівники
|
Знання, стосунки, пере підготовка персоналу
|
Діяльність, посадові обов'язки; Резюме працівників Зворотний зв'язок стосовно отриманої підготовки;
|
Керівники підрозділів; Менеджер персоналу; викладачі |
Керівники підрозділів Менеджер персоналу, викладачі |
Залучати працівників; Вирішити питання найму, Надавати працівникам поради стосовно кар'єри
|
Відповідність посаді; необхідність навчання; Просування; Дисциплінарні дії
|
Товари
|
Товар; Умови замовлення! постачання; Умови забезпечення
|
Товарні реєстри; накладні; Доповідні з місць
|
Менеджери поточних справ
|
|
|
|
Менеджер
проекту,
Організація,
що фінансує
проект
Отримати
підтвердження про
наявність товару і
про його
постачання
Впевнитися в якості
товару
Скільки замовити;
Кількість, яка має
бути на
непередбачений
випадок
Результати
Кількість та
різноманіття
наданих послуг
та проданих
товарів; Дані
про людей, які
отримали
послуги чи
пройшли
навчання
Картки/форми
клієнтів
Дані з місць
Громадські
працівники;
Місцевий
керівник
Місцевий
керівник;
Менеджер
проекту,
Організація,
що фінансує
проект
Впевнитися, що
цілі реальні;
Оцінити якість
послуг, що
надаються;
Оцінити
доцільність послуг
Переглянути
цілі;
Перепідготувати
працівників;
Переглянути
стратегію
проекту і
підходи
Отже, і моніторинг, і власне оцінка проектів і програм є способом контролю, одержання зворотного зв'язку. За допомогою оцінок встановлюється правильність самої програми, відповідність її потребам цільової групи, ефективність проведених заходів в аспекті поставленої мети, а також перспективи її подальшого використання.
Важливо також, щоб зміни, які сталися в результаті проекту, були не випадковими, а передбаченими заздалегідь, ще на етапі розробки і планування проекту. Цьому слугує менеджмент проекту, який включає зіставлення досягнутих змін з тим, що було заплановано, і прийняття управлінських рішень стосовно внесення відповідних корективів (наприклад, стосовно ресурсів, що мають бути витрачені, або кількості клієнтів, охоплених проектом, тощо).