2.2 ОТ ИНСТРУМЕНТОВ ПЛАНИРОВАНИЯ ПО РЕЗУЛЬТАТАМ ДО ИНТЕГРИРОВАННОГО ПЛАНА МОНИТОРИНГА И ОЦЕНКИ

Часть 2 включает пять занятий, которые последовательно связаны между собой. Первые три занятия посвящены логическим моделям программы: что это такое, как их разрабатывают и как их можно использовать для планирования оценки. Четвертое занятие посвящено тому, как от логической модели программы перейти к логической структуре или матрице. На последнем занятии рассматривают процесс разработки пятилетнего интегрированного плана мониторинга и оценки.

Занятия 2-5 построены на серии упражнений, которые имитируют переход от разработки логической модели программы к логическим структурам и затем к ИПМО. Основой для упражнений этого модуля служат кейсы «Kids in Arms» и «Let's Build Peace Project». Кейсы позволяют рассмотреть особенности программной деятельности в условиях нестабильности.

Дополнительно включены материалы, которые позволят проводить каждое занятие как самостоятельное, если это необходимо из-за недостатка времени, или таковы цели тренинга.

В ходе занятий также можно использовать материалы об индикаторах, процессе и критериях их выбора из части 3 настоящего модуля.


ЦЕЛИ

Занятие 1: Что такое логическая модель программы? И другие инструменты планирования по результатам

  • Участники могут описать, что представляют из себя логические модели программ, как их используют, какие основные компоненты они включают, и как они соотносятся с другими инструментами планирования по результатам.
Занятие 2 -- Разработка логической модели программы
  • Участники могут описать процесс разработки логической модели программы и владеют базовыми навыками, необходимыми для разработки такой модели.
Занятие 3 -- Использование логических моделей программы при планировании оценки
  • Участники могут описать процесс и владеют базовыми навыками, чтобы использовать логические модели программ как инструмент планирования мониторинга и оценки.
Занятие 4 -- От логических моделей к логическим структурам: определение индикаторов
  • Участники могут описать, каким образом на основании логической модели строится матрица логической структуры, и понимают, в чем состоит разница между ними.
  • Участники могут определить индикаторы и источники информации для мониторинга и оценки на разных уровнях цепи результатов.
  • Участники могут определить основные особенности и возможные изменения в применении инструментов планирования по результатам в условиях кризиса и нестабильности.

Занятие 5: Объединение планов мониторинга, исследования и оценки

  • Участники способны объединить работы по мониторингу и оценке нескольких программ и использовать анализ и ранжирование приоритетов для разработки реалистичного и целенаправленного ИПМО.

ЗАНЯТИЯ

2.2.1 ЧТО ТАКОЕ ЛОГИЧЕСКАЯ МОДЕЛЬ ПРОГРАММЫ? И ДРУГИЕ ИНСТРУМЕНТЫ ПЛАНИРОВАНИЯ ПО РЕЗУЛЬТАТАМ

Это занятие включает: - знакомство с концепцией, историей и компонентами логических моделей; - примеры их применения в реальных программах; - определение того, как логические модели программ соотносятся с другими инструментами планирования по результатам (например, структурой результатов или логической структурой).

МТ
  • Что такое логическая модель программы? И другие инструменты планирования по результатам

    В ходе мозгового штурма и обсуждения тренер помогает участникам разобраться в концепции логической модели программы.

  • МЧ
  • Что такое логическая модель программы?
  • Структура результатов, логическая модель программы, логическая структура – различные инструменты для различных задач
  • ПМ
  • Что такое логическая модель программы?
  • Структура результатов, логическая модель программы, логическая структура – различные инструменты для различных задач

  • СВЯЗИ С ДРУГИМИ МОДУЛЯМИ

    Модуль 4.2.1 Что такое концептуальные структуры и деревья причин. Концептуальные структуры и выводимые из них применительно к конкретным условиям деревья причин или проблем помогают нам лучше понять структуру и иерархию существующих проблем. Обычно эти инструменты используют как первый шаг в процессе разработки логической модели программы, на основании которой в свою очередь строится анализ логической структуры.

    2.2.2 РАЗРАБОТКА ЛОГИЧЕСКОЙ МОДЕЛИ ПРОГРАММЫ

    Это занятие – первое из целой серии – использует кейсы «Построим мир» и «Дети под ружьем». Его можно также проводить как самостоятельный тренинг.

    Цель этого занятия состоит в том, чтобы участники научились строить логическую последовательность связей исходных данных, действий, результатов различного уровня и допущений для конкретной программы. Занятие предполагает практическую работу с использованием понятного реалистичного сценария, ориентированного на результаты. Подчеркивается значение логической модели программы как удобного инструмента для быстрого планирования даже в условиях кризиса и нестабильности.

    МТ
  • Разработка логической модели программы

    После короткой презентации, которая перечисляет этапы разработки логической модели программы, участники должны будут разработать логическую модель программы на основе конкретного кейса. Затем полученная логическая модель программы будет протестирована по методу SMART.

  • МЧ
  • Этапы разработки логической модели программы
  • Тестирование результатов по методу SMART
  • ПМ -
    УП
  • Кейс: инструкции
  • Кейс: Дети под ружьем
  • Кейс: Построим мир
  • Пример логической модели для проекта «Построим мир»
  • Пример логической модели для проекта «Дети под ружьем»

  • 2.2.3 ИСПОЛЬЗОВАНИЕ ЛОГИЧЕСКИХ МОДЕЛЕЙ ПРОГРАММЫ ПРИ ПЛАНИРОВАНИИ ОЦЕНКИ

    Это упражнение входит в серию упражнений, которые используют кейсы «Построим мир» и «Дети под ружьем». Его можно также проводить как самостоятельный тренинг.

    Занятие посвящено тому, как использовать логические модели программ как инструмент планирования оценки и основу для определения и ранжирования по приоритетности вопросов оценки.

    МТ
  • Использование логических моделей программы при планировании оценки

    Используя карточки, участники определят вопросы оценки для готовой логической модели программы. Затем тренер проведет обсуждение, в ходе которого будут рассмотрены вопросы оценки, разработанные участниками, и затем будет определено, чем хорошо использовать логические модели программ при планировании оценки.

  • МЧ
  • Использование логических моделей программ в мониторинге и оценке
  • ПМ -


    2.2.4 ОТ ЛОГИЧЕСКИХ МОДЕЛЕЙ К ЛОГИЧЕСКИМ СТРУКТУРАМ: ОПРЕДЕЛЕНИЕ ИНДИКАТОРОВ

    Это упражнение входит в серию упражнений, которые используют кейсы «Построим мир» и «Дети под ружьем». Его можно также проводить как самостоятельный тренинг.

    Это занятие посвящено разработке логических матриц, включая определение индикаторов для каждого уровня результатов, на основе логических моделей программ. В ходе занятия нужно обсудить, каким образом логические структуры можно адаптировать и использовать в условиях кризиса и нестабильности. Можно использовать материалы об индикаторах (их определение и критерии выбора) ил части 3 настоящего модуля.

    МТ
  • От логических моделей к логическим структурам: определение индикаторов

    На занятии будут использоваться карточки для записи. В ходе мозгового штурма на основании готовой логической модели программы участники разработают логическую структуру программы. Затем участники обсудят, какие индикаторы можно использовать для контроля за исполнением программы, и выберут наиболее подходящие. В ходе общего обсуждения будет определено, каким образом логическая структура меняется в условиях кризиса и нестабильности.

  • МЧ
  • Инструменты планирования мониторинга и оценки в условиях кризиса и нестабильности.
  • Индикаторы (из занятия 2.3.1)
  • Выбор индикаторов: процесс (из занятия 2.3.2)
  • Выбор индикаторов: критерии (из занятия 2.3.2)
  • Выбор индикаторов: уровень точности (из занятия 2.3.2)
  • ПМ -
    УП
  • Пример логической модели для проекта «Построим мир» (из занятия 2.2.3)
  • Пример логической модели для проекта «Дети под ружьем» (из занятия 2.2.3)

  • 2.2.5 ОБЪЕДИНЕНИЕ ПЛАНОВ МОНИТОРИНГА, ИССЛЕДОВАНИЯ И ОЦЕНКИ

    Это упражнение входит в серию упражнений, которые используют кейсы «Построим мир» и «Дети под ружьем». Его можно также проводить как самостоятельный тренинг, но в таком случае участникам нужно кратко рассказать о логических моделях программ и индикаторах.

    В результате этого занятия участники смогут оценить эффективность интегрированного планирования мониторинга и оценки, то есть планирования в рамках всей национальной программы, а не отдельной программы или сектора. Они также научатся определять приоритеты, разрабатывать и уточнять ИПМО с учетом имеющихся сил и ресурсов.

    МТ
  • Объединение планов мониторинга, исследования и оценки

    Под руководством тренера участники, разбившись на две группы, разработают ИПМО на основании двух логических структур, разработанных на предыдущих занятиях (или на основании любых других готовых логических структур).

  • МЧ
  • Объединение планов мониторинга, исследования и оценки
  • ПМ -


    ЛИТЕРАТУРА

    Логические модели

    W.K. Kellogg Foundation (2001). Logic Model Development Guide. W.K. Kellogg Foundation. Pg. 7-25. (10 pg.). On the web at: http://www.wkkf.org/pubs/Pub3669.pdf
    Этот материал посвящен тому, как использовать логические модели. Руководство сравнивает базовую логическую модель программы с двумя другими: моделью, основанной на теоретическом подходе, которая предназначена для первичной концептуализации “теории изменения” или экспериментральной программы, и моделью, ориентированной на действия, - чтобы разработать очень подробные планы планы проведения работ и их мониторинга (стр. 7-15). Модель, ориентированная на результаты, которую рассматривают в главе 2 (стр. 15-25), более других похожа на логические модели, о которых идет речь в Тренинговых ресурсах по мониторингу и оценке ЮНИСЕФ.

    Использование логических моделей для планирования мониторинга и оценки

    Jordan G., (1999). The State of the Art of Logic Modelling. 1999 American Evaluation Association Conference November 5, 1999. Sandia National Laboratories. Pg. 1-16.
    Эта короткая презентация, сделанная в PowerPoint, наглядно показывает, что такое логические модели и показывает, как их можно адаптировать и использовать.

    W.K. Kellogg Foundation (2001). Logic Model Development Guide. W.K. Kellogg Foundation. pg. 35-37 (2 pg.). On the web at: http://www.wkkf.org/pubs/Pub3669.pdf
    Руководство рассказывает, как использовать логические модели. Глава 4 посвящена “Использованию логических моделей для планирования оценки”. На стр. 35-37 описано, как с помощью логической модели определить вопросы оценки. Далее в этой главе описаны полезные инструменты для планирования оценки, в том числе контрольные перечни и схемы, которые дополняют материалы частей 1 и 2 модуля 3 Тренинговых ресурсов по мониторингу и оценке ЮНИСЕФ.

    McLaughlin J.A., Jordan, G., (1999). Logic models: a tool for telling your program's performance story. Evaluation and Program Planning. (22) 65-72. (8 pg.).
    Текст предназначен для менеджеров программ. Он рассматривает историю создания логических моделей, описывает, как их разрабатывать и, что особенно важно, применять для измерения характеристик работы. Обсуждаются в том числе и самые простые виды использования мониторинга процесса реализации программ. Представлен ряд базовых вопросов оценки, которые можно задать на основании логических моделей.

    Millar, A., Simeone, R.A., Carnevale, J.T. (2001). Logic Models: a system tool for performance management. Evaluation and Program Planning. (24) 73-81. Sawadogo, J.B., Dunlop, K. Managing for Results with a Dynamic Logical Framework approach: from Project Design to Impact Measurement. Canadian Journal of Development Studies.

    Patton, M. 1997, Utilisation-Focused Evaluation, 3rd ed., Thousand Oaks: Sage Publications. Pp 154-169 (33p)
    В этом тексте рассматриваются трудности при определении того, какие результаты должны быть достигнуты, и, соответственно, обеспечении того, чтобы вся работа была нацелена на их достижение, что является главной задачей при разработке логической модели. Приведен ряд конкретных примеров сложных формулировок результатов. Затем рассмотрено, как можно описать желаемые результаты для управления и оценки по результатам, ориентированных на человека. Описано, как определить, кто является участниками или клиентами, как сформулировать требуемые результаты и соответствующие индикаторы для этих результатов, как определить целевые значения характеристик работы и организовать сбор и обработку информации с учетом использования получаемых результатов.

    Логические структуры

    Canadian International Development Agency (2001). The Logical Framework: Make it Results-Oriented. On the web at: http://www.acai-cida.gc.ca/cida_ina.nst. (11 pg.)
    Руководство CIDA по использованию логических структур (ЛС). Кратко описано, как использовать ЛС при разработке двусторонних проектов. Предполагается, что читатели в некоторой степени знакомы с ЛС и управлением по результатам.Этот документ интересен тем, что в нем больше внимания уделено рассмотрению результатов, а не используемых ресурсов. Пример логической структуры проекта CIDA можно посмотреть на http://www.acdi-cida.gc.ca/cida_ind.nsf/682f5cd8c017661b8525677d007117d9/a9bbc92ad2ad843385256b0c005f0ba5?OpenDocument

    Danida (1995) Logical Framework Approach: A Flexible Tool for Participatory Development"

    NNorwegian Agency for Development Corporation (NORAD) (1992). The Logical Framework Approach: Handbook Objectives-Oriented Planning-2nd Edition.

    AUSAID (2002). The logical framework approach. On the web at: http://www.ausaid.gov.au/ausguide/ausguidelines/ausguidelines-1.pdf BOND (2001). Beginner's Guide to Logical Framework Analysis. On the web at: http://www.bond.org.uk/lte/guidancenotes/logframes1.html

    ИПМО

    См. литературу, рекомендованную для части 2.1. А также USAID (1996). Performance Monitoring and Evaluation TIPS “Preparing a performance monitoring plan”, no. 7 http://www.usaid.gov/pubs/usaid_eval/pdf_docs/pnaby215.pdf


    ДОПОЛНИТЕЛЬНЫЕ ТРЕНИНГОВЫЕ МАТЕРИАЛЫ

    UNICEF (2004) Programme Process Training Package. Сотрудники ЮНИСЕФ могут посмотреть последнюю версию в учебной интранет-сети.



    ЮНИСЕФ – Тренинговые модули по мониторингу и оценке
    Ноябрь 2002