«А.С.Автономов, Н.Л.Хананашвили ОЦЕНКА В СОЦИАЛЬНОМ ПРОЕКТИРОВАНИИ Москва 2010 2 А.С.Автономов, Н.Л.Хананашвили. Оценка в социальном проектировании. Методическое пособие./ Под общей редакцией А.С.Автономова. М.: ...»

Во-вторых, это – экономическое выражение вашей деятельности по проекту. Только глядя на бюджет проекта, можно понять, насколько обоснован запрашиваемый вами объём средств.

В-третьих, бюджет проекта – документ, детализировано разъясняющий все основные экономические составляющие проекта.

Надо сказать, что помимо непосредственно цифровых данных, бюджет обычно содержит и пояснения к нему. Такие пояснения способствуют большей обоснованности предполагаемых трат.

В-четвёртых, это и ваш финансовый гид, помощник при реализации проекта. Бюджет и пояснения к нему позволяют «расшифровать» его положения, сделать бюджет более «рельефным», понятным для самих исполнителей.

Наконец, в-пятых, бюджет проекта это – неотъемлемый атрибут его прозрачности. Хорошо известно, что прозрачность – это Подробнее о моделях формирования сетевых структур в среде неправительственных некоммерческих организаций см.: Хананашвили Н.Л. Модель информационно-ресурсной системы Фонда НАН как способ развития сетевых организаций. // В сборнике «Горизонтали Третьего сектора». М.: Институт «Открытое Общество», 2002. – с.с.63-66.

свойство, позволяющее внушать доверие окружающим вас партнёрам. Это свойство полезно и для обеспечения эффективного внешнего контроля.

Основными свойствами бюджета проекта можно назвать обоснованность, логичность, соразмерность масштабу проекта, соразмерность опыту исполнителя, эффективность расходов, создание эффекта социальной и экономической устойчивости. Рассмотрим указанные свойства подробнее.

Обоснованность.

Важна реальность указанных цен и планируемых расходов.

Зачастую проектанты склонны либо указывать цены, которые заметно выше рыночных, или покупать технику и оборудование, либо вовсе не нужно в таком проекте, либо наиболее дорогую, которая вполне могла бы быть и скромнее. При оценке бюджета проекта желательно, чтобы у оценщика была возможность рекомендовать грантодателю изменение в ту или иную сторону бюджета проекта.

Логичность – взаимоувязанность с запланированными мероприятиями и иными действиями Соразмерность масштабу проекта Соразмерность опыту соискателя, исполнителя.

Как уже говорилось ранее, здесь необходимо обратить внимание на два аспекта опыта – организационный и финансовый. Если подобного опыта у заявителя нет, грантодателю сложно рассчитывать на успех. Собственно, и самой организации желательно браться за посильные задачи, используя для этих целей принцип «расширяющегося шага».

Эффективность расходов.

Здесь желательно, чтобы расходы имели не только строго целевой характер, но и позволяли рассчитывать на получение запланированных результатов, оказание заранее предусмотренного социального воздействия, сохраняя при этом разумную экономичность.

Создание эффекта социальной и экономической устойчивости Наиболее удобная форма представления бюджета проекта – табличная. Несколько упрощённо такая таблица может выглядеть примерно так.

БЮДЖЕТ ПРОЕКТА

1. ЗАРПЛАТА Штатный персонал Приглашённые специалисты Вклад добровольцев 2. Транспортные расходы 3. Командировочные расходы 4. Расходы по проведению мероприятий 5. Приобретаемое (арендуемое) оборудование 6. Аренда помещений:

офисные, для мероприятий 7. Издательские расходы 8. Банковские расходы 9. Непредвиденные и другие расходы ИТОГО Кратко прокомментирую типичные разделы проекта.

ЗАРПЛАТА (штатный персонал и приглашённые специалисты, добровольцы).

Оплата труда участников проекта – центральный элемент большинства бюджетов. Желательно, чтобы заявитель, уже при составлении бюджета, различал оплату труда штатного персонала (оплата практически всегда повременная) и оплату труда привлекаемых специалистов. Оплата привлекаемых специалистов может быть как повременной, так и смешанной (скажем, почасовая оплата за проведение семинаров или ведение конференции, так и сдельной (например, за подготовку доклада или материалов для публикации).

Разница между данными категориями оплачиваемых сотрудников заключается и в исчислении налогов при оплате труда. Данная позиция характерна для нынешнего периода времени: для штатных сотрудников так называемый единый социальный налог (ЕСН) составляет 26,2%. А вот для привлечённых специалистов сейчас этот налог меньше – 23,1%, поскольку не включены начисления в фонд социального страхования.

Сами же размеры вознаграждения за труд (при использовании бюджетных грантовых средств – во всяком случае) желательно примерно ориентировать на размеры оплаты труда бюджетников.

Как правило, расходы на «вознаграждение» добровольцев, хотя и могут быть в бюджете, но выплате не подлежат, иначе это уже нельзя назвать добровольчеством.

Транспортные расходы (поездки, транспорт).

Транспортные расходы могут быть включены в перечень требующих финансирования в случаях:

- участия в выездных мероприятиях персонала проекта или привлекаемых специалистов;

- осуществления значительного объёма разъездной деятельности (как правило, такие расходы грантодатели на себя не берут);

- необходимости оплаты специального транспорта (например, по перемещению участников с проблемами опорно-двигательного аппарата).

Расчёты таких расходов приводятся, как правило, примерные, поскольку вполне возможно изменение цен на те или иные билеты.

Командировочные расходы: проезд, проживание, суточные (если таковые предусмотрены).

';

В ходе реализации проекта вполне возможна необходимость отправления специалистов в дальние командировки (в особенности это характерно для межрегиональных проектов, однако, в ряде крупных регионов подобная необходимость расходов может возникнуть и при реализации регионального проекта). Данные расходы также должны быть соотнесены с примерным уровнем цен на соответствующие услуги: транспортные или гостиничные, а также с размером средств, которые предусмотрены на компенсацию стоимости проживания (так называемые суточные расходы).

Расходы по проведению мероприятий.

Если проект предусматривает большой объём мероприятий (в особенности, связанных с выездом участников мероприятий), такие расходы должны быть прописаны детально.

Выезд участников за город (например, для проведение семинара) должен содержать в качестве расходов оплату транспорта (если считать, что участники сами не смогут добраться до места его проведения и обратно), проживания и питания в течение времени мероприятия. Кстати, собственный, достаточно богатый опыт просветительской деятельности свидетельствует: такие, удалённые от места жительства выезды оказываются значительно более эффективными, чем организация обучения в городе (в особенности. В большом городе, где всегда множество самых разнообразных других дел, зачастую, не позволяют сосредоточиться на получении новых знаний). Такой методический подход называют «обучением с погружением».

Как правило, существует и должна учитываться потребность участников в тех или иных материалах, оборудовании, письменных принадлежностях (ручки, блокноты, папки, бумага, бэджи).

Приобретаемое (арендуемое) оборудование.

С одной стороны, реализация проектов, как правило, требует приобретения некоего оборудования. Это могут быть и компьютеры, и множительная техника, факсимильные аппараты и другое.

Время от времени приходится сталкиваться с требованиями грантодателей, считающих невозможным приобретение на бюджетные средства дорогостоящего оборудования для небюджетных организаций. В этом случае в условиях конкурса это должно быть записано. Однако не сомневаюсь, что подобный подход вовсе не самый эффективный. Оборудование всё равно необходимо. Для выхода из этой ситуации грантодателей допускает возможность долгосрочной аренды техники. Вот здесь и возникает почва для нерациональных расходов, а то и для коррупции. Дело в том, что краткосрочная и долгосрочная аренда, в особенности, при значительном количестве мероприятий, требующих применения техники, оказывается более дорогой, чем оплата покупки техники. И тогда эти расходы всё равно производятся, но выгоду в конечном итоге получает сторонняя организация, предоставившая арендуемое оборудование, а не исполнитель, который мог бы и дальне использовать приобретённое оборудование в социально значимых целях. А арендная плата становится, подчас, способом для прямого увода бюджетных денег из сферы финансового контроля.

Кстати, проблема контроля за целевым характером использования дорогостоящего оборудования в странах с устоявшейся проектной культурой решается таким образом: организация, приобретающая дорогостоящее оборудование, обязана в течение ряда лет (например, в течение гарантийного срока эксплуатации техники) присылать грантодателю краткий отчёт об использовании оборудования в соответствующих выполненному проекту целях.

Аренда помещений.

Как правило, аренда офисных помещений представляет собою траты, осуществляемые самой организацией-заявителем. Проект, как таковой, не должен финансировать текущие расходы организации, непосредственно не относящиеся к проекту.

Поэтому аренда помещений, которые необходимы вам для проведения запланированных мероприятий, в основном – разовые расходы. Если для выполнения проекта вам необходимо арендовать помещения на долгий срок, у оценщика может возникнуть вполне резонный вопрос: а как будет обеспечиваться устойчивость проекта после окончания срока аренды; кто будет финансировать эти расходы и почему грантодатель должен финансировать нечто вне временных рамок проекта.

Канцелярские расходы и расходные материалы.

Данные расходы, как правило, не являются значительными в структуре бюджета, однако без учёта потребности в них деятельность проекта может оказаться под угрозой и потребовать совсем непредвиденных трат. Например, если в ходе подготовки ваших мероприятий необходимо размножение материалов или информирование, связанное с факсовыми или почтовыми отправлениями, то соответствующие расходы желательно предусмотреть заранее. Бумага – также является быстро утекающим материалом, расходуемым незаметно, но неизбежно.

Издательские расходы.

Так же, как и в ряде ранее расположенных разделов, издательские расходы, с одной стороны, должны быть ориентированы на примерные или средние цены на услуги (в данном случае – полиграфические), оказываемые сторонними организациями. Если, естественно, вы не собираетесь самостоятельно размножать или печатать выпускаемую вами по проекту продукцию.

Помимо данного соображения, необходимо трезво оценивать и реальную потребность в вашей полиграфической продукции – чтобы не захламлять помещения никому не нужной «макулатурой».

Есть ещё один аспект, который должен быть учтён заявителем – сочетание цены и качества. Мне знакомы случаи очень красивого оформления совершенно бессодержательных материалов и, наоборот, крайне востребованная литература выходит, подчас, в неудобочитаемом виде, выпускаемая мелким шрифтом и на бросовой бумаге. В первом случае продукт просто никому не нужен, во втором – пользоваться им бывает, мягко говоря, не очень приятно.

Банковские расходы.

Это расходы по осуществлению банковских операций в вашими средствами, в том числе, полученными по проекту. Как правило, невелики, но о них не стоит забывать.

Непредвиденные и другие расходы.

В целом ряде случаев данные расходы могут оказаться необходимыми (например, удорожание какой-либо техники или оказываемых вам сторонними организациями услуг). Как правило, объём таких зарезервированных средств не превышает 5% от общего объма финансирования. Отсутствие же такой статьи расходов делает бюджет проекта совершенно негибким, не приспособленным к различным обстоятельствам, возникающим уже после утверждения бюджета проекта.

Практическая работа позволит специалистам, осваивающим начала проектной культуры, постепенно разобраться с данным разделом, который по праву считается одним из самых сложных. Полезным в этом смысле является освоение программы Microsoft Excel, позволяющей путём несложных операций сделать составление бюджета делом неутомительным, а бюджетную таблицу – легко пересчитываемой, в зависимости от изменения того или иного её параметра*.

9. Приложения.

Как правило, приложения проекта представляют собою различные материалы, которые могут свидетельствовать о вашей способности выполнить представляемый проект.

Во-первых, это могут быть рекомендательные письма, подписанные руководителями региона, города, профильного ведомства или авторитетными специалистами в области вашего проекта.

Во-вторых, в приложении можно поместить краткую информацию о привлекаемых в ваш проект специалистах. Это позволит при оценке проекта судить о реальности оказания тех или иных услуг, которые в нём предусмотрены. Естественно, резюме специалистов должно характеризовать его способность выполнять предусмотренную в проекте роль.

В-третьих, это может быть информация об организациизаявителе, из чего эксперт-оценщик может убедиться в наличии опыта по реализации подобных проектов или проектов, имеющих примерно такой же, либо хотя бы сопоставимый уровень финансирования и/или организационных усилий. Многолетний опыт проведения экспертиз проектных заявок позволяет сделать вывод о том, что если такого опыта у организации-заявителя нет, то вряд ли можно быть уверенным в том, что она сможет успешно справиться с поставленной задачей и, следовательно, стоит быть осторожным в рекомендациях по поддержке такой заявки.

В данной работе практически невозможно освещение темы, связанной с применением такого, безусловно важного инструмента проектной работы, как компьютерные программы, напрямую предназначенные для проектирования, например, MS Project.

Краткие заключительные замечания. Итак, мы рассмотрели кратко основные элементы, из которых должен состоять любой проект. Желающие получить дополнительное ресурсное обеспечение для своих учреждений или организаций, конечно должны иметь представление об этих элементах. Однако, несомненно, что только практический опыт работы над социальными инициативами и их проектным оформлением позволит понять, что такое проект, почувствовать интерес к такой форме работы, а именно – ощутить «живое дыхание» социального проектирования.

РОЛЬ ОЦЕНКИ В УПРАВЛЕНИИ ПРОЕКТОМ

Основы оценки социального проекта. В настоящее время в России нормативно-правовой, кадровой, образовательнометодической базы для оценочной деятельности практически нет.

Основная сфера применения оценочной деятельности в лучшем случае – это экспертиза документов, касающихся проектного режима осуществления политики, и самих программ и проектов.

Есть, правда, хотя и довольно многочисленные, но разрозненные источники информации, есть отдельные структуры и даже части того или иного сектора публичной активности, которые используют в своём инструментарии оценочную деятельность*. Например, Счётная палата Российской Федерации лишь недавно озаботилась созданием такого, безусловно необходимого стандарта своей деятельности, как аудит эффективности17.

В то же время актуальность формирования системы контроля всей «деятельностной линейки» проекта, начиная от анализа и оценки потребности и заканчивая оценкой влияния (последействия), для любой сферы деятельности и, в особенности для социальной сферы остаётся столь же острой. Если даже коротко перечислить сферы применения оценочной деятельности, то получится внушительный перечень: мониторинг, анализ, диагностика, аудит документов, оценка, инспекция, прогноз, моделирование, планирование, проектирование, исследование – во всех этих действиях роль оценочной деятельности представляется едва ли не центральной.

Вслед за этапом проектирования и оценки текста проекта (естественно, если проект получил требуемую и соответствующую ресурсную) наступает этап его выполнения.

При этом следует иметь ввиду, что под I сектором мы понимаем органы публичной власти, под II сектором – бизнес, под III-м – неправительственные некоммерческие организации (ННКО).

См. доклад «О методологическом обеспечении деятельности Счётной палаты Российской Федерации: http://www.ach.gov.ru/userfiles/tree/metod_obespech-tree_files-fl-46.pdf.

Функции оценки в ходе управления проектом. Функции, которые выполняет оценочная деятельность в процессе выполнения проекта, столь же многообразны. Контролируя процесс его реализации, мы можем отметить следующие важные составляющие такой работы.

Оценка, во-первых, выделяет успехи. При реализации любого проекта, подобно тому, как в военном деле при наступлении важно обнаружить точки прорыва, значимыми являются «точки или векторы роста» – направления, в которых реализуемый проект проходит более успешно. Анализируя те или иные успешные практики, находя основные или ключевые элементы, ставшие причиной успеха, можно и легче понять, в какую сторону двигаться дальше, на развитие каких элементов общего действия, созданной социальной технологии или особенностях её применения стоит в дальнейшем сделать упор. Отслеживание и фиксация положительных моментов в реализации проекта тем более важны, поскольку они способствуют и росту и укреплению мотивации участников проекта, их нацеленности на положительный итог.

Оценка, во-вторых, отмечает слабости. «Негативный результат – тоже результат». Опыт, приобретаемый в процессе реализации того или иного проекта, важен любой. Далеко не всё замышлявшееся оказывается на поверку удачным. И, подобно библейским заповедям, в основном отвращающим от того, чего делать не нужно, направления деятельности, демонстрирующие отрицательный эффект, позволяют сделать выводы и в следующий раз учитывать этот момент в своей работе. Подобные предостережения важны будут для следующих исследователей и проектантов.

Оценка, в-третьих, указывает на элементы, требующие изменения, укрепления (дефекты – способы их устранения). Своевременное реагирование на негативные симптомы или события в проекте и изменение, коррекция вектора движения либо применяемых в процессе выполнения проекта методов или подходов, способствуют исправлению дефектов, изначально заложенных в проект или появившихся в его ходе.

Оценка, в-четвертых, позволяет определить стратегию дальнейшего развития. Проект – это «маленькая жизнь»; даже в процессе его выполнения руководитель просто обязан позаботиться о том, что же предстоит дальше. Находясь в «теле» проекта, менеджер, ответственный за управление им (либо коллектив управленцев), так или иначе заглядывает за пределы «горизонта» данного проекта, задумывается о перспективах работы в данном направлении (учитывая и важность сохранения и приумножения собственного управленческого авторитета).

Оценка, в пятых, существенно и долгосрочно влияет на «жизнь» исследуемого объекта (выполнение проекта, программы).

Отталкиваясь от размышлений и предварительных взглядов на перспективы и дальнейшую судьбу того или иного проекта, его руководители и исполнители неизбежно, положительно или отрицательно влияют на сам проект.

Успешность реализации проекта, так же, как и, например, в управлении автомобилем, во многом зависит не только от правильно выбранного направления движения и усилий, но и от корректности движения. В самом же проектном движении существенную роль имеет чувствительность системы управления к вашим действиям. Приятно ехать в машине, когда чувствуешь, что она легко управляется.

Следовательно, помимо непосредственно управленческих действий, осуществляемых в ходе выполнения проекта, необходимо применение и методов контроля за происходящим. В качестве основных можно назвать такие действия, как мониторинг (наблюдение), инспекция, аудит, оценка, исследование.

Оценочное сопровождение проекта, если чуть более подробно рассмотреть предложенные инструменты контроля, можно представить следующим образом.

Мониторинг. В процессе выполнения проекта необходим мониторинг для наблюдения за тем, что происходит в проекте, для отслеживания его течения. При этом данный инструмент используется, прежде всего, для того, чтобы понимать, насколько запланированные действия и складывающаяся реальность соответствуют предварительным ожиданиям, расчётам и предположениям, выбранным подходам и технологиям. Удобным средством для такого наблюдения становятся заранее разработанные или предусмотренные изначально индикаторы соответствия. Использование в процессе управления проектом нескольких индикаторов приветствуется, подобно тому, как, помимо термометров в больнице существует множество других инструментов поверхностного сканирования ситуации. Например, применяются и периодический обход врачом больных, и наличие сестринского поста и, в серьёзных случаях, возможность установки аппаратуры непрерывного контроля состояния больного. И, хотя проект не является «больным», но в целом ряде случаев, в особенности, в точках повышенного риска, рост активности в наблюдении может считаться вполне уместным.

В целом процесс выполнения проекта является ключевой стадией, на которой возможно и целесообразно применение мониторинга, поскольку именно здесь происходят непрерывные или периодические, запланированные заблаговременно действия, наблюдая за которыми можно собрать необходимый объём информации для последующего анализа, выводов и обобщений.

В то же время мониторинг может содержать в себе и более конструктивную составляющую, нацеленную на выявление и оценку изменений, которые могут оказаться положительными для результатов. В этом смысле не исключено, что и инспекция способна обнаружить такие положительные изменения. «Внутренний» мониторинг, осуществляемый самим исполнителем, может быть полезен в плане обеспечения самоконтроля и сохранения чувствительности проекта к происходящим в его ходе событиям и изменениям.

Наиболее существенными составляющими мониторинга можно назвать:

- перечень характеристик, подлежащих наблюдению. Предварительный анализ, прежде всего, анализ рисков, ресурсов и потребностей, позволяет установить наиболее важные характеристики, оказывающие существенное влияние на ход реализации проекта;

- индикаторы и показатели, на основании которых следует судить о состоянии тех или иных аспектов, стадий механизмов реализации и проекта в целом и о наблюдаемой динамике. Например, индикатором ряда погодных явлений, наблюдаемых нами из окна, могут служить лужи: при наступлении холодов с приходом зимы они замерзают; во время дождя на них видны круги от падающих капель, от частоты появления которых мы судим о его силе; рябь на лужах может свидетельствовать о ветреной погоде и т.д.;

- частота и точки (места) проведения замеров. От данного параметра так же, как и от правильности выбора индикатора, во многом зависит чувствительность мониторинга к происходящим в проекте событиям;

- методы сбора информации и сборщики информации;

- технологии обработки и анализа информации;

- преобразование для восприятия и распространение информации;

- финансирование (ресурсное обеспечение) оценки в рамках проекта.

Последняя позиция выглядит в данном перечне несколько экзотично, в особенности учитывая нынешнюю российскую практику социально-проектной деятельности. Однако такие расходы (или во всяком случае, некоторые, заранее выделяемые ресурсы сотрудников проекта или иным образом привлекаемых специалистов организации-исполнителя или внешних агентов) должны быть предусмотрены заблаговременно.

Аудит. В части определения соответствия происходящих действий ранее запланированным, более глубоко проникающим инструментом контроля может считаться аудит. При этом важно иметь ввиду не столько формальный, сколько содержательный аудит, аудит результативности.

Проведение инспекций. Наличие же каких-либо заметных и существенных отклонений позволяет говорить о необходимости проведения инспекции. В основе данного вида контроля – работа по выявлению тех или иных нарушений, степени их значимости для выполнения проекта либо отдельных его этапов, в том числе и возможного влияния на ожидаемые результаты.

Исследование. Наконец, в рамках проекта может осуществляться исследование. Основной задачей данного вида работы является получение нового знания. В качестве же перспективы реализации исследования выступают как обнаружение тех или иных деталей и подробностей, ранее не замеченных, так и выявление новых закономерностей и возникновение основы для последующего моделирования и планирования в направлении реализуемого проекта.

Условия успеха управления проектом. Управление проектом представляется ключевой, важнейшей составляющей его успеха. Именно здесь возникает (и, зачастую, к сожалению, исчезает) возможность сделать так, чтобы по окончании проекта не приходилось в который раз в качестве самооправдания использовать выражение В.Черномырдина, ставшее в наши дни печально крылатым:

«Хотели как лучше, а получилось – как всегда». И в то же время, с точки зрения оценочной деятельности, наблюдение, анализ и экспертиза подготовки и реализации управленческих действий позволяют создать достаточно точное представление о качестве управления, о реалистичности и достижимости запланированных целей и выполнимости намеченных задач.

Обратим внимание на несколько аспектов управления проектом, которые можно назвать наиболее важными.

1. Качественное планирование Помимо значимости предварительного планирования, осуществляемого при написании проекта, важной составляющей успешного проекта остаётся планирование при непосредственной подготовке к его выполнению и в процессе реализации. Существенными элементами такого планирования можно назвать следующие.

1.1 Планирование ресурсов Подобно тому, как в ходе разработки проекта мы отмечали многообразие ресурсов, потенциально доступных для использования, так и на этой стадии проекта необходимо произвести «ревизию», уточнение имеющихся для его выполнения ресурсов. И, что важнее, не просто составить их перечень, но и определить, в каком месте проекта, в какой временной его точке данный ресурс потребуется и в каком объёме и качестве.

Здесь возникает ещё одна текущая задача, которую необходимо решать – оптимизация наличных ресурсов. В том или ином конкретном проектном действии нужны не все, а вполне определённые ресурсы. Следовательно, необходимо осуществить планирование ресурсов с учётом планирования действий.

1.2 Планирование действий и событий Планирование предстоящих действий и событий вполне может оформляться так же, как и в процессе написания проекта, то есть на основании диаграммы Гантта. Только в этом случае необходимо произвести изменение «масштаба» планирования.

В начале работы над проектом достаточно было определить, в какой его временной точке произойдёт то или иное событие, мероприятие. Теперь же актуальным становится текущее планирование самого мероприятия. Например, если готовится межрегиональная или международная конференция, то следует своевременно предусмотреть осуществление целого комплекса содержательных и процедурных действий: подготовка списка приглашаемых, приглашение выступающих и участников, подготовка и публикация материалов, подготовка соразмерных количеству участников и формату конференции помещений, бронирование и оплата гостиничных мест, обеспечение трансфера участников (доставки до места проведения мероприятия) и их размещения, составление программы, определение потребностей в человеческих ресурсах для должного выполнения всех организационных действий и многое другое.

Если на подготовительном этапе нам важно было определить, какие средства понадобятся для оплаты труда привлекаемых специалистов или сколько потребуется добровольцев для выполнения всех действий проекта, то теперь следует распределить расходы по всей временной линейке проекта.

Например, если в течение проекта запланирована ежемесячная оплата труда привлечённого бухгалтера или сдельная оплата консультанта или тренера, ведущего семинар, то и распределение средств, выделяемых на это, должно быть произведено и учтёно в финансовом плане проекта заблаговременно. Равно как и привлечение добровольных помощников для проведения какого-то массового мероприятия необходимо планировать и обеспечивать заранее.

1.3 Предварительная оценка рисков и их влияния В отличие от аналогичной оценки, производимой в стадии подготовки проекта, оценка рисков и их возможного влияния на результативность проекта в начале проекта так же обращена на непосредственные действия и события, предусмотренные в нём.

Например, если осуществляется проект по продвижению какой-либо социально значимой инициативы, то для оценки одного из достаточно существенных факторов риска – политической конъюнктуры – может применяться нижеследующая таблица.

ОЦЕНКА РИСКОВ В ПРОЕКТЕ

Наименование фак- Возможность возник- Высо- Средняя Низкая Неблагоприятная по- Сильное литическая конъюнк- Среднее Очевидно, что данная классификация для всей линейки возможных факторов риска позволяет быстро сформировать перечень наиболее существенных из них, отделив значимые факторы от менее значимых. И в дальнейшем – большее внимание уделять тем факторам, которые в вышеприведённой таблице занимают место, располагающееся слева вверху. Одновременно с этим, методологический подход, основанный на использовании «свёрнутой», сконцентрированной информации, делает выполнение достаточно трудоёмких аналитических действий занятием, не только посильным для небольших коллективов, но и творчески интересным.

2. Высокая чувствительность (прозрачность и открытость системы управления, насыщенность информацией, оперативность реагирования).

Сложно ожидать эффективности от проекта (да и от проектной деятельности организации в целом), в котором его участникам не известны по крайней мере основные сведения о реализующемся проекте. Любой проект можно, с известной долей условности, представить в виде «маленькой жизни», прожитой выполняющим его коллективом. И, конечно, плохо, когда в этой «жизни» «правая рука не ведает, что творит левая». Опасность нескоординированности влечёт за собою не только разбалансировку деятельности, но и снижение степени доверия членов единого коллектива друг к другу, сокращение радиуса внутриорганизационного доверия.

Поэтому в рамках любого реализуемого проекта должны существовать и, по возможности, безотказно действовать инструменты оперативного реагирования и выработки требуемых для нужд выполнения проектов решений. Такими инструментами выступают, как правило, регулярные встречи участников проекта или иные коммуникационные процедуры, позволяющие обеспечить беспрепятственное получение, обмен, обработку, выработку согласованной позиции и распространение информации.

В случае, когда реализуется масштабный проект, предусматривающий большую удалённость тех или иных исполнителей и/или значительную разветвлённость складывающихся взаимосвязей участников, создание информационной сети, позволяющей использовать методы дистанционной коммуникации, оказывается действием, более чем необходимым.

3. Высокая степень интерактивности, включение возможно большего количества субъектов проекта для участия в нём и субъект-субъектное взаимодействие Связующим «материалом» успешности управления проектом является выстраивание партнёрства его участников, их возможно более активное участие в процессе его разработки и выполнения.

Совместное планирование действий и оценка работы, открытое и дружественно откровенное обсуждение тех или иных аспектов, проблем и достижений, выстраивание системы уважительных отношений – всё это способно: сделать сам проект понятным для его участников (куда движемся, почему и как осуществляются те или иные действия, каким образом достичь желаемых результатов и цели); обеспечить успех данного проекта; помочь выстроить сплочённую команду единомышленников, готовую к дальнейшей совместной деятельности.

4. Нацеленность проекта на достижение гармоничного социального результата Три перечисленные ранее свойства (качественное планирование проекта, обеспечение его высокой чувствительности в ходе реализации и насыщенная интерактивность взаимодействия участников) позволяет рассчитывать на нацеленность проекта на получение наилучших результатов, подчас, даже сверх запланированных ожиданий.

Так, например, в конце 2009 года авторами настоящего пособия был реализован проект, содержащий, в качестве основного действия, проведение 74-часового учебного курса по подготовке специалистов в области оценки социальных проектов и программ. В качестве значимых итогов курса было получено несколько результатов, хотя и предполагавшихся, но именно таким образом не сформулированных в качестве ожидаемых, а именно:

1) В ходе проекта (цикла обучающих семинаров) выявилась очень важная составляющая нынешнего содержания обучения представителей ННКО основам социального проектирования. До настоящего времени такая подготовка в городе Москве осуществлялась только в области написания проектов. Вместе с тем, недоработок и дефектов был обнаружен и в процессе управления выполняемыми проектами, и в процедурах обеспечения возможности мониторинга со стороны контролирующих организаций, а также в части оформления итоговых результатов выполненных проектов.

Таким образом, представляется значимой задача тематического расширения обучения организаций, выполняющих проекты.

Обучение должно затронуть названные вопросы управления проектами, обеспечение должного оформления проводимых мероприятий и итогов выполненных проектов, их обязательно внешнего мониторингового и экспертно-аналитического сопровождения.

2) В процессе обучения его организаторами была предусмотрена возможность участия слушателей в выработке мнений по организационному, документарному и другим аспектам проведения конкурсов социально значимых проектов, осуществления мониторинга реализации и оценки эффективности их выполнения, а также предложений по совершенствованию названных выше процедур и форм. Практически каждое из предлагавшихся заданий сопровождалось просьбой сформулировать свои предложения по возможным, с их точки зрения, улучшениям. Помимо этого, с указанной целью в программе семинара был выделен некоторый временной отрезок, в течение которого слушатели, в режиме итогового «круглого стола», сформулировали такие предложения. В результате комплекс таких предложений был сформирован и представлен в Комитет общественных связей города Москвы (КОС). Некоторые из изложенных предложений были практически тут же учтены при формировании материалов и условий конкурса социальных проектов, объявленного КОС для неправительственных некоммерческих организаций города Москвы в начале 2010 года. Таким образом, непосредственные результаты проекта стали и его эффектом, влияющим на качество управления процессами в социальной сфере.

3) В процессе осуществления обучающего курса среди его участников возникла инициатива по созданию «Клуба экспертовоценщиков», что также может быть признано важной инициативной, способствующей успешному процессу формирования, становления и развития в городе Москве сообщества таких специалистов.

Кроме того, формирование таких сообществ является очевидным составляющим элементом приращения социального капитала общества, что вполне правомерно считать основной задачей, решение которой определяет его успешное и устойчивое социальное развитие /12/.

ПРИНЦИПЫ ОЦЕНОЧНОЙ ДЕЯТЕЛЬНОСТИ И

ПОСЛЕДОВАТЕЛЬНОСТЬ ДЕЙСТВИЙ ПРИ

ОЦЕНКЕ СОЦИАЛЬНОГО ПРОЕКТА

Принципы оценочной деятельности. В силу того факта, что само по себе оценивание является, прежде всего, процессом, – методы, средства, с помощью которых осуществляется оценка, играют сущностную, первостепенную роль; при этом оценочная деятельность опирается на определенные принципы.

Попробуем перечислить основные принципы, без которых оценка не сможет состояться как содержательная и конструктивная социальная технология.

Во-первых, одним из таких принципов является независимость оценки. Во избежание профанации идеи и технологии, данный принцип должен соблюдаться неукоснительно, и санкции за его нарушение обязаны быть самыми жесткими. Собственно говоря, именно наличие конфликта интересов (или его возникновение) при выполнении каких бы то ни было административных действий и является движущей силой коррупции, что уже неоднократно отмечалось. Следовательно, внимание к независимости оценки должно быть повышенным.

Во-вторых, еще одним основополагающим принципом является прозрачность оценки. Данный принцип не должен относиться только ко всем взаимосвязям, способным привести (и. как правило, приводящим) к конфликтам интересов. Прежде всего, это относится к недопущению любых возможных непосредственных контактов между претендентами на любые средства и оценщиками, которым поручена оценка проектов или действий, связанная с указанными средствами.

Свойство или принцип прозрачности относится, таким образом, к правилам, критериям и процедурам отбора потенциальных получателей средств. Необходимость публичности названных позиций не должна подвергаться сомнению. Только открытость и равенство «правил игры» может быть механизмом, обеспечивающим равенство возможностей претендентов на любые ресурсы.

В-третьих, к принципам оценки относится и ее построение на научной основе. Существование множества отечественных аналитических школ в сочетании с опытом нескольких десятилетий работы в указанной области, имеющимся за рубежом, позволяет рассчитывать на возможность разработки достаточно детальной системы критериев, стандартов, оценочных шкал, нормативов и норм оценки и оценочной деятельности в целом.

В-четвертых, среди рассматриваемых принципов находится и эвристичность оценки – нацеленность на произведение позитивно влияющих действий впоследствии. Без рекомендаций конструктивного характера оценка бессмысленна. Оценка должна, прежде всего, становиться инструментом для продуктивной творческой деятельности, а не пугалом для исполнителя или дубинкой в руках ее заказчика.

Основные фазы оценивания проекта. В идеальном варианте оценивание – непрерывный процесс, который начинается вместе с зарождением идеи о создании проекта, сопровождает его на протяжении всего времени существования и заканчивается либо вместе с завершением самой программы, либо некоторое время после её окончания. Процесс оценивания включает в себя четыре основные фазы, которые сменяют друг друга и в определенной степени связаны со стадиями существования проекта. Соответствующими фазами являются (а) оценка при формировании проекта; (б) оценка в процессе реализации проекта; (в) оценка воздействия проекта; (г) оценка достижения результата, на который нацелен проект.

Оценка при формировании проекта (по-английски «formative evaluation») начинается во время разработки нового проекта либо при внесении в проект существенных изменений, а также в случае, если выяснилось, что в проекте есть неразрешимые противоречия, либо же когда у проекта появляется новое функциональное назначение. На данном этапе все планы, процедуры, планируемые действия и материалы проходят оценку на пригодность их использования в конкретном проекте. После этого проводится анализ возможности успеха данного проекта с соответствующим набором параметров и взвешиваются все сильные и слабые стороны проекта.

Именно благодаря оценке в данной фазе можно откорректировать проект таким образом, чтобы был высокий уровень вероятности добиться после начала его реализации максимально возможного успеха.

Оценка в процессе реализации проекта (по-английски «process evaluation») проводится с момента начала реализации проекта. В данной фазе проверяется соответствие количества людей, на которых социальный проект должен оказать воздействие, количеству людей, которых он реально затрагивает. Такая оценка позволяет выявить проблемы на ранних стадиях реализации проекта и сделать выводы о степени эффективности планов, процедур, действий, материалов и корректировки реализации проекта в соответствии с полученным данными.

Оценка воздействия проекта (по-английски «impact evaluation») проводится с момента установления контакта хотя бы с одним членом целевой группы, на которую направлен проект. Цель данной фазы оценивания заключается в том, чтобы выявить все изменения, произошедшие с момента начала реализации социального проекта. Помимо этого, важную роль играет сбор информации о ситуации, которая имела место до начала осуществления проекта, и информации о том, какие изменения ситуации произошли после начала проекта, и сравнительный анализ данных. Таким образом, данная фаза позволяет получить промежуточные результаты осуществления проекта. В этом случае оценка позволяет понять на стадии реализации проекта, насколько он способствует продвижению к поставленной цели, а также позволяет лицам, управляющим проектом, установить, каким образом по ходу проекта можно перераспределить ресурсы для того, чтобы добиться максимальной его эффективности.

Оценка достижения результата, на который нацелен проект (по-английски «outcome evaluation») проводится для краткосрочных и среднесрочных проектов по их завершении, а для долгосрочных – не чаще одного раза в год или по завершении заранее установленных этапов. Данная фаза оценивания нацелена на получение информации о том, насколько в результате осуществления проекта удалось достичь поставленной цели. Полученные в данной фазе результаты играют определяющую роль при принятии решения о продолжении финансирования данного долгосрочного проекта или о финансировании нового проекта, развивающего достигнутые результаты. В этом случае оценка позволяет учиться на своих ошибках, другими словами – использовать опыт побед и поражений при разработке и осуществлении новых проектов. При этом, если в результате такой оценки удается продемонстрировать успех проекта, то это облегчает задачу поиска средств на новый проект.

Алгоритм оценки в социальном проектировании. Алгоритм реализации оценки зависит от следующих параметров:

• объекта оценивания;

• задач, стоящих перед оценщиком (поставленных заказчиком);

• инструментария и методов, используемых оценщиком при осуществлении оценки в зависимости от объекта оценивания и поставленных задач, и ряда других.

В зависимости от объекта оценивания оценка может быть статической (например, оценивается состояние той или иной системы) и динамической (оценке подлежит процесс выполнения чего-либо).

Тем не менее, важно отметить, что и статическая и динамическая оценки включают в себя следующие обязательные этапы:

• постановку вопросов, требующих разрешения;

• сбор информации, необходимой и достаточной для получения искомых ответов;

• анализ собранной информации, и, на основе этого – получение выводов и вынесение суждений;

• выдача итоговых рекомендаций в отношении оцениваемых объектов или осуществляемых процессов.

Стадии обработки данных. Стадии обработки данных в ходе оценки социальных проектов включают в себя математическую обработку (если такая обработка для данного проекта необходима), смысловую интерпретацию, качественные методы исследования, обобщения, выстраивание моделей и формулирование теорий, выработку рекомендаций и оформление отчета об оценке.

1) Математическая обработка (если необходима) При анализе масштабных проектов или программ, как правило, объём полученных данных оказывается достаточно большим и требует определённой предварительной обработки, систематизации, группировки и обобщённого представления. Такая обработка, проведённая корректно, без утери статистически значимых сведений, позволяет выстроить их в более компактную совокупность – в виде, пригодном для дальнейшей аналитической работы с результатами проекта.

Различные описательные методы позволяют отобразить данные в графическом, табличном или ином информационновизуальном виде, удобном для возможности осуществления их статистического анализа.

Методы аналитической статистики многообразны и являются мощным инструментом для:

- определения вероятности ошибки данных, например, через проверку уровня значимости или мощности того или иного оцениваемого критерия или генерализацию сведений;

- выявления закономерностей или взаимосвязей между теми или иными данными или событиями (корреляционный анализ);

- формулирование принципов исследования тех или иных явлений или процессов, как системно организованной структурной целостности – общности, группы, института, организации (структурно-функциональный анализ);

- объединения сведений не о действующих акторах (лицах) в том или ином анализируемом процессе, а позиции, которые они занимают или роли, ими выполняемые (позиционный и ролевой анализ);

- прогнозирования тех или иных значений и переменных в зависимости от других переменных (регрессионный анализ);

- объединения наблюдаемых событий в группы со схожими свойствами (кластерный анализ);

- исследования структуры и снижения размерности пространства переменных (факторный анализ) – и многих других действий, способствующих осуществлению аналитической работы.

2) Смысловая интерпретация Разумеется, сами по себе цифры и систематизированные данные, хотя и красноречивы, однако нуждаются в смысловых комментариях, раскрывающих их содержание, поскольку одни и те же цифры можно снабдить различными письменными (а при возможности персональной презентации – и словесными) комментариями.

В качестве достойного примера такой словесной интерпретации информации вполне можно привести слова одного из высокопоставленных российских чиновников, произнесённые на Приволжской окружной ярмарке социальных и культурных проектов в 2004 году в Перми: «Когда всё плохо, у нас принято говорить, что есть большие резервы».

3) Качественные методы анализа Столь же велико разнообразие и качественных методов анализа:

- логико-структурный (прежде всего, позволяющий достаточно точно и успешно оценивать логичность и взаимообусловленную последовательность формулирования тех или иных элементов или этапов проектирования – например, взаимосвязь целей, задач, методов, ожидаемых результатов и требуемых ресурсов);

- сопоставительный (название отвечает само за себя, определяя способ анализирования, основанный на двух- или многостороннем сопоставлении различных объектов);

- нарративный (анализ результатов тематического или биографического интервьюирования, позволяющий исследовать как личность или значительные группы людей, так и те или иные события, субъективным образом отражающиеся в сознании опрашиваемых);

- мотивационно-целевой (определяющий адекватность восприятия информации теми или иными представителями исследуемой группы в соответствии с их мотивацией и особенностей смысловой трансформации текста в сознании людей);

Качественный анализ представляет собою, как правило, более понятный для заказчика вид оценочной деятельности, поскольку позволяет опираться не на совокупность цифр и численных значений разнообразных событий и собранных данных, смысловая интерпретация которых может быть несколько затруднена, в том числе – для внешнего восприятия, а на более близкие для человека, сравнительные и логико-мотивационные параметры.

Вместе с тем, при проведении аналитической работы зачастую используются и комбинированные, качественно-количественные методы исследования, такие, например, как контент-анализ.

4) Обобщения В результате проведённого анализа возникает возможность структурирования полученных сведений в некие объединённые группы, создание типологий, формирование обособленных классов и категорий предметов, событий или фактов.

Одновременно с этим те или иные цепочки событий, происходящих в проекте, образуют взаимообусловленные причинноследственные связи.

Например, если изначально в рамках проекта не был разработан график его мероприятий или количество сотрудников, готовящих мероприятия, недостаточно, а таких мероприятий в проекте много, то велика вероятность, что какие-то из намеченных событий будут сорваны либо проведены со значительно меньшей эффективностью. При этом причиной снижения качества результатов проекта может оказаться как формальная (скажем, снижение количества участников из запланированной целевой группы либо неготовность или невысокое качество раздаточных материалов), так и содержательная сторона мероприятия (полученные в ходе обучения знания оказались для участников менее значимыми, чем ожидалось первоначально).

5) Выстраивание моделей и формулирование теорий Данные разделы оценочной работы представляют собою некий следующий уровень профессиональных знаний. Этот уровень требует от исполнителя способностей не только к действиям по разбору, изучению и обобщению полученных данных и сведений, но и к прогнозированию ближайших и более отдалённых последствий объектов или процессов, подлежавших исследованию, моделированию различных, подчас – весьма сложных процессов, которые, по мнению оценщика, могут произойти в будущем.

В нынешней практике проектирования в системе государственного управления, как правило, используется т.н. «трёхвариантный подход». При этом в виде стандартных первых двух используются варианты:

- инерционного прогноза (то есть, прогноза развития событий при отсутствии какого-либо вмешательства в существующий порядок действий);

- экстенсивного развития (то есть активного использования внешних, как правило – финансовых и/или природных ресурсов).

Третьим – предлагаемым путём (прогнозируемым маршрутом) становится вариант (маршрут) инновационного развития.

6) Выработка рекомендаций Данный раздел оценочной деятельности представляется, пожалуй, наиболее сложным, поскольку здесь происходит качественный переход из области анализа и оценки в плоскость синтеза или конструирования желаемого будущего. В этом случае за качество продукта в некоторой степени начинает отвечать непосредственно оценщик. Синтезирование «новой реальности», выработка предложений, реализация которых способствовала бы воплощению задуманного на уровне, по меньшей мере не ниже ожидаемого и желаемого качества – пожалуй, наиболее сложная задача, требующая существенно более высокого уровня профессионализма и способностей к корректной «социальной экстраполяции».

В этой связи нельзя не отметить значимость, ценность грамотно осуществлённого и точного анализа. Совокупность знаний нынешнего дня, корректно проанализированная, позволит не только верно и достаточно точно спрогнозировать развитие ситуации, но и предусмотреть шаги, которые заказчик оценки (или сам действующий субъект) мог бы предпринять для улучшения динамики положительных изменений или для предотвращения тех или иных потенциальных угроз.

7) Оформление отчёта об оценке Само по себе оформление оценочного исследования также нуждается в определённом структурировании.

На сегодняшний день наиболее рационально такая структура сформулирована в документе ООН: «Стандарты оценки в системе ООН», принятом в 2005 году18. Стандарты предусматривают общие институциональные рамки, пределы компетенции и этики, стандарты и нормы подготовки и проведения оценки, а также требования к структуре и содержанию отчётности по итогам её выполнения.

Этапы проведения оценки. Оценка включает следующие этапы.

Постановка вопросов.

На основе сформулированной задачи конкретной оценочной работы необходимо спланировать её проведение. Планирование оценки осуществляется с учётом таких особенностей проекта, как характер проекта; длительность проекта и стадии, на которой осуществляется его оценка; тематический ракурс; методы сбора информации; совокупность трудозатрат и затрат времени, необходимых для сбора и обработки оцениваемой информации, и т.д.

Планирование позволяет определить совокупность вопросов, которые необходимо задать для получения достаточной информации и вынесения требуемых суждений.

www.uneval.org/documentdownload?doc_id=22&file_id=131.

Хорошо известно, что правильно поставленный вопрос – это 90% успеха при поиске ответа на него. Именно поэтому на данный этап оценочной работы должно быть обращено значительное внимание. Наиболее простым и пригодным методом задавания вопросов для данной сферы деятельности является «метод Киплинга»*.

Подходя всякий раз к этому этапу оценки, важно понимать, что единого, пригодного на все случаи жизни, набора вопросов не существует. Собственно, «метод Киплинга» хорош прежде всего тем, что позволяет указать пространства для поиска более точных «вопросительных» формулировок. Формулировки вопросов сильно варьируются в зависимости от ряда факторов. Можно назвать некоторые из них.

1.1 Характер проекта (программы).

Одной из типологических характеристик проекта является степень его инновационности. Проект может быть инновационным, расширительным или обычным.

В первом случае мы имеем дело с чем-то совершенно новым, не имевшим аналога где-либо ещё (такого рода проекты бывают крайне редко). Расширительным называется проект, уже реализованный где-либо раньше и теперь апробируемый на новой территории, в новых условиях. Подавляющее большинство социальных проектов имеют именно такой характер. Собственно, именно поэтому столь важно, чтобы инициаторы того или иного проекта предварительно ознакомились с существующим опытом, а заодно и эксперта, анализирующего проект, убедили в том, что тема исполнителю знакома. Наконец, обычный проект, по сути, является хорошо известной деятельностью, более характерной не для грантового механизма, а для механизма социального заказа. Тем не менее, и здесь требуется проектный подход.

Имеется ввиду стихотворение Р.Киплинга, содержащее такие слова: «Есть у меня шестерка слуг, Проворных, озорных. И все, что вижу я вокруг, всё знаю я от них. Они по зову моему являются в нужде. Зовут их Как? и Почему? Кто? Что? Когда? и Где? Я по горам и по лесам гоняю верных слуг. Потом работаю я сам, а им даю досуг».

Представим себе небольшую таблицу, изображающую пригодность для указанных случаев относительно стандартного набора вопросов:

ПРИГОДНОСТЬ ВОПРОСОВ для РАЗЛИЧНЫХ ТИПОВ

РЕАЛИЗУЕМЫХ ПРОЕКТОВ

ПРОЕКТ

ВОПРОС

(будет управляться) проект?

планированных потенциальных клиентов?

Если для инновационного проекта нам интересно «всё», что может стать полезным в будущем, то для расширенного проекта вопрос (1) не очень актуален, а интересен скорее вопрос (2), поскольку уже известно, что в каком-то другом месте такой проект ожидаемых результатов уже достиг. В этом смысле ответ на этот вопрос можно назвать ответом на вопрос о «технологичности» данного проектного решения.

А для обычного, рутинного проекта сфера вопрос и вовсе сокращается до двух из нашего списка. Вопросы эти относятся к категории управленческих: насколько хорошо управляется проект и охватывает ли всех представителей целевой группы (клиентов).

1.2 Субъект, задающий вопросы.

Если вопросы формулирует исполнитель проекта, то, очевидно, что такие вопросы будут носить прежде всего активный субъектный и, скорее всего, операциональный характер, например:

- как обеспечить наилучшее взаимодействие членов команды исполнителя?

- какие инструменты внутреннего мониторинга могут быть полезны для реализации проекта?

- что необходимо сделать исполнителю, чтобы улучшить собственную работу в дальнейшем?

Для заказчика более характерны вопросы объектного, отстранённо оценочного свойства:

- насколько эффективно расходуются средства проекта?

- в какой степени организация-исполнитель является успешной на том или ином этапе выполнения проекта (и в целом в проекте)?

Непосредственный же спонсор проекта будет склонен скорее выяснить для себя, произвёл ли финансируемый им, выполняемый (реализованный) проект должное социальное воздействие на изначально установленные целевые группы или запланированное информационное воздействие на ту или иную, значимую для спонсора, целевую аудиторию?

1.3 Длительность и стадия проекта.

В случае долгосрочного проекта он неизбежно проходит всю линейку стадий: подготовка, написание, процесс реализации, подведение итогов, постпроектное влияние. И на каждом из этапов вопросы будут заметно разниться. В самом начале проекта, на подготовительной стадии, для оценщика в отношении исполнителя и самого проекта важно понимать:

- насколько исполнитель владеет предметом будущей деятельности?

- знает ли историю вопроса и знаком ли с основными актуальными аспектами проблемы, подлежащей проектному решению?

- разрешима ли проблема в желательном направлении и масштабах в существующей обстановке (разумеется, включая её общественные и/или политические аспекты)?

В рамках проектного описания возникают вопросы сопоставления проблемного поля и предлагаемого проектного решения.

При выполнении проекта более значимыми становятся вопросы текущего управления и дающие информацию исходя из мониторинга процесса непосредственной деятельности. Особенную значимость приобретает мониторинг для долгосрочных проектов. Если в короткий промежуток времени те или иные события вряд ли кардинально сказываются на ситуации и требуют оперативного наблюдения, то в условиях среднесрочных и долгосрочных проектов непрерывный сбор информации становится не только важным для чувствительности контроля за их ходом, но и обеспечивает информационную насыщенность для других нужд проекта, в том числе, для получения общей картины изменений и возможности предъявления высокоточной информации внешнему наблюдателю (спонсору, контролёру, оценщику или заинтересованным группам).

Подведение итогов позволяет сформулировать вопросы об общей успешности выполненной работы, достижении запланированных изначально результатов и о получении требуемых ожидавшихся эффектов.

Изучение влияния выполненного ранее проекта требует постановки вопросов о воздействии, оказанном выполненным проектом на целевую группу или состояние проблемы, и о длящемся характере такого воздействия.

1.4 Тематический ракурс проекта.

Проект может быть узко тематическим (профильным или ведомственным), и тогда вопросы будут, прежде всего, отражать интересы непосредственно относящиеся к сфере его выполнения.

Следует отметить, что сугубо «внутриведомственные» проекты в социальной сфере крайне редки: практически любая социальная проблема, на решение которой направлен проект, имеет заметное количество межведомственных «ответвлений». Например, на проблему детской безнадзорности и беспризорности влияют вопросы семейного и школьного воспитания, однако сама безнадзорность и её следствие – беспризорность порождают проблемы роста нарушений правопорядка и, разумеется, не только снижения здоровья детей и молодых людей, оказавшихся безнадзорными и беспризорными, но и качества человеческого потенциала страны в целом.

Таким образом, тематические социальные проекты, как правило, имеют межведомственный характер. Данное обстоятельство порождает определённые трудности в осуществлении проектов, поскольку, помимо проблем, непосредственно связанных с реализацией эффективного проектного подхода, объективно «естественная» межведомственная разобщённость не способствует должной степени координации действий, выработке интегральных критериев и индикаторов изменений в ходе выполнения проекта и совместной заинтересованности различных ведомств в общем конченом успехе.

Возможны проекты надтематического плана, например, рассматривающие ту или иную проблему с точки зрения:

- правового оформления, - информационного сопровождения, - методического или экспертного обеспечения, - содействия внедрению или распространению.

Любой из названных надтематических аспектов может стать предметом того или иного проекта. И, соответственно, набор вопросов, формулируемых к таким проектам, будет иметь заметную специфику, отличающую одну проектную работу от другой.

2. Сбор информации о проекте – для получения ответов на поставленные вопросы Сбор информации о проекте начинается с понимания, что именно следует узнать для получения ответов на вопросы.

Важное значение придаётся объективности получаемой информации. Для этого необходимо опираться на различные информационные источники; оптимальным является наличие не менее чем трёх источников информации. Меньшее количество источников (в особенности – один) зачастую приводит к риску получения односторонних, субъективных сведений. Напротив, избыточно большое количество источников может оказать дурную услугу, сделав совокупность собранной информации «информационной помойкой», в которой крайне сложно разобраться и выловить правдивые, корректные и точные сведения.

2.1 Информационные выборки Выборка используемой информации так же может быть различной. Осуществление выборки – метод, позволяющий изучать не всю имеющуюся информацию, но представительную часть её и делать в той или иной мере корректные выводы о всей совокупности сведений.

Задача построения выборки возникает всякий раз, когда необходим сбор сгруппированной некоторым образом информации.

Выборку в той или иной форме используют в опросах, исследованиях, для мониторинга и качественного анализа. Возможна следующая типология выборки:

- вероятностная (опирающаяся на сведения, встречающиеся с равной долей вероятности) или случайная;

- систематическая (приближается к вероятностной, имея при этом некоторый, определённый заранее, «шаг» выбора элементов для анализа);

- стратифицированная, т.е. рассматривающая какие-то определенные группы сведений или касающаяся заранее установленных социальных, профессиональных или возрастных групп;

- кластерная, позволяющая заметно сократить пространства поиска информации – за счёт использования для сбора информации естественных группировок единиц наблюдения (например, о детях – в детских садах и школах, о военных – в войсковых частях, о сельских жителях – в сельской местности).

Возможен отбор и не на принципе случайной выборки (рандомизации), а на следовании тем или иным субъективным критериям – доступности, типичности, равного представительства и т.п.

2.2 Методы сбора данных Остановимся кратко на основных методах сбора данных. Таковыми можно назвать: изучение документации, наблюдение, анкетирование, проведение интервью.

Представив таким образом методы – от наиболее отстранённого к наиболее вовлечённому по отношению к изучаемому процессу, если мы говорим о сборе информации о проекте), попытаемся несколько более подробно взглянуть на эти методы. Прежде всего, интересны такие их аспекты, как основные преимущества каждого из названных методов и ограничения по его применению.

2.2.1 Изучение документации Этот метод сбора данных посредством анализа документов для их последующей интерпретации и оценки проекта. Термин «документация» означает процесс формального закрепления данных, полученных из письменных, устных, графических, архивных или даже археологических источников. В связи с чем, для исследователя документ является источником получения информации об интересующем его объекте. Этот источник информации может быть представлен в форме текстового материала, в видео- и/или аудио формате (включая аудио-ленты, фотографии, фильмы, и видеозаписи), а начиная с недавнего времени и в формате электронных данных. Сейчас оценщики используют переписку по электронной почте, мультимедиа и форумы как новые формы документации, которую нужно тщательно исследовать для достижения целей оценивания.

Целью анализа документации является сбор фактов. Например, исследователь может изучить брошюру проекта, чтобы определить его основные цели и задачи, собрать дополнительные сведения. Но не все документальные факты подлежат анализу и оценке.

Как правило, исследователь не должен анализировать документацию для того, чтобы найти те или иные факты в подтверждение гипотезы, которую он уже заранее для себя сформулировал. То есть анализ документации не должен заключаться в выборе из имеющихся документов «нужных» фактов. Таким образом, вопросы, предположения или общие идеи исследователя не должны действовать как критерий для отбора фактов для их дальнейшей интерпретации и получения выводов. Анализ документации является лучшим методом поиска ретроспективной информации относительно программы и подчас может являться единственным источником получения такой информации. Анализ документации может быть проведен в любой момент, что особенно полезно на начальной стадии оценки, когда исследователю необходимо изучить проект, историю его подготовки и реализации и определить его основные цели, задачи и т.д. При выполнении анализа документа, оценщик выясняет, какая информация уже собрана, а какую только предстоит собрать для оценки проекта.

Очевидными положительными сторонами данного метода являются:

• возможность получения всей совокупности требуемой информации, неизменность самой информации, возможность возврата к ранее рассмотренным источникам и перепроверки сведений;

• возможность осуществления оценочной деятельности без существенных организационных требований и специализированных дополнительных условий;

• доступность получения информации об официальной точке • доступность информации об установленных нормах и стандартах.

Ограничения метода заключаются в следующем:

• изучаемые документы и материалы не всегда оказываются адекватными оцениваемой программе и достаточными для осуществления полномасштабного исследования;

• вместе с тем, достаточно велика вероятность избыточности информации, вследствие чего её исследование может потребовать больших затрат времени, произведённых впустую – на изучение бессодержательных материалов;

• само по себе изучение документации является действием трудоёмким и требующим хороших исследовательских и аналитических навыков и умений;

• зачастую значительные объёмы требуемой информации оказываются недоступными вследствие их конфиденциальности или иных трудностей доступа (удалённость источников, несистематизированность или неупорядоченность хранения и Фактор конфиденциальности следовало бы считать не очень значимым в ситуации оценки социальных проектов и программ. В отличие от тех или иных государственных программ, касающихся, например, сферы обороны или безопасности, социальная сфера должна быть максимально прозрачной для аналитического и оценочного исследования. Тем не менее, до сих пор нередки случаи, когда такая информация оказывается недостаточно открытой для общественного доступа. В особенности данная проблема остра для изучения бюджетной информации. Кроме того, отсутствие или слабая организация системы сбора и хранения социально значимой информации представляется серьёзным препятствием для успешной оценочной работы.

2.2.2 Наблюдение Очевидными положительными составляющими такого метода изучения, как наблюдение, являются:

• возможность получения «естественной» информации – без вмешательства в саму исследуемую среду. Наиболее объективная информация о системе доступна прежде всего именно тогда, когда «жизнь» в этой системе рассматривается такой, • возможность получения незапланированной информации, поскольку данный метод предусматривает достаточно высокий уровень гибкости возможного реагирования сборщика информации на складывающуюся в процессе сбора информации обстановку;

• зачастую не требует создания особых условий, вследствие некоторой отстранённости наблюдения за системой и невмешательства в её работу.

Вместе с тем, данный метод содержит и определённые ограничения в применении. И здесь последний из перечисленных плюсов метода становится одновременно и его возможным ограничением:

• в процессе наблюдения за объектом оценки вольно или невольно возникает возможность влияния наблюдателя, поскольку наблюдаемая система «информирована» о самом факте наблюдения;

• существуют и определённые этические ограничения, не позволяющие осуществить наблюдение за всем процессом реализации проекта. Например, если одной из составляющих социального проекта является оказание социальнопсихологических услуг (например, помощь семье в трудной жизненной ситуации), то сложно представить себе возможность наблюдения за процессом оказания такой услуги без риска вторжения в сферу сугубо конфиденциальную, не подлежащую инспектированию;

• во время проведения наблюдений возникают и определенные сложности регистрации получаемых данных, поскольку сам подход, как правило, не предусматривает достаточной для этих целей формализации;

• требуется также и значительный период времени для обработки полученных данных.

2.2.3 Анкетирование Проведение анкетирования создаёт следующие потенциальные возможности:

• получение значительного объёма информации при довольно невысоких трудозатратах;

• формирование совокупности стандартизованной (в соответствии с анкетными вопросами) информации;

• относительное удобство обработки получаемых сведений;

• при условии анонимности – получение правдивой (точнее, не искажённой рисками персонификации сведений) При этом следует отметить, что указанный метод содержит и определённые дефекты, причём плюсы метода, подчас, оказываются также и его недостатками:

• стандартный набор вопросов, с одной стороны, упрощает обработку данных, а с другой – не позволяет обнаружить скрытые от глаза дефекты того или иного проекта. Инерция метода поиска информации не позволяет действовать гибко, меняя задаваемые вопросы;

• предустановленный заранее список предполагаемых вопросов зачастую не позволяет получить ответы на все вопросы, в том числе – возникающие по мере проведения • следовательно, рамка совокупности получаемых знаний оказывается изначально ограниченной.

2.2.4 Проведение интервью.

Проведение интервью является способом наиболее близкого изучения проекта и интересующих оценщика его аспектов. К положительным свойствам интервью можно отнести:

• Большой объём детальной информации, получаемой, прежде всего, из дополнительных расспросов, возможность проведения которых обусловлена методом;

• Возможность смены фокусировки. Не исключена ситуация, при которой изначально спланированный подход к сбору информации нуждается в заметном изменении формата или фокуса работы. Например, для анализа эффективности работы с «детьми улиц» может потребоваться вопросы о взаимодействии сотрудников, работающих на улице не только с представителями органов внутренних дел района, но и органов предварительного следствия, в компетенцию которых входят другие вопросы обеспечения правопорядка.

• Возможность уточнения вопросов и ответов. В отличие от других, более отстранённых методов получения информации, интервью предполагает возможность осуществления сразу нескольких итерационных шагов «вглубь» изучаемого объекта.

Предугадать заранее необходимость уточнения вопросов, подчас, затруднительно. Применение же, скажем, анкетирования, при определённых обстоятельствах, приведёт к значительной потере времени – для получения вывода о необходимости дополнительных исследовательских шагов.

• Личный контакт (эксклюзивность). Разумеется, весьма ценная информация для исследователя заключается в тех её аспектах, которые могут быть сообщены и что называется, «не для протокола».

Назовём и некоторые ограничения данного метода.

• Трудоёмкость и продолжительность времени, необходимого для реализации метода;

• Особые условия проведения, которые необходимы для обеспечения персонального контакта;

• Возможное эмоциональное влияние из-за личного контакта.

Это обстоятельство имеет как положительные, так и отрицательные стороны. В данном случае «пользователь», оценщик, сам для себя определяет применимость метода с учётом необходимости баланса между непредвзятостью взгляда и возможностью получения высоко значимой информации.

• Время для обработки данных интервью, конечно, является одним из наиболее затратных элементов названного метода.

Подробнее об интервью рассказано в Главе 5.

Тот или иной подход к сбору данных может использоваться как в виде самостоятельно применяемого и предпочитаемого, так и в качестве одного из способов в комбинации с другими. Учитывая, что использование комбинированного подхода согласуется с одним из исходных принципов, обеспечивающих качество оценочной деятельности, можно утверждать, что и для собираемой информации такой подход будет предпочтительным.

Наконец, для осуществления сбора сведений и информации необходим такой неотъемлемый этап работы, как выбор и подготовка инструментов для сбора данных. В зависимости от выбранного метода (или их сочетания), а также от специфики того или иного оценочного действия, это могут быть анкеты, списки вопросов для интервью, инструкции по наблюдению – с формами для регистрации получаемых результатов или перечень документации, подлежащей аналитическому исследованию, и информационных источников, в которых эту информацию и документы можно получить.

3. Обработка и анализ информации, вынесение суждений, получение выводов Одной из наиболее существенных частей работы оценщика является этап обработки полученной информации. Оттого, насколько качественно и профессионально проведена эта обработка, в не меньшей степени, чем от сбора информации, зависит и итоговая результативность всей оценочной работы.

Разработка информационно ёмких способов представления информации вполне можно назвать самостоятельной и, в то же время – очень значимой задачей.

Вместе с тем, усовершенствование форм представления информации важно и для самой деятельности специалистов, работающих в сфере экспертизы социальных проектов. В качестве наглядного примера высококачественной работы в этой области вполне правомерно привести оценочную форму для экспертизы проектов, применяемую в настоящее время при обработке конкурсных заявок в рамках проводимых конкурсов социальных проектов Пермского края.

«Система оценки краевого конкурса программ уличной социальной работы с несовершеннолетними»

Регистрационный номер (соответствует № документа) Название проекта Эксперт Дата экспертизы: Обоснование необходимости реализации программы Оригинальность и инновационность содержания, форм и методов решения проблемы Обусловленность партнерских связей Система механизмов внедрения и управления программой Перспективы развития программы Организационная состоятельность участника конкурса Обоснованность бюджета программы Использование привлеченных ресурсов для реализации программы Итоговая сумма баллов Замечания эксперта (Обязательно!):

Стоит обратить особое внимание на некоторые важные параметры приведённой выше формы.

Во-первых, высокий уровень свёртки информации. В перечне оцениваемых критериев находятся практически все, необходимые для адекватной содержательной (а не формальной) оценки проекта.

Кроме того, данные критерии предлагается использовать с уже изначально заложенной шкалой масштаба значимости того или иного используемого критерия. Так, глядя на это шкалирование, уже можно сделать вывод об одном из приоритетов конкурса – его инновационной направленности. Пожалуй, в качестве дополнения можно было бы предложить лишь два критерия: технологичность решения и тиражируемость результатов проекта. В таблице они остаются скрытыми, подразумевающимися в строке «Перспективы развития программы». Однако, представляется желательным, чтобы эти два критерия фигурировали в качестве отдельно представленных и явно выраженных.

Во-вторых, экономия времени и внимания эксперта. Значительный собственный опыт оценки различных социальных проектов убеждает в утомительной необходимости для эксперта в заполнении большого количества страниц оценочной анкеты малосодержательными фразами, которые практически не добавляют информации о проекте, но предусмотрены в оценочных формах. В данном случае мы имеем дело с «одним окном», предусматривающим обязательный детализированный экспертный комментарий. При этом представляется целесообразным предложить эксперту свои замечания дать в качественной и количественной форме. Например, предусмотреть возможность осуществить не только выбор между поддержкой проекта и отказом в ней, но и, если поддерживать проект, то в какой именно сумме. В условиях жёстких ограничений по возможностям финансирования инициативных проектов такой подход позволяет произвести разумную оптимизацию средств, выделяемых на выполнение проекта. И даже при условии детальных экспертных комментариев объём формы экспертного заключения не будет превышать одной страницы.

Пример проведения оценки конкретного проекта. Попробуем продемонстрировать возможности аналитической работы при изучении результатов социально-проектной деятельности. Работа в рамках ряда проектов Российского благотворительного фонда «Нет алкоголизму и наркомании» (НАН), осуществлявшихся в нескольких муниципальных районах г.Москвы в течение нескольких лет (1998-2000 годы), была нацелена на снижение безнадзорности, беспризорности и преступлений со стороны несовершеннолетних.

Работа по проектам проводилась в пяти из двенадцати муниципальных районов Юго-Западного административного округа (ЮЗАО) города Москвы*.

Пилотные проекты, несмотря на свою, не очень значительную продолжительность, принесли заметные результаты. Сотрудники проекта Фонда НАН «Лечение вместо наказания» обратили внимание на эти результаты с помощью статистики, собираемой государственными структурами, занимающимися указанными проблемами – отделами профилактики правонарушений среди несовершеннолетних (ОППН). Сотрудники ОППН округа предоставили соответствующую статистическую информацию. На Диаграмме 3 представлены данные по ЮЗАО, по ряду характерных, прежде всего, именно для несовершеннолетних, показателей криминальной статистики.

Население Юго-западного административного округа составляет примерно 1 млн. человек. Население одного муниципального района в Москве варьируется в пределах 80- тыс. человек.

Статистика приведена по экспериментальным районам, в которых работала служба «Ребенок на улице», а также ряд других служб («Ребёнок дома», приют-убежище для детей и подростков «Дорога к дому», службы, осуществляющие реабилитационные программы, социальная служба при судье – Черёмушкинский районный суд г.Москвы) и по контрольным районам, в которых названные службы не работали (что было определено проектом). Для сравнения взяты пять стандартных показателей отчетности ОППН по состоянию преступности в ЮЗАО19.

Цифровые значения, приведённые в Диаграмме 3, несмотря на короткий промежуток времени, в течение которого производились замеры, способны характеризовать некоторые изменения в показателях по преступлениям несовершеннолетних. Данное обстоятельство можно признать убедительным свидетельством влияния работы перечисленных выше социальных служб. Важным является Данные за 1998 год приведены по: Работа с детьми группы риска. Методическое пособие для социальной службы «Ребенок на улице». М.: Российский благотворительный фонд «Нет алкоголизму и наркомании» (Фонд «НАН»), 1999. – с.с. 106, 107.

и то обстоятельство, что данные приведены в сопоставлении муниципальных районов, в которых проводился проект, с т.н. «контрольными» районами того же самого округа г.Москвы, где такая социальная деятельность не осуществлялась.

Для определения воздействия, оказываемого выполнением того или иного проекта (программы) удобно пользоваться уже разработанным в странах с развитой проектной культурой разнообразным инструментарием.

Так, например, Марк Фридман предлагает использовать достаточно удобный инструмент разделения выполненных действий на категории качества и количества, принципиально разделяя при этом совокупность затраченных усилий и достигнутый при этом результат – в рамках предлагаемого подхода, ориентированного на результат (Results Based Approach - RBA)20.

Категории измеряемых параметров программы

КОЛИЧЕСТВО КАЧЕСТВО

Такой подход, собственно, и разделяет деятельность, сосредоточенную на процессе, по сути, в нём и заключающуюся, и деятельность, ориентированную на получение рассчитываемого и/или иным определённым образом учитываемого, ощутимого и описываемого результата21,22.

Friedman M. Trying Hard is not Good Enough. How to produce measurable improvements for customers and communities. Trafford Publishing, 2005.

Utting D.R.W., Pugh G. Better Results for Children and Families: involving communities in planning services based on outcomes NCVCCO, 2001.

Pugh G. Outcomes Based Accountability: a brief summary:

http://www.idea.gov.uk/idk/aio/8940584.

МЕТОДЫ ОЦЕНКИ В СОЦИАЛЬНОМ

ПРОЕКТИРОВАНИИ

Множественность методов оценки. При проведении оценки в социальном проектировании возможно применение большого количества различных методов. Стоит помнить, что каждый метод имеет сильные стороны и преимущества, но также – и свои ограничения и недостатки. Этим и определяются возможности использования в настоящее время разных методов при оценке одного и того же проекта. Некоторые методы могут использоваться на любой стадии проекта, есть и те, что применимы лишь к отдельным, вполне определенным этапам проекта. В принципе, оценка эффективности проекта нацелена в любом случае на выяснение соотношения цели проекта и его результата. При совпадении намеченной цели и полученного результата люди, реализовавшие проект, добиваются стопроцентной эффективности, но, если полного совпадения цели и результата добиться не удалось, то чем больше степень приближения результата к тому, что определялось в качестве цели, тем выше эффективность реализации проекта. Схематично путь установления эффективности можно определить так: что было – что должно быть – что стало. Ввиду большого количества методов оценки проектов, все их рассмотреть в данном пособии не представляется возможным. Тем не менее, остановимся на ряде таких методов.

SMART. Размышляя над путями решения проблемы, заинтересованные лица на самых ранних подходах к тому или иному проекту могут провести оценку на предмет того, получится ли проект, если двигаться в том же направлении, или надо сменить направление, – с помощью методики SMART. Данная методика ориентирует оценщика на выяснение, есть ли специфическая индивидуальность в предполагаемых путях достижения цели, которая и состоит в решении конкретной проблемы; измерим ли результат при достижении цели; вообще достижима ли поставленная цель; имеет ли она общественную значимость; возможно ли определить отрезок времени, в течение которого будет достигнута цель на избранных путях решения проблемы. В том случае, если ответы на все указанные вопросы положительны, то проект возможен и реалистичен и, значит, его надо тщательно прорабатывать и готовиться к реализации.

Название данной методики оценки представляет собой аббревиатуру, состоящую из начальных букв английских слов «specific» (порусски – «особый», «индивидуально-определенный»), «measurable»

(«измеримый»), «achievable» («достижимый»), «relevant» («значимый», «важный»), «time-bound» («связанный с определенным промежутком времени»). Правда, в литературе встречается также и иное истолкование стоящих за двумя буквами данной аббревиатуры слов. Так, «а» предлагается расшифровывать как «area-bound»

(«привязанный к территории»), т. е. проект должен иметь четкую географическую определенность: школа, завод, микрорайон, село, город, населенный пункт, экономический регион, субъект федерации, страна, несколько стран и т. д. А «r» предлагается расшифровывать как «realistic» («реалистичный»). В зарубежной литературе обе разновидности истолкования SMART встречаются с одинаковой частотой, что позволяет полагать, что активно используются обе модификации данного метода оценки. SMART позволяет правильно сформулировать цели. Часто совершаемые ошибки при постановке целей – отсутствие в формулировке (а значит и в сознании) временных рамок и критериев успешности выполнения проекта. Применение SMART дает возможность этих ошибок избежать.

Кстати, обратим также внимание на то, что название данной методики оценки совпадает по написанию с английским словом «smart», что на русском языке означает «умный».

SWOT-анализ. Для оценки выполнимости проекта можно использовать SWOT-анализ. Как известно, SWOT-анализ проводится путем построения матрицы, в каждой из четырех граф которой фиксируются последовательно: сильные стороны проекта, слабые его стороны, возможности (способствующие успеху проекта) и угрозы осуществлению проекта (аббревиатура, состоящая из начальных букв четырех английских слов: «strength», «weakness», «opportunities», «threats»). При этом следует обратить внимание на то, что слабые и сильные стороны – это внутренние слабости и сила, существующие внутри самого института, явления, процесса, которые хотят изменить в результате реализации проекта. Возможности и угрозы всегда существуют вовне, в среде, окружающей институт, явление или процесс.

Таблица, применяемая для SWOT-анализа (Внутренняя среда) Strengths (сильные стороны) Weaknesses (слабые стороны) (Внешняя среда) Opportunities (возможности) Threats (угрозы) При применении SWOT-анализа недостаточно просто выявить сильные и слабые стороны, возможности и угрозы. Надо постараться установить, как можно укрепить сильные стороны, уменьшить слабые стороны, а по возможности из слабостей сделать силу, как упрочить и развить возможности и нейтрализовать угрозы.

Как полагают, SWOT был введен впервые профессором Гарвардского университета (США) К.Эндрюсом в 1963 г. на конференции по проблемам бизнес-политики. Известно также, что SWOT активно в 1960-е гг. использовался профессором А.Нэмфри в Стэнфордском университете (США) для исследования тенденций в развитии предприятий и оценки бизнес-стратегий. Со временем из экономической сферы SWOT-анализ перекочевал в политическую и социальную сферы, где активно используется для оценки проектов.

SWOT-анализ используется на предпроектной стадии, в ранний период реализации проекта, но применим также в тех случаях, когда проект хотят существенно подкорректировать.

Параметрический метод. Данный метод оценки предполагает установление определённых параметров для достижения предполагаемой цели проекта в ходе его реализации. Если установленные параметры, предусмотренные при разработке проекта, достигнуты, т. е. совпали с замерами параметров полученного по завершении проекта, то удалось добиться наивысшей эффективности.

При подготовке проекта, как известно, определяется не только цель проекта, но и задачи, последовательное решение которых необходимо для достижения указанной цели. В связи с этим можно установить параметры для каждой из задач, и тогда проводить промежуточную оценку эффективности на разных этапах проекта. Параметрический метод позволяет достаточно точно оценить эффективность реализации проекта, однако только в том случае, когда подобранные параметры отражают действительно существенные элементы достигаемых в ходе реализации проекта результатов. Иначе параметры будут искажать картину либо делать ее неполной. В сложном проекте весьма затруднительно вычленить даже все значимые элементы того, что собираются получить в результате реализации проекта, учтя все статичные и динамические характеристики. Указанные трудности ограничивают применимость параметрического метода для оценки эффективности сложных проектов.

Табличный метод. Данный метод оценки эффективности заключается в выявлении факторов эффективности и неэффективности проекта и расположения их в виде таблицы (собственно, отсюда и произошло название метода). Это позволяет упорядочить все указанные факторы, расположить соответствующим образом, постараться нейтрализовать факторы неэффективности и содействовать факторам эффективности (при предпроектной или промежуточной оценке) или учесть на будущее, на какие факторы следует обратить внимание при проведении сходных проектов (при итоговой оценке эффективности проекта). Вместе с тем, сам по себе учет и упорядочение упомянутых факторов дает представление об эффективности, но не позволяет в полной мере и с достаточной точностью оценить эффективность реализации проекта. К табличным методам оценки можно отнести, в частности, представленные в Главе 2 диаграмму Гантта и написание бюджета социального проекта в виде таблицы.

Субъективно-определительный метод. Этот метод заключается в оценке эффективности, даваемой экспертами, либо членами целевой группы лиц, на которую направлен проект, либо и экспертами и членами целевой группы. При этом в оценке эффективности могут принять участие все члены целевой группы, но реально это возможно только в том случае, когда группа сравнительно небольшая. Если целевая группа настолько велика, что невозможно организовать оценку эффективности всеми ее членами, либо когда теоретически это возможно сделать с участием всех членов целевой группы, но затруднительно на практике, организуют оценку частью целевой группы. При этом необходимо обеспечить репрезентативность выборки представителей целевой группы. Лица, оценивающие эффективность проекта (и эксперты и члены целевой группы), записывают свое мнение об эффективности проекта, а также выставляют определенное количество баллов (исходя из предложенной шкалы). Причем желательно, чтобы они обосновали свою оценку23. Естественно, эксперты и члены целевой группы видят проект по-разному, поэтому их оценки могут дополнять друг друга.

В то же время у лиц, заинтересованных в проведении оценки эффективности проекта не всегда достаточно ресурсов, чтобы организовать такую оценку и экспертами и членами целевой группы.

Рассматриваемый субъективно-определительный метод даёт возможность оценить проект разными людьми, что особенно важно для проектов в социальной жизни. Большое значение при применении данного метода имеют комментарии, даваемые лицами, участвующими в оценке проекта, поскольку такие комментарии позволяют усовершенствовать оцениваемый проект при предпроектной и промежуточной оценке или в дальнейшем лучше прорабатывать сходные проекты. Предлагаемая шкала баллов позволяет формализовать оценку, что вносит определенность в понимание того, насколько эффективен проект. В то же время субъективность оценки является не только сильной стороной метода (отражающей мнение людей), но и слабой его стороной, так как опирается на личный опыт и знания оценщиков, в силу чего объективная сторона оценки эффективности остается вне поля зрения. Сам по себе метод предполагает некоторую субъективность оценки.

О балловой методике можно прочитать в книге: Блюмберг В.А., Глущенко В.Ф. Какое решение лучше? Метод расстановки приоритетов. Л[енинград]. 1982.

Глубинные интервью. Наиболее известный и часто используемый качественный метод оценки проекта – проведение глубинного интервью. В ходе данного вида интервью используются вопросы, ответом на которые предполагается не однозначное «да»

или «нет», а развернутый ответ. Часто глубинные интервью применяют для оценки эффекта социального проекта.

Глубинное интервью представляет собой неформальную личную беседу, проводимую интервьюером по заранее намеченному плану и основанную на использовании методик, побуждающих респондентов к обстоятельным рассуждениям по интересующему исследователя кругу вопросов. Интервью проводится один на один и длится от 30 до 60 минут. В ходе интервью исследуются личное мнение респондента, его убеждения и ценности. Глубинные интервью могут занимать большое количество времени, некоторые ответы подчас бывает сложно интерпретировать. Поэтому для глубинного интервью большое значение имеет уровень квалификации оценщика и на стадии подготовки плана беседы, и на стадии проведения интервью (в особенности умение «разговорить» интервьюируемого), и на стадии истолкования результатов интервью. При проведении глубинных интервью группой оценщиков важны обеспечение единства подходов и позиций оценщиков и скоординированность их действий.

Проведение глубинного интервью предполагает наличие определенных навыков у интервьюера. Важно, чтобы интервью проводил опытный сотрудник, так как велика вероятность влияния предвзятого отношения интервьюера на конечный результат исследования.