© 2001 - 2017
Компания "Процесс Консалтинг"
Материалы, представленные на сайте, являются собственностью компании Процесс Консалтинг.

Индикаторы

Основную проблему при создании системы мониторинга составляет разработка индикаторов.

Индикатор – это показатель, который служит простым и надежным средством измерения достижений, отражает изменения, вызванные программой, или помогает оценить деятельность структуры, осуществляющей программу.

В разработке индикаторов обязательно должны участвовать эксперты в данной предметной области. Только глубокое и всестороннее знание предмета в сочетании с хорошим знанием техники измерений и общей ситуации вокруг программы может обеспечить выбор правильных показателей. Индикаторы формируются экспертами с учетом замысла и целей конкретной программы. Однако существуют общие правила описания индикаторов, которые не зависят от содержания программы.

Описание индикатора в самом общем случае должно включать: 

  • Краткое название.
  • Определение (точный и однозначный ответ на вопрос о том, что представляет собой данный индикатор).
  • Ссылку на инструмент измерения данного индикатора.
  • Периодичность измерения.

Кроме того, описание индикатора может включать:

  • Описание того, что именно данный индикатор измеряет. Оно может понадобиться в случае, если определение (см. выше) не дает достаточной информации для пользователей. 
  • Краткое описание методики измерения (ответ на вопрос о том, как определить значение индикатора). Оно может понадобиться, если пользователи самостоятельно будут производить измерения, пользуясь рекомендованной методикой или инструментом.
  • Преимущества и сильные стороны данного индикатора, а также ограничения по его применению. Эти характеристики индикатора уточняются по мере его использования. Они могут понадобиться для дальнейшей интерпретации данных, а также для совершенствования системы индикаторов.

Существует несколько классификаций индикаторов. В зависимости от того, какие характеристики программы измеряются, индикаторы делятся на количественные и качественные. При этом значение индикатора – это всегда число, которое служит признаком чего-либо, на что-либо указывает, о чем-либо предупреждает. Индикаторы могут отражать как количественные, так и качественные характеристики программы. Когда речь идет о количественной характеристике, то ее представление в числовом виде не вызывает особых затруднений. Представить в числовом виде качественную характеристику программы несколько сложнее.

Допустим, нужно разработать индикатор интерактивности интернет-сайта, то есть его способности взаимодействовать с посетителем. Нам придется вначале изучить, как сайт может взаимодействовать с посетителем. После этого мы сможем сформировать шкалу, предполагающую несколько уровней «интерактивности» : (0) сайт имеется, но информация на нем отсутствует, (1) сайт предоставляет информацию (можно прочесть), (2) сайт предоставляет возможность скачивания информации, (3) сайт предоставляет возможность скачивания и отправки информации, (4) сайт предоставляет возможность получения консультаций в масштабе реального времени. Теперь можно сказать, что индикатор «степень интерактивности» может принимать значения 0,1,2,3 или 4, и что за каждой из этих цифр стоит вполне определенный смысл. Причем индикатор было бы ошибочно отождествлять с интерактивностью сайта. Он является лишь ее признаком.

Естественно, для измерения интерактивности сайта нужно разработать подробную инструкцию. Кроме того, необходимо еще определить, кто будет производить измерение, какие требования будут предъявляться к этим людям и сколько человек должны измерять интерактивность каждого исследуемого сайта. Имеет смысл привлечь к этой работе несколько человек, поскольку замеры будут производиться экспертами субъективно, и для повышения надежности полученных данных разумно прибегнуть к «экспертной триангуляции» .

Другой часто встречающийся вариант «качественного» индикатора – это указание доли респондентов, отвечающих на некий вопрос определенным образом. Допустим, нас интересует осведомленность старших школьников о том, как распространяется вирус иммунодефицита человека (ВИЧ). Осведомленность – качественная характеристика. Ее нельзя непосредственно выразить в цифрах. Однако можно разработать индикатор, который будет служить признаком осведомленности. К примеру, можно провести анкетный опрос целевой группы и посчитать процент респондентов, которые при ответе на вопрос о каналах распространения ВИЧ выберут только правильные варианты из всех предложенных. Этот процент, опять же, нельзя отождествлять с осведомленностью, он лишь является ее признаком, индикатором, числом со смыслом.

Итак, независимо от того, какой параметр программы – количественный или качественный – характеризует индикатор, значение индикатора всегда является числом. И система мониторинга оперирует исключительно числами.

В зависимости от того, что они измеряют, различают индикаторы ресурсов, процесса, непосредственного результата, общего результата, влияния.

Каково оптимальное число индикаторов? С одной стороны, чем их меньше, тем лучше, поскольку мониторинг требует определенных затрат. С другой стороны, мы должны иметь достаточное количество индикаторов, чтобы их значения адекватно отражали ход и результаты программы. Система индикаторов основана на упрощенной модели программы. Чтобы на ее основе можно было судить о том, что происходит на самом деле, эта модель должна учитывать все наиболее важные аспекты программы и быть достаточно адекватной реальности. Образно говоря, система мониторинга дает руководителю карту некой местности. Если эта «карта» напоминает условную туристическую схему, то ориентироваться по ней рискованно, а то и вовсе невозможно. «Карта» должна быть достаточно детальной для решения поставленных задач. Но она всегда останется картой, а не местностью.

В ходе программы, особенно программы долгосрочной, необходимо периодически пересматривать систему индикаторов. От одних индикаторов придется отказаться, поскольку они перестанут быть актуальными. Другие индикаторы и способы их измерения нужно будет модифицировать с учетом изменившихся условий. Не исключено также, что придется разработать и какие-то новые индикаторы. В любом случае необходимо помнить о том, что система мониторинга может корректироваться по ходу программы и не является чем-то раз и навсегда определенным.

Индикатор (в общественных науках) — доступная наблюдению и измерению характеристика изучаемого объекта, позволяющая судить о других его характеристиках, недоступных непосредственному исследованию (Wikipedia)

К началу страницы