4. Принцип критериальной определенности. Можно оценивать грубо, приблизительно, предварительно, но не бывает оценки без критерия. Критерий оценки — это точка отсчета, шкала измерений, это констатация специфики характеристики, подлежащей оцениванию. Чем точнее установлен критерий, тем объективнее и значительнее оценка. При проведении оценки недопустимо произвольное изменение критерия.
5. Принцип количественной определенности оценки. Оценивать можно в параметрах констатации качества, описания особенностей, но оценка может проводиться в количественных показателях, которые дают точную информацию и позволяют эффективнее оперировать оценками: сравнивать, синтезировать, улавливать изменения. В исследованиях систем управления необходимо, по возможности, стремиться к количественным оценкам. Но при этом нельзя отрицать, что в определенных обстоятельствах эвристические оценки могут быть богаче и полезнее. Количественные измерения нередко обедняют ситуацию.
6. Принцип сочетания оценки состояния и изменений. Чаще всего оценка является фиксацией состояния той или иной характеристики, фотографией остановившегося мгновения, констатацией степени проявления характеристики. Но в исследовании наиболее богатой информацией обладают оценки динамики, способные показать тенденции изменений, позволяющие предвидеть последствия. В конечном итоге необходимо сочетание того и другого.
7. Но оценка — это не просто установление и измерение тех или иных характеристик, это, помимо прочего, и деятельность исследователя или группы исследователей, работа экспертов, математиков, программистов. И это обстоятельство не может не быть отражено в принципах оценки.
Принцип независимости заключается в том, что оценка должна быть отделена, насколько это возможно, от личностных отношений, служебной зависимости, амбиций и самолюбия. Она должна быть защищена от влияния заинтересованных лиц, доброжелателей или недоброжелателей.
Это достигается как посредством методики оценки, так и соответствующей организацией ее проведения.
Оценки могут быть различными. В каждом конкретном случае исследователю приходится выбирать тот вид, который может быть наиболее приемлемым и эффективном. Этот выбор определяется как характером исследуемых проблем, так и возможностями оценивания. Специфика оценивания проблем управления заключается в том, что все они в конечном итоге связаны с деятельностью человека и его человеческими качествами. Многие параметры управления невозможно измерить достаточно точно, а некоторые даже вообще выделить и каким-либо образом отграничить. Поэтому многие оценки необходимо строить на статистическом анализе, либо использовать социометрические методы тесты и экспертные оценки.
1. По области и масштабам оценивания тех или иных ситуаций можно выделить оценки общие и локальные. Так проявляются и проблемы управления. Одни из них имеют общий характер, другие — ограничены какой-либо областью деятельности. Методология исследования должна предусматривать различие этих видов.
2. Оценки могут быть простыми и сложными, в зависимости от того, предполагают ли они множество расчетов или построены на измерении первичной информации. В сложных оценках нередко случается нарушение валидности показателей, смещение акцентов актуальности и важности, потеря информации. Необходимо избегать таких случаев при конструировании показателей.
3. В оценках большую роль играет момент и продолжительность их проведения. По этому критерию можно выделить оценки эпизодические и периодические. Первые вызываются необходимостью конкретной ситуации, возникновением и обострением новых проблем, вторые — систематическим исследованием управления, мониторингом качества.
4. Всякая оценка отражает потребность поиска и решения проблем и требует затрат определенных ресурсов. Поэтому можно дифференцировать оценки по критерию точности измерения параметров. Существуют оценки точные и приблизительные (грубые, предварительные, ориентировочные, порядковые). Вторая группа способствует экономии ресурсов при поиске ведущих проблем. Но глубокий анализ и ответственные исследования необходимо строить на предельно строгих и точных оценках.
5. По организации оценивания можно выделить оценки коллективные и индивидуальные. Часто используется их сравнительный анализ. При этом необходимо учитывать параметры и коллектива, и личности — опыт, образование, квалификация, мотивы, социальность и пр.
6. Методика проведения оценки имеет ключевое значение в ее корректности. В исследовании управления часто используются два вида оценки — тестовая и экспертная. Не исключаются и их различные комбинации.
Тестовая оценка может быть очень эффективной, но зависит от качества тестов, а успех экспертной оценки в значительной мере определяется принципами формирования экспертных групп и организации их работы.
7. По получению информации и методике ее обработки можно выделить также статистическую и нестатистическую оценку. Искусство исследования, помимо всего прочего проявляется и в выборе вида оценок в конкретных обстоятельствах.
Показатели, используемые в исследовании системы управления, различны. Их совокупность, а также качество не всегда могут соответствовать целям исследования. Поэтому большое значение имеет выбор необходимых показателей или при отсутствии подходящих, их конструирование.
Для выбора показателей необходимо сделать классификацию, которая упорядочивает все их разнообразие и показывает, помимо прочего, каких показателей для проведения исследования недостает.
В любом исследовании существует предмет и объект. В исследовании управления в качестве объекта исследования выступает система управления, т. е. совокупность взаимосвязанных действий субъекта управления, позволяющих согласовывать по общей цели деятельность людей. Необходимы показатели, которые отражали бы состояние, функционирование и развитие этой системы.
Показатели состояния характеризуют наличие тех или иных функций, связей, подразделений, свойств, квалификационных признаков, технических средств, информационных массивов и пр. К этой группе показателей относится и структура системы управления.
Показатели состояния не обязательно должны быть натуральными. Они могут отражать и экономическое положение фирмы. Так или иначе, это показатели статики, показатели, фиксирующие мгновение в разнообразных процессах функционирования и развития системы управления.
Существует другая группа показателей, отражающих изменения, происходящие в управлении. Такие изменения могут быть повторяющимися, воспроизводимыми и невоспроизводимыми, характеризующими возникновение нового качества. Это показатели динамики, показатели функционирования и развития. Первые включают те процессы, которые позволяют судить о поддержании необходимых для нормальной работы соотношений, сочетаний, соответствий, пропорций, совместимости (например, функций, полномочий, индивидуальностей, технических средств и пр.).