Критерии, используемые при формировании оценочной системы, должны быть измеримыми, т. е. должна иметься воз­можность оценки любого рассматриваемого объекта эксперти­зы по каждому из критериев.

В тех случаях, когда критерий, характеризующий объект, не может быть измерен объективно, мы говорим о субъективных критериях, имея в виду прежде всего, что для оценки объек­тов по таким критериям отсутствуют объективные критерии и необходима разработка специальных вербально - числовых шкал.

Естественно, что такие критерии, как "объем продукции", "себестоимость производства", "срок окупаемости", могут быть отнесены к объективным. В то же время такие критерии, как "гудвилл", связанный с оценкой интеллектуальной собст­венности, "имидж фирмы", "социальная значимость проекта" и другие, могут быть измерены лишь субъективно.

Многие из объективных крите­риев, относящихся к будущим периодам, нередко также могут быть оценены лишь субъективно. Так, например, ожидаемые объ­емы производства продукции, которые станут возможными по­сле реализации проекта, ожидаемая цена единицы продукции и др. часто во многом зависят от оценок экспертов, являющихся в строгом смысле слова субъективными.

Поэтому так необходим профессионализм при организации и проведении процесса экспертного оценивания, анализе и обработке результатов экспертных оценок, используемых при выработке и принятии управленческих решений.

Но первым шагом в процессе экспертного оценивания яв­ляется формирование адекватной оценочной системы.

Мы обсудили некоторые требования, предъявляемые к со­вокупности критериев, включаемых в состав оценочной сис­темы.

Практическое формирование перечня критериев также представляет собой в значительной степени экспертную про­цедуру. Это могут быть 2-3-туровые экспертизы, когда пред­варительно сформулированный перечень критериев уточняет­ся экспертами.

При формировании совокупности критериев должно быть обращено внимание на такие моменты, как четкое понимание смысла каждого из критериев ЛПР и экспертами.

Иногда целесообразно агрегирование критериев. Этим мо­жет быть достигнуто как снижение избыточности критериев, особенно в случае, когда имеется частичное дублирование критериев, так и общее уменьшение количества критериев, что важно для снижения трудоемкости работы с оценочной систе­мой.

2. 3. Количественные и качественные экспертные оценки

Остановимся теперь на основных способах экспертных из­мерений - методах получения экспертных оценок, играющих во многих случаях определяющую роль при принятии важных управленческих решений.

Методы получения количественных экспертных оценок

1. Непосредственная количественная оценка

Непосредственная количественная оценка используется как в случае, когда надо определить значение показателя, из­меряемого количественно, так и в случае, когда надо оценить степень сравнительной предпочтительности различных объек­тов.

В первом случае каждый из экспертов непосредственно указывает значение показателя для оцениваемого объекта. Это может быть конкретное численное значение показателя для оцениваемого объекта, например стоимость жилой квартиры; цена единицы продукции, при которой она может иметь кон­курентоспособный спрос; предполагаемая емкость рынка; оп­тимальный объем производства и т. д.

Если эксперт затрудняется указать конкретное значение по­казателя, он может указать диапазон, в котором лежит значе­ние оцениваемого показателя.

Во втором случае, когда оценивается сравнительная пред­почтительность объектов по тому или иному показателю, ко­личественная оценка, указываемая экспертом, определяет сте­пень их сравнительной предпочтительности.

Заранее необходимо условиться, что, скажем, большее зна­чение оценки соответствует более предпочтительному альтер­нативному варианту. Иногда количественную оценку сравнительной предпочтительности объектов целесообразнее произ­водить в баллах, используя специально разработанные балль­ные шкалы.

2. Метод средней точки

Метод используется, когда альтернативных вариантов до­статочно много. Если через f(a1) обозначим оценку первого альтернативного варианта значения показателя, относительно которого определяется сравнительная предпочтительность объектов, через f(a2) - оценку второго альтернативного вари­анта, то далее эксперту предлагается подобрать третий альтер­нативный вариант a3, оценка которого f(a3) расположена в се­редине между значениями f(a1) и f(a2) и равна f(a1) + f(a2)/2.

При этом в качестве первого и второго альтернативных ва­риантов целесообразно выбирать наименее и наиболее пред­почтительные альтернативные варианты.

Далее эксперт указывает альтернативный вариант a4, значе­ние которого f(a4) расположено посередине между f(a1) и f(a3), и альтернативный вариант a5, значение которого f(a5) располо­жено посередине между значениями f(a1) и f(a4).

Процедура завершается, когда определяется сравнительная предпочтительность всех участвующих в экспертизе альтерна­тивных вариантов.

3. Метод Черчмена - Акофа

Метод Черчмена - Акофа используется при количествен­ной оценке сравнительной предпочтительности альтернатив­ных вариантов и допускает корректировку оценок, даваемых экспертами.

В методе предполагается, что оценки альтернативных вари­антов - неотрицательные числа, что если альтернативный ва­риант a1 предпочтительнее альтернативного варианта а2, то f(a1) больше, чем f(a2), а оценка одновременной реализации альтернативных вариантов a1 и а2 равняется f(a1) + f(a2)).

Все альтернативные варианты ранжируются по предпочти­тельности, и каждому из них эксперт назначает количествен­ные оценки, как правило, в долях единицы.

4. Метод лотерей

Согласно этому методу, для любой тройки альтернативных вариантов а1, а2, а3, упорядоченных в порядке убывания пред­почтительности, эксперт указывает такую вероятность p, при которой альтернативный вариант а2 равноценен лотерее, при которой альтернативный вариант a1 встречается с вероятно­стью р, а альтернативный вариант а3 - с вероятностью 1 - р.

Методы получения качественных экспертных оценок

Иногда специфика объектов экспертного оценивания тако­ва, что эксперты затрудняются дать количественные оценки значений оцениваемых показателей либо объекта в целом, а в некоторых случаях такие оценки попросту неоправданны и не позволяют получить достаточно надежную экспертную информацию.

1. Экспертная классификация

Этот метод целесообразно использовать, когда необходимо определить принадлежность оцениваемых альтернативных ва­риантов к установленным и принятым к использованию клас­сам, категориям, уровням, сортам и т. д. (далее - классы).

Он может быть использован и тогда, когда конкретные классы, к которым должны быть отнесены оцениваемые объ­екты, заранее не определены. Может быть заранее не опреде­лено и число классов, на которое производится разбиение оцениваемых объектов. Оно может быть установлено лишь по­сле завершения процедуры классификации.

Сравнительный анализ качественных и количественных методов оценки личности

Характеристики, ассоциируемые с подходом
Количественный	Качественный
Информация	Объективная	Субъективная
Характеризующие понятия	Экспериментальный; Количественные данные; Статистика	Описательный; Естественный; Словесно-ориентированный
Ключевые понятия	Переменные; Операционализация; Надежность; Гипотезы; Валидность; Статистическая значимость; Повторяемость	Значение; Понимание здравого смысла; Социальное конструирование; Правдоподобность
Организация	Структурированные; Формальные; Специфические; Детализированный план операций	Включенные; Согласованные, чувствительные к продолжению
	Большие; многослойные; контрольные группы; Произвольный выбор и контроль за побочными переменными	Небольшие; Теоретические примеры; Целевые примеры, предполагающие возможность включения как можно большего числа контекстов
Техники или методы	Эксперимент; Структурированное интервью; Структурированное наблюдение; Ряды данных и тесты	Наблюдение; включенное наблюдение; изучение документов и артефактов; Неструктурированное интервью
	Количественные; Операционализированные переменные; Числовое кодирование; Статистические; Подсчитываемые	Описательные; обыденная речь; личные документы; полевые заметки; официальные документы; аудио и видеозаписи;
Инструменты и средства	Опросники; описания; тестовые показатели; компьютеры;	Аудио и видеопленки; воспроизводящие устройства; записи; часто единственным инструментом является сам исследователь
Анализ данных	Дедуктивный; Статистический; Имеет место по завершении сбора данных	Индуктивный продолжающийся; Тематический; Понятийный.
Внутренняя валидность
	Искусственные	Реалистические, естественные
	Структурированная	Неструктурированная
Конструктная валидность
Надежность
Проблемы применения	Контроль других переменных; Задающий характер подхода; валидность	Временная затратность; Нестандартизированность процедуры; надежность

Представленный сравнительный анализ специфики, возможностей и ограничений количественных и качественных методов показывает, что как у первых, так и у вторых есть уязвимые места, ограничивающие возможности психологического исследования. Различия между количественными и качественными исследованиями заключаются в том, что первые являются позитивистскими, ограничивающими, не способными схватывать перспективу субъекта, абстрактными и основанными на безжизненных описаниях. Качественные исследования, как утверждают критики, проявляют тенденцию к ненаучности и основываются на не строгой методологии. Приверженцы же утверждают, что они вводят постмодернистский и пост-позитивистский взгляд, соответствующий превалирующим социальным установкам.

Различение количественной и качественной исследовательских методик по их отношению к объекту исследования, что вполне естественно, сказывается и на их возможностях. В тоже время многими авторами они рассматриваются не как взаимоисключающие, а как взаимодополняющие друг друга. Число и слово вместе могут рассматриваться как способы организации и упорядочивания сложного неструктурированного материала.

Количественные данные собираются в контролируемых условиях, следуя принципу вероятности того, что исследуемая переменная может описывать идентифицируемые взаимоотношения, в то время как качественные данные собираются в контексте естественных условий. Как качественные, так и количественные методы стремятся к достижению надежности и валидности полученных результатов. Постоянство или стабильность данных показывают способность исследователя повторно подтверждать полученные результаты в рамках количественного подхода, в качественных же исследованиях главным является репрезентативность данных по отношению к истинной или полной картине.

Качественные и количественные методы должны дополнять друг друга. Ибо комбинация количественных и качественных методов позволяет охватить исследованием как широту явления (социальное распространение), например, безработицы, бедности, отсутствия социальной защиты и т. п., так и глубину (индивидуального страдания), а также наметить практические шаги для предотвращения данных явлений или активного вмешательства социального работника.

При внешней убедительности представленной логики сочетания возможностей количественных и качественных методов не раскрытым остается самый фундаментальный вопрос, связанный с разграничением их сферы компетенции. Выше уже обосновывалась продуктивность количественных методов по отношению к биологической природе человека, подлежащей измерению. Отмечалась и потенциальная возможность их использования по отношению к символической природе в аспекте нахождения номотетики и выстраивания на ее основе систем сравнительных координат неизбежно необходимых как для психологического знания, так и для человечества, предполагающего ситуацию сравнительной оценки индивидов во многих ситуациях, требующих ориентировки.

Укажем на принципиальные различия между качественными и количественными методами. Эти различия состоят, прежде всего, в особом эмпирическом угле зрения при рассмотрении социальной действительности. Так, количественные методы при социальных исследованиях нацелены на общие признаки (на анализ данных по их общим признакам для их последующей типизации), а качественные методы ориентированы на определенные различия.

Следует подчеркнуть, что как те, так и другие методы не только не противоречат, но, наоборот, дополняют друг друга. Однако использование их в социальных исследованиях различно. Количественным методам отдается предпочтение в традиционных социологических эмпирических исследованиях, качественным - при использовании герменевтического принципа анализа социальной реальности. При этом технические приемы для исследования повседневного бытия составляют резервуар для применения всех социально-научных методов. Можно уже говорить и о предварительных критериях, характеризующих эмпирические исследования социальной работы. качественный количественный исследовательский личность

В исследованиях социальной работы следовало бы отдать приоритет качественным методам, понимаемым как анализ бытия клиента (окружающего мира, жизненного пространства). Полагаем, что перспективу клиента в ее коммуникативной обусловленности можно учесть лишь с помощью качественных методов эмпирических исследований. Прежние приемы опроса и техника кодирования являются для этой цели недостаточными. Невозможно и простое выведение из теоретических положений конкретных форм практических действий. Исследование социальной реальности происходит главным образом через ее речевую трактовку, разговорные формы общения с клиентом. При этом использование метода должно быть соотнесено с определенным уровнем социальной реальности.

Для профессиональной социальной работы такая смена методик обязательна. В этом заключена ее сила, обеспечивающая не только возможность восстановить нормальную жизнь клиента, но и реконструировать ее перспективу.

Так же социальной работы и ее научного обоснования существенное значение имеют следующие аспекты качественно-эмпирических исследований:

• - ориентация на субъект;
• - ориентация на понимание общего контекста события;
• - на конкретную ситуацию;

Следует сказать, что исходя из описания смысловых отрезков структур социальных процессов, возможен их конкретный анализ (индивидуальный и коллективный) без проведения статистически количественного исследования типов отдельных случаев.

Исследование социальной работы как комплексный анализ жизненного пространства может выполнять при этом следующие функции: обеспечивать с помощью фундаментальных теоретических работ дальнейшее развитие научной дисциплины; поддерживать через прикладное исследование процесс профессионализации и стимулировать формирование профессиональных компетенций; вовлекать обучающихся профессионалов в этот процесс в форме учебно-обучающего исследования.

При овладении знаниями в области социальной работы наряду с выработкой профессионально-практических навыков необходима и компетенция в теоретическом плане (умение осуществлять с научных позиций рефлексию, выявлять причины глубинных процессов, давать им должную интерпретацию и находить надлежащий выход из ситуации), формирование такого рода профессиональной компетенции, а также конкретное воплощение ее в повседневной практике социальной работы составляют обязательное условие научно-обоснованной профессиональной деятельности социального работника.

К профессиональной компетенции следует отнести, прежде всего, формирование способности воспринимать различать, интерпретировать и анализировать, а также вырабатывать профессиональные суждения. Важна и способность ситуативного разъяснения несложных социальных процессов. Студенты должны уметь находить упрощенные способы для выявления, объяснения и оценки социальных процессов, что также является составной частью профессиональной компетенции социального работника.

Качественные методы, будучи практически не применимыми по отношению к биологическому аспекту человеческой сущности, в высшей степени продуктивны по отношению к аспекту символическому и, исключительно, к аспекту рефлексивному. Способность улавливания тончайших нюансов поточного мира человеческих экзистенциально-феноменальных переживаний является для них приоритетной, одновременно создавая ряд проблем, связанных с соотнесением уникальных переживаний друг с другом в рамках одной личности и, тем более, в рамках различных личностей и их социальных окружений.

Качественные методы позволят анализировать общее двух или нескольких признаков, опуская при этом их различия. Количественные же методы дают возможность определить различие тем, что общие признаки используются как базис для сравнения. Поэтому целеполагание при тех и других методах различно: раскрытие связей в одном случае, измерение различных выражений уже известных черт - в другом.

Так же качественные методы способствуют выработке коммуникативных умений, важных для проведения консультирования, диагностики и терапии.

При этом коммуникативно-качественные социальные исследования следует рассматривать как исходный пункт для углубления субъективного видения в социальной работе. А понимание типологических моделей и их трактовку необходимо воспринимать как базисную основу деятельности социальных работников. Овладеть этими приемами можно только в процессе творческого учения. При этом в центре внимания, как нам представляется, должен быть анализ повседневной жизни, жизненного пространства клиента как интегративной составной части исследований социальной работы.

К сожалению, до сих пор концепция социальной работы, ориентированная на анализ жизненного поля клиента и дополненная биографическим видением, использовалась довольно редко. А как раз такая концепция, делающая субъективную позицию клиента, его видение жизни, окружающего его мира основным предметом исследования, позволяет понять, как и почему действующий повседневно индивид познает «свой мир» именно так, а не как это представляется исследователю.

Качественно-эмпирическая исследовательская стратегия позволяет использовать иной подход социального работника к мировосприятию клиента. С этих позиций можно вести одновременно две линии исследования. С одной стороны, проводить анализ жизненной реальности через восприятие самого клиента, биографические показатели, его рассказ о своей оценке событий, с другой - через жизненную социальную практическую деятельность с исторической ретроспективой.

Таким образом, проектируемый анализ жизненного окружения клиента как особый тип качественно-эмпирического исследования в социальной работе преследует две цели: первая - развитие типологии случая, обстоятельств, их распространенность как социального явления. Вторая - разработать концепцию социальной работы, найти и определить возможность для включения в действие на основе этой концепции.

Качественный анализ жизненной ситуации клиента в сочетании с типологизацией аналогичных случаев (результаты количественных методов) дают для профессиональной социальной работы надлежащий ориентир, возможность более широкого и глубокого подхода. Такая форма исследования способствует внутреннему обогащению профессии и укрепляет тем самым ее самостоятельность в качестве научной дисциплины.

При использовании качественных методов речь идет, в принципе, об охвате, структурном описании и объяснении динамики тех социальных процессов, которые характерны для интересующих сфер общественной реальности, то есть единичном и особом в предмете исследования, а не о выдвижении в центр внимания регулярного и обычного. Из перспективы качественных методов исследования невозможно выразить в понятиях системные структуры независимо от их составляющих, а также от действующих и страдающих членов общества.

Сила количественных методов заключается, прежде всего, в том, что они позволяют основательно и в систематизированном виде открывать новое. Таким образом, специалисты определяют количественные методы социальных исследований как разновидность социальной диагностики.

Количественные методы ставят в центр рассмотрения общие закономерности, при которых из сложных отдельных случаев выводятся повторяющиеся или общие признаки. Тем самым, в отличие от качественных методов, здесь не учитывается единичное и особое в предмете исследования и ситуации.

Например, анализ судьбы длительно безработного или бездомного позволяет показать ситуацию отчужденности людей, испытывающих тяготы жизни, ее кризисные ситуации, их тщетный поиск опоры и ориентации, что не позволяет им определить свою дальнейшую жизнь. Но как раз в этих поисках нормальной жизни, общественного признания и заключается шанс для социальной работы. Понимание специалистом конкретной кризисной ситуации соответствующего клиента позволяет профессионально увидеть и наметить для него жизненную альтернативу, активизировать возможные социальные контакты.

Экспертные оценки и способы измерений.

Оценка эксперта – количественное и/или качественное измерение соответствующего показателя.

Методы получения количественных экспертных оценок

Непосредственная количественная оценка

Эксперт указывает конкретное числовое значение или диапазон искомого параметра.

Метод средней точки.

Применяется при большом количестве альтернативных вариантов.

Сначала выбираются наиболее (А) и наименее (Я) предпочтительные альтернативы. Далее – промежуточный вариант – М, оценка которого делит отрезок А – Я пополам.

Методы получения качественных экспертных оценок

Экспертная классификация (определение принадлежности к группе, сорту, категории – сорт чая)

Ранжирование альтернатив – упорядочение сравниваемых альтернатив по степени предпочтительности определённого признака.

Метод экспертных кривых применяется для получении прогнозов на основе анализа динамики показателей, характеризующих объект эксперимента (график, экстраполяция). Для предотвращения ошибок при экстраполяции на основе обобщенного мнения экспертов на графике определяются точки, в которых следует ожидать изменения тенденции развития показателя.

Инструментами вышеперечисленных методов являются качественные и количественные шкалы.

19. Способы оценки качеств экспертов и формирование экспертных комиссий.

Метод суда.

Процедура аналогична судебному заседанию. Часть экспертов – обвиняют, часть – защищают, часть – присяжные, выносящие окончательный вердикт. Экспертные оценки – субъективны, поэтому ключевой вопрос – подбор экспертов.

Оценка качеств эксперта .

Эксперт – специалист, профессионал, оценки и суждения которого лицо, принимающее решение, считает полезным учитывать в процессе принятия решения.

Формирование состава экспертной комиссии эависит от:

Конкретной ситуации принятия решения;

Возможностей организаторов экспертизы привлечь для работы высококвалифицированных специалистов;

Возможностей специалистов принять участие в работе экспертной комиссии.

Не существует общепринятой единой методики оценки качеств эксперта.

Можно опираться на:

Профессиональные знания;

Опыт и эффективность деятельности в составе экспертных комиссий.

Способы оценки качеств эксперта:

Априорные – не используют информацию о результатах участия эксперта в предыдущих экспертизах (самооценка, взаимная оценка, метод списка экспертов, документационный (анкетный) метод).

Апостериорные – используют информацию о результатах участия эксперта в предыдущих экспертизах (метод парных сравнений объектов, наиболее предпочтительных для данного эксперта, метод отклонения от результирующей групповой оценки).

Тестовые – подразумевают проведение специального испытания.

Тест должен быть специально разработан под конкретные объекты экспертной оценки

Истинные значения оцениваемых параметров (правильные ответы) не должны быть известны эксперту

Должна быть разработана шкала для определения точности оценок, даваемых экспертом

Вероятность случайного угадывания правильной оценки должна быть очень мала.

Использование тестовых методов позволяет оценить такое важное профессиональное качество эксперта как воспроизводимость экспертных оценок. Проводят ряд аналогичных тестов и оценивают полученные результаты. Стабильность оценок говорит о профессиональной компетенции эксперта.

Любые изменения в условиях или результатах деятельности организации (промышленного предприятия, торговой фирмы или банка), связанные с той или иной альтернативой управленческого решения, можно определить только тогда, когда существуют соответствующие показатели, которые можно измерить. Но речь идет не только о количественных измерениях в привычном для нас понимании, но и о качественных оценках, позволяющих судить о динамике происходящих изменений. Поэтому, говоря об оценках экспертов, мы понимаем под ними количественные или качественные измерения соответствующих показателей.

В зависимости от целей экспертизы, эксперты могут оценивать стоимость недвижимости, ожидаемый уровень инфляции, изменения валютного курса, надежность эмитента ценной бумаги, рейтинг банка и т.д. Объекты оценки и оцениваемые показатели весьма разнообразны. Если при этом эксперт должен измерить значение количественного показателя (дать количественную оценку), он может указать конкретное числовое значение или интервал, в котором оно лежит. Если же эксперт должен определить значение показателя, который может быть оценен только качественно (дать качественную оценку), то он может использовать для этого вербально-числовые шкалы.

Итак, экспертная информация может носить как количественный, так и качественный характер. Рассмотрим наиболее распространенные методы ее измерения отдельно для каждого из этих двух случаев.

Методы получения количественных экспертных оценок

Непосредственная количественная оценка. Эксперт непосредственно указывает числовое значение показателя для оцениваемого объекта (альтернативы), например, стоимость квартиры или земельного участка, предполагаемую емкость рынка и т.п. Если конкретное значение показателя указать трудно, эксперт может определить диапазон, в котором находится это значение.

Метод средней точки. Этот метод используется, когда альтернативных вариантов, требующих оценки, достаточно много. В начале эксперт количественно оценивает наиболее предпочтительную альтернативу - f(а1) и наименее предпочтительную - f(а2). Далее он должен подобрать третий альтернативный вариант а3, оценка которого f(а3) расположена в середине между значениями f(a1) и f(a2) и равна половине их суммы. Затем экспертом определяется оценка альтернативы а4, значение которой - f(а4) - расположено посередине между значениями f(а1) и f(а3), и альтернативы а5 - f(а5), значение которой является средним значением между f(а3) и f(а4), и так далее до тех пор, пока не будет дана оценка всех сравниваемых альтернатив.

Методы получения качественных экспертных оценок

Метод экспертной классификации. Этот метод целесообразно использовать, когда необходимо определить принадлежность оцениваемых альтернатив к установленным и принятым классам, категориям, уровням, сортам и т.п., например, оценка дегустаторами сортов чая или определение категории отеля. Если классы установлены заранее, то эксперту последовательно предъявляют альтернативные варианты и тот определяет, к какому классу принадлежит данная альтернатива. Если же классы не установлены, то эксперту предъявляют альтернативные варианты парами и просят определить, относятся они к одному классу или к разным. После чего альтернативы предлагаются для оценки последовательно, и выясняется, можно ли каждую из них отнести к одному из образовавшихся классов, или для нее надо образовать новый класс. Процедура повторяется до тех пор, пока не будут оценены (расклассифицированы) все альтернативы.

Метод ранжирования альтернатив. Сущность этого метода заключается в упорядочивании сравниваемых альтернатив по степени предпочтительности определенного признака. Если таких альтернатив сравнительно немного (не более 20), то эксперту предъявляется весь набор альтернативных вариантов, и он указывает наиболее предпочтительный среди них. Затем эксперт определяет наиболее предпочтительный вариант из оставшихся. И так далее, пока все оцениваемые альтернативы не будут проранжированы. Если же оцениваемых вариантов больше, то сначала производится их разбиение на упорядоченные по предпочтению группы с помощью метода экспертной классификации, а затем ранжирование внутри каждой группы.

Метод экспертных кривых. Этот метод применяется, когда целью экспертизы является разработка прогнозов на основе анализа динамики изменения показателей, характеризующих объект экспертизы, например, темпов роста ВВП, инфляции, уровня безработицы и т.п. Использование данного метода предполагает построение на основе имеющихся статистических данных графика, отображающего тенденцию динамики анализируемого показателя. Затем, при помощи экстраполяции, эта тенденция продолжается в будущее, что дает возможность оценить значение данного показателя в прогнозируемом периоде. Однако использование экстраполяции может привести к существенным ошибкам, т.к. не учитывает возможность качественных изменений, приводящих к смене тенденции. Поэтому далее, на основе обобщенного мнения экспертов, на графике определяются точки, в которых следует ожидать смены тенденции изменения оцениваемого показателя, что позволяет наглядно представить возможные альтернативные сценарии развития ситуации.

Двум рассмотренным выше группам методов получения экспертных оценок соответствуют и два типа шкал:

шкалы количественных измерений;

шкалы качественных измерений.

Количественные шкалы

Абсолютная шкала. Если требуется определить количество мест в аудитории или количество работников, необходимых для выполнения определенной операции, то число, являющееся результатом подобных измерений, определяется однозначно и является единственным. В этом и заключается особенность абсолютной шкалы.

Шкала отношений. Предполагает возможность производить измерения в различных системах единиц. Так, например, если оценивать массу предмета в килограммах, получим одно числовое значение, в фунтах - другое и т.д. Однако какой бы системой измерений ни пользоваться, отношение масс любых двух предметов будет одинаково и при переходе от одной системы к другой не меняется. То же самое наблюдается и при измерении длины предметов. Это типичные примеры шкалы отношений, в которых отношения числовых оценок остаются неизменными.

Шкала интервалов. В шкале интервалов при переходе от одной системы измерений к другой отношения числовых значений оцениваемых альтернатив не сохраняются, однако сохраняется отношение разностей числовых оценок. Примером измерений в шкале интервалов является определение температуры, которую, как известно, можно измерять по разным шкалам: Цельсия, Фаренгейта и т.д. Каждый раз мы будем получать разные числа, т.к. в различных шкалах используются различные точки начала отсчета и различные единицы масштаба измерений. Но эти разные числовые оценки соответствуют одной и той же температуре объекта.

Шкала разностей. Если при переходе от одной числовой системы измерений к другой меняется лишь точка начала отсчета, такие шкалы называются шкалами разностей. Примером количественных оценок в шкале разностей являются системы летоисчисления, отличающиеся точкой начала отсчета (от рождества Христова, от сотворения мира или от переселения пророка Мохаммеда из Мекки в Медину).

Качественные измерения являются гораздо менее строгими, они носят субъективный характер и для них используются другие типы шкал, основными из которых являются следующие.

Качественные шкалы

Номинальная шкала (шкала наименований). Суть измерений оцениваемых альтернатив в этой шкале - разбиение их на классы по определенному признаку. Всем альтернативам, попавшим в один класс, должно соответствовать одно и то же число. Примерами измерений в номинальных шкалах может служить разбиение студентов одного курса на группы, разделение изделий по уровням качества (сортам) и т.д.

Порядковая шкала. Эта шкала используется для ранжирования, т.е. определения порядка предпочтения альтернатив, выраженности того или иного свойства, например важности, срочности и т.п.

Довольно часто в ходе экспертизы возникает необходимость измерения показателей, оценки которых носят заведомо субъективный характер. Так, например, на знаниях и опыте специалистов основаны оценки степени риска при реализации того или иного инвестиционного проекта, конкурентоспособности определенного вида продукции, уровня компетентности кандидата на вакантную должность и т.п. В этих случаях используют особый тип порядковых шкал - вербально-числовые шкалы. Их особенность как раз и состоит в том, что они позволяют измерить степень интенсивности какого-либо свойства, имеющего субъективный характер. В состав вербально-числовой шкалы входят содержательное (словесное) описание выделенных градаций и соответствующие им (градациям) числовые значения.

Наиболее известна широко применяемая на практике шкала Харрингтона, показанная в табл. 6.1.

Таблица 6.1.

Шкала Харрингтона

Приведенные в таблице числовые значения получены на основе статистического анализа большого массива данных, благодаря чему шкала Харрингтона имеет универсальное применение и может в соответствующих модификациях (например, в виде шкалы баллов) использоваться для оценки различных показателей качественного характера.

Подводя итоги изучения экспертных методов, следует отметить, что их значение состоит в том, что они усиливают элемент коллегиальности в процессе принятия сложных решений и, используя интуицию и коллективную генерацию идей, позволяют находить новые, оригинальные решения проблем, к которым нельзя прийти с помощью только логических рассуждений.

В то же время между всеми рассмотренными способами разработки и обоснования решений (методами моделирования и экспертными методами) на практике довольно трудно установить четкие границы, т.к. разрешение комплексных проблем современного менеджмента требует и комплексного использования различных логических, статистических, математических и эвристических приемов. Поэтому не какая-то одна, а преобладающая группа способов и формирует тот или иной метод. Области применения методов принятия решений зависят, в основном, от характера решаемых проблем и условий принятия решений, что отражено на рис. 6.1.

Выводы

Сущность экспертных методов принятия решений заключается в получении ответов специалистов на заранее поставленные перед ними вопросы, обработке полученной информации с помощью специальных логических и математических процедур и преобразовании ее в форму, удобную для выбора наиболее предпочтительной альтернативы решения.

Среди методов экспертных оценок (различающихся процедурой организации экспертизы) основными являются метод комиссий, метод мозговой атаки, метод Дельфи и метод разработки сценариев.

В процессе формирования экспертной комиссии возникает проблема оценки качеств эксперта - необходимость учитывать его профессиональные знания, опыт деятельности и результаты работы в предшествующих экспертизах.

Способы оценки качеств эксперта делятся на три группы: априорные (не учитывающие эффективность его участия в предыдущих экспертизах); апостериорные (основанные на реальных результатах участия специалиста в проведении экспертиз) и тестовые (предполагающие проведение специального испытания для потенциального эксперта).

Экспертная информация может носить как количественный, так и качественный характер. Для получения количественных оценок основными методами являются метод непосредственной количественной оценки и метод средней точки. Для получения качественных оценок используются экспертная классификация, ранжирование альтернатив и метод экспертных кривых. Этим двум группам методов получения экспертных оценок соответствуют и два типа шкал: шкалы количественных измерений и шкалы качественных измерений.

Вопросы для самопроверки

Что включает в себя понятие априорные методы оценки эксперта?

В каких случаях принято использовать апостериорные методы оценки?

Каковы условия применения тестовых методов оценки качеств эксперта?

В чем различие количественных и качественных экспертных оценок?

По каким параметрам строятся качественные шкалы?

Качественные методы (этнографические, исторические исследования как методы качественного анализа локальных микросоциумов, метод исследования случая, биографический метод, метод нарратива (повествования)) - смысловая интерпретация данных. При использовании качественных методов между этапом получения первичных данных и этапом содержательного анализа отсутствует звено формализованных математических операций. Это широко известные и применяемые методы статистической обработки данных.

Однако качественные методы включают в себя определенные количественные способы сбора и обработки информации: контент-анализ; наблюдение; интервьюирование и пр.

При принятии важных решений для выбора наилучшего направления действий из имеющихся вариантов используется так называемое «дерево решений» или «дерево целей», представляющее собой схематическое описание проблемы принятия решений. Структурные схемы целей можно представлять табличным и графовым способами. Графовый способ имеет ряд преимуществ перед табличным: во-первых, он позволяет наиболее экономно записать и обработать информацию, во-вторых, быстро составить алгоритм развития, в-третьих, графовый способ является очень наглядным. «Дерево целей» служит основой для выбора наиболее предпочтительных альтернатив, а также для оценки состояния разрабатываемых систем и их взаимосвязей.

Аналогично конструируются и другие методы качественного анализа, в том числе аналоги количественных методов факторного анализа.

Как справедливо отмечает Д.С. Клементьев (21), эффект от качественных методов социологических исследований возможен лишь при доминанте этических норм в отражении социальных факторов. Социолог, отбирая информацию из массы всевозможных сведений, не должен ограничиваться только собственными предпочтениями. Кроме того, пытаясь ответить на вопрос о фактическом положении дел в среде управления, собирая конкретную информацию - эмпирические данные, обращаясь к, свойствам исследуемого явления, социолог не должен оперировать общепринятыми положениями «здравого смысла», «обыденной логики» или апелляцией к работам религиозных и политических авторитетов. При составлении тестов социолог должен избегать искажений, которые отражают не столько управление, сколько манипуляции. И еще одна основополагающая норма для социолога - честность. Это означает, что человек, представляя результаты исследования, даже если они его не удовлетворяют, не должен ничего ни скрывать, ни приукрашивать. Требование честности включает в себя также и предоставление полной документации, относящейся к делу. Необходимо нести ответственность за всю информацию, используемую другими людьми для критической оценки метода и результатов исследования. Это особенно важно иметь в виду, дабы избежать искушения исказить информацию, что подорвало бы доверие к полученным выводам.

Количественные методы Изучение количественной определенности социальных явлений и процессов происходит с применением специфических средств и методов. Это наблюдение (невключенное и включенное), опрос (беседа, анкетирование и интевьирование), анализ документов (количественный), эксперимент (контролируемый и неконтролируемый).

Наблюдение как классический метод естественных наук представляет собой специально организованное восприятие изучаемого объекта. Организация наблюдения включает в себя определение характеристик объекта, целей и задач наблюдения, выбор вида наблюдения, разработку программы и процедуры наблюдения, установление параметров наблюдения разработку техники выполнения результатов, анализ результатов и выводов. При невключенном наблюдении взаимодействие между наблюдателем и объектом исследования (например системой управления) сводится к минимуму. При включенном - наблюдатель входит в наблюдаемый процесс как участник, т.е. добивается максимального взаимодействия с объектом наблюдения, не обнаруживая, как правило, своих исследовательских намерений на практике. На практике наблюдение чаще всего используют в сочетании с другими методами исследования.

Опросы бывают сплошными и выборочными. Если опрос проводится с охватом всей совокупности респондентов (всех членов социальной организации, например), он называется сплошным. Основой выборочного опроса является выборочная совокупность как уменьшенная копия генеральной. Генеральной совокупностью считают все население или ту его часть, которую социолог намерен изучить. Выборочной - множество людей, которых социолог опрашивает (22).

Опрос может проводиться с помощью анкетирования либо интервьирования. Интервью - представляет собой формализованный вид беседы. Интервью в свою очередь бывают стандартизированными, нестандартизированными. Иногда прибегают к телефонным интервью. Человека, который проводит интервью называют интервьюером.

Анкетирование - письменный вид опроса. Подобно интервью, анкетирование предполагает набор четко сформулированных вопросов, которые предлагаются респонденту в письменном виде. Вопросы могут предполагать ответы в свободной форме («открытая анкета») или в заданной форме («закрытая анкета»), когда респондент выбирает один из предложенных вариантов ответа (23).

Анкетирование в силу своих особенностей имеет ряд преимущества перед другими методами опроса: сокращается время на регистрацию ответов респондентов за счет самоподсчета; формализация ответов создает возможность использования механизированной и автоматизированной обработки анкет; благодаря анонимности удается добиться искренности в ответах.

В целях дальнейшего развития анкетирования часто применяется метод шкалированных оценок применяется. Метод направлен на получение количественной информации с помощью измерения отношения специалистов к предмету экспертизы по той или иной шкале - номинальной, ранговой, метрической. Построение шкалы оценок, адекватно измеряющей изучаемые явления, представляет собой весьма сложную задачу, зато обработка результатов такой экспертизы, проведенная посредством математических методов с привлечением аппарата математической статистики, может дать ценную аналитическую информацию в количественном выражении.

Метод анализа документов позволяет оперативно получать фактические данные об изучаемом объекте.

Формализованный анализ документальных источников (контент-анализ), рассчитаный на извлечение социологической информации из больших массивов документальных источников, недоступных традиционному интуитивному анализу, основан на выявлении некоторых количественных, характеристик текстов (или сообщений). При этом предполагается, что количественные характеристики содержания документов отражают существенные черты изучаемых явлений и процессов.

Установив количественное влияние исследуемых факторов на изучаемый процесс, можно построить вероятностную модель взаимосвязи этих факторов. В этих моделях исследуемые факты будут выступать в виде функции, а факторы, ее определяющие, в виде аргументов. Придавая определенное значение этим факторам-аргументам, получается определенное значение функций. При этом эти значения будут верны только с определенной степенью вероятности. Чтобы получить конкретное числовое значение параметров в этой модели, необходимо соответствующим образом обработать данные анкетного обследования и построить на его основе многофакторную корреляционную модель.

Эксперимент также как и метод анкетирования, является испытанием, но в отличие от первого, имеет целью доказательство того или иного предположения, гипотезы. Эксперимент, следовательно, является одноразовым испытанием для данного образца поведения (мышления, явления).

Эксперименты могут проводиться в различных формах. Различают мысленные и «натурные» эксперименты, разделяя последние на лабораторные и полевые. Мысленным экспериментом называют специальную технологию интерпретации полученной информации об изучаемом объекте, исключающую вмешательство исследователя в процессы, происходящие в объекте. В методологическом отношении социологический эксперимент базируется на концепции социального детерминизма. В системе переменных вычленяется экспериментальный фактор, иначе обозначаемый независимой переменной.

Экспериментальное изучение социальных форм осуществляется в ходе их функционирования, поэтому возникает возможность решать такие задачи, которые для других методов оказываются недоступными. В частности, эксперимент позволяет исследовать то, как могут сочетаться связи социального явления с управлением. Он позволяет изучать не только отдельные стороны социальных явлений, но совокупность социальных связей и отношений. Наконец, эксперимент позволяет изучать всю совокупность реакций социального субъекта на изменение условий деятельности (реакцию, выраженную в изменении результатов деятельности, ее характера, взаимоотношений между людьми, в изменении их оценок, поведения и др.). Те изменения, которые производятся в ходе эксперимента, могут представлять собой или создание принципиально новых общественных форм, или более или менее существенную модификацию существующих. Во всех случаях эксперимент представляет собой практическое преобразование определенного участка управления.

В целом, алгоритмичность количественного метода в ряде случаев позволяет прийти к принятию в высокой степени «точных» и обоснованных решений, или по крайней мере, упростить проблему, сведя её к пошаговому нахождению решений некоторой совокупности более простых проблем.

Конечный итог любого социологического исследования - это определение и объяснение закономерностей и построение на этой основе научной теории, которая позволяет предсказывать будущие явления и разрабатывать практические рекомендации.

Вопросы для обсуждения

1. Что есть метод социологии управления?

2. В чем состоит специфика методов социологии управления?

3. Перечислите известные вам классификации методов социологии управления?

4. Чем различаются качественные и количественные социологические методы исследования?

5. Определите сущность интервью, анкетирования, метода шкалированных оценок и пр.

21 Клементьев Д.С. Социология управления: Учеб. пособие. - 3-е изд., перераб. и доп. - М.: Изд-во МГУ, 2010. - С.124

22 Ядов В.А. Социологическое исследование: Методология, программа, методы. - М., 1987. - С. 22-28.

23 Ильин Г.Л. Социология и психология управления: учебное пособие для студ. высш. учеб. заведений / Г.Л. Ильин. - 3 изд., стер. - М: Издательский центр «Академия», 2010. - С. 19.