Сравнительный анализ качественных и количественных методов оценки личности. Различия между количественными и качественными методами маркетинговых исследований

Оценка уровня рисков является одним из важнейших этапов экономического анализа, поскольку для управления риском его необходимо, прежде всего определить, проанализировать и оценить.

Анализ риска - это применение системы специальных знаний по исследованию экономических явлений и процессов в условиях неопределенности и конфликтности с целью получения качественной и количественной информации, необходимой для принятия управленческих решений.

Целью проведения анализа рисков является получение необходимой информации для принятия управленческих решений по возможности предсказания и соответствующей защиты компании от последствий рисковых событий.

Обычно анализ риска проводят в такой последовательности:

1) определение внутренних и внешних факторов, увеличивающих или уменьшающих степень определенного вида риска;

2) анализ выявленных факторов;

3) оценки определенного вида риска;

4) установление допустимой степени риска;

5) анализ отдельных операций относительно выбранного степени риска;

6) разработка мероприятий по снижению степени риска.

Для анализа риска используют количественные и качественные методы. Качественный анализ риска предполагает выявление источников и причин риска процессов и работ, идентификацию зон и видов риска, выявление практической пользы и возможных негативных последствий, которые могут возникнуть в процессе реализации проектов (работ, процессов), что содержат риск. Большинство ученых, занимающихся проблемой оценки риска, констатируют, что качественный анализ является самым сложным этапом общего анализа степени риска.

Качественная оценка рисков - это процесс идентификации и определения рисков, требующих быстрого реагирования. Такая оценка рисков определяет степень важности риска и выбирает способ реагирования. Доступность информации, их сопровождает помогает расставить приоритеты для различных категорий рисков. Качественная оценка рисков - это оценка условий возникновения рисков и определение их влияния на объект стандартными методами и средствами. Главной задачей качественной оценки является определение возможных видов рисков, а также факторов, влияющих на уровень рисков при осуществлении определенного вида деятельности. На этом этапе важное значение имеет выявление всех возможных обстоятельств и детальное описание всех возможных рисков.

Самая схема анализа риска предусматривает:

Идентификацию отдельных видов риска;

Выбор техники анализа риска;

Установление факторов риска и их значимости;

Создание модели механизма действия рисков;

Установление взаимосвязи отдельных рисков и совокупного эффекта от их действия;

Формирование общего портфеля хозяйственных рисков.

В результате анализа необходимо получить четкое представление обо всех возможных рисках, обнаружены потенциальные зоны риска, а также негативные последствия или дополнительные выгоды, которые могут возникнуть при реализации определенного решения.

Качественная оценка риска предприятия осуществляется по следующим направлениям:

Характер бизнеса;

Внешняя среда;

Качество управления;

Характер деятельности;

Устойчивость работы, стабильность;

Финансовое состояние организации и др.

Как правило, качественный анализ рисков проводится в два этапа. Первый этап предусматривает сравнение ожидаемых положительных результатов (доходов) выбора конкретного направления предпринимательской деятельности с возможными последствиями (потерями, убытками), среди которых выделяют: финансовые, материальные, временные, социальные, реализационные, экологические и нравственно-психологические. их сравнивают с предполагаемыми результатами, которые получит предприятие при развитии определенного направления деятельности.

На втором этапе определяют влияние решений, принятых менеджерами предприятия на этапе разработки стратегии, интересы и поведение других субъектов предпринимательской деятельности, поскольку они функционируют не обособленно, а являются элементами рынка. В течение этого этапа анализа также определяют тех субъектов, которым возникновения определенного вида риска будет выгодно.

Для качественной оценки риска на практике чаще всего используется экспертные методы, основанные на субъективной оценке ожидаемых параметров деятельности. Самым распространенным методом, который используется в процессе анализа, является метод экспертных оценок, сущность которого заключается в получении необходимой информации о рисках, которые могут угрожать деятельности организации, на основе обработки мнений опытных специалистов и экспертов.

Применять этот метод целесообразно при решении проблем, которые не поддаются формализации, когда неполнота и недостоверность информации не позволяют использовать точные методы оценки уровня риска.

Уровень риска - это оценка соотношения масштаба ожидаемых потерь к величине имущества предприятия, а также вероятности наступления этих потерь. Например, финансовое состояние предприятия эксперты могут оценивать с разделением на высокий, средний и низкий уровни риска в разрезе следующих составляющих:

Использование кредитов:

а. уровень риска высок, если предприятие не может осуществить текущую деятельность без использования заемных средств;

б. уровень риска средний, если предприятию необходимы инвестиционные кредиты на развитие, расширение бизнеса;

в. низкий уровень риска, когда предприятие не берет кредитов или использует их редко.

Уровень собственного оборотного капитала:

а. риск высокий, если существуют проблемы (дефицит) собственных оборотных средств;

б. риск средний, если коэффициент обеспеченности собственными оборотными средствами равен нормативному;

в. риск низкий, если коэффициент обеспеченности собственными оборотными средствами выше нормативного.

Ликвидность активов:

а. высокий уровень риска связан с большими сверхнормативными запасами сырья и материалов, готовой продукции на складе, просроченной дебиторской задолженностью.

Вероятность банкротства: а. высокая;

б. существует; в. низкая.

Рентабельность:

а. низкая рентабельность по сравнению с среднеотраслевой означает высокий риск.

Уровень дебиторской задолженности:

а.60% от текущих активов, период оборота более 180 дней -высокий риск;

6.40-60% от текущих активов, период оборота 30-60 дней - средний риск;

в. менее 40% от текущих активов, период оборота менее 30 дней - низкий.

Финансовые вложения предприятия:

а. если доля финансовых вложений в активах велика, а рентабельность активов ниже рентабельности основной деятельности, соответственно, предприятие занималось рискованными спекуляциями, не оправдала ожидания высокой доходности.

Основными целями использования экспертных оценок в качественном анализе рисков являются:

Прогнозирование хода развития события или явления сегодня и в будущем. По анализу и оценке риска это выявление источников и причин риска, прогнозирования действий конкурентов, идентификация всех возможных рисков, оценка вероятности наступления рисковых событий, назначение коэффициентов относительной важности и ранжирования рисков, выявление путей снижения риска и др.;

Составление сценариев действий;

Формирование полного набора и качественная оценка вариантов, использующих различные способы снижения риска или их комбинацию и тому подобное.

Преимуществами этого метода является оперативность получения информации для своевременного принятия управленческих решений и относительно небольшие затраты. Недостаток заключается в относительно высоком уровне субъективности и, как следствие, отсутствие уверенности в достоверности полученных оценок.

Итак, основными результатами качественного анализа рисков являются: выявление конкретных рисков и причин, их порождающих, анализ и стоимостной эквивалент гипотетических последствий возможной реализации определенных рисков, предложения о мерах по минимизации ущерба и, наконец, их стоимостная оценка.

Стоит отметить, что качественный анализ рисков предполагает также его количественный результат, то есть процесс проведения анализа должен включать не только описание конкретных видов, выявление возможных причин их возникновения, анализ предполагаемых последствий их реализации и предложения по минимизации выявленных рисков, но и стоимостную оценку возможных убытков и всех мероприятий по будут минимизировать выявленные риски.

Повышение достоверности экспертных оценок требует соответствующих процедур отбора экспертов по многим критериям и количественных методов обработки их выводов.

Результаты анализа служат важной исходной информацией для осуществления количественного анализа риска, который предусматривает численное определение отдельных рисков, а также совокупного риска деятельности предприятия.

Потребность в идентификации и выделении существенных факторов риска, повышении эффективности процесса управления, существование возможности выбора конкретного хозяйственного решения по совокупности альтернативных вариантов вызывает необходимость дополнения анализа количественным.

Целью количественного анализа является получение числового выражения отдельных рисков с определением характеристики вероятности и возможных потерь. Количественное значение уровня риска часто определяют как некоторую функцию от произведения показателей последствий рисковой ситуации и вероятности ее возникновения. Для этого формируется набор сценариев и могут быть построены для отдельных видов риска функции распределения вероятности наступления потерь в зависимости от их размеров.

Количественные методы предусматривают оценку риска в абсолютном и относительном выражены. В абсолютном выражены риск измеряют частотой или размерами возможных убытков в денежном эквиваленте.

В относительном выражении риск измеряют различными безразмерными показателями, является отношением двух или более показателей.

Частоту возникновения некоторого уровня убытков определяется по формуле:

где р - частота возникновения некоторого уровня убытков; п - количество случаев появления конкретного уровня убытков; Пзаг - общее количество случаев в статистической выборке, которая охватывает все, в том счета и успешно проведенных операциях.

Определение степени риска в абсолютных величинах целесообразно использовать относительно характеристики отдельных видов потерь, а в относительных - при сравнении прогнозируемого уровня потерь с реальным, среднеотраслевым, средними по рыночному сегменту и тому подобное.

При выполнении количественного анализа риска наиболее распространенными и универсальными являются такие методы:

Статистический метод;

Метод аналогий;

Метод дерева решений;

Аналитический метод.

Рассмотрим более подробно приведены методы.

Статистический метод основывается на изучении статистики потерь и прибылей, имевших место на данном или аналогичном предприятии, с целью определения вероятности события, установления величины риска. Под вероятностью понимается возможность получения определенного результата.

Основной задачей статистических методов оценки рисков является определение вероятности наступления отдельного неблагоприятного события на основе статистического исследования имеющихся данных о деятельности конкретного рискового объекта (организации) в прошлом. В наиболее простом случае количественные риски деятельности оцениваются с использованием показателей дисперсии, среднеквадратического отклонения, коэффициента вариации.

В абсолютном выражении степень (степень) риска (степень ожидаемой неудачи при достижении цели) может определяться как произведение вероятности неудачи (нежелательных последствий) на величину этих нежелательных последствий (убытки, платежи и т.д.) :

где Я, - величина риска;

Б, - величина убытков (потерь)

г., - вероятность нежелательных рисков.

Вероятность (р) с достаточной степенью точности вычисляют на основе статистических данных. Для оценки фактических данных все вероятности принимают одинаковые и определяют так:

Среднее ожидаемое значение связано с неопределенностью ситуации, оно выражается в виде средневзвешенной величины всех возможных результатов В, где вероятность каждого результата (р) используется в качестве частоты или веса соответствующего значения (В).

Тогда ожидаемая, наиболее вероятна величина убытков (потерь, доходов, прибыли) - будет составлять:

где п - количество случаев;

Ви - величина убытков (потерь, доходов, прибыли) в / "- м случае; ре - вероятность возникновения /" - го случая.

Средняя ожидаемая величина является обобщенной количественной характеристикой и не позволяет принять решение в пользу какого-либо варианта. Для окончательного решения необходимо измерить колебания показателей, то есть определить степень колебания возможного результата. Колебания возможного результата является степенью отклонения ожидаемого значения от средней величины. Для его определения обычно вычисляют дисперсию или среднеквадратическое отклонение.

Дисперсия (<т) - это взвешенное среднее из квадратов отклонений действительных результатов от среднего значения:

Среднее отклонение рассчитывают при проведении статистических проверок различных гипотез, а также для выявления взаимосвязей между случайными величинами. Этот статистический показатель -наиболее распространенный тип отклонений, используемый при расчетах количественных показателей рисков.

Среднее отклонение определяется по формуле:

Коэффициент вариации (г) - это отношение среднего квадратического отклонения доходов и относительной величины ожидаемых доходов (расходов):

Коэффициент вариации позволяет сравнивать колебания признаков, имеющих разные единицы измерения. Чем выше коэффициент вариации, тем сильнее колебания признаки. Исходя из величины коэффициента вариации можно использовать такую шкалу для оценки риска:

0,0-0,1 - минимальный риск;

0,1-0,25 - низкий риск;

0,25-0,50 - допустимый риск;

0,50-0,75 - критический риск;

0,75-1,0 - катастрофический риск.

Статистические методы количественной оценки риска считаются одними из самых распространенных. К их достоинствам следует отнести несложность математических расчетов, а к недостаткам - необходимость большого числа наблюдений (чем больше массив данных, тем достовернее оценка рисков).

Метод экспертных оценок. Этот метод предполагает анализ экспертами двух групп факторов - количественных и качественных. Экспертные оценки - это логическое изложение и выводы специалистов относительно того или иного экономического явления или процесса. В отличие от статистического, этот метод может использоваться в условиях дефицита и даже полного отсутствия информации. В этом его существенная преимущество по сравнению с другими методами.

Другое преимущество метода экспертных оценок заключается в возможности использования опыта экспертов в процессе анализа ситуаций и учета влияния различных качественных факторов. Формально процедура экспертной оценки чаще всего заключается в следующем. Руководство организации разрабатывает перечень критериев оценки в виде экспертных (опросных) листов. Для каждого критерия назначаются соответствующие весовые коэффициенты, не извещаются экспертам. Далее по каждому критерию состоят варианты ответов, веса которых также неизвестны экспертам. Эксперты, проводя анализ, анализируют объект исследования и отмечают выбранный вариант ответа. Заполненные экспертные листы обрабатываются соответствующим образом (с помощью статистических (компьютерных) пакетов обработки информации, и получается результат (или результаты) проведенной экспертизы.

В практической деятельности используют как индивидуальные, так и групповые экспертные оценки.

Преимуществом индивидуальной экспертизы является оперативность получения информации для принятия решения и относительно небольшие затраты. Недостатком считают высокий уровень субъективности, а соответственно и снижение достоверности полученных экспертных оценок.

Групповые экспертизы, как правило, менее субъективные, и решения, принятые на их основе, более вероятны для осуществления. Считается, что в случае решения проблемы в условиях неопределенности, мнение группы экспертов является более обоснованной, чем одного эксперта.

Для обеспечения условий, благоприятных для формирования экспертами объективных мнений, желательно придерживаться следующих принципов :

Независимость формирования экспертами собственных суждений об объекте исследования;

Удобство работы с анкетой (вопросы должны быть сформулированы в общепринятых терминах, исключать любую смысловую неоднозначность и т.п.);

Логическая соответствие вопросов структуре объекта исследования;

Приемлемые затраты времени на ответы анкеты, удобное время для оценки;

Сохранение анонимности ответов;

Предоставление экспертам всей необходимой информации.

В зависимости от специфики экспертного опроса, объекта исследования и используемой методики экспертных данных, оценки экспертов могут иметь разную шкалу измерения.

При проведении диагностики собранных экспертных данных, в соответствии с целью исследования и принятых моделей, необходимо подать информацию, полученную от экспертов в виде, удобном для принятия управленческого решения (упорядочить объекты, показатели, факторы и т.п.), а также определить согласованность действий экспертов и достоверность экспертных оценок. Так, например, выявленные в процессе диагностики риски необходимо подать в порядке их важности (степень воздействия), варианты снижения риска - в порядке их предпочтения. Наиболее распространенными методами упорядочения является ранжирование, непосредственная оценка, последовательное сравнение, парное сравнение.

Для оценки согласованности мнений экспертов чаще всего используют коэффициент конкордации, величина которого позволяет сделать вывод о достоверности оценок.

Коэффициент конкордации определяется по формуле:

где <Уф - фактическая дисперсия итоговых (упорядоченных) оценок, данных экспертами;

° тах - дисперсия итоговых (упорядоченных) оценок при условии, что мнения экспертов полностью совпадают;

- суммарная оценка, полученная Г"-м объектом;

т - количество исследуемых объектов;

п - количество экспертов.

Величина коэффициента конкордации изменяется от 0 до 1. Если значение коэффициента нулевое, связь между оценками различных экспертов отсутствует, то есть отсутствует согласованность мнений. Если значение равно единице, то отмечается полная согласованность мнений экспертов. Для упрощенной оценки принято считать мнения экспертов согласованными, если] ¥> 0,5, и хорошо согласованным, если й ¥> 0,7 .

Интуитивные характеристики, основанные на знаниях и опыте эксперта, дают в большинстве случаев достаточно точные оценки. Экспертные методы позволяют быстро и без больших временных и трудовых затрат получить информацию, необходимую для разработки и принятия управленческого решения.

Эффективность применения и достоверность диагностики риска по методу экспертных оценок во многом зависит от компетентности и количества подобранных экспертов, качестве факторов (критериев) точности и однозначности формулировок. Эти обстоятельства часто ограничивают широкое применение данного метода.

Системы оценочных коэффициентов и, если необходимо, шкалы весов этих коэффициентов;

Шкалы оценки значений полученных показателей;

В процессе разработки системы рейтинговой оценки встает проблема выбора эталона для сравнения (сравнение с условным эталонным предприятием вполне возможно, но выбор такого эталона требует уточнения для каждого вида риска). Необязательно выбирать среди большого количества предприятий лучше, удобнее просто выбрать в перечне показателей предприятий лучшие и сформировать из них эталон для сравнения.

При использовании этого метода шкала оценки должна быть предварительно сформирована и состоять из минимума значений ранжирования, как правило, по шкале "хорошее", "плохой". Очевидно, что такая система ранжирования рейтингового метода оценки риска не позволяет определить его степень с достаточной точностью. Однако, этот метод нашел широкое применение в практической оценке рисков по следующим причинам. Во-первых, указанный метод не предусматривает анализа больших массивов данных. Во-вторых, применение этого метода предполагает параллельное ранжирование полученного результата по определенной шкале. В-третьих, рейтинговый метод не требует от пользователя специальной математической подготовки, а только навыков в рамках элементарных финансовых расчетов. Для повышения адекватности применения этого метода в ряде случаев целесообразно при расчете коэффициентов использовать корректирующие параметры, различные взвешивания, а также пересчет с учетом рискованности проведения отдельных финансовых операций.

Достаточно эффективным в рейтинговой оценке является наличие определенных эталонных значений для сравнения, предполагает вычисление рейтинга методом расстояний или различий между реальными и эталонными значениями. При определении окончательного рейтинга ранжируются кое значение, а расстояния.

Однако, как показывают исследования, этот метод не дает возможности учитывать все тонкости конкретной ситуации и часто приводит к ошибочным результатам, что объясняется пределами действия оценочных коэффициентов, возможностью их применения только в конкретных условиях, мгновением действия неучтенных факторов, а также возможностью неправильного выбора эталона.

Метод аналогий. Сущность метода аналогий заключается в анализе всех имеющихся данных об объектах, имеющих высокую степень сходства с оцениваемым. Это делается с целью расчета вероятностей возникновения потерь. Метод использует базу данных аналогичных объектов для выявления общих зависимостей и перенос их на исследуемый объект.

Наибольшее применение метод аналогий находит при оценке риска часто повторяющихся проектов, например в строительстве, страховом бизнесе и т.

Этот метод используется в том случае, когда все другие методы оценки риска неприемлемы. Источники информации могут быть самые разнообразные: статистическая и бухгалтерская отчетность, опубликованные отчеты предприятий-партнеров и конкурентов, информация государственных органов и тому подобное.

Целесообразность использования метода аналогий заключается в том, что его можно применять в случае выявления степени риска новых направлений предпринимательской деятельности, когда отсутствует статистическая информация.

К недостаткам метода следует отнести неучет фактора времени при оценке риска и необходимость только полной и достоверной информации. В случае использования метода аналогий всегда необходимо делать поправку полученных результатов оценки риска на степень сходства явлений или процессов.

Метод "дерева решений". "Дерево решений" - это схематическое представление проблемы принятия управленческого решения, имеет вид графа, вершины которого представляют определенные состояния, в которых возникает необходимость выбора, а ветви дерева представляют различные события (решение, последствия, операции), которые могут иметь место в каждом отдельном состоянии. Каждой ветке "дерева" присваиваются индивидуальные числовые характеристики. В качестве ветвей рассматриваются, например, величина платежа (финансового потока) и вероятность его осуществления, характеризующий уровень его риска.

"Дерево решений" дает возможность руководителю оценивать различные направления деятельности, соотнести с ними финансовые результаты, скорректировать в соответствии с их вероятности, а затем сравнить альтернативы. В процессе подготовки решения рассматриваются различные его варианты, которые могут быть приняты, а также для каждого варианта - ситуации, которые могут наступить. Практически во всех случаях принятия решений руководитель оценивает вероятность или возможность события. Вероятность варьирует от 1, если событие будет иметь место, до 0, если она наверняка не произойдет.

Метод основан на предположении о том, что финансовые потоки каждой ветви "дерева» не коррелированы между собой. Центральной концепцией метода "дерева решений" является определение ожидаемого значения по каждой из альтернатив или вариантов, которое представляет собой сумму возможных значений, умноженных на их вероятности.

При анализе на основе определения вероятности наступления положительного результата на каждой "ветке" выбирают действия с той из них, обладающий лучшей характеристикой, то есть самым положительным ожидаемым значением.

Этот метод целесообразно использовать в следующих случаях:

В наличии имеется ограниченное число альтернатив или вариантов стратегий для выбора с определенными вероятностями их наступления;

Результаты принятого решения зависят от того, какая выбрана альтернатива и какие события в действительности имеют место.

К недостаткам метода следует отнести возможность неправильного выбора сценария развития событий, необходимость полной и достоверной информации по каждой из альтернатив.

Аналитический метод. Аналитический метод оценки риска является определенной комбинацией статистического оценивания и принципов экспертного анализа. Обычно, он проводится в несколько этапов.

На первом этапе осуществляется подготовка к аналитической обработки информации, включает в себя:

1) определение ключевого параметра, в отношении которого проводят оценку конкретного направления предпринимательской деятельности (например, объем продаж, размер прибыли, рентабельность и т.д.);

2) отбор факторов, влияющих на деятельность организации, а следовательно, и на ключевой параметр (например, уровень инфляции, политическая стабильность, степень выполнения договоров и т. Д.);

3) расчет значений ключевого параметра на всех этапах производственного процесса (разработка, внедрение в производство, производство, ликвидация данного направления деятельности).

Сформированные таким образом последовательности расходов и поступлений дают возможность определить не только общую экономическую эффективность исследуемого направления деятельности, но и выявить ее значение на каждой из стадий.

На втором этапе строятся диаграммы зависимости выбранных результирующих показателей от величины исходных параметров. Сопоставляя между собой полученные диаграммы, можно выделить те основные показатели, в наибольшей степени влияют на данный вид (или группу видов) предпринимательской деятельности.

На третьем этапе определяются критические значения ключевых параметров. При этом может быть рассчитана точка безубыточности, показывающий минимально допустимый объем продаж для покрытия расходов предприятия, минимальная норма или масса прибыли и тому подобное.

В ходе четвертого этапа анализируются на основании полученных критических значений ключевых параметров и факторов, влияющих на них, возможные пути повышения эффективности и стабильности работы предприятия, а следовательно, и путей снижения степени риска.

Преимуществом аналитического метода является то, что он сочетает в себе как возможность пофакторного анализа параметров, влияющих на риск, так и выявление возможных путей снижения его степени посредством воздействия на них.

К аналитическим методам относят также анализ чувствительности, метод корректировки норм дисконта с учетом риска, метод эквивалентов, метод сценариев и другие.

Анализ чувствительности сводится к исследованию зависимости некоторого исходного показателя от вариации значений показателей, участвующих в его определении. Использование данного метода дает ответы на следующие вопросы:

Насколько может отклониться значение одной или нескольких входных величин от заданных значений при условии, что исходный показатель не выйдет за допустимые пределы?

Насколько изменится значение результативного показателя при заданном отклонении одной или нескольких входных величин от их, заранее установленных значений?

Метод корректировки нормы дисконта с учетом риска является наиболее простым и вследствие этого наиболее применяемым на практике. Основная его идея заключается в корректировке некоторой базовой нормы дисконта, которая считается безрисковой или минимально приемлемой. Корректировка осуществляется путем увеличения величины вознаграждения за риск.

С помощью метода достоверных эквивалентов осуществляется корректировка ожидаемых значений потока платежей путем введения специальных понижающих коэффициентов с целью приведения ожидаемых поступлений в величины платежей, получение которых практически не вызывает сомнений, и значение которых может быть достоверно определена.

Метод сценариев позволяет совместить исследование чувствительности результативного показателя с анализом вероятностных оценок его отклонений. С помощью этого метода можно получить достаточно наглядную картину для различных вариантов событий. Он является логическим развитием метода анализа чувствительности, так как учитывает одновременное изменение нескольких факторов.

Поскольку каждый из рассмотренных методов не лишен недостатков, то в практической деятельности необходимо использовать несколько различных методов. Конечно, полученные различными методами результаты будут отличаться, но анализ различий между ними позволит выявить факторы, которые учитываются в одних методах и не учитываются в других, влияет на точность оценки и достоверность полученных результатов. Анализ различий результатов, в сравнении с принятыми в расчет факторами риска позволит выявить существующие тенденции развития будущих событий с точки зрения риска тех или других видов деятельности, а это даст возможность более точно прогнозировать степень риска достижения запланированных результатов.

Любые изменения в условиях или результатах деятельности организации (промышленного предприятия, торговой фирмы или банка), связанные с той или иной альтернативой управленческого решения, можно определить только тогда, когда существуют соответствующие показатели, которые можно измерить. Но речь идет не только о количественных измерениях в привычном для нас понимании, но и о качественных оценках, позволяющих судить о динамике происходящих изменений. Поэтому, говоря об оценках экспертов, мы понимаем под ними количественные или качественные измерения соответствующих показателей.

В зависимости от целей экспертизы, эксперты могут оценивать стоимость недвижимости, ожидаемый уровень инфляции, изменения валютного курса, надежность эмитента ценной бумаги, рейтинг банка и т.д. Объекты оценки и оцениваемые показатели весьма разнообразны. Если при этом эксперт должен измерить значение количественного показателя (дать количественную оценку), он может указать конкретное числовое значение или интервал, в котором оно лежит. Если же эксперт должен определить значение показателя, который может быть оценен только качественно (дать качественную оценку), то он может использовать для этого вербально-числовые шкалы.

Итак, экспертная информация может носить как количественный, так и качественный характер. Рассмотрим наиболее распространенные методы ее измерения отдельно для каждого из этих двух случаев.

Методы получения количественных экспертных оценок

Непосредственная количественная оценка. Эксперт непосредственно указывает числовое значение показателя для оцениваемого объекта (альтернативы), например, стоимость квартиры или земельного участка, предполагаемую емкость рынка и т.п. Если конкретное значение показателя указать трудно, эксперт может определить диапазон, в котором находится это значение.

Метод средней точки. Этот метод используется, когда альтернативных вариантов, требующих оценки, достаточно много. В начале эксперт количественно оценивает наиболее предпочтительную альтернативу - f(а1) и наименее предпочтительную - f(а2). Далее он должен подобрать третий альтернативный вариант а3, оценка которого f(а3) расположена в середине между значениями f(a1) и f(a2) и равна половине их суммы. Затем экспертом определяется оценка альтернативы а4, значение которой - f(а4) - расположено посередине между значениями f(а1) и f(а3), и альтернативы а5 - f(а5), значение которой является средним значением между f(а3) и f(а4), и так далее до тех пор, пока не будет дана оценка всех сравниваемых альтернатив.

Методы получения качественных экспертных оценок

Метод экспертной классификации. Этот метод целесообразно использовать, когда необходимо определить принадлежность оцениваемых альтернатив к установленным и принятым классам, категориям, уровням, сортам и т.п., например, оценка дегустаторами сортов чая или определение категории отеля. Если классы установлены заранее, то эксперту последовательно предъявляют альтернативные варианты и тот определяет, к какому классу принадлежит данная альтернатива. Если же классы не установлены, то эксперту предъявляют альтернативные варианты парами и просят определить, относятся они к одному классу или к разным. После чего альтернативы предлагаются для оценки последовательно, и выясняется, можно ли каждую из них отнести к одному из образовавшихся классов, или для нее надо образовать новый класс. Процедура повторяется до тех пор, пока не будут оценены (расклассифицированы) все альтернативы.


Метод ранжирования альтернатив. Сущность этого метода заключается в упорядочивании сравниваемых альтернатив по степени предпочтительности определенного признака. Если таких альтернатив сравнительно немного (не более 20), то эксперту предъявляется весь набор альтернативных вариантов, и он указывает наиболее предпочтительный среди них. Затем эксперт определяет наиболее предпочтительный вариант из оставшихся. И так далее, пока все оцениваемые альтернативы не будут проранжированы. Если же оцениваемых вариантов больше, то сначала производится их разбиение на упорядоченные по предпочтению группы с помощью метода экспертной классификации, а затем ранжирование внутри каждой группы.

Метод экспертных кривых. Этот метод применяется, когда целью экспертизы является разработка прогнозов на основе анализа динамики изменения показателей, характеризующих объект экспертизы, например, темпов роста ВВП, инфляции, уровня безработицы и т.п. Использование данного метода предполагает построение на основе имеющихся статистических данных графика, отображающего тенденцию динамики анализируемого показателя. Затем, при помощи экстраполяции, эта тенденция продолжается в будущее, что дает возможность оценить значение данного показателя в прогнозируемом периоде. Однако использование экстраполяции может привести к существенным ошибкам, т.к. не учитывает возможность качественных изменений, приводящих к смене тенденции. Поэтому далее, на основе обобщенного мнения экспертов, на графике определяются точки, в которых следует ожидать смены тенденции изменения оцениваемого показателя, что позволяет наглядно представить возможные альтернативные сценарии развития ситуации.

Двум рассмотренным выше группам методов получения экспертных оценок соответствуют и два типа шкал:

шкалы количественных измерений;

шкалы качественных измерений.

Количественные шкалы

Абсолютная шкала. Если требуется определить количество мест в аудитории или количество работников, необходимых для выполнения определенной операции, то число, являющееся результатом подобных измерений, определяется однозначно и является единственным. В этом и заключается особенность абсолютной шкалы.

Шкала отношений. Предполагает возможность производить измерения в различных системах единиц. Так, например, если оценивать массу предмета в килограммах, получим одно числовое значение, в фунтах - другое и т.д. Однако какой бы системой измерений ни пользоваться, отношение масс любых двух предметов будет одинаково и при переходе от одной системы к другой не меняется. То же самое наблюдается и при измерении длины предметов. Это типичные примеры шкалы отношений, в которых отношения числовых оценок остаются неизменными.

Шкала интервалов. В шкале интервалов при переходе от одной системы измерений к другой отношения числовых значений оцениваемых альтернатив не сохраняются, однако сохраняется отношение разностей числовых оценок. Примером измерений в шкале интервалов является определение температуры, которую, как известно, можно измерять по разным шкалам: Цельсия, Фаренгейта и т.д. Каждый раз мы будем получать разные числа, т.к. в различных шкалах используются различные точки начала отсчета и различные единицы масштаба измерений. Но эти разные числовые оценки соответствуют одной и той же температуре объекта.

Шкала разностей. Если при переходе от одной числовой системы измерений к другой меняется лишь точка начала отсчета, такие шкалы называются шкалами разностей. Примером количественных оценок в шкале разностей являются системы летоисчисления, отличающиеся точкой начала отсчета (от рождества Христова, от сотворения мира или от переселения пророка Мохаммеда из Мекки в Медину).

Качественные измерения являются гораздо менее строгими, они носят субъективный характер и для них используются другие типы шкал, основными из которых являются следующие.

Качественные шкалы

Номинальная шкала (шкала наименований). Суть измерений оцениваемых альтернатив в этой шкале - разбиение их на классы по определенному признаку. Всем альтернативам, попавшим в один класс, должно соответствовать одно и то же число. Примерами измерений в номинальных шкалах может служить разбиение студентов одного курса на группы, разделение изделий по уровням качества (сортам) и т.д.

Порядковая шкала. Эта шкала используется для ранжирования, т.е. определения порядка предпочтения альтернатив, выраженности того или иного свойства, например важности, срочности и т.п.

Довольно часто в ходе экспертизы возникает необходимость измерения показателей, оценки которых носят заведомо субъективный характер. Так, например, на знаниях и опыте специалистов основаны оценки степени риска при реализации того или иного инвестиционного проекта, конкурентоспособности определенного вида продукции, уровня компетентности кандидата на вакантную должность и т.п. В этих случаях используют особый тип порядковых шкал - вербально-числовые шкалы. Их особенность как раз и состоит в том, что они позволяют измерить степень интенсивности какого-либо свойства, имеющего субъективный характер. В состав вербально-числовой шкалы входят содержательное (словесное) описание выделенных градаций и соответствующие им (градациям) числовые значения.

Наиболее известна широко применяемая на практике шкала Харрингтона, показанная в табл. 6.1.


Таблица 6.1.

Шкала Харрингтона

Приведенные в таблице числовые значения получены на основе статистического анализа большого массива данных, благодаря чему шкала Харрингтона имеет универсальное применение и может в соответствующих модификациях (например, в виде шкалы баллов) использоваться для оценки различных показателей качественного характера.

Подводя итоги изучения экспертных методов, следует отметить, что их значение состоит в том, что они усиливают элемент коллегиальности в процессе принятия сложных решений и, используя интуицию и коллективную генерацию идей, позволяют находить новые, оригинальные решения проблем, к которым нельзя прийти с помощью только логических рассуждений.

В то же время между всеми рассмотренными способами разработки и обоснования решений (методами моделирования и экспертными методами) на практике довольно трудно установить четкие границы, т.к. разрешение комплексных проблем современного менеджмента требует и комплексного использования различных логических, статистических, математических и эвристических приемов. Поэтому не какая-то одна, а преобладающая группа способов и формирует тот или иной метод. Области применения методов принятия решений зависят, в основном, от характера решаемых проблем и условий принятия решений, что отражено на рис. 6.1.

Выводы

Сущность экспертных методов принятия решений заключается в получении ответов специалистов на заранее поставленные перед ними вопросы, обработке полученной информации с помощью специальных логических и математических процедур и преобразовании ее в форму, удобную для выбора наиболее предпочтительной альтернативы решения.

Среди методов экспертных оценок (различающихся процедурой организации экспертизы) основными являются метод комиссий, метод мозговой атаки, метод Дельфи и метод разработки сценариев.

В процессе формирования экспертной комиссии возникает проблема оценки качеств эксперта - необходимость учитывать его профессиональные знания, опыт деятельности и результаты работы в предшествующих экспертизах.

Способы оценки качеств эксперта делятся на три группы: априорные (не учитывающие эффективность его участия в предыдущих экспертизах); апостериорные (основанные на реальных результатах участия специалиста в проведении экспертиз) и тестовые (предполагающие проведение специального испытания для потенциального эксперта).

Экспертная информация может носить как количественный, так и качественный характер. Для получения количественных оценок основными методами являются метод непосредственной количественной оценки и метод средней точки. Для получения качественных оценок используются экспертная классификация, ранжирование альтернатив и метод экспертных кривых. Этим двум группам методов получения экспертных оценок соответствуют и два типа шкал: шкалы количественных измерений и шкалы качественных измерений.

Вопросы для самопроверки

Что включает в себя понятие априорные методы оценки эксперта?

В каких случаях принято использовать апостериорные методы оценки?

Каковы условия применения тестовых методов оценки качеств эксперта?

В чем различие количественных и качественных экспертных оценок?

По каким параметрам строятся качественные шкалы?

Сравнительный анализ качественных и количественных методов оценки личности

Характеристики, ассоциируемые с подходом

Количественный

Качественный

Информация

Объективная

Субъективная

Характеризующие понятия

Экспериментальный;

Количественные данные;

Статистика

Описательный;

Естественный;

Словесно-ориентированный

Ключевые понятия

Переменные;

Операционализация;

Надежность;

Гипотезы;

Валидность;

Статистическая значимость;

Повторяемость

Значение;

Понимание здравого смысла;

Социальное конструирование;

Правдоподобность

Организация

Структурированные;

Формальные;

Специфические;

Детализированный план операций

Включенные;

Согласованные, чувствительные к продолжению

Большие; многослойные; контрольные группы;

Произвольный выбор и контроль за побочными переменными

Небольшие;

Теоретические примеры;

Целевые примеры, предполагающие возможность включения как можно большего числа контекстов

Техники или методы

Эксперимент;

Структурированное интервью;

Структурированное наблюдение;

Ряды данных и тесты

Наблюдение; включенное наблюдение; изучение документов и артефактов;

Неструктурированное интервью

Количественные;

Операционализированные переменные;

Числовое кодирование;

Статистические;

Подсчитываемые

Описательные; обыденная речь; личные документы; полевые заметки;

официальные документы; аудио и видеозаписи;

Инструменты и средства

Опросники;

описания;

тестовые показатели;

компьютеры;

Аудио и видеопленки; воспроизводящие устройства; записи;

часто единственным инструментом является сам исследователь

Анализ данных

Дедуктивный;

Статистический;

Имеет место по завершении сбора данных

Индуктивный продолжающийся;

Тематический;

Понятийный.

Внутренняя валидность

Искусственные

Реалистические, естественные

Структурированная

Неструктурированная

Конструктная валидность

Надежность

Проблемы применения

Контроль других переменных;

Задающий характер подхода; валидность

Временная затратность;

Нестандартизированность процедуры; надежность

Представленный сравнительный анализ специфики, возможностей и ограничений количественных и качественных методов показывает, что как у первых, так и у вторых есть уязвимые места, ограничивающие возможности психологического исследования. Различия между количественными и качественными исследованиями заключаются в том, что первые являются позитивистскими, ограничивающими, не способными схватывать перспективу субъекта, абстрактными и основанными на безжизненных описаниях. Качественные исследования, как утверждают критики, проявляют тенденцию к ненаучности и основываются на не строгой методологии. Приверженцы же утверждают, что они вводят постмодернистский и пост-позитивистский взгляд, соответствующий превалирующим социальным установкам.

Различение количественной и качественной исследовательских методик по их отношению к объекту исследования, что вполне естественно, сказывается и на их возможностях. В тоже время многими авторами они рассматриваются не как взаимоисключающие, а как взаимодополняющие друг друга. Число и слово вместе могут рассматриваться как способы организации и упорядочивания сложного неструктурированного материала.

Количественные данные собираются в контролируемых условиях, следуя принципу вероятности того, что исследуемая переменная может описывать идентифицируемые взаимоотношения, в то время как качественные данные собираются в контексте естественных условий. Как качественные, так и количественные методы стремятся к достижению надежности и валидности полученных результатов. Постоянство или стабильность данных показывают способность исследователя повторно подтверждать полученные результаты в рамках количественного подхода, в качественных же исследованиях главным является репрезентативность данных по отношению к истинной или полной картине.

Качественные и количественные методы должны дополнять друг друга. Ибо комбинация количественных и качественных методов позволяет охватить исследованием как широту явления (социальное распространение), например, безработицы, бедности, отсутствия социальной защиты и т. п., так и глубину (индивидуального страдания), а также наметить практические шаги для предотвращения данных явлений или активного вмешательства социального работника.

При внешней убедительности представленной логики сочетания возможностей количественных и качественных методов не раскрытым остается самый фундаментальный вопрос, связанный с разграничением их сферы компетенции. Выше уже обосновывалась продуктивность количественных методов по отношению к биологической природе человека, подлежащей измерению. Отмечалась и потенциальная возможность их использования по отношению к символической природе в аспекте нахождения номотетики и выстраивания на ее основе систем сравнительных координат неизбежно необходимых как для психологического знания, так и для человечества, предполагающего ситуацию сравнительной оценки индивидов во многих ситуациях, требующих ориентировки.

Укажем на принципиальные различия между качественными и количественными методами. Эти различия состоят, прежде всего, в особом эмпирическом угле зрения при рассмотрении социальной действительности. Так, количественные методы при социальных исследованиях нацелены на общие признаки (на анализ данных по их общим признакам для их последующей типизации), а качественные методы ориентированы на определенные различия.

Следует подчеркнуть, что как те, так и другие методы не только не противоречат, но, наоборот, дополняют друг друга. Однако использование их в социальных исследованиях различно. Количественным методам отдается предпочтение в традиционных социологических эмпирических исследованиях, качественным - при использовании герменевтического принципа анализа социальной реальности. При этом технические приемы для исследования повседневного бытия составляют резервуар для применения всех социально-научных методов. Можно уже говорить и о предварительных критериях, характеризующих эмпирические исследования социальной работы. качественный количественный исследовательский личность

В исследованиях социальной работы следовало бы отдать приоритет качественным методам, понимаемым как анализ бытия клиента (окружающего мира, жизненного пространства). Полагаем, что перспективу клиента в ее коммуникативной обусловленности можно учесть лишь с помощью качественных методов эмпирических исследований. Прежние приемы опроса и техника кодирования являются для этой цели недостаточными. Невозможно и простое выведение из теоретических положений конкретных форм практических действий. Исследование социальной реальности происходит главным образом через ее речевую трактовку, разговорные формы общения с клиентом. При этом использование метода должно быть соотнесено с определенным уровнем социальной реальности.

Для профессиональной социальной работы такая смена методик обязательна. В этом заключена ее сила, обеспечивающая не только возможность восстановить нормальную жизнь клиента, но и реконструировать ее перспективу.

Так же социальной работы и ее научного обоснования существенное значение имеют следующие аспекты качественно-эмпирических исследований:

  • - ориентация на субъект;
  • - ориентация на понимание общего контекста события;
  • - на конкретную ситуацию;

Следует сказать, что исходя из описания смысловых отрезков структур социальных процессов, возможен их конкретный анализ (индивидуальный и коллективный) без проведения статистически количественного исследования типов отдельных случаев.

Исследование социальной работы как комплексный анализ жизненного пространства может выполнять при этом следующие функции: обеспечивать с помощью фундаментальных теоретических работ дальнейшее развитие научной дисциплины; поддерживать через прикладное исследование процесс профессионализации и стимулировать формирование профессиональных компетенций; вовлекать обучающихся профессионалов в этот процесс в форме учебно-обучающего исследования.

При овладении знаниями в области социальной работы наряду с выработкой профессионально-практических навыков необходима и компетенция в теоретическом плане (умение осуществлять с научных позиций рефлексию, выявлять причины глубинных процессов, давать им должную интерпретацию и находить надлежащий выход из ситуации), формирование такого рода профессиональной компетенции, а также конкретное воплощение ее в повседневной практике социальной работы составляют обязательное условие научно-обоснованной профессиональной деятельности социального работника.

К профессиональной компетенции следует отнести, прежде всего, формирование способности воспринимать различать, интерпретировать и анализировать, а также вырабатывать профессиональные суждения. Важна и способность ситуативного разъяснения несложных социальных процессов. Студенты должны уметь находить упрощенные способы для выявления, объяснения и оценки социальных процессов, что также является составной частью профессиональной компетенции социального работника.

Качественные методы, будучи практически не применимыми по отношению к биологическому аспекту человеческой сущности, в высшей степени продуктивны по отношению к аспекту символическому и, исключительно, к аспекту рефлексивному. Способность улавливания тончайших нюансов поточного мира человеческих экзистенциально-феноменальных переживаний является для них приоритетной, одновременно создавая ряд проблем, связанных с соотнесением уникальных переживаний друг с другом в рамках одной личности и, тем более, в рамках различных личностей и их социальных окружений.

Качественные методы позволят анализировать общее двух или нескольких признаков, опуская при этом их различия. Количественные же методы дают возможность определить различие тем, что общие признаки используются как базис для сравнения. Поэтому целеполагание при тех и других методах различно: раскрытие связей в одном случае, измерение различных выражений уже известных черт - в другом.

Так же качественные методы способствуют выработке коммуникативных умений, важных для проведения консультирования, диагностики и терапии.

При этом коммуникативно-качественные социальные исследования следует рассматривать как исходный пункт для углубления субъективного видения в социальной работе. А понимание типологических моделей и их трактовку необходимо воспринимать как базисную основу деятельности социальных работников. Овладеть этими приемами можно только в процессе творческого учения. При этом в центре внимания, как нам представляется, должен быть анализ повседневной жизни, жизненного пространства клиента как интегративной составной части исследований социальной работы.

К сожалению, до сих пор концепция социальной работы, ориентированная на анализ жизненного поля клиента и дополненная биографическим видением, использовалась довольно редко. А как раз такая концепция, делающая субъективную позицию клиента, его видение жизни, окружающего его мира основным предметом исследования, позволяет понять, как и почему действующий повседневно индивид познает «свой мир» именно так, а не как это представляется исследователю.

Качественно-эмпирическая исследовательская стратегия позволяет использовать иной подход социального работника к мировосприятию клиента. С этих позиций можно вести одновременно две линии исследования. С одной стороны, проводить анализ жизненной реальности через восприятие самого клиента, биографические показатели, его рассказ о своей оценке событий, с другой - через жизненную социальную практическую деятельность с исторической ретроспективой.

Таким образом, проектируемый анализ жизненного окружения клиента как особый тип качественно-эмпирического исследования в социальной работе преследует две цели: первая - развитие типологии случая, обстоятельств, их распространенность как социального явления. Вторая - разработать концепцию социальной работы, найти и определить возможность для включения в действие на основе этой концепции.

Качественный анализ жизненной ситуации клиента в сочетании с типологизацией аналогичных случаев (результаты количественных методов) дают для профессиональной социальной работы надлежащий ориентир, возможность более широкого и глубокого подхода. Такая форма исследования способствует внутреннему обогащению профессии и укрепляет тем самым ее самостоятельность в качестве научной дисциплины.

При использовании качественных методов речь идет, в принципе, об охвате, структурном описании и объяснении динамики тех социальных процессов, которые характерны для интересующих сфер общественной реальности, то есть единичном и особом в предмете исследования, а не о выдвижении в центр внимания регулярного и обычного. Из перспективы качественных методов исследования невозможно выразить в понятиях системные структуры независимо от их составляющих, а также от действующих и страдающих членов общества.

Сила количественных методов заключается, прежде всего, в том, что они позволяют основательно и в систематизированном виде открывать новое. Таким образом, специалисты определяют количественные методы социальных исследований как разновидность социальной диагностики.

Количественные методы ставят в центр рассмотрения общие закономерности, при которых из сложных отдельных случаев выводятся повторяющиеся или общие признаки. Тем самым, в отличие от качественных методов, здесь не учитывается единичное и особое в предмете исследования и ситуации.

Например, анализ судьбы длительно безработного или бездомного позволяет показать ситуацию отчужденности людей, испытывающих тяготы жизни, ее кризисные ситуации, их тщетный поиск опоры и ориентации, что не позволяет им определить свою дальнейшую жизнь. Но как раз в этих поисках нормальной жизни, общественного признания и заключается шанс для социальной работы. Понимание специалистом конкретной кризисной ситуации соответствующего клиента позволяет профессионально увидеть и наметить для него жизненную альтернативу, активизировать возможные социальные контакты.

Количественные оценки, например деловых и организаторских качеств работника, производятся, как правило, с помощью экспертных оценок. При этом для характеристики кандидата на должность сначала устанавливают (с учетом специфики производства и условий работы) 6-7 критериев. Например:

1. способность организовывать и планировать труд;

2. профессиональная компетентность;

3. сознание ответственности за выполняемую работу;

4. контактность и коммуникабельность;

5. способность к нововведениям;

6. трудолюбие и работоспособность.

По каждому из этих критериев на основе изучения деятельности кандидатов на должность дается соответствующая оценка по избранной, например, пятибалльной шкале (отлично - 5; хорошо - 4; удовлетворительно - 3; не -удовлетворительно - 2; плохо - 1).

Оценки по критериям обычно располагают по нарастающему количественному значению. Например, при оценке по критерию "способность организовывать и планировать труд":

"1" - явно неорганизованный работник и руководитель;

"2" - не умеет организовывать и планировать свой труд и труд подчиненных;

"3" - умеет организовать трудовой процесс, но не всегда удачно планирует работу;

"4" - умеет хорошо организовывать и планировать свой труд и труд подчиненных;

"5" - умеет создавать и поддерживать четкий порядок в работе на основе эффективного планирования.

По своей значимости в общей оценке кандидата на конкретную должность определенные качества всегда имеют различный удельный вес, что устанавливается экспертным путем. Например, по шести указанным выше критериям могут быть приняты определенные значения.

Для определения общей оценки деловых и организаторских качеств кандидата на управленческую должность составляется специальный оценочный лист.

Естественно, чем выше общая оценка по каждой группе качеств, тем более достоин кандидат заместить должность в аппарате управления. Наибольшая возможная оценка - 5, а самая низкая - 1.

Образование, стаж работы и возраст работника должны обязательно учитываться при оценке деловых качеств. Дело в том, что образование - одна из основных качественных характеристик при определении уровня квалификации работника, стаж работы - количественная мера опыта, а возраст находится во взаимосвязи со стажем работы.

Данные об образовании кандидата, его стаже и возрасте учитываются путем расчета коэффициента профессиональной перспективности по формуле:

К = Оу.обр. (1 + С/4 + В/18), где

Оу.обр. - оценка уровня образования, которая обычно принимается (составляет

0,15 для лиц, имеющих незаконченное среднее образование;

0,60 - для лиц со средним образованием;

0,75 - для лиц со среднетехническим и незаконченным высшим образованием;

1,00 - для лиц с высшим образованием по специальности;

С - стаж работы по специальности. В соответствии с рекомендациями НИИ труда он делится на 4 (в связи с тем, что, как установлено, стаж в 4 раза меньше влияет на результативность труда, чем образование);

В - возраст. В соответствии с рекомендациями НИИ труда он делится на 18 (установлено, что влияние возраста на результативность труда в 18 раз меньше, чем влияние образования). При этом за верхний предел возраста для мужчин принимается 55 лет, а для женщин - 50.

На этапе определения общей оценки кандидата на должность величина коэффициента профессиональной перспективности суммируется с общей оценкой по деловым и организаторским качествам. Совершенно очевидно, что предпочтение отдается тому кандидату, который в итоге получит наибольшую оценку, притом обязательно еще и с учетом таким же способом полученных оценок по группам личностных качеств.

Проверка практикой, бесспорно, имеет решающее значение для оценки любого управленческого работника. В связи с этим рекомендуется осторожно и терпеливо испытывать и распознавать среди них настоящих организаторов, сочетающих интерес к делу с умением наладить совместную работу коллектива людей. Для этого при работе с резервом кадров на выдвижение широко практикуется их привлечение к временному исполнению обязанностей руководителя в период его отсутствия, стажировка и другие формы и методы практической проверки. Однако и в таких случаях результаты работы требуют объективных оценок.

На ряде российских организаций накоплен положительный опыт оценки управленческого персонала. Сущность одного из наиболее апробированных и достаточно эффективных методов заключается в использовании квалификации, опыта и интуиции наиболее компетентных в своей области работы специалистов - экспертов. Важнейшими условиями применения этого метода является обеспечение анонимности выставляемых экспертами оценок и обоснованность подбора состава экспертных комиссий.

Если анонимность достигается через специальное анкетирование или тестирование, то обоснованность подбора состава экспертов состоит в их тщательной предварительной оценке, а также в методически грамотном и целенаправленном формировании количественного и качественного состава. Например, главные требования к эксперту - его компетентность в управлении производством, нравственность, глубокие знания и признанное умение решать специальные задачи в соответствии с определенными- функциями.

Одно из требований - хорошо разбираться в одной из смежных специальных областях деятельности, например, для технолога - в экономике, для экономиста - в технологии, линейного руководителя - в правовых вопросах и т. д. Традиционное требование к формированию группы экспертов состоит в их способности провести экспертизу с учетом разнообразных сторон деятельности оцениваемого работника.

Главная опасность при подборе состава экспертов состоит в завышении доли какой-либо подгруппы экспертов, заведомо близкой в своем мнении. Эта опасность заключается не только в односторонности выставляемой оценки, но и в том, что при обработке экспертных мнений все другие оценки потеряют свою значимость. По той же самой причине нежелательно включение в экспертную группу специалистов, авторитет которых резко отличается от среднего авторитета членов комиссии.

Используются группы экспертов двумя способами - индивидуально или группой. Индивидуальный, более распространенный и эффективный способ, заключается в том, что каждый эксперт дает оценку анонимно и независимо от других, а затем эти оценки обобщаются. Групповой способ основан на совместной работе экспертов и получении суммарной оценки от всей группы в целом. При таком способе согласование индивидуальных оценок сочетается с последовательным ознакомлением каждого эксперта с оценками остальных. Требование анонимности при таком способе соблюсти возможно, но при "бумажной технологии" уже появляются сложности.

Групповая экспертиза включает следующие обязательные этапы:

Разработка программы (выбор формы группового суждения с перечнем вариантов или оценок), рекомендаций, решений; выработка принципов и методов получения группового суждения;

Выбор техники опроса или способов выявления индивидуальных мнений;

Формирование экспертной группы;

Проведение опроса экспертов;

Обработка результатов (получение группового суждения);

Анализ результатов.

Результат работы экспертов отражается в документе, вариантами которого могут быть рекомендации, обобщающие оценки, решения. Самым гласным вариантом оформления экспертизы является решение. Самым распространенным - рекомендации, но с указанием определенных признаков будущего решения.

Подбор, согласование и утверждение экспертных комиссий обычно проводят начальник отдела кадров и руководитель организации (организации). Начальник отдела кадров знакомит экспертов с методикой оценки с помощью научного консультанта, который первый раз практически руководит всей работой. На уровне организации в состав экспертных комиссий (комиссия для оценки руководителей аппарата управления, комиссия для оценки линейных руководителей производственных подразделений, комиссия для оценки специалистов аппарата управления) включают обычно 3 - 5, но не более 7 человек. При этом в числе экспертов должны быть как оцениваемый, так и его руководитель.

Анкета оценки руководителя или специалиста, карточка эксперта на аттестуемого, бланк результатов опроса экспертов на аттестуемого, а также, бланк расчета итоговой оценки на аттестуемого - таковы обязательные документы почти любой методики независимо от способа расчетов (вручную или с использованием компьютера).

Основным инструментом аттестации является анкета, которая представляет собой специально разработанный вопросник, включающий перечень определенных качеств и варианты ответа. При этом перечень качеств, которыми должен обладать специалист, зависит от сферы его деятельности и занимаемой должности. Поэтому правильный подбор качеств, их перечень для каждой конкретной должности, а также оценки в баллах рекомендуется устанавливать конкретной экспертной комиссией в организации. Именно в этом - одно из важнейших условий объективной оценки работника.

После обсуждения результатов каждая экспертная комиссия утверждает не только перечень качеств для включения в анкету, но и определяет количественную оценку каждого качества в баллах. Например, в анкету рекомендованы десять качеств, и все они оценены по десятибалльной системе оценок (смотри Таблицу 1).

Таблица 1.

Расположены эти качества в анкете в ранжированный ряд - от более до менее значимого. В соответствии с этим и выставляется первая оценка аттестуемому. Она характеризует степень значимости качества. Вторая оценка - это оценка степени проявления этих же качеств аттестуемого по четырем вариантам ответа. Эксперт при этом должен установить, как часто определяемое качество проявляется у аттестуемого по следующей балльной шкале:

1. если всегда - 1,5 балла;

2. если в большинстве случаев - 1 балл;

3. если иногда - 0,5 балла;

4. если почти никогда - 0 баллов.

При первой оценке ставится знак "+" в графе против качества и его оценки в баллах. При второй оценке ставится знак "+" в графе, соответствующей мнению эксперта.

Обработка результатов оценки аттестуемого осуществляется путем заполнения специального бланка - "Бланк результатов опроса экспертов на аттестуемого". С этой целью знаки "+" из анкет, поставленные экспертами, переносят со знаком "V" в этот бланк. В другом бланке ("Бланк расчета средней оценки аттестуемого") по каждому качеству рассчитывается средний балл по формуле:

Где Зср - средний балл оценки качества по степени его функциональной значимости;

З10 ... 31 - оценка экспертом степени значимости качества по десятибалльной шкале;

N10 ... n1 - количество экспертов, которые присвоили качеству оценку по степени значимости (в баллах);

Одновременно в этом же бланке по каждому из качеств рассчитывается средний балл степени проявления этого качества у аттестуемого по формуле:

Где Пср - средняя оценка степени проявления качеств у аттестуемого;

П1,5 ... П0,5 - степень проявления качеств у аттестуемого по оценке экспертов;

N1,5 ... n0,5 - количество экспертов, отнесших качество к степени его проявления у аттестуемого к тому или иному баллу оценки;

N - общее количество экспертов.

Затем по каждому качеству определяется средневзвешенный балл по формуле:

К = Зср * Пср, где К - качество.

Расчет эталона производится следующим образом: сумма баллов по всем 10 качествам (10+9+8+7+6+5+4+3+2+1 = 57) умножается на 1,5 (коэффициент степени проявления качества, если оно проявляется всегда), или на 1,0 (если оно проявляется в большинстве случаев), или же на 0,5 (если качество присутствует иногда). В итоге получаем следующие результаты:

1) 57 х 1,5 = 85,5;

2) 57 х 1,0 = 57,0;

3) 57 X 0,5 = 28,5.

Таким образом, в первом случае, если оценка работника составляет более 85 баллов, формулируют вывод о его повышении или включении в состав резерва на выдвижение. Во втором случае, если оценка составит от 57 до 85 баллов, делают заключение о соответствии занимаемой должности. В третьем случае, если оценка составляет ниже 28 баллов, фиксируют вывод о том, что работник не соответствует занимаемой должности. При этом весьма ценно и то обстоятельство, что детальный анализ оценок экспертов по качествам может помочь определить для каждого работника конкретные направления совершенствования его деятельности.

Количественное исследование

Отвечает на вопросы «кто» и «сколько»

Предназначены для изучения объективных, количественно измеряемых характеристик поведения людей. Преимущественно они бывают описательными. Обработка информации осуществляется с помощью упорядоченных процедур, методами математической статистики. К выборке предъявляются жесткие требования, базирующиеся на теории вероятности и математической статистике. Это процесс доказательства и подтверждения. Связано с объективным, количественно измеряемым поведением и установками людей.

Аспекты применения

Количественное исследование позволяет зафиксировать уже сложившиеся в массовом сознании стереотипы, сформировавшееся мнение.

Задачи количественного исследования

ü дать описание процесса (ситуации на рынке, состояния спроса, потребительского поведения)

ü оценить уровень известности фирмы, марки

ü провести процедуру сегментирования потребителей

ü установить долю рынка производителя

ü установить частоту и характер потребления продукта

Качественно исследование

Отвечает на вопрос «как» и «почему»

Предназначено для получения с помощью специальных техник глубинной информации. Качественное исследование можно назвать интерпретационным. Позволяет получить информацию о мотивах поведения, установках людей, их отношении к чему-либо, дают представление об образе мыслей. Требования к выборке не такие жесткие. Это процесс открытия. Связано с эмоциональным аспектом ответов респондентов.



Аспекты применения

Позволяет зафиксировать еще не сложившиеся в массовом сознании стереотипы, получить информацию в момент ее зарождения в сознании отдельных потребителей, которая может стать впоследствии массовой.

Задачи качественного исследования

ü разработка нового продукта

ü исследования бренда

ü изучение представлений целевых групп о продукте

ü изучение незнакомого для потребителя продукта

ü изучения незнакомого типа поведения

Сопоставление количественных и качественных методов исследования

Основание сравнения Количественные Качественные
Цель применения Дать объявление причин изучаемого Понять изучаемое явление
Исследовательские задачи ü Измерить параметры явления ü Установить взаимосвязи между отдельными параметрами ü Выявить общую картину явления ü Концептуализировать и интерпретировать явление, изучить мотив
Позиция исследователя «Сторонний наблюдатель» «Сочувствующий» участник
В центре внимания исследователя ü Объективные факторы ü Общие соц. процессы ü Субъективные факторы ü Особенные, частные
Гипотезы формулируются До начала сбора данных По мере овладения данными
Исследовательские интересы Разрабатываются до полевого этапа. Формализованы, стандартизированы Разрабатывается до и во время полевого этапа. Неформализованы, нестандартизированы
Единицы анализа Факты, события, высказывания, акты поведения Субъективные значения фактов для индивида
Представление данных Статистическое распределение, индексы, шкалы Высказывания, стенограммы, интеллектуальный продукт

Различия между количественным и качественным исследованиями

1. Качественное

ü Обеспечивает глубину.

ü Отвечает на вопрос «Почему»

ü Изучает мотивацию

ü Субъективно

ü Генерирует новые идеи

ü Разведывательное

ü Позволяет понять поведение

ü Интерпретирует

2. Количественное

ü Измеряет количество

ü Отвечает на вопрос «Кто»

ü Изучает действие

ü Объективно

ü Обеспечивает подтверждение

ü Описательное

ü Измеряет количество действий

ü Описывает

Качественные методы

ü Наблюдение

ü Фокус-группа

ü Глубинное интервью

ü Анализ протокола

Количественные методы

ü Опрос (личный, телефонный, почтовый, панельный, экспертный, on-line)

ü Retail-audit (ретейл-аудит)

Mix-методики (количественно-качественные)

ü Hall-тест

ü Home-тест

ü Mystery shopping

PS: Количественные и качественные методы нельзя противопоставлять, они дополняют друг друга.

11.Mix-методики. Количественно-качественные исследования.

Холл тест:

Позволяет получить информацию о восприятии потребителями продукта, его свойств и понять их реакцию на продукт. Особенностью этого метода – возможность получения ответа не только на вопрос сколько, но и на вопрос почему. Поэтому он сочетает в себе преимущества как количественного, так и качественного исследования. Формат позволяет задавать не только закрытые, но и открытые вопросы. Поэтому можно получить не только оценку товара или продукта, но и причины по которым к товару или продукту так относятся и в тех категориях, в которых мыслит потребитель. Результаты холл теста всегда выступают основой для выработки рекомендаций по изменению определенных свойств продукта и его позиционирование на рынке.

Холл тест решает следующие исследовательские задачи:

4. Определение критерия выбора продукта (мотивы и потребности)

5. Изучение отношения представителей целевой аудитории к представленным на рынке маркам продукта

6. Оценка нового продукта и определение свободных ниш при выводе продукта на рынок.

В качестве характеристик, которые исследуются с помощью этого метода, выступают:

1. Свойства продукта.

3. Упаковка (дизайн, название, логотип, цветовое решение…).

Этапы проведения холл теста:

1. Отбор представителей целевой аудитории

2. Полевое исследование

3. Анализ полученных результатов.

Отличительной чертой холл теста, является то, что с его помощью можно изучать труднодостижимые целевые группы. А также получать количественные оценки визуальной, слуховой, обонятельной, осязательной и вкусовой информации.

Нужно обратить внимание на труднодостижимые группы (богатые).

Методика:

Потребителей приглашают в помещение, которое находится на выставках, ярмарках…

Выборка: Важна по объему, объем должен быть от 100 до 400 человек. Отбор реальных или потенциальных потребителей производится по заданным характеристикам.

Критерии отбора потребителей:

1. Частота потребления продукта

2. Объемы потребления

3. Социально-демографические

Есть два способа отбора респондентов:

1. Предварительный отбор (прирекрут) – заранее договариваются о месте и времени встречи

2. Отбор во время проведения холл – теста.

Хоум тест:

Используют для решения задач позиционированию нового товара, относящегося к определенной товарной группе. Метод позволяет выявить недостатки преимущества товара по сравнению с аналогами других производителей. Определить оптимальную цену товара, название и другие характеристики.

Преимущества : является то, что тестирование товара происходит в тех же условиях в которых они используются в реальной жизни.

Хоум тест позволяет руководителю избежать ошибок до вывода товара на рынок, так как моделирование реального потребления дает возможность определить рыночный потенциал нового товара и предложить эффективную товарно-сбытовую и рекламную программу.

Описание методики: каждому участнику предлагают протестировать (за счет производителя) в домашних условиях обезличенный продукт или группу продуктов. Через какое-то время (минимум 2 максимум 4 недели) участник отвечает на вопросы анкеты, характеризующие его отношение к протестированному продукту. Сравнивает с аналогами и дает оценку приемлемого ценового диапазона.

Выборка: объем от 100 до 400 человек, а также объем определяется долей выборки в генеральной совокупности.

Технология Mystery Shopping (Тайный Покупатель) - это использование специально подготовленных покупателей для анонимной оценки качества обслуживания потребителей, работы персонала, его честности, проверки выполнения стандартов мерчандайзинга, качества продуктов и услуг + секретность и неожиданность проверки

Mystery Shopping (Тайный Покупатель) может работать в разных формах:

ü Личная покупка в торговой точке

ü Покупка/заказ по телефону

ü Покупка/заказ через Интернет

ü Скрытая видео/аудио запись

ü Покупка с возвратом

Этапы проекта:

ü Определение целей и задач

ü Подготовка анкеты

ü Подбор Покупателей

ü Сбор данных

ü Обработка данных и отчет

ü Анализ результатов, следующие шаги

Потребность возникает:

ü Если предприятие не удовлетворено деятельностью продавцов

ü Если конкуренты продают больше

ü Подозрение в недобросовестности сотрудников

Решаемые задачи:

ü Оценить качество обслуживаемого клиента, выявить сильные и слабые стороны

ü Оценить знания персонала о реализуемых товарах, качество и отношение к клиентам покупателям

ü Оценить четкость и лояльность персонала в компании. Можно контролировать уровень выполнения персоналом правил и стандартов и стимулирования продаж.

Выборка: к расчету необходимого числа визитов или звонков применяют все классические требования статистического расчета выборки.

Показатели, используемые для методики тайный покупатель:

1. Общее восприятие торгового зала:

ü Насколько чисто в торговом зале?

ü Есть ли просроченные продукты?

ü Насколько удобно движение по залу?

2. Отношение к покупателю:

ü Насколько персонал дружелюбен и внимателен?

ü Сколько нужно ждать, чтобы тебя обслужили?

ü Насколько хорошо персонал консультирует покупателя?

3. Оценка профессиональных качеств персонала:

ü Насколько продавцы осведомлены о товарах, которые продают?

ü Могут ли быстро и четко ответить на вопросы о товаре?

4. Понимание нужд покупателя:

ü Насколько хорошо продавец понимает потребность клиента?

ü Какие потребности покупателя не могут быть удовлетворены?

ü Не пытается ли продавец в первую очередь продать дорогие товары?

ü Какие буклеты, по каким торговым маркам имеются в торговом зале?

6. Эффективность системы информирования покупателей:

ü Какие методы информирования покупателей имеются?

ü Сообщают ли они полезную информацию?

12.Процедура маркетингового исследования. Характеристика этапов.

1.Формулирование целей исследования

2.Постановка задач Разработка концепции исследования

3.Формулирование рабочих гипотез

4.Определенная системы показателей

5.Отбор источников информации Этап получения эмпирических данных

6.Сбор информации

7.Обработка данных Анализ полученных данных

8.Анализ полученных результатов

9.Прогнозирование


11.Оформление отчета и презентация результатов исследования Этап предоставления

полученных результатов

Разработка концепции начинается с обоснования целесообразности проведения. Это обоснование важно т.к. дает возможность обосновать затраты на получение информации и помогает понимать существование самой проблемы, как управляющим так и маркетологам.

Случаи, когда целесообразно отказаться от проведения исследований:

ü если маркетинговую проблему не удается четко определить. Это бывает когда управляющие и маркетолог не могут достичь достаточного уровня взаимопонимания.

ü если маркетолог считает, что он обладает достаточным объемом информации, необходимой для исследования. Такая ситуация может возникнуть при смене руководства.

ü если исследование может привести к утечке информации к конкурентам

ü если затраты на исследование превышают его эффект

ü если бюджет не позволяет провести исследования в нужном объеме

ü если результаты исследования никак не повлияют на действия управляющих

13.Назначение маркетингового отчёта.

Отчет – итоговый документ и заключительный этап маркетинговой исследования; непосредственное свидетельство и доказательство проделанной работы.

Отчет влияет на использование информации, полученной в ходе исследования, он должен информировать, а не дезинформировать. В обязанности составляющего отчет маркетолога входит доведение до сведения управляющих информации об используемых методах исследования, слабых и сильных сторонах аналитического аппарата и диапазоне возможных ошибок.

Показатели эффективности работы маркетолога оцениваются правильностью и грамотностью составленного отчета. Отчет демонстрирует навыки маркетолога в доходчивой форме передать управляющим информацию, с помощью которой можно повышать качество принимаемых маркетинговой решений.

Критерии оценки отчета:

1) полнота – достаточность объема маркетинговой информации в соответствии с поставленной целью исследования

2) точность, т.е. качество, выражающее степень согласованности представленной информации с практическими решениями

3) ясность – четкость и лаконичность представления информации

4) выразительность.

Факторы, оказывающие влияние на качество подготовленного отчета:

ü степени внимания руководства к цели исследования

ü уровень сложности стоящих перед маркетологом задач

ü опыт и квалификация маркетолога

ü наличие программного обеспечения.

Формы представления отчета: письменный, устный, презентация.

Письменный отчет - готовится в 2 вариантах, сокращенном и полном. Сокращенный – для управляющих, содержит основные результаты и выводы, а полный – для отдела маркетинга, хранится в архивах отдела.

Структура полного отчета:

1. Титульный лист (тема исследования, место и время проведения, заказчик, исполнитель)

3. Введение

ü описание проблемы с обоснованием

ü постановка задач

ü рабочие гипотезы

ü описание выборочной модели

ü ограничения и предостережения

4. Основная часть – интерпретация полученных результатов, методология исследования (характеристика этапов исследования, описание методов исследования, ответы на вопросы технического задания, перечень результатов, которые будут положены в основу принятия управленческих решений).

6. Приложения – инструментарий (анкета, гайд), вся цифровая информация, сопровождающая информация, техническое задание, графики и диаграммы.

При написании текста отчета следует придерживаться лаконичного стиля изложения, насколько это возможно – избегать узкоспециализированных терминов и профессионального жаргона. Отчет пишется не для коллег-маркетологов, а для управляющих.

Устный отчет – не доказательство проведения исследования, это изложение фактов с большой точностью.

Необходимо:

1) подготовить текст доклада в соответствии с целью исследования и логикой построения письм. отчета

2) знать аудиторию, для которой вы готовите текст, понимать ее требования и заинтересованность в результатах

3) всегда быть готовым к вопросам и уметь предчувствовать, какие могут быть заданы

4) подготовить демонстрационный материал

Представление устного отчета регламентируется следующим:

1) лимит отведенного времени

2) время на вопросы (вопросы нужно использовать для доработки письм. отчета)