Метод экспертных оценок. Теория и практика - Светлана Гуцыкова

Алгоритм любой комплексной оценки, по мнению Л. Г. Чикер, В. А. Почебут, необходимым образом должен включать прояснение следующих важных моментов: цель оценки; объект оценки; методы оценки; субъект оценки; время, место, порядок проведения оценки; результат оценки. В качестве субъекта оценки могут быть привлечены эксперты на уровне разных должностных категорий; использованы групповая оценка личности; самооценка деловых, личностных и профессиональных качеств; оценка параметров личности психологом.

При реализации алгоритма комплексной оценки ключевым принято считать выбор методов оценки. Предпочтение отдается комплексу разнообразных методов. Применяемые для оценки методы должны удовлетворять ряду требований. Они должны быть простыми, оперативными, гибкими и достаточно универсальными, а также иметь описание правил сбора, обработки и интерпретации полученной информации (там же, с. 182).

В рамках организационной психологии принято выделять следующие проблемы организаций, для решения которых необходима оценка персонала, базирующаяся на алгоритме комплексной оценки: 1) аттестация персонала; 2) подбор и расстановка персонала; 3) подготовка руководителей и повышение их профессиональной компетентности и управленческой культуры; 4) совершенствование управления коллективом; 5) сокращение персонала (там же). «Оценка результатов профессиональной деятельности выполняет административные, информационные и мотивационные функции и является необходимым условием эффективного развития организаций» (там же, с. 194). Она позволяет сократить расходы на дорогостоящие мероприятия по подготовке, обучению и повышению квалификации сотрудников организации.

Применяющиеся для этих целей методики оценки персонала целесообразно различать по трем критериям: 1) приведение или неприведение всех полученных данных к единому коэффициенту; 2) широта и комплексность используемых методов; 3) объем предлагаемых рекомендаций (там же, с. 181).

Вернемся к источникам оценочной информации. Одним из них являются объективные данные. Объективные данные, позволяющие охарактеризовать выполнение профессиональной деятельности и прогнозировать профессиональную успешность, базируются, как правило, на сведениях о производительности. Основной массив объективных данных составляют данные о производительности труда, объеме выполняемых работ, их качестве и ряде других технико-экономических показателей. Основой для их оценки служат, как правило, нормированные задания, или установленные на основе дифференцированных нормативов времени объемы работ, которые должны быть выполнены за определенное время с соблюдением требований к качеству конечного результата труда.

В качестве показателей производительности может выступать количество единиц производимой продукции за фиксированный промежуток времени (для оператора автоматического устройства), объемы продаж (для продавцов и менеджеров), объем и скорость введения информации (выполнение компьютерных задач) и прочее. Наиболее тщательно изучены в настоящее время критерии для оценки работников производственных подразделений.

Отдельного упоминания заслуживает достаточно хорошо зарекомендовавший себя метод рабочих образцов. Применение метода рабочих образцов предполагает, что потенциальному кандидату предоставляются предварительно разработанные примеры проблем, связанных с реализацией профессиональной деятельности, с просьбой разрешить их, как если бы он находился в процессе выполнения работы. Так, пример рабочих образцов для механика основан на том, что его деятельность связана с успешностью использования инструментов, точностью и общими техническими способностями.

Задания, разработанные с учетом этих особенностей, позволяют выяснить успешность кандидата в данных сферах (Мучински, 2004).

Примером успешного применения метода рабочих образцов может служить и разработанные для технических служащих американских Военно-воздушных сил задания по проведению так называемых проблемных стрельб, или стрельб, которые осуществляются в проблемных условиях (Pokorny et al., 1996). В основу рабочих образцов разработчиками были положены представления о когнитивном и поведенческом компонентах навыков проблемной стрельбы. Когнитивная модель навыков соответствует основным требованиям к профессиональным знаниям специалистов и предполагает скоординированность трех типов знаний: системных, процедурных и стратегических.

Исследование, направленное на оценку эффективности разработанной и опробованной обучающей системы, показало, что данные рабочих образцов высоко прогностичны в оценке эффективности работы специалистов. Они позволяют проанализировать изменения в специфических компонентах среднего исполнения индивидуумов и выявить различия между группами служащих, прошедших и не прошедших обучение (Pokorny et al., 1996).

Следует, однако, отметить, что разработка рабочих образцов затруднена для некоторых видов деятельности. Необходимо также учитывать, что ни один из объективных показателей производительности не может служить полной характеристикой успешности профессиональной деятельности и отражать показатели концептуальных критериев успешности, которые в конечном итоге они и призваны измерять.

Так, П. Мучински перечисляет следующие недостатки, присущие объективным данным о производительности:

1. Различия в профессиональных достижениях должны отражать истинные различия в том, насколько человек эффективен в своей профессиональной деятельности. Однако различия в трудовых достижениях нередко могут объясняться и целым рядом факторов, не зависящих от работников. К примеру, значительную роль в сфере продаж играют глобальные аспекты экономического характера, и лишь исходя из них можно рассматривать объективные показатели как отражающие определенный уровень выполнения профессиональной деятельности. Проблема колебаний в определении успешного выполнения работы, связанная с воздействием внешних факторов трудового процесса, относится, по мнению П. Мучински, к проблеме контаминации критериев.

2. Объективные показатели не позволяют получить полной картины. Это касается, в частности, вопроса о качестве работы, которое не менее значимо, чем количественные показатели. Если количественные показатели предоставляют информацию на уровне среза применительно к данному моменту времени, то в показателях качества работы заложен значимый, по словам П. Мучински, прогностичный компонент.

Данный прогностичный компонент следует принимать во внимание, учитывая, что количественные показатели могут быть ниже, так как часть трудового времени может быть затрачена на перспективные в плане будущего результата действия. Это касается, например, дискреционного компонента работы или обдумывания, присущего всем видам профессиональной деятельности (Мучински, 2004, с. 244).

Со вторым положением солидарны и другие исследователи. Так, в соответствии с их мнением, «возможности нормирования различных видов труда не безграничны и лимитируются наличием, наряду с техническими компонентами работы, творческих элементов. Наличие творческого труда или – составляющей труда определяет сложность оценки эффективности труда, поскольку затрудняет возможности формализации и нормирования данного вида труда» (Беркутова, Крониковская, Мартьянова, Пономарев, 2007, с. 60). В этом смысле для решения задач оценки оправданно использование авторитетных экспертных мнений.

В качестве примера вида профессиональной деятельности, оценка которого через объективные показатели затруднена, достаточно часто рассматривается оценка управленческого труда. Так, в связи с разделением управленческого труда, результат деятельности руководителя может быть оценен через комплекс показателей, включающих «итоги производственно-хозяйственной и иной деятельности организации или подразделений, а также через социально-экономические условия труда подчиненных (например, уровень оплаты, мотивированность персонала)» (там же, с. 61).

Существующие подходы и приемы оценки эффективности руководства можно, по мнению А. Л. Журавлева, поделить по нескольким основаниям. По основным оцениваемым показателям А. Л. Журавлев выделяет три подхода к оценке: а) по конечным производственно-экономическим результатам работы руководимого коллектива; б) по показателям, характеризующим состояния и свойства коллектива (объекта руководства); в) по показателям, характеризующим состояния и свойства как деятельности, так и самого руководителя (субъекта руководства).

В зависимости от используемых приемов оценка эффективности руководства подразделяется на следующие виды: а) прямая оценка результатов работы коллектива; б) экспертная оценка результатов работы руководителя, являющаяся конкретным вариантом групповой оценки; в) самооценка поведения и деятельности руководителя (Журавлев, 1989, с. 46). Возможным является группирование и по другим основаниям.