Основные психометрические параметры словаря компетенций

Предлагаемый нами словарь компетенций стандартизирован на выборке из 1129 человек в 2008 г.

На первом этапе исследования респонденты оценивали степень соответствия «ключевых поведенческих индикаторов» (КПИ) заявленному описанию компетенции. Задача респондентов заключалась в том, чтобы оценить по 5-ти бальной шкале, соответствие 10 предложенных КПИ описанию компетенции. Общий объем выборки составил 818 человек, в возрасте от 17 до 67 лет, средний возраст 30.15 лет, из них мужчин 150 человек (18.34%), женщин 668 (81.66%). Общее число респондентов с опытом руководства людьми 468 (57.21%), с опытом в области тестовых технологий 102 (12.47%), без опыта руководства людьми и опыта в области тестовых технологий 248 (30.32%).

На втором этапе исследования, испытуемым предлагалось пройти процедуру самооценки выраженности компетенций. Общий объем выборки составил 311 человек, в возрасте от 18 до 58 лет, средний возраст 32.09 года, из них мужчин 51 человек (16.40%), женщин 260 (83,60%). Общее число испытуемых с опытом оценки персонала 215 (69.12%), без опыта оценки персонала 96 (30.88%). Общее число испытуемых с опытом руководства 130 (41.80%), без опыта руководства персоналом, но с опытом в сфере управления персоналом 165 (53.05%), без опыта 16 (5.14%).

Оценка содержательной валидности

Анализ оценок респондентов позволил отобрать по 5 КПИ для каждой компетенции. Общая статистика по всем отобранным КПИ представлена в таблице 1.

Таблица 1. Среднегрупповая оценка соответствия КПИ.

Из представленной таблицы видно, что средняя оценка респондентами КПИ составляет 4.089, что соответствует «хорошему уровню соответствия» индикаторов заявленному описанию компетенций. Медианное значение, и наиболее распространенная оценка (мода) составляют 4.099 и 4 балла соответственно. Среднегрупповые оценки респондентов находятся в диапазоне от 3.46 до 4.57.

Для оценки согласованности мнений респондентов мы использовали интраклассовый коэффициент корреляции. Полученные результаты представлены в таблице 2 отдельно по каждой компетенции.

Таблица 2. Оценка согласованности мнений респондентов.

Значения интраклассовых корреляций колеблются в диапазоне от 0,61 до 0,85, что свидетельствует о достаточно высоком уровне согласованности мнений.

Оценка надежности (внутренней согласованности) словаря

С помощью коэффициентов альфа и split-half надежность, оценивалась внутренняя непротиворечивость шкал словаря. Данный показатель отражает однородность, внутреннее постоянство или устойчивость КПИ по отдельным компетенциям.

Таблица 3. Оценка надежности (внутренней непротиворечивости) перечня компетенций (n=311).

При проверке существующих шкал традиционным способом - путем расчета корреляций между КПИ и суммарным баллом по шкале (компетенции) – было выявлено, что практически все пункты значимо коррелируют со "своими" шкалами (компетенциями) со средним коэффициентом корреляции равным 0,66. Значение средних коэффициентов корреляции по шкалам представлено в таблице 4.

Таблица 4. Средний коэффициент корреляции по шкалам.

Данные представленные  в табл. 3 и 4 отчетливо указывают на довольно высокую однородность разработанного нами перечня компетенций и, следовательно, на его надежность.

Кластерный анализ шкал

Для понимания того, как группируются отдельные компетенции, мы использовали кластерный анализ. В качестве метода кластеризации использовался «метод k средних». Суть этого метода состоит в том, чтобы минимизировать изменчивость внутри кластеров и максимизировать изменчивость между кластерами. В результате мы выделили 6 кластеров. Полученные результаты представлены в таблице 5.

Таблица 5. Результаты кластерного анализа компетенций.

Проведенный кластерный анализ позволил сгруппировать описанные нами компетенции в предлагаемый словарь-справочник.