Надежность теста Midot.
Для проверки степени надёжности тестов Midot были проведены двухступенчатые исследования, первичное и повторное тестирования. Был достигнут удовлетворительный уровень: 0,8 (на основе трех фиксированных шкал). Надежность определялась на 346 участниках, каждый из которых проходил тест дважды с интервалом 2-4 недели. Результаты анализа представлены в таблице ниже.
Таблица 1. Надежность на основе шкал Midot.
|
Шкала
|
Надежность
|
|
Честность
|
0.79
|
|
Хищение
|
0.81
|
|
Взяточничество
|
0.55
|
|
Нормы
|
0.84
|
* Низкий коэффициент по шкале взяточничество может быть результатом рассредоточенности данных по узкой шкале взяточничество.
Валидность теста Midot
Согласованная процедура оценки валидности была проведена на основе проверок на детекторе лжи. Было выявлено 98% совпадений между результатами теста Midot и проверками на детекторе лжи. Эмпирическое исследование было проведено методом случайного выбора среди 596 кандидатов из большего банка кандидатов на тестирование (N~7000). Участники исследования прошли тест Midot и проверку на детекторе лжи в один день. В таблице ниже показана зависимость между Midot и критерием валидности.
Система Midot
|
Детектор лжи
|
|
Рекомендован
|
Не рекомендован
|
Всего
|
Правдивый |
522 87.6%
|
8 1.3%
|
530 88.9%
|
|
Лживый
|
5 0.8%
|
61 10.2%
|
66 11.1%
|
|
Всего
|
527 88.4%
|
69 11.6%
|
596 100%
|
Валидность прогнозируемости.
Исследование по прогнозированию валидности теста Midot было проведено под наблюдением Университета Дерби в соответствии со всеми академическими и эмпирическими стандартами. Исследование было проведено под руководством Моти Нецер, Доктора Философии, MBA, Университет Дерби, филиал в Израиле.
Изучение проводилось путем измерения корреляции между успешностью прохождения теста Midot и надежностью на рабочем месте (по прошествии 6-18 месяцев).
Участвовало 158 человек из 4 организаций, прошедших проверку на детекторе лжи. Из этих 158 человек 68 прошли тест Midot при поступлении на работу. На основе результатов проверки на детекторе лжи было отмечено значительное различие между группой, прошедшей тест Midot при оценке кандидата на должность, и группой, не прошедшей таковой тест.
93% из тех, кто проходил тест Midot при поступлении на работу, успешно прошли проверку на детекторе лжи. Для сравнения: 81% из тех, кто не проходил тест Midot при поступлении на работу, были успешны при проверке на детекторе лжи. Из числа тех, кто прошли тест Midot при поступлении на работу, на детекторе лжи показали вовлеченность в служебные злоупотребления только 7%. Напротив, из числа тех, кто не прошел тест Midot при поступлении на работу, на детекторе лжи показали вовлеченность в служебные злоупотребления 19%.
После проверки корреляции по 4 критериям было обнаружено, что по всем 4 критериям (честность, хищение, взяточничество и нормы) более высокие баллы набрали те, кто успешно прошел проверку на детекторе лжи. Кроме того, среди группы "Рекомендован" при проверке на детекторе лжи только у 3,5% была выявлена вовлеченность в служебные злоупотребления. И напротив, 27% группы "Средний" были вовлечены в служебные злоупотребления.
|
|
|
Результаты периодических проверок на детекторе лжи
|
|
|
Успешно
|
Провалились
|
Всего
|
|
Тесты Midot
|
Прошли тест успешно
|
n
|
63
|
5
|
68
|
|
%
|
92.6%
|
7.4%
|
100.0%
|
|
Не проходили
|
n
|
73
|
17
|
90
|
|
%
|
81.1%
|
18.9%
|
100.0%
|
|
Всего
|
n
|
136
|
22
|
158
|
|
%
|
86.1%
|
13.9%
|
100.0%
|
Независимые исследования валидности результатов теста были проведены следующими компаниями:
Бринкс (Израиль) - компания координировала проверку оценки благонадежности кандидата Midot Integritests и оценки кандидатов на должность с помощью детектора лжи. Midot Integritest и проверка на дететкоре лжи были выполнены под наблюдением двух различных компаний. Результаты показали 92% совпадений между двумя видами оценки кандидата на должность.
Лидирующее в Израиле финансовое учреждение сравнило оценки Midot Integritest с окончательными рекомендациями службы безопасности. Они провели собеседование и оценили 247 кандидата. Соответствие результатов вышеуказанных способов оценки благонадежности кандидата на должность было установлено в 85%.