УДК 159.9.072.3 © Д. В. Деулин, Д. Е. Алексеев, 2020 DOI: 10. 24411/1999-6241-2020-11002
19.00.03 Психология труда, инженерная психология, эргономика
Факторы личностно-профессиональной пригодности кандидатов на службу в органы внутренних дел
Деулин Дмитрий Владимирович \
кандидат психологических наук, доцент кафедры психологии. E-mail: [email protected]
Алексеев Дмитрий Евгеньевич \
кандидат психологических наук, преподаватель кафедры психологии. E-mail: [email protected]
1 Московский университет МВД России им. В. Я. Кикотя, 117997, ул. Академика Волгина, д. 12, Россия Реферат
Введение. Проблема, связанная с решением вопроса о личностно-профессиональной пригодности кандидатов на службу в органы внутренних дел, представляется актуальной и важной. Целью исследования явилось установление взаимосвязей между результатами, полученными с использованием формализованных психодиагностических методик, и группой пригодности, определяемой кандидату комиссией по профессиональному психологическому отбору. Материалы и методы. При обследовании 151 кандидата на службу в ОВД применялся блок формализованных обязательных тестов и опросников (прогрессивные матрицы Дж. Равена, методика «Аналогии», краткий отборочный тест В. Н. Бузина, Э. Ф. Вандерлик, методика «Словарь», многомерный метод исследования личности Ф. Б. Березина, опросник «Мотивационный профиль», «Методика изучения правосознания», методика «Оценка субъективной локализации контроля над значимыми событиями», методика «Оценка уровня волевой саморегуляции»). Методом полуструктурированного интервью были опрошены 28 психологов. Результаты и обсуждение. Посредством факторного анализа (метод главных компонент) данных, получаемых в результате применения вышеуказанных методов, выявлено 22 фактора, в разной степени определяющих личностно-профессиональную пригодность. Их связь с группой пригодности проверялась с использованием корреляционного и регрессионного анализа, с помощью которых выявлено, что ни один из данных факторов в должной мере не детерминирует группу пригодности кандидата. Кроме того, психологи ОВД, принимая решение о личностно-профессиональной пригодности кандидатов на службу в органы внутренних дел, ориентируются на результаты применения неформализованных методов психодиагностики, что было установлено их опросом с использованием метода полуструктурированного интервью. Выводы. На основании результатов тестирования, математического анализа с помощью корреляционного и регрессионного методов выявлено, что использование только формализованных методик недостаточно для определения личностно-профессиональной пригодности кандидатов на службу ОВД. Необходимы дополнительные данные качественных психодиагностических методов, а также учет профессионального опыта психологов и членов комиссии по профотбору.
Ключевые слова: профессиональный психологический отбор; личностно-профессиональная диагностика; тестология; формализованные и неформализованные методы.
Для цитирования: Деулин Д. В., Алексеев Д. Е. Факторы личностно-профессиональной пригодности кандидатов на службу в органы внутренних дел // Психопедагогика в правоохранителях органах. 2020. Т. 25, № 1(80). С. 14-18. DOI: 10. 24411/1999-6241-2020-11002
Основные положения
1. Личностно-профессиональная пригодность кандидатов на службу в органы внутренних дел при существующей в настоящее время системе профессионального психологического отбора определяется на основе результатов применения формализованных методик. При этом в данной системе оценки прослеживается явный приоритет количественного критерия
2. Практика проведения профессионального психологического отбора показывает, что далеко не всегда психологи ориентируются на результаты указанных методик. Нередко они используют качественные неформализованные методики
Введение
Актуальность, значимость и сущность проблемы . Вопрос личностно-профессиональной пригодности кандидатов на службу является актуальным и значимым . Современный профессиональный психологический отбор сталкивается с проблемами определения методов исследования степени профессиональной психологической пригодности Во многом это связано с недоверием психологов территориальных ОВД к результатам ис-
пользования формализованных методов, обязательных при проведении процедуры профессионального психологического отбора
Целью исследования послужило выявление взаимосвязей между результатами, полученными с использованием формализованных психодиагностических методик, и группой пригодности, определяемой кандидату комиссией по профессиональному психологическому отбору
Теоретические предпосылки и состояние проблемы. Личностно-профессиональная пригодность — это соответствие когнитивных и иных способностей, индивидуально-психологических особенностей личности (биологических, социально-психологических, психологических, психофизиологических) требованиям профессии, группе профессий или виду профессиональной деятельности при первичном (вновь принимаемые) или вторичном (повторном) отборе [1].
В ряде публикаций констатируются негативные тенденции в профессиональном психологическом отборе, в том числе в образовательные организации МВД России [1-3]. Так, среди наиболее часто встречающихся
ранее неблагоприятных качеств кандидатов отмечались корыстно-утилитарные интересы, асоциальные установки, употребление психоактивных веществ, наличие в анамнезе психических расстройств и др. [2]. Особенно остро обсуждаются вопросы выявления фактов употребления запрещенных препаратов кандидатами на службу в ОВД [4]. В настоящее время такие проблемы удается преодолеть с помощью комплексной системы оценки личных и деловых качеств кандидатов на службу
Во многих научных публикациях [1-3; 5-7] отмечается тенденция к повышению требований к стрессо-устойчивости сотрудников органов внутренних дел. Таким образом, лица, не способные в дальнейшем успешно противостоять воздействию факторов экстремального характера службы, овладеть в установленные сроки необходимым минимумом знаний, умений и навыков профессиональной деятельности сотрудника полиции, не смогут успешно пройти профессиональный психологический отбор
Система профессионального психологического отбора включает такие этапы, как психологическое тестирование, психологическое собеседование, специальное психофизиологическое исследование с использованием полиграфа (далее — СПФИ).
В обязательный перечень методик в настоящий момент входят прогрессивные матрицы Дж. Равена; аналогии; краткий отборочный тест В . Н . Бузина, Э . Ф . Ван-дерлик; многомерный метод исследования личности Ф Б Березина и др
Психологическое обследование подразумевает проведение обязательного собеседования с кандидатом на службу, направленное на обсуждение результатов тестирования, выявление личных и деловых качеств, изучение мотивов выбора профессии, а также определение факторов риска девиантного поведения Психологическое обследование, наблюдение, изучение документов, иные источники в сопоставлении друг с другом составляют основу для вынесения объективного заключения. Справедливо отмечает И . Н. Носс, что «объективность и достоверность во многом определяется всесторонностью изучения личности кандидата» [1, с. 187]. Кроме того, психолог активно использует наблюдение в рамках психодиагностической беседы Это необходимо в целях изучения психических особенностей кандидата, проявляющихся в речи, мимике, пантомимике, поведении в целом
Фактически психологическое обследование состоит из двух этапов: тестирования, в рамках которого используются формализованные методы, и собеседования, когда проводятся беседа и наблюдение Третий этап — заседание комиссии по профессиональному психологическому отбору (очно осуществляется лишь для части абитуриентов) Необходимо отметить, что при наблюдении может происходить предварительная оценка личности с опорой на визуальную психодиагностику. Л. Н . Костина указывает, что применительно к профессиональной деятельности психолога органов внутренних дел визуальная психодиагностика личности имеет ряд особенностей [8].
Проведение специальных психофизиологических исследований с применением полиграфных устройств в данной статье не рассматривается, что отраженно и в выборке исследования, из которой исключены кандидаты с факторами риска девиантного поведения, выявленные в рамках СПФИ
В некоторых работах отмечается необходимость более детального психологического изучения кандидата на должность [4; 5] В организационном плане такая процедура может включать в себя несколько этапов: знакомство (изучение документов, анкетирование, собеседование); наблюдение за поведением испытуемого; обследование; обработку эмпирических данных, интерпретацию выводов и подготовку заключения [5].
Подобные позиции преобладают и в зарубежных исследованиях. Как отмечала А. Анастази, существует проблема психологического отбора, заключающаяся как в выборе методов, так и в их спецификации применительно к конкретной деятельности [9]. Вопрос грамотного и корректного выбора методов при кадровой работе (в том числе и профессионального отбора) в исследованиях М . Даннета и И . Хока ставится как один из базовых [10]. Дж. Кэмпбелл в качестве наиболее предпочтительного в рамках профессионального психологического отбора называет метод моделирования, позволяющий соотносить результаты исследований с существом оцениваемых конструктов [9].
Материалы и методы. Исследование проводилось на базе Московского университета МВД России им. В . Я . Кикотя с тестированием 151 абитуриента. При этом применялся набор опросников и тестов, обязательных для прохождения при поступлении на службу в органы внутренних дел (прогрессивные матрицы Дж Равена; методика «Аналогии»; краткий отборочный тест В Н Бузина, Э Ф Вандерлик; методика «Словарь»; многомерный метод исследования личности Ф Б Березина; опросник «Мотивационный профиль»; «Методика изучения правосознания», методика «Оценка субъективной локализации контроля над значимыми событиями»; методика «Оценка уровня волевой саморегуляции»)
Кроме того, методом полуструктурированного интервью были опрошены 28 психологов территориальных ОВД из различных регионов России для выяснения, результатам каких методов они склонны доверять в большей степени при принятии решения о группе профессиональной психологической пригодности кандидатов
Для определения того, влияют ли результаты применения формализованных методов, входящих в обязательный перечень при обследовании кандидатов на службу в ОВД, на выставляемую комиссией группы профессиональной психологической пригодности кандидату, проведен корреляционный и регрессионный анализ данных, позволивший установить вклад каждой методики в процесс принятия такого решения
Результаты и обсуждение. Количественная обработка данных, полученных в ходе применения вышеуказанной батареи методик, выдает несколько десятков показателей, что осложняет качественный анализ получаемых
результатов . Поскольку многие показатели могут являться не ортогональными, в целях сокращения числа анализируемых данных был применен факторный анализ данных по методу главных компонент с вращением Varimax, в результате чего было выделено 22 фактора. Связь указанных факторов с группой пригодности (рекомендованных и условно рекомендованных к службе) была проверена в рамках корреляционного анализа
Проведенный анализ выявил три фактора, достоверно (позитивно или негативно) коррелирующих (Rxy) с группой пригодности (p < 0,05): тревожно-персекуторный (7, 6 и 1 шкалы ММИЛ — 0,21), фактор самоконтроля (методика «Оценка субъективной локализации контроля над значимыми событиями» — (- 0,28)), мотивация достижения (М-профиль — (- 0,21)).
Выделенные три фактора были включены в модель множественно линейной регрессии для проверки значимости их влияния на принятие психологами решения о профессиональной психологической пригодности (табл )
Таблица. Результаты регрессионного анализа психологических факторов и группы психологической пригодности (Table . Results of regression analysis of psychological factors and professional aptitude groups)
Примечания: Beta — стандартизованный коэффициент регрессии; Std. Err. of Beta — стандартная ошибка стандартизованного коэффициента регрессии; B — коэффициент и константа линейного уравнения; t — отношение коэффициента B к его стандартной ошибке; p-level — уровень значимости; значимый фактор выделен жирным шрифтом .
Как следует из таблицы, только фактор самоконтроля достоверно связан с переменной профессиональная пригодность (при этом коэффициент регрессии принял отрицательное значение). Однако величина коэффициента детерминации для всей группы факторов (R2=0,12) указывает на нецелесообразность использования данной модели для объяснения основных факторов, определяющих принятие решения комиссией по профессиональному психологическому отбору о группе пригодности кандидата на службу.
Результаты математико-статистического анализа позволяют предположить, что определение профессиональной пригодности абитуриентов образовательных организаций в большей степени связано с использованием метода беседы, наблюдения, результатов применения клинико-психологических методик, а также основано на представлении психолога о психических качествах, необходимых будущему сотруднику ОВД, чем с интерпретацией формализованных методик
В целях качественной верификации данных, полученных с опорой на психологические методы, мы использовали метод полуструктурированного интервьюирования
В интервьюировании приняли участие 28 психологов территориальных органов внутренних дел Опросом были охвачены такие регионы, как Кемеровская, Липецкая, Сахалинская, Курганская, Красноярская области; республики Башкирия, Тува, Крым, Бурятия; Санкт-Петербург, Москва и Московская область; города Тюмень, Архангельск, Барнаул, Иркутск, Самара, Новороссийск, Тула. Возраст обследуемых был в диапазоне от 23 до 45 лет. Таким образом, выборка представляет достаточно репрезентативную группу.
Основные вопросы интервью: «Какие методы психодиагностики при профессиональном психологическом отборе Вы используете?» и «На результаты каких методов в рамках профессионального психологического отбора Вы опираетесь в большей степени?»
При профессиональном психологическом отборе все психологи территориальных органов внутренних дел, опрошенные нами, используют методики, рекомендованные ДГСК МВД России. Вместе с тем часть из них (16%) дополнительно прибегает к иным психологическим методам для уточнения результатов психологического обследования
На вопрос о том, на результаты каких методов предпочитают опираться, 86% респондентов ответили, что это неформализованные методы диагностики кандидатов на службу в органы внутренних дел Лишь 14% выбирают формализованные методы Опрошенные обосновывают приоритет неформализованных методов (наблюдение и беседы) тем, что при сопоставлении с результатами тестов возникает несоответствие По мнению психологов, здесь проявляются слабые стороны тестологии: установка на социально одобряемые ответы; натренированность; разное понимание вопросов испытуемыми и др Как отмечает И Н Носс, «в настоящее время тестология превращается в науку, концентрируя все больше проблем, чем путей их разрешения» [1, с 8] Получается, что психологи в большинстве случаев используют либо качественные психодиагностические методы, либо внутренний «оценочный эталон», которым они измеряют профессионально важные и деловые качества обследуемых лиц По мнению исследователей, очень важной проблемой является также недостаток в современной России валидных и надежных психодиагностических методик или качественной адаптации зарубежных диагностических методик [6; 7].
В пользу формализованных методов выдвигается довод о том, что они позволяют проводить коллективные обследования в короткие сроки с автоматизированным обсчетом данных
Большинство психологов задействуют результаты тестов, поскольку, на их взгляд, они более достоверны (64%) Далее по значимости идут опросники (32%), однако наблюдаются их методическое устаревание и открытость стимульного материала Психологи считают эти методы уязвимыми, в связи с чем необходимо вне-
Показатели Beta Std. Err. of Beta B Std. Err. of Beta t p-level
Св .член 3,08 0,29 10,51 0,00
Фактор самоконтроля -0,21 0,08 -0,08 0,03 -2,66 0,00
Фактор достижения -0,14 0,07 -0,04 0,02 -1,83 0,06
Фактор тревожно-персекуторный 0,13 0,07 0,04 0,02 1,68 0,09
дрять в практику новые методы. Только 4% из опрошенных психологов опираются на проективные методы, поскольку они уникальные и позволяют более полно исследовать личность кандидата, при этом недостаточно объективны в интерпретации
При соотношении методов наблюдения и беседы большинство психологов считают более эффективным последний (84%), поскольку именно клиническая беседа позволяет узнать много информации от обследуемого лица, скорректировать данные, полученные путем формализованных методов. Ценность наблюдения как неформализованного метода отмечают только 16% психологов, полагая, что наблюдение помогает лучше ориентироваться в рамках выявления скрываемой информации и использовать приемы профайлинга, однако в целом менее информативно
Из вышеизложенного следует, что психологи основывают свои заключения на применении клинических (качественных) психологических методов и субъективном представлении о кандидате, наличии (развитости) у него качеств личности, необходимых для успешного выполнения им предполагаемых служебных обязанностей Несомненно, важно понимать вероятностный характер, который носят рекомендации и выводы психодиагностических средств В научных публикациях отмечается роль интуиции и опыта психолога в рамках диагностических процедур «По сути дела сам процесс психодиагностики —
это, безусловно, творческий акт, искусство, основанное во многом на умении войти в специфическое состояние познавания другого человека» [1, с. 188].
Выводы. На основании результатов тестирования, математического анализа с использованием корреляционного и регрессионного методов выявлено, что использование только формализованных методик недостаточно для определения личностно-профессиональной пригодности кандидатов на службу ОВД Это приводит к тому, что психологи нередко минимально учитывают результаты формализованных методов, отдавая предпочтение неформализованным, в первую очередь качественным методам, таким как беседа, а также опираются на собственный профессиональный опыт
Полученные результаты исследования вызывают интерес и требуют постановки двух вопросов:
1) является ли подобный стиль отбора кандидатов на службу в органы внутренних дел эффективным и прогностичным;
2) если на первый вопрос ответ положительный, то не существует ли необходимость модернизации действующей системы профессионального психологического отбора за счет увеличения доли качественных методов и методов ассессмента
В связи с этим дальнейшие психологические исследования обозначенной проблемы могут быть направлены на поиск ответа на два указанных вопроса
Список литературы
1. Носс И. Н. Личностно-профессиональная диагностика сотрудников органов внутренних дел : учеб . -метод, пособ. М. , 2017. 221 с.
2 . Котенев И. О . Концептуальные основы развития ведомственного профессионального психологического отбора в свете постановления Правительства Российской Федерации от 6 декабря 2012 г. № 1259 // Совершенствование психологической работы с личным составом в системе морально-психологического обеспечения оперативно-служебной деятельности: актуальные вопросы и пути решения : сб . науч . статей науч . -практ. конф МВД России 18-19 сентября 2013 г. М. , 2014. С. 39-48.
3. Марьин М. И. Научно-практические проблемы повышения эффективности психологической работы в органах внутренних дел // Совершенствование психологической работы с личным составом в системе морально-психологического обеспечения оперативно-служебной деятельности: актуальные вопросы и пути решения : сб . науч . статей науч . -практ. конф. МВД России 18-19 сентября 2013 г. М. , 2014. С 32-38.
4. Рыженина Ю. Е. Психологические особенности лиц, имеющих опыт употребления наркотических веществ (на примере профессионального психологического отбора кандидатов на службу в органы внутренних дел) // Молодой ученый. 2015 . № 10 . С 446-450.
5 . Караваев А. Ф., Крук В. М., Носс И. Н., Виноградов М. В. Проблемы личностно-профессиональной диагностики в профотборе кандидатов на службу в органы внутренних дел и оценки надежности сотрудника // Психопедагогика в правоохранительных органах. 2015 . № 3(62). С 106-113 .
6 . Мягких И. Н. Профессиональный психологический отбор в органах внутренних дел Российской Федерации: концепция, принципы, критерии, технологии : дис . ... канд . психол . наук. М. , 2004. 174 с .
7 . Дашко М. Н., Виноградов М. В., Носс И. Н. Актуальные проблемы профессионального психологического отбора граждан, поступающих на службу в органы внутренних дел Российской Федерации, в интересах обеспечения надежности сотрудника // Актуальные проблемы обеспечения надежности сотрудника в системе морально-психологического обеспечения оперативно-служебной деятельности органов внутренних дел Российской Федерации : сб . мат-лов всерос . науч . -практ. конф . / под общ . ред. В. Л . Кубышко . М. , 2017. С 10-24.
8. Костина Л. Н. Визуальная психодиагностика как методы познания и предварительной оценки личности в профессиональной деятельности психолога // Вестник Московского университета МВД России. 2016. № 6. С. 195-196.
9 . Анастази А. Психологическое тестирование / А . Анастази, С. Урбина. СПб . , 2001. 688с.
10 . Dunnette M. D. , & Hough I . M. (Eds. ) (1990-1992). Handbook of industrial and organization psychology (2-nd ed, Vols. 1-3). PaloAlto, CA: ConsultingPsychologistsPress .
Поступила 28.02.2019
UDC 159.9.072.3 © D. V. Deulin, D. E. Alexeev, 2020 DOI: 10. 24411/1999-6241-2020-11002
19.00.03 Psychology of Labour, Engineering Psychology, Ergonomics
Factors of Applicants' Individual-Professional Aptitude for Service in the Internal Affairs Bodies
Dmitry V. Deulin \
Candidate of Sciences (Psychology), associate-professor at the chair of Psychology. E-mail: [email protected]
Dmitry E. Alexeev \
Candidate of Sciences (Psychology), lecturer at the chair of Psychology. E-mail: [email protected] 1 V. Ya. Kikot' Moscow University of the Russian Ministry of Internal Affairs, 12 Volgin st., Moscow, 117997, Russia Abstract
Introduction. The problem of applicants' individual professional aptitude for service in the Internal Affairs bodies is of great importance and relevance. The aim of the research is to define and reveal interconnections between the results obtained through formal psychodiagnostical methods and the aptitude group designated for the applicant by the commission responsible for professional psychological selection. Materials and Methods. The examination of 151 applicants for service in the Internal Affairs bodies was conducted by means of the set of formal mandatory tests and questionnaires (Raven's progressive matrices, "Analogies" method, V.N. Buzin and E.F. Wanderlik short selection test, "Vocabulary" method, F.B.Berezin multifaceted personality test, "Motivation Profile" questionnaire, "Method of studying law consciousness", "Method of assessing subjective localization of control over crucial events", "Method of assessing the level of volitional self-regulation"). The method of half-structured interview was employed to question 28 psychologists. Results and Discussion. Factor analysis (method of main components) of the data obtained by the mentioned above methods enabled the researchers to reveal 22 factors which determine individual professional aptitude. Their relation to the aptitude group was tested via correlation and regression analyses. It was proved that no revealed factor determined the applicant's aptitude group. Moreover, psychologists of the Internal Affairs bodies deciding on the applicants' individual professional aptitude for service in the Internal Affairs bodies rely on the results of the informal methods of psychodiagnostics, and it was revealed through the method of half-structured interview. Conclusions. Basing on the results of the tests, mathematical analysis by means of correlation and regression methods the authors managed to ascertain that it is insufficient to use only formalized methods for defining applicants' individual professional aptitude for service in the Internal Affairs bodies. It is necessary to use additional data obtained through reliable psychodiagnostical methods and professional experience of the psychologists and members of the commission for professional selection.
Keywords: professional psychological selection; individual professional diagnostics; testology; formal and informal methods.
Citation: Deulin D. V., Alexeev D. E. Factors of Applicants' Individual-Professional Aptitude for Service in the Internal Affairs Bodies. Psychopedagogy in Law Enforcement. Vol. 25, No. 1(80). 2020. Pp. 14-18 (In Russ.). DOI: 10. 24411/1999-6241-2020-11002
References
1. Noss I . N . Personal Professional diagnostics of the officers of the Internal Affairs . Moscow, 2017 . Part 1. 221 p. (In Russ . )
2 . Kotenev I . O . Conceptual fundamentals of developing departmental professional psychological selection with regard to Ruling of the Government of the Russian Federation No 1259 dating Dec . 6, 2012 . Enhancement of psychological work with personnel in the system of moral psychological maintenance of operational service: relevant questions and solutions . Collected articles, science-to-practice conference of the Russian Ministry of Internal Affairs, Sept. 18-19, 2013 . Moscow, 2014. Pp. 39-48. (In Russ.)
3 . Maryin M. I . Scientific and practical problems of increasing effectiveness of psychological work in the Internal Affairs . Enhancement of psychological work with personnel in the system of moral psychological maintenance of operational service: relevant questions and solutions. Collected articles, science-to-practice conference of the Russian Ministry of Internal Affairs, Sept. 18-19, 2013 . Moscow, 2014. Pp 32-38 (In Russ )
4. Ryzhenina Yu. E . Psychological features of individuals with experience of using drugs (exemplified by professional psychological selection of applicants for service in the Internal Affairs). Young Scholar. 2015 . No 10 . Pp. 446-450. (In Russ. )
5 . Karavaev A . F. , Kruk V. M . , Noss I . N . , Vinogradov M . V. Problems of personal professional diagnostics in professional selection of applicants for service in the Internal Affairs and assessment of the officer's reliability. Psychopedagogy in Law Enforcement. 2015 . No 3(62). Pp. 106-113 . (In Russ.)
6 Myagkikh I N Professional psychological selection in the Internal Affairs of the Russian Federation: Conception, principles, criteria, technologies . Candidate of sciences dissertation (in psychology). Moscow, 2004. 174 p . (In Russ . )
7 . Dashko M. N . , Vinogradov M. V. , Noss I . N . Current Problems of psychological selection of citizens-applicants for service in the Internal Affairs of the Russian Federation aiming at the officer's reliability Current problems of the officer's reliability in the system of moral psychological maintenance of operational service of the Internal Affairs of the Russian Federation . Collected materials, All-Russian science-to-practice conference. Ed. by Kubyshko V. L. Moscow, 2017. Pp. 10-24. (In Russ.)
8 . Kostina L. N . Visual psychodiagnostics as the method of cognition and preliminary assessment of an individual in psychologist's professional activity. Bulletin of Moscow University of the Russian Ministry of Internal Affairs. 2016 . No 6 . Pp. 195-196. (In Russ . )
9 . Anastazi A . Psychological testing. Anastazi A . , Urbina S . St . Petersburg, 2001. 688 p. (In Russ. )
10 . Dunnette M. D. , & Hough I . M. (Eds. ) (1990-1992). Handbook of industrial and organization psychology (2-nd ed. , Vols. 1-3). Palo Alto, CA: Consulting Psychologists Press
Submitted 28.02.2019