CC BY-NC
97Подходы к оценке эффективности тренингового воздействия в отечественных и зарубежных исследованиях
Пеша Анастасия Владимировна
кандидат экономических наук доцент, ФГБОУ ВО 'Уральский государственный экономический университет" 620144, Россия, Свердловская область, г. Екатеринбург, ул. 8 Марта, 62, ауд. 455
Pesha Anastasiya Vladimirovna PhD in Economies
Docent, the department of Labor Economy and Human Resource Management, Ural State University of
Economies
620144, Russia, Yekaterinburg, 8 Marta Street 62, office # 455 El [email protected]
Коропец Ольга Анатольевна
кандидат психологических наук доцент, ФГБОУ ВО 'Уральский государственный экономический университет"' 620144, Россия, Свердловская область, г. Екатеринбург, ул. 8 Марта, 62, ауд. 455
Koropets Olga Anatolevna PhD in Psychology
Docent, the department of Labor Economy and Human Resource Management, Ural State University of
Economics
620144, Russia, Yekaterinburg, 8 Marta Street 62, office # 455
Статья из рубрики "Профессиональная психология"
Аннотация. В статье авторами проанализированы современные подходы к оценке эффективности тренингового воздействия с точки зрения социальной и профессиональной психологии, а главным объектом воздействия социально-психологического тренинга выступает личность. Авторами представлен анализ подходов к понимании эффективности тренингового воздействия Жукова Ю. М., Петровской Л. А. Проанализированы с точки зрения релевантности подходы к оценке изменений психотехническим воздействием тренинга на личность, межличностные отношения и профессиональные компетенции таких авторов, как: Д. Р. Киркпатрик, Р. Байкли и Д. Кэйпла, А. Д. Чанько, Л. А. Петровской, О. А. Пятковой. Методы, которые используют авторы во время своего исследования: контент-анализ данных печатных и электронных источников текстовых данных эмпирических и практических исследований авторов на тему эффективности тренингового воздействия в социально-психологическом тренинге. Авторами делается вывод о существующих пробелах в фиксации и интерпретации личностных эффектов наиболее востребованных на сегодняшний день краткосрочных тренинговых программ. На основе результатов исследований Пятковой О. А. и Кабрина В. И. авторами представлена схема социально-психологической оценки стресс-транформации личности, осуществляющейся в процессе реализации краткосрочных тренинговых программ. Предлагаемая схема облегчает интерпретацию результатов
тренингового воздействия в рамках транскоммуникативного подхода в оценке краткосрочных программ на различных этапах цикла обучения.
Ключевые слова: социально-психологический тренинг, тренинговое воздействие, эффективность, групповая динамика, стресс-трансформация, транскоммуникация, коммуникативный стресс, коммуникативный транс, эффект, тренинг
DOI: 10.7256/2454-0722.2017.3.23746
Дата направления в редакцию: 17-08-2017
Дата рецензирования: 01-08-2017
Abstract. The article analyzes the current approaches to evaluating efficiency of the training effects from the perspective of social and vocational psychology, and personality as the main object of influence of social-psychological trainings. The authors present the analysis of approaches to understanding efficiency of training effects by Yu. Zhukov, and L. Petrovskaya. They have also analyzed approaches to the evaluation of changes in psychoimpact of the training on the personality, interpersonal relations and professional competence described by such authors as: D. Kirkpatrick, and R. Bickley and D. Caple, A. Chanko, L. Petrovskaya and O. Pyatkova from the point of view of their relevance. Methods used by the authors during their research include content analysis of data from print and electronic sources of text data in empirical and practical studies of the authors concerning efficiency of the training impact of the socio-psychological training. The authors conclude that there are certain gaps in recording and interpreting personal impacts of the most popular short-term training programs. Based on the results of researches by O. Pyatkova and V. Kabrina the authors present a scheme of social and psychological assessment of stress-transformation of personality achieved in the process of implementing short-term training programs. The proposed scheme facilitates the interpretation of results of the training impact in terms of trans-communicative approach to the evaluation of short-term programs at various stages of the training cycle.
Keywords: trans-communication, stress transformation, group dynamics, efficiency, training impact, socio-psychological training, communicative stress, communicative trance, e ffe ct , t ra i ning
Введение
Изучение посттреннинговых эффектов особенно относительно личностных и когнитивных изменений участников различного рода тренинговых групп, традиционно представляет большой интерес для социальной и профессиональной психологии. Данный вопрос активно обсуждается в диссертационных исследованиях, монографиях и статьях отечественных и зарубежных авторов [1;10;13;20;24;251.
Изучение эффектов тренинга происходящих на уровне личности участников дает информацию необходимую для понимания процессов групповой динамики в тренинговых группах. Совершенствование процедурных аспектов тренинга должно основываться на понимание его эффектов, в том числе необходимо учитывать возможные риски и негативные последствия, относительно личности и эмоционального благополучия его участников. Однако в большинстве существующих подходов применяемых к оценке
эффективности тренингов, основное внимание уделяется экономическим показателям и изменениям на организационном уровне, а личностные изменения, происходящие с участниками во время тренингового процесса, либо игнорируются, либо не достаточно описываются. Исключение составляют программы, направленные на формирование конкретных навыков межличностного общения и определенных личностных и
профессиональных компетенций [5; 21].
Подходы к оценке эффективности тренингового воздействия
Современные исследования эффективности тренингового воздействия, позволяют говорить о возможности оценки эффектов на личностном, групповом и организационном
уровне [2;15;17]. С точки зрения, личностно-ориентированного подхода в социальной психологии, который мы разделяем, основным объектом воздействия социально-
психологического тренинга выступает личность [7!. В данной работе мы придерживаемся понимания тренингового воздействия, как системы психотехнических мер, направленных на достижение позитивных личностных изменений.
Отечественный психолог Ю. М. Жуков обосновывает понятие «эффективность» с точки зрения соотношения результатов и затраченных средств, отмечая его относительность, а под «эффектами» автор подразумевает «результаты следствия тренинга не связанные с
затратами на его проведения» [6]. Рассмотрение эффектов с точки зрения результатов тренинга имеет давнюю традицию в психологии, так Л. А. Петровская, отмечает, что
эффекты есть результат использование метода с практической точки зрения И4!.
Пожалуй, одной из самых популярных моделей, используемой как для оценки эффективности тренинга, так и для оценки эффективности обучения в организациях различных сфер деятельности является модель Д. Л. Киркпатрика. Несмотря на то, что модель Д. Л. Киркпатрика предложена в 1959 году, она до сих пор активно используется, благодаря четырем достаточно универсальным категориям оценки: реакции участников тренинга, уровень усвоения, уровень поведения, уровень
результатов I23!. Прежде всего, оценке подвергается уровень реакций участников тренинга, включающий мнения, суждения и оценки, которые делают участники в ходе тренинга или, как правило, сразу после его завершения. Для сбора и обработки информации специалисты используют различные варианты обратной связи от участников тренинговой группы, включающие в себя: устные и письменные отзывы, опросные листы, анкеты, дневники-самоотчеты и т.д. На данном уровне оценки, тренинг считается эффективным, если участники дают ему положительную оценку, испытывают положительные эмоции и удовлетворение после его завершения. Несмотря, на безусловную важность данного показателя, он не должен подменять собой другие критерии, так как не всегда участники способны объективно оценить происходящие с ними личностные изменения. Первая эмоциональная реакция участников может оказаться негативной, в связи с необходимостью перестройки удобных поведенческих паттернов и изменением стереотипных реакций. Должен пойти определенный период времени, после тренингового воздействия для того, чтобы участники могли в полной мере осмыслить происходящие с ними изменения и в полной мере почувствовать пользу от групповой работы.
На уровне усвоения специалисты оценивают степень овладения знаниями и умениями, сформированности определенных компетенций в соответствии с заданными стандартами. Как правило, данный уровень, включает сопоставление полученных результатов с целями тренинга.
На уровне поведения, важно определить степень использования полученных в результате тренинга навыков и компетенций в реальной профессиональной деятельности и в сфере межличностного общения.
Уровень результатов показывает наличие изменений на уровне организаций, что особенно важно для различного рода бизнес-тренингов.
Также, часто выделяют пятый уровень оценки эффективности - уровень возврата на вложения. Ценность полученных результатов оценивается с точки зрения финансовых и временных затрат. Данная модель на наш взгляд, не учитывает, негативные эффекты, которые могут сопровождать тренинговый процесс, а следовательно, не дает в полной мере воздействовать на процессы групповой динамики.
Основываясь на концепции Киркпатрика, ряд ученых предлагает свои варианты оценки эффективности. В частности Р. Байкли и Д. Кэйплом выделяются внутренние (первый и второй уровень модели Киркпатрика) и внешние показатели эффективности (остальные
уровни) Разделение на внешние и внутренние показатели, дает возможности использовать их для различного рода тренинговых групп. Так внутренние показатели могут применяться для оценки эффективности социально-психологических тренингов, а внешние показатели большее значение имеют для оценки организационных и бизнес-тренингов. Среди зарубежных исследований особого внимания заслуживает модель, обратного планирования, в которой уровни Киркпатрика представлены в обратном порядке, образующем циклический процесс. С ее помощью авторы оценивают эффективность организационного обучения I22!.
Относительно, оценки эффективности социально-психологического тренинга в организациях А. Д. Чанько обосновывает в своем диссертационном исследовании следующую схему, включающую три шага. Первый шаг предполагает теоретический анализ целей и задач, адекватных методу. Второй шаг включает в себя анализ результатов применения, тех эффектов-изменений, которые произошли после тренинга. Третий шаг заключается в оценке влияния полученных эффектов-изменений на продуктивность деятельности организации в целом -U^i.
В психологии, несмотря на различные теоретические основания, выделяются достаточно стандартные эффекты, описывающие динамику личностных характеристик участников
групп тренинга, касающиеся, прежде всего сферы межличностного общения Г11'12'18"!. Традиционно исследователи отмечают развитие коммуникативных способностей, изменение в области установок, и стилях межличностного поведения, а также личностный рост участников тренинга. Как правило, вследствие участия в тренинге возрастает социально-психологическая активность личности, улучшается способность к самовыражению, повышается самооценка и уверенность в себе. На наш взгляд является обоснованной существующая на сегодняшний день осторожность в аспекте рассмотрения социально-психологического тренинга с точки зрения формирования черт личности. Однако, на сегодняшний доказаны изменения определенных личностных характеристик, например, снижение тревожности, излишней импульсивности и невротичности.
В отечественной психологии одна из первых, классифицировала эффекты социально-психологического тренинга Л. А. Петровская, предложив рассматривать их в соответствии с задачами тренинга и его целевой ориентаций. С точки зрения данного подхода выделено три группы эффектов: диагностические, коррекционные и
психотерапевтические -U4!. В качестве одного из критериев также рассматривается
область действия групповых процессов, относительно той сферы, в которой произошли наибольшие изменения. Наиболее часто рассматриваются изменения, в поведенческой, когнитивной или эмоциональной сфере, в сфере межличностного общения, изменения могут оцениваться с точки зрения коммуникативной, перцептивной и интерактивной стороны общения.Следует отметить, что такого ряда дифференциация, на наш взгляд, наибольшую значимость носит для удобства описания результатов тренинга в рамках эмпирических исследования, так как в реальном тренинговом процессе достаточно сложно объективно оценить происходящие с участниками изменения используя большое количество критериев. Эффективность любых тренинговых программ можно описать с точки зрения психологических, предметных и экономических критериев, однако содержательные параметры данных критериев может отличаться в зависимости от специфики тренинга. Так, например, рассмотрение повышения коммуникативной компетентности в качестве метацели, всех направлений активного социально-психологического обучения, позволяет выделить социально-психологические эффекты тренинга. Под социально-психологическими эффектами подразумеваются изменения в определенных параметрах общения, таких как коммуникация, восприятие или взаимодействие. Данные изменения, можно рассмотреть на четырех уровнях: личностном, межличностном, групповом и межгрупповом. Применительно к трем сферам
личности: эмоциональной, поведенческой, когнитивной
Трудности, которые до сих пор существуют относительно измерения психологических эффектов тренинга, касаются, прежде всего, обоснования применения тех или иных психодиагностических методик. Они связаны прежде всего не с малым выбором методов регистрации эффектов тренинга, к которым относятся наблюдение, экспертное оценивание, различные личностные опросники и анкеты, контент-анализ самоотчетов, а с удобством и временными затратами на их применение в ходе конкретных, подчас краткосрочных тренинговых программ. Большую популярность среди практикующих психологов имеют различные опросные листы, которые позволяют фиксировать мнения участников. Неоспоримым достоинством данного метода является его простота, удобство применения, а также возможность непосредственно отслеживать преимущественно эмоциональные реакции участников, особенно в случае применения в ходе отдельных
тренинговых сессий Общим недостатков большинства опросных листов является невозможность детального анализа процессов групповой динамики. В настоящий момент тестирование является самым распространенным и надежным методом измерения личностных переменных, особенно в рамках пролонгированных тренинговых программ. Однако, данный метод также имеет ряд своих ограничений. Нельзя не согласиться, с мнением Г. А. Ковалева, о том, что широко распространенная двойная регистрация данных (измерение определенны), выступает как «тренажер» и способствует стимулированию «рефлексивного» потенциала личности
Наряду с необходимостью оценки эффективности отдельных частей тренинга и различных методов активного-психологического обучения, необходимо внедрять систему мониторинга за процессами групповой динамики. Одним из вариантов, такой системы нам видится подход, позволяющий проследить динамику транскоммуникативных состояний личности. Применение транскоммуникативного подхода для оценки эффективности социально-психологического тренинга, продемонстрировало возможность рассмотрения детерминант личностных изменений его участников В диссертационном исследовании Пятковой О.А. были выявлены основные аспекты динамики транскоммуникативных состояний личности и построена многомерная картина жизни тренинговой группы, в которой отраженно индивидуальное своеобразие ее участников,
выделен новый критерий, помогающий оценить эффективность тренингового воздействия. В качестве такого критерия, выступает реверсивная динамика коммуникативного стресса в коммуникативный транс. Существенным ограничением, данного исследования является пролонгированный характер изучающегося тренингового воздействия и сложность интерпретации происходящих с участниками изменений I16!.
На основе результатов исследований, проведенных Пятковой О. А. и Кабриным В. И. нами предложена оценка стресс-трансформации личности, в рамках цикла Колба, которая происходит в процессе реализации краткосрочных тренинговых программ, которую наглядно можно представить в виде схемы (рисунок 1):
Уровни трансформации
Оценка
Индикаторы
показатели
Методы и методики
Коммуникатив
ный стресс
Принятие
проблемы
Переосмысле
ние
-»¡а
нсайт (видение выхода)
Входная оценка опыта
Рефлексия
Абстрактная концептуализация
Экспериментирование
Пс ихол о гич е ск ая готовность; показатели метода моделирования ко ммун икативных миров личности
вербальные и невербальные проявления личности в транскоммуникативной ситуации, показатели метода моделирования коммуникативных миров
- Тестовая
тр ан ско ммун икати
вная ситуация» В.
И. Кабрина;
-устный и
письменный
опрос.
Видео-запись, Экспертная оценка;
Контент-анализ дневников участников; Тестовая транс коммуникативная ситуация» В. И. Кабрина, Методы обратной связи.
Рисунок 1 - Схема оценки стресс-трансформации личности в процессе краткосрочных
тренинговых программ
На наш взгляд, данная схема позволяет упорядочить и сделать более доступным инструментом оценки и интерпретации социально-психологической эффективности тренинга на основе транскоммуникативного подхода.
Выводы
Подводя итоги, можно отметить, что в оценке эффективности тренингового воздействия, до сих пор существует множество открытых вопросов, требующих нахождения ответов в рамках научных исследований. Особенно, это касается фиксации и интерпретации личностных эффектов наиболее востребованных на сегодняшний день краткосрочных тренинговых программ. В целом выявление положительной динамики, ее устойчивость во времени, относительно заданных критериев-целей, а также отсутствие отрицательной динамики, как на уровне личности, так и на уровне организации в целом, свидетельствует о пользе и эффективности тренинга. В этом случае можно говорить о его успешности и обоснованности применения. С точки зрения практического применения социально-психологического тренинга, более востребованным является подход, который учитывает совокупность психологических, поведенческих и экономических критериев эффективности, разрабатываемый с учетом методологии, цели
специфики конкретных тренинговых программ. Библиография
1. Ахмадиева Л. Р. Оценка психологических показателей эффективности профессионального тренинга: дис. канд. психол. наук - 19.00.03 - Москва, 2005. -152 с.
2. Ахмадиева Л. Р., Ассоров Д.С. Учет индивидуальных особенностей участников тренинга как условие повышения его эффективности. //Национальный психологический журнал. 2013. № 2 (10). С. 61-68
3. Бакли Р., Кейпл. Дж. Теория и практика тренинга . - СПб.: Питер, 2002. - 352 с.
4. Большаков В. Ю. Психотренинг. Социодинамика, игры, упражнения. - СПб.: «Социально-психологический центр», 1996. - 379 с.
5. Женжеруха Р. И. Формирование социокультурной компетентности специалистов таможенных служб средствами социально-психологического тренинга: дис. канд. пед. наук. - М., 2011. - 227 с.
6. Жуков Ю. М. Тренинг как метод совершенствования коммуникативной компетентности: дис. д-ра псих. наук. -- М., 2005. - 356 с.
7. Зайцева, Т. В. Теория психологического тренинга. Психологический тренинг как инструментальное действие. - СПб.; М.: Речь; Смысл, 2002. - 80 с.
8. Кабрин В. И. Транскоммуникация: преобразование жизненных миров человека/под ред. В. И. Кабрина. Томск: Изд-во Том. ун-та, 2011. - 386 с.
9. Ковалев Г.А. Основные направления использования методов активного социально-психологического обучения в странах Запада // Психологический журнал. - 1989. -№1. - Т.10. - С.127 - 136.
10. Костина А.А., Макаров Ю.В. Различные аспекты эффективности психологических тренингов. // Известия Иркутского государственного университета. Серия: Психология. - 2014.- Т. 10. - С. 16-21
11. Куликова Т.И, Гулимова А.В. Социально-психологические тренинги в организации. - Тула, 2016. - 170 с.
12. Макаров Ю.В. Технологический подход к психологическому тренингу. // Известия Иркутского государственного университета. Серия: Психология. - 2017. -Т.19. -С.48-58.
13. Мантикова А.В. Исследование психологической эффективности тренинга коммуникативных навыков у старших подростков. // Вестник Кемеровского государственного университета. - 2015. - № 2-1 (62). - С. 130-134.
14. Петровская, Л.А. Теоретические и методические проблемы социально-психологического тренинга. - М.: Изд-во Московского ун-та, 1982. - 168 с.
15. Пеша А. В., Плутова М. И. Программы обучения и развития сотрудников: стратегия, содержание, оценка эффективности // Конкурентоспособность в глобальном мире: экономика, наука, техника. - 2017.-№ 7 (ч. 4). - С. 68-73.
16. Пяткова О.А. Динамика транскоммуникативных состояний личности в социально-психологическом тренинге. Автореф. дис. канд. психол. наук. - Томск. - 2007.
17. Селиванова Е.Ю., Коропец О.А. Эффективность использования современных систем дистанционного обучения персонала в условиях кризиса. // Human Progress. 2016. -Т. 2. № 11. - С. 4.
18. Сидоренко Е.В. Причины и формы сопротивления в тренинге. // Петербургский психологический журнал. - 2014. - № 8. - С. 54-89.
19. Чанько А.Д. Социально-психологический тренинг как метод воздействия на группу в организации: дис. канд. психол. наук. - М., 2005. - 251 с.
20. Юрченко О.А. Исследование эффективности социально-психологического тренинга драматической импровизации: дис. канд. психол. наук. - Самара: Гос. пед. ун-т, 1999. - 194 с.
21. Юстус Г.В. Развитие профессионально-личностных компетенций специалистов разных сфер деятельности с помощью краткосрочных форм обучения: тренинги и вебминары. //Крымский научный вестник. - 2015. - № 5-2. - С. 85-94.
22. Akhila Kunche, Ravi Kumar Puli, Sunitha Guniganti, Danaiah Puli, "Analysis and Evaluation of Training Effectiveness", Human Resource Management Research, - Vol.1 No1. - 2011.
23. Kirkpatrick D. L. Techniques for evaluating training programmers // Journal of the American Society of Training Directors, 1959. - Vol. 13.
24. Shayan N., AhmadiGatab T. The effectiveness of social skills training on students' levels of happiness //Procedia-Social and Behavioral Sciences. - 2012. - Т. 46.
25. Thimm J. C., Antonsen L. Effectiveness of cognitive behavioral group therapy for depression in routine practice //BMC psychiatry. - 2014. - Т. 14. - №. 1.
References (transliterated)
1. Akhmadieva L. R. Otsenka psikhologicheskikh pokazatelei effektivnosti professional'nogo treninga: dis. kand. psikhol. nauk - 19.00.03 - Moskva, 2005. - 152 s.
2. Akhmadieva L. R., Assorov D.S. Uchet individual'nykh osobennostei uchastnikov treninga kak uslovie povysheniya ego effektivnosti. //Natsional'nyi psikhologicheskii zhurnal. 2013. № 2 (10). S. 61-68
3. Bakli R., Keipl. Dzh. Teoriya i praktika treninga . - SPb.: Piter, 2002. - 352 s.
4. Bol'shakov V. Yu. Psikhotrening. Sotsiodinamika, igry, uprazhneniya. - SPb.: «Sotsial'no-psikhologicheskii tsentr», 1996. - 379 s.
5. Zhenzherukha R. I. Formirovanie sotsiokul'turnoi kompetentnosti spetsialistov tamozhennykh sluzhb sredstvami sotsial'no-psikhologicheskogo treninga: dis. kand. ped. nauk. - M., 2011. - 227 s.
6. Zhukov Yu. M. Trening kak metod sovershenstvovaniya kommunikativnoi kompetentnosti: dis. d-ra psikh. nauk. — M., 2005. - 356 s.
7. Zaitseva, T. V. Teoriya psikhologicheskogo treninga. Psikhologicheskii trening kak instrumental'noe deistvie. - SPb.; M.: Rech'; Smysl, 2002. - 80 s.
8. Kabrin V. I. Transkommunikatsiya: preobrazovanie zhiznennykh mirov cheloveka/pod red. V. I. Kabrina. Tomsk: Izd-vo Tom. un-ta, 2011. - 386 s.
9. Kovalev G.A. Osnovnye napravleniya ispol'zovaniya metodov aktivnogo sotsial'no-psikhologicheskogo obucheniya v stranakh Zapada // Psikhologicheskii zhurnal. - 1989. -№ 1. - T.10. - S.127 - 136.
10. Kostina A.A., Makarov Yu.V. Razlichnye aspekty effektivnosti psikhologicheskikh treningov. // Izvestiya Irkutskogo gosudarstvennogo universiteta. Seriya: Psikhologiya. - 2014. - T. 10. - S. 16-21
11. Kulikova T.I, Gulimova A.V. Sotsial'no-psikhologicheskie treningi v organizatsii. - Tula, 2016. - 170 s.
12. Makarov Yu.V. Tekhnologicheskii podkhod k psikhologicheskomu treningu. // Izvestiya Irkutskogo gosudarstvennogo universiteta. Seriya: Psikhologiya. - 2017. -T.19. - S.48-58.
13. Mantikova A.V. Issledovanie psikhologicheskoi effektivnosti treninga kommunikativnykh navykov u starshikh podrostkov. // Vestnik Kemerovskogo gosudarstvennogo universiteta. - 2015. - № 2-1 (62). - S. 130-134.
14. Petrovskaya, L.A. Teoreticheskie i metodicheskie problemy sotsial'no-psikhologicheskogo treninga. - M.: Izd-vo Moskovskogo un-ta, 1982. - 168 s.
15. Pesha A. V., Plutova M. I. Programmy obucheniya i razvitiya sotrudnikov: strategiya, soderzhanie, otsenka effektivnosti // Konkurentosposobnost' v global'nom mire: ekonomika, nauka, tekhnika. - 2017.-№ 7 (ch. 4). - S. 68-73.
16. Pyatkova O.A. Dinamika transkommunikativnykh sostoyanii lichnosti v sotsial'no-psikhologicheskom treninge. Avtoref. dis. kand. psikhol. nauk. - Tomsk. - 2007.
17. Selivanova E.Yu., Koropets O.A. Effektivnost' ispol'zovaniya sovremennykh sistem distantsionnogo obucheniya personala v usloviyakh krizisa. // Human Progress. 2016. -T. 2. № 11. - S. 4.
18. Sidorenko E.V. Prichiny i formy soprotivleniya v treninge. // Peterburgskii psikhologicheskii zhurnal. - 2014. - № 8. - S. 54-89.
19. Chan'ko A.D. Sotsial'no-psikhologicheskii trening kak metod vozdeistviya na gruppu v organizatsii: dis. kand. psikhol. nauk. - M., 2005. - 251 s.
20. Yurchenko O.A. Issledovanie effektivnosti sotsial'no-psikhologicheskogo treninga dramaticheskoi improvizatsii: dis. kand. psikhol. nauk. - Samara: Gos. ped. un-t, 1999. - 194 s.
21. Yustus G.V. Razvitie professional'no-lichnostnykh kompetentsii spetsialistov raznykh sfer deyatel'nosti s pomoshch'yu kratkosrochnykh form obucheniya: treningi i vebminary. //Krymskii nauchnyi vestnik. - 2015. - № 5-2. - S. 85-94.
22. Akhila Kunche, Ravi Kumar Puli, Sunitha Guniganti, Danaiah Puli, "Analysis and Evaluation of Training Effectiveness", Human Resource Management Research, - Vol.1 No1. - 2011.
23. Kirkpatrick D. L. Techniques for evaluating training programmers // Journal of the American Society of Training Directors, 1959. - Vol. 13.
24. Shayan N., AhmadiGatab T. The effectiveness of social skills training on students' levels of happiness //Procedia-Social and Behavioral Sciences. - 2012. - T. 46.
25. Thimm J. C., Antonsen L. Effectiveness of cognitive behavioral group therapy for depression in routine practice //BMC psychiatry. - 2014. - T. 14. - №. 1.
