Спросить
Войти
Категория: Психология

ПСИХОМЕТРИЧЕСКИЕ СВОЙСТВА МОДИФИЦИРОВАННОЙ БАТАРЕИ ИНТЕРНАЦИОНАЛЬНОГО РЕСУРСА КОГНИТИВНЫХ СПОСОБНОСТЕЙ (ICAR)

Автор: Корнилова Татьяна Васильевна

Оригинальная статья / Original Article УДК 159.9.072, 159.923, 331.54

doi: 10.11621/npj.2019.0304

Психометрические свойства модифицированной батареи Интернационального Ресурса Когнитивных Способностей (ICAR)

Т.В. Корнилова

МГУ имени М.В. Ломоносова Москва, Россия С.А. Корнилов Институт системной биологии Сиэтл, США М.С.Зиренко

МГУ имени М.В. Ломоносова, Москва, Россия М.А. Чумакова

Национальный исследовательский университет «Высшая школа экономики» Москва, Россия

Поступила 7 сентября 2019/ Принята к публикации: 15 сентября 2019

Psychometric properties of the modified International Cognitive Ability Resource (ICAR) test battery

Tatiana V. Kornilova*

Lomonosov Moscow State University, Moscow, Russia Sergey A. Kornilov Institute for Systems Biology, Seattle, USA Maria S. Zirenko

Lomonosov Moscow State University, Moscow, Russia Maria A. Chumakova

National Research University Higher School of Economics, Moscow, Russia * Corresponding author E-mail: tvkornilova@mail.ru

Received September 7, 2019 / Accepted for publication: September 15, 2019

Актуальность работы. Возрождение в России практики интеллектуального тестирования выявляет необходимость освоения сложившихся и новых интерпретационных направлений в теоретическом понимании структур интеллекта, а также разработки некоммерческих тестов для проведения фундаментальных исследований.

Целью исследования стала апробация модифицированного теста ICAR на русскоязычных выборках, для чего апробировались два невербальных субтеста из батареи ICAR (трехмерное Вращение и матрицы) в сочетании с двумя вербальными субтеста из батареи ROADS (заменившими в модификации ICAR англоязычные шкалы). Описание хода исследования. Построение апробируемой тестовой батареи включило перевод инструкций для предъявления двух субтестов ICAR, предназначенных для диагностики флюидного интеллекта. Для диагностики вербального интеллекта в батарею включены разработанные ранее для русскоязычной популяции две субшкалы теста ROADS. Всего в интеллектуальный тест вошли 4 субтеста, как и в исходном варианте ICAR.

Участниками стали 681 чел. (из них 377 женщин) в возрасте от 17 до 59 лет (Med=23, M=25.83, SD=7.58 лет), студенты и взрослые лица с высшим образованием г. Москвы, тестировавшиеся на основе добровольного сотрудничества.

Тестирование проводилось в виде предъявления как без ограничения времени (n=284), так и с ограничением времени (n=397).

Результаты. Исследование установило приемлемые психометрические свойства модифицированной батареи ICAR и выявило бифакторную структуру батареи на российской выборке, свидетельствующую о том, что в выполнение каждого типа заданий - вербальных и невербальных - вносит вклад как общий фактор g, так и частные факторы флюидного и кристаллизованного интеллектов, выделение которых правомерно, поскольку они манифестируются в соответствующих типах заданий. Выявлено также влияние фактора ограничения времени на результативность выполнения тестовой батареи. Показано, что введение ограничения по времени приводит к размытию «g-насыщенности» невербальных субтестов и имеет последствия в контексте невозможности прямого сравнения (или даже шкалирования) получаемых баллов.

Выводы. Модифицированный русскоязычный вариант интеллектуальной батареи ICAR обладает достаточными психометрическими характеристиками, что позволяет рекомендовать его для дальнейшего применения.

Background. The emergence of the psychometric tradition In Russian psychology necessitates a thorough exploration and adoption of the International experience In the development of appropriate measurement instruments and methodologies. The goal of the present study was thus to perform a comprehensive evaluation of the International Cognitive Ability Resource (ICAR) instrument in a Russian sample. The modified ICAR instrument consisted of visuo-spatial subtests Three-dimensional Rotation, Mental Reasoning (original ICAR subtests), as well as the previously developed verbal subtests Mill-Hill verbal scale and Analogies (from the ROADS test battery).

Design. The ICAR battery was administered to n=681 individuals (377 females) in the age from 17 to 59 years (Med=23, M=25.83, SD=7.58 лет) who were either college students or adults with a college degree from the city of Moscow who volunteered for the study. The test battery was administered without (n=284) as well as with (n=397) a time limit. Results. The study demonstrated adequate psychometric properties of the modified ICAR battery, and revealed a fundamentally bifactor structure of the battery both at the level of individual items as well as at the level of subtests. Thus, individual&s performance on each item or subtest can be conceptualized as being driven by specific (e.g., fluid or verbal) as well as general (g) intelligence factors. We also show that introducing the time limit distorts the psychometric structure of the battery, lowers internal consistency, and reduces the g-saturation of the resulting scores, a finding that has important implications for the theory and practice of testing.

ISSN 2079-6617 Print | 2309-9828 Online © Lomonosov Moscow State University, 2019 © Russian Psychological Society, 2019

Для цитирования: Корнилова Т.В., Корнилов С.А., Зиренко М.С., Чумакова М.А. Психометрические свойства модифицированной батареи Интернационального Ресурса Когнитивных Способностей (ICAR) // Национальный психологический журнал. - 2019. - № 3(35). - С. 32-45. doi: 10.11621/npj.2019.0304

Введение

Разработка общедоступного инструмента - Интернационального ресурса когнитивных способностей (International Cognitive Ability Resource, ICAR) была направлена на способствование фундаментальным исследованиям интеллекта и преодоления ограничения использования коммерческих методик (Condon, Revelle, 2014) . В этом международном проекте, охватившем к моменту обобщающей

его результаты статьи около 97000 испытуемых из 199 стран, тестирование проводилось онлайн . Были получены данные относительно профилей личностных черт испытуемых, которые заполнялись ими на SAPA-project .org (ранее названным test . personality-project .org) . Для психометрической валидизации проводилось и специальное исследование данных в офф-лайн режиме (с целью контроля возможной помощи испытуемым) Интерес к этому исследовательскому проекту обусловлен

Татьяна Васильевна Корнилова доктор психологических наук, профессор, профессор кафедры общей психологии факультета психологии МГУ имени М.В. Ломоносова E-mail: tvkornilova@mail.ru https://istina.msu.rU/profile/tvkornilova@mail.ru/

Сергей Александрович Корнилов Ph.D., старший научный сотрудник Института системной биологии (Сиэтл, США) E-mail: tvkornilova@mail.ru

https://www.researchgate.net/profile/Sergey_Kornilov

Мария Сергеевна Зиренко аспирант кафедры общей психологии факультета психологии МГУ имени М.В. Ломоносова E-mail: mzirenko@inbox.ru https://istina.msu.ru/profile/mszirenko/

Мария Алексеевна Чумакова кандидат психологических наук, доцент Департамента психологии факультета социальных наук Национального исследовательского университета «Высшая школа экономики» E-mail: mchumakova@hse.ru

https://www.hse.ru/gold/cm/progress_lecturer/2018/ chumakova

его соответствием как теоретическим, так и практическим тенденциям развития современного интеллектуального тестирования. Назовем лишь некоторые особенности данного проекта:

1) различие коммерческих тестов и исследовательских батарей с точки зрения необходимых больших теоретических и временных затрат для фундаментальных исследований и акцентировании на обратной связи для коммерческих;
2) необходимость разработки общедоступного инструментария, чтобы фундаментальные исследования не ограничивались проблемами, связанными с интеллектуальной собственностью Наряду с этим нас интересовало соотношение теоретических позиций, закладываемых в интеллектуальные тесты, а также возможность интеграции российских исследований в мировую психологическую исследовательскую практику

Понимание интеллекта как когнитивной способности (интеллектуального потенциала или ментального ресурса) по измерениям которой можно выявлять межиндивидуальные различия, пришло в отечественную психологию вместе с тестами интеллекта. Разделение на вербальный и невербальный интеллекты зафиксировало различия в типах задач и соответствующих формах протекания когнитивных процессов. Частично это соотносилось с разной степенью их культурной обусловленности (культурно-исторической - в одних, средовой - в других интерпретациях) . После выделения Р. Кет-тэллом кристаллизованного и флюидного интеллектов (Cattell, 1987) первый стал вполне соответствовать «вербальному», в то время как для «флюидного» можно было предполагать две формы проявления - и вербальной, и не вербальной . Так, в исходном интеллектуальном тесте ICAR оба вида интеллекта представлены в субтесте «Словесного Рассуждения» (Verbal Reasoning, k=16 заданий), включающего разнообразие задач на логику, словарный запас и общую осведомленность

Флюидный интеллект проявляется в логике рассуждений, в гибкости и скорости мышления, в успешности приспособления к новым ситуациям, овладении новыми знаниями и структурировании

Для цитирования: Корнилова Т.В., Корнилов С.А., Зиренко М.С., Чумакова М.А. Психометрические свойства модифицированной батареи Интернационального Ресурса Когнитивных Способностей (ICAR) // Национальный психологический журнал. - 2019. - № 3(35). - С. 32-45. doi: 10.11621/npj.2019.0304

ISSN 2079-6617 Print | 2309-9828 Online © Lomonosov Moscow State University, 2019 © Russian Psychological Society, 2019

Национальный психологический журнал № 3(35) 2019 [ Когнитивная психология ]

National Psychological Journal 2019, 12(3)

http://npsyj.ru

индивидуального опыта. В тесте ICAR с ним можно связывать успешность выполнения субтеста «Трехмерного Вращения» (Three-dimensional Rotation, k=24), в котором участникам даются кубические изображения и просят определить, какой из вариантов ответа является возможным результатом вращения эталонных стимулов . Наряду с этим в батарее представлен и субтест, аналогичный прогрессивным матрицам Равена («Матрицы», Matrix Reasoning, k=11), а также субтест с последовательностями чисел и букв (Letter and Number Series, k=11) .

Вопросом остается представленность в разных типах задач единой способности, поскольку исходный анализ данных ICAR проводился в эксплораторном ключе, хоть и показал предварительную возможность выделения как частных факторов субтестов, так и стоящего за ними фактора второго порядка. Исследования также показали, что ICAR предсказывает около 20% дисперсии в самоотчетных данных успешности обучения

Новые проблемы

интеллектуального

тестирования

Апробация на русском языке тестов «Прогрессивные матрицы» Дж. Равена, WAIS Д. Векслера, ROADS Р. Стернберга, AST Р. Амтхауэра и ряда других позволила возродить в 1990-е гг. в России практику интеллектуального тестирования Но нельзя сказать, что это привело к существенному продвижению в его методологии При разработке в отечественной психологии новых теоретических интерпретаций - структурно-динамической теории (Ушаков, 2003), ментальных репрезентаций (Холодная, 1997) - в исследовательских работах продолжают сосуществовать разные подходы, диктуемые выбором конкретного теста При этом, с одной стороны, принимаются заложенные в инструментарии классификации видов интеллекта: единого фактора g и групповых факторов Ч . Спирмена; дихотомии кристаллизованного и флюидного интеллекта в подходе Р. Кеттэлла; триархического интеллекта - аналитического (академического), практического интеллекта и креативности в подходе

Р. Стернберга и т.д. При этом российские исследователи оставляют без должного внимания изменения в интерпретационном поле применительно к используемым тестам

Авторы статьи, обосновывающие введение дихотомии «холодных» и «горячих» видов интеллекта, считают необходимым «осторожное обновление» систематизации способностей (Schneider et al . , 2016) . Это обусловлено не только развитием конструктов эмоционального и личностного интеллекта, представленных сегодня моделями когнитивных способностей и смешанными, включающими личностные черты (Salovey, Mayer, 1990; Mayer, 2014; Mayer et al., 2016; и др.), что расширяет представления о множественных видах интеллекта (Гарднер, 2007), однако не как «первичных» - специальных способностей, предполагавшихся Л. Терстоу-ном (Thurstone, 1938) . Факторно-аналитические исследования Вернона, Гилфорда, Френча и Экстрома, Кеттелла и Хорна и многих других продемонстрировали, что первичные способности Терстоуня обоснованно оспаривается (Низбетт, 2013) ■ Продолжают изменяться представления об интеллекте как общей способности и так называемых широких способностях, выступающих в качестве дискретных функций разума с широким полем применения Хотя оценка генерального фактора g появляется практически в каждом наборе данных о когнитивных способностях (Carroll, 1993; Jensen, 1998), групповые факторы стали появляться сразу. И Спир-мен даже обсудил их в своей основополагающей работе «Способности человека: их природа и измерение» (Spearman, 1927) .

За рубежом к 90-м гг. ХХ века наиболее обсуждаемой стала теория, получившая название модель Кетэлла-Хорна-Кэрол-ла В ней было представлено уже 70 узких и 16 широких способностей Эта модель, ставшая необычайно популярной, соединила идеи подразделения интеллекта на кристаллизованный и флюидный -Gf-Gc (Cattell, 1987; Horn, Blankson, 2005; Horn, Cattell, 1966) - с теорией трехуровневых когнитивных способностей - Three Stratum Theory of Cognitive Abilities (Carroll,

Понимание интеллекта как когнитивной способности (интеллектуального потенциала или ментального ресурса) по измерениям которой можно выявлять межиндивидуальные различия, пришло в отечественную психологию вместе с тестами интеллекта. Разделение на вербальный и невербальный интеллекты зафиксировало различия в типах задач и соответствующих формах протекания когнитивных процессов

на вовсе не были первичными . Каждая из них могла быть разбита на еще более узкие способности . Дело в другом - во введении иных представлений о системных связях разных видов интеллекта с другими когнициями . Так, флюидное рассуждение оказывается в значимых связях с процессами рабочей памяти, эмоционального интеллекта (ЭИ) и понимания . Сам же ЭИ связан с разными процессами зрительной и слуховой переработки информации, скоростью обработки и т.д. (Schneider et al ., 2016) и выступает в связях как с академическим интеллектом, так и с личностными свойствами регуляции когнитивных стратегий (Красавцева, Корнилова, 2018; Корнилова, 2016) .

Следует отметить и изменения в понимании самих когнитивных способностей Так, невербальный характер заданий в матрицах Равена создал впечатление его культурной независимости, что сегод1993) ■ Сегодня она подвергается необычайно яркой критике, которой, в частности, посвящен специальный выпуск «The Evolution of Cognitive Ability Tests and Score Interprétation» в 3-м выпуске (2019) журнала «Applied Measurement in Education». Кэрролл полагал, что имеются существенные доказательства для психологического выделения g, а Хорн и Кеттэлл были в равной степени убеждены, что психометрический g не представляет собой истинную психологическую конструкцию. Именно теоретические разногласия в исходных методологиях и двух соединенных в одну модель теорий интеллекта препятствуют практическому использованию этой теории и, как образно выразились Кэнивез и Юнгстром (Canivez, Youngstrom, 2019), «обрекают на неудачу этот брак» .

В последние годы большое внимание в зарубежной литературе получила разработка понимания генерального фактора

ISSN 2079-6617 Print | 2309-9828 Online © Lomonosov Moscow State University, 2019 © Russian Psychological Society, 2019

Для цитирования: Корнилова Т.В., Корнилов С.А., Зиренко М.С., Чумакова М.А. Психометрические свойства модифицированной батареи Интернационального Ресурса Когнитивных Способностей (ICAR) // Национальный психологический журнал. - 2019. - № 3(35). - С. 32-45. doi: 10.11621/npj.2019.0304

g в теории перекрывающихся процессов (process overlap theory), согласно которой когнитивные тесты позволяют диагностировать доменно-неспецифичные управляющие процессы, выявленные в основном в исследованиях рабочей памяти, а также более доменно-специфические процессы (Kovacs, Conway, 2016) . Управляющие процессы, согласно этому подходу, заловного мозга (Takagi, Hirayama, Tanaka, 2018; Dubois, Galdi, Paul, Adolphs, 2018) . А недавний структурный мета-анализ данных, полученных при использовании 31 тестовой батареи на материале общей выборки в более чем 1,5 миллиона человек показал, что в 90% случаев оптимальные уровни пригодности данных показывает тн . бифакторная модель (Reise, 2012),

В последние годы большое внимание в зарубежной литературе получила разработка понимания генерального фактора g в теории перекрывающихся процессов (process overlap theory), согласно которой когнитивные тесты позволяют диагностировать доменно-неспецифичные управляющие процессы, выявленные в основном в исследованиях рабочей памяти, а также более доменно-специфические

действованы в разных когнитивных тестах таким образом, что они затребованы более часто, чем доменно-специфичные процессы . Согласно этой теории, g не является единой константой, стоящей за выполнением различных тестовых батарей различными выборками испытуемых и в различных условиях. По замечанию МакГрея и Шнейдера (Schneider, McGrew, 2019), теория перекрывающихся процессов как бы выступает в роли вышестоящей категории, так же, как «христианство» описывает группу очень похожих религиозных традиций, которые местами могут иметь резкие теологические различия

в которой индивидуальные субтесты имеют нагрузки как на соответствующие частные факторы способностей, так и на общий фактор g (Систа Ву1е, 2017), который концептуализируется как ортогональный по отношению к частным факторам. А Божан (Веацеап, 2016) отмечает, что бифакторная модель соответствует исходным представлениям Кэрролла об общем интеллекте в не меньшей степени, чем иерархические модели

Отметим, что в отечественной психологии Д.В. Ушаковым в его структурно-динамическом подходе обосновано иное понимание общего фактора g. «Он

При разработке интеллектуального теста ICAR в него была заложена модель, предполагающая возможность иерархического выделения как единого фактора g, так и первичных факторов, соответствующих типам заданий, которые в свою очередь представляли два варианта невербальных и два варианта вербальных субтестов

Л. Готтфредсон (Gottfredson, 2016) отмечает, что, несмотря на критику g как неконстантного и неуловимого конструкта, исходные посылки теории перекрывающихся процессов и современные данные, на которых она основана (в контексте рассмотрения экспериментальных и нейробиологических исследований), поддерживают, но не противоречат теоретическим позициям защитников g как одного не только из самых широко подкрепленных, но и практически значимых конструктов в психологии

Так, в нейроимиджинговых исследованиях g выступает как значимый коррелят неспецифических функциональных состояний (паттернов коннективности) гостоит за корреляциями, которые связывают между собой решение задач, использующих совершенно различные наборы когнитивных процессов» (Валуева и др ., 2017, С . 495) . Другая важная идея - интеллектуального потенциала - заложена в обосновании того, что генеральный фактор имеет иное происхождение, чем широкие или узкие способности Он свидетельствует о культурной обусловленности интеллекта в том смысле, что в разных обществах к человеку предъявляются разные требования, и повышение ценности какой-либо интеллектуальной функции вызывает встречную активность по ее развитию, а тем самым увеличение ее нагрузки по

генеральному фактору. Это принципиально отличает этот подход от «ресурсных» подходов (Холодная, 1997 и др .) .

Не продолжая обзор современных изменений в соотнесении моделей интеллекта, представим интеллектуальную батарею ICAR, которая позволяет выделять как общий фактор, так и доменно-специфи-ческие (связанные с типом заданий), хотя сами авторы не указывают, какой именно теоретической позиции они следуют

При разработке интеллектуального теста ICAR в него была заложена модель, предполагающая возможность иерархического выделения как единого фактора g, так и первичных факторов, соответствующих типам заданий, которые, в свою очередь, представляли два варианта невербальных и два варианта вербальных субтестов Соответствующие невербальные субтесты традиционно рассматриваются как предоставляющие показатель флюидного интеллекта Разработчики рассматривают субтесты, не суммируя показатели по вербальным и невербальным шкалам, но приводят среднее для удельного веса правильно решенных задач по двум невербальным тестам

Время в их основном «Исследовании 1» не ограничивалось, и испытуемые получали от 12 до 16 пунктов из 60 (поровну для всех субтестов). Авторы (Condon, Revelle, 2014) показали соответствие факторной структуры тестовой батареи из 60 пунктов, с одной стороны, предполагавшимся четырем сильно коррелирующим факторам, соответствующим каждому из четырех типов тестовых заданий, а с другой, возможности выделения единого фактора g на основе процедур вторичной факторизации Шмида-Леймана. Внутренняя согласованность оказалась высокой для заданий на Трехмерное Вращение и «едва адекватной» для пунктов Матриц Рассуждения Это, по их мнению, свидетельствует о том, что пункты Трехмерного Вращения измеряют единый латентный конструкт, что спорно для заданий по Матрицам Таким образом, для двух типов невербальных заданий можно говорить о правомерности использования разного методического инструментария Далее они продемонстрировали

Для цитирования: Корнилова Т.В., Корнилов С.А., Зиренко М.С., Чумакова М.А. Психометрические свойства модифицированной батареи Интернационального Ресурса Когнитивных Способностей (ICAR) // Национальный психологический журнал. - 2019. - № 3(35). - С. 32-45. doi: 10.11621/npj.2019.0304

ISSN 2079-6617 Print | 2309-9828 Online © Lomonosov Moscow State University, 2019 © Russian Psychological Society, 2019

Национальный психологический журнал № 3(35) 2019 [ Когнитивная психология ]

National Psychological Journal 2019, 12(3)

http://npsyj.ru

схожесть результатов IRT-анализа для 16-пунктного образца теста ICAR (с выбором по 4 пункта на каждый фактор)

В «Исследовании 2» оценивались корреляции между баллами ICAR и баллами по аттестационным тестам и опубликованными рейтингами средних баллов по специальностям в университете Скорректированные корреляции между баллами аттестационных тестов и 16- и 60-пункт-ными вариантами теста ICAR получены в диапазоне от 0,52 до 0,59 (р ^ 0,016) .

Целью «Исследования 3» была оценка конструктной валидности заданий ICAR в сравнении с коммерческими измерениями когнитивных способностей В этом случае тест в оффлайн- режиме проходили 137 студентов университета. Корреляции, в частности, с Тестом для Вандер-лика (Wonderlic) составили 0 .60 и 0 .64 для разных версий ICAR, 0 .77 и 0 .72 - с баллами IQ для Сокращенной Шкалы Интеллекта Векслера (WASI) у взрослой выборки и 0 .86 и 0 .85 для Полной Шкалы Интеллекта Взрослых Векслера

В заключение делается общий вывод о том, что общедоступные методы измерения когнитивных способностей обладают весомым потенциалом, а также являются достойным фундаментом для сотрудничества с теми, кого интересует обогащение существующих или новые разработки общедоступных инструментов

Целью нашего исследования стала апробация модифицированной батареи ICAR на русскоязычных выборках При этом для диагностики вербального интеллекта вместо исходных англоязычных были включены два субтеста, разработанные ранее для русскоязычной популяции в рамках адаптации интеллектуальной батареи ROADS и показавшие значимую предсказательную способность в отношении академических достижений студентов (Корнилов, Григоренко, 2010; Sternberg, 2006) Субтесты Трехмерное Вращение и Матрицы были взяты в исходном для ICAR варианте

Основными задачами исследования выступили:

а) пробация этих невербальных субтестов и установление их психометрических свойств;

б) построение факторной модели, репрезентирующей структуру модифицированного варианта интеллектуальной

тестовой батареи в единстве вербальных и невербальных субтестов; в) установление эффекта ограничения времени при выполнении тестовой батареи на ее психометрические свойства и структуру

Ход исследования

Участники исследования

После удаления результатов испытуемых, не справившихся ни с одним заданием и выявленных с помощью оценки многомерных расстояний Махаланобиса многомерных аутлаеров (multivariate outliers), величина выборки составила n=681 чел . (из них 377 жен . и 304 муж.) в возрасте от 17 до 59 лет, Med=23 и средним по возрасту 25.83 лет (SD=7.58). Это были студенты и взрослые лица с высшим образованием из г. Москвы, тестировавшиеся на основе добровольного сотрудничества

Методики исследования

1. Невербальный интеллект тестировался с помощью двух субтестов из методики ICAR (International Cognitive Ability Resource) (Condon, Revelle, 2014) . Первый субтест содержит 24 трехмерные фигуры на Вращение (субтест Вращение), второй - 11 матриц (субтест Матрицы). Трехмерные фигуры на Вращение представляют собой кубы. Участникам исследования предлагают определить, какой из 6 предложенных вариантов ответа является возможным Вращением представленного куба, также есть варианты ответа «Ни один из кубиков не подходит» и «Я не знаю ответ». Субтест Матрицы является аналогичным прогрессивным матрицам Равена (Raven, 1989; Равен и др., 2012) . Стимулы представлены в виде геометрических фигур 3 х 3 элементов с одним из девяти отсутствующих элементов Респонденты должны идентифицировать, какой из шести предложенных элементов наилучшим образом завершит фигуру Тестовый балл, интерпретируемый далее как показатель зрительно-пространственного и, в данном случае, флюидного интеллекта, получается в результате усреднения равно-взвешенных данных поэтим двум субтестам
2 . Вербальный интеллект диагностировался с помощью двух субтестов, разработанных ранее в рамках апробации теста ROADS (Корнилов, Григоренко, 2010) . Первый субтест является аналогом теста Милл-Хилл (далее шкала МХ) и включает 34 задачи на определение среди шести предложенных слов наиболее близкого по значению к заданному слову Второй субтест - Аналогии -включает 30 задач на установление отношений синонимы/антонимы между парами слов (там же). Балл по вербальному интеллекту получается в результате суммирования равновзве-шенных баллов по этим субтестам

Обработка результатов.

Сырые баллы по субтестам были стандартизированы, усреднены и трансформированы в IQ-шкалу. Для групповых данных, как и в исходном варианте ICAR, нами подсчитывались средние значения доли тех участников, которые правильно ответили на определенное задание, относительно общего количества участников, которым предъявлялся тот же пункт.

Для установления надежности использовался как классический коэффициент внутренней согласованности заданий а Кронбаха, так и набирающий в современной психометрической литературе популярность коэффициент roh Мак-Дональда, отражающий «насыщенность» изучаемых блоков заданий общим фактором (Zinbarg et al ., 2005) при точном учете иерархической структуры теста через вторичную факторизацию матрицы корреляций между выделенными в эксплора-торном факторном анализе значениями облических факторов (McDonald, 1999) • Использование этого коэффициента в современных исследованиях отражает переход к основанным на моделях (modelbased) показателям надежности тестов, и аналитические исследования убедительно показывают более высокую точность (как числовую, так и интерпретационную) коэффициента МакДональда (Zinbarg et al., 2005) . Анализ проводился в программном пакете psych для R

Анализ факторной структуры проводился в двух контекстах Во-первых, адаптированные зрительно-пространственные субтесты анализовались на уровне отдельных заданий при помоISSN 2079-6617 Print | 2309-9828 Online © Lomonosov Moscow State University, 2019 © Russian Psychological Society, 2019

Для цитирования: Корнилова Т.В., Корнилов С.А., Зиренко М.С., Чумакова М.А. Психометрические свойства модифицированной батареи Интернационального Ресурса Когнитивных Способностей (ICAR) // Национальный психологический журнал. - 2019. - № 3(35). - С. 32-45. doi: 10.11621/npj.2019.0304

Таблица 1. Психометрические свойства зрительно-пространственных шкал ICAR и вербальных шкал ROADS

Временное ограничение- Временное ограничение+

Субтест а wh ECV a wh ECV

Вращение 0.94 0.80 74% 0.90 0.67 58%

Матрицы 0.68 0.44 37% 0.55 0.44 34%

Шкала МХ 0.79 0.51 45% 0.79 0.55 49%

Аналогии 0.65 0.32 29% 0.56 0.20 16%

Вращение+Матрицы (д0 0.92 0.74 66% 0.86 0.54 47%

Шкала МХ + Аналогии (дс) 0.84 0.48 37% 0.80 0.53 39%

Все 4 субтеста(д) 0.91 0.45 26% 0.80 0.41 18%

Примечание: а - коэффициент внутренней согласованности альфа Кронбаха. wh - коэффициент надежности омега Макдональда. ECV- % общей дисперсии, объясняемый генеральным фактором.

Table 1. Psychometric properties of ICAR visual spatial scales and ROADS verbal scales.

Temporary restriction - Temporary restriction +

Subtest а wh ECV a wh ECV

Rotation 0.94 0.80 74% 0.90 0.67 58%

Matrices 0.68 0.44 37% 0.55 0.44 34%

MX Scale 0.79 0.51 45% 0.79 0.55 49%

Analogies 0.65 0.32 29% 0.56 0.20 16%

Rotation + Matrices (gf) 0.92 0.74 66% 0.86 0.54 47%

Scale MX + Analogies (gc) 0.84 0.48 37% 0.80 0.53 39%

All subtests (g) 0.91 0.45 26% 0.80 0.41 18%

NB: a - Cronbach alpha coefficient of internal consistency. wh is the reliability coefficient of MacDonald omega. ECV is the percentage of the total variance due to the general factor.

Таблица 2. Психометрические свойства отдельных заданий зрительно-пространственных субтестов ICAR

Временное Ограничение - Временное Ограничение+ Временное Ограничение - Временное Ограничение +

Субтест Задание M pBis M pBis Gf GS1 GS2 Gf GS1 GS2

Вращение R3D.01 0.25 0.57 0.16 0.40 0.75 0.25 - 0.57 -0.39 R3D.02 0.11 -0.25 0.15 -0.24 -0.45 -0.24 - -0.46 0.24 R3D.03 0.06 -0.24 0.07 -0.24 -0.54 -0.32 - -0.66 0.40 R3D.04 0.46 0.71 0.45 0.45 0.84 0.23 - 0.63 -0.36 R3D.05 0.48 0.65 0.41 0.53 0.68 0.49 - 0.52 -0.55 R3D.06 0.56 0.65 0.54 0.53 0.65 0.56 - 0.48 -0.58 R3D.07 0.44 0.66 0.37 0.53 0.93 -0.08 - 0.78 -0.40 R3D.08 0.50 0.73 0.38 0.51 0.81 0.40 - 0.56 -0.48 R3D.09 0.56 0.65 0.50 0.56 0.72 0.47 - 0.59 -0.56 R3D.10 0.41 0.68 0.31 0.57 0.73 0.43 - 0.50 -0.59 R3D.11 0.35 0.67 0.24 0.54 0.74 0.48 - 0.61 -0.52 R3D.12 0.41 0.69 0.35 0.60 0.81 0.29 - 0.50 -0.63 R3D.13 0.33 0.68 0.23 0.54 0.82 0.25 - 0.58 -0.53 R3D.14 0.48 0.67 0.40 0.52 0.93 -0.06 - 0.52 -0.53 R3D.15 0.49 0.70 0.40 0.61 0.85 0.20 - 0.40 -0.71 R3D.16 0.57 0.60 0.48 0.56 0.65 0.45 - 0.23 -0.76 R3D.17 0.48 0.74 0.39 0.59 0.83 0.31 - 0.33 -0.74 R3D.18 0.06 -0.29 0.07 -0.22 -0.87 0.07 - -0.44 0.39 R3D.19 0.52 0.64 0.39 0.57 0.89 -0.05 - 0.26 -0.76 R3D.20 0.62 0.63 0.47 0.49 0.68 0.53 - -0.10 -0.87 R3D.21 0.32 0.66 0.18 0.47 0.81 0.30 - 0.14 -0.72 R3D.22 0.60 0.62 0.37 0.46 0.64 0.57 - -0.19 -0.85 R3D.23 0.43 0.47 0.29 0.40 0.46 0.50 - -0.18 -0.75 R3D.24 0.45 0.64 0.31 0.60 0.67 0.42 - 0.01 -0.90 Матрицы MR.43 0.86 0.37 0.85 0.16 0.28 - 0.60 0.05 - 0.29

щи многомерной теории тестовых заданий (multidimensional item response theory, MIRT) (Chalmers, 2012) в рамках т.н . 2PL (двухпараметрической модели), предполагающей одновременное моделирование вероятности правильного ответа на задание через сложность задания и его дискриминативность, а также через параметры способностей индивидов, прошедших тестирование. Анализ проводился в программном пакете mirt для R (Chalmers, 2012) .

Во-вторых, анализ структуры расширенной батареи проводился на уровне субтестов в рамках конфирматорного факторного анализа Так, для получения наблюдаемых переменных, были суммированы значения правильности выполнения отдельно четных и нечетных заданий, формируя 8 индикаторов Такой подход представляет собой пример т н парцелляции (parcellation) индикаторов для кон-фирматорного факторного анализа при необходимости снижения размерности моделируемых данных, в сравнении с анализом на уровне отдельных пунктов Кон-фирматорный факторный анализ проводился в программных пакетах lavaan и semTools для R (Rosseel, 2012) .

Анализ влияния демографических показателей и фактора ограничения времени на результативность выполнения заданий ICAR проводился с применением т.н . устойчивой (robust) регрессии в пакете robustbase для R Устойчивые методы позволяют получать более точные оценки моделируемых параметров, в сравнении с методами OLS регрессии, через учет индивидуальных «весов» испытуемых в контексте нарушения одно- или многомерной нормальности данных, что является частым случаем в психологии (Koller, Stahel, 2011) .

Результаты исследования

Психометрические показатели заданий и субтестов

В таблице 1 представлены коэффициенты внутренней согласованности и надежности данных по всем 4-м субтестам и при варьировании ограничения времени выполнения заданий . Нами были выявлены приемлемые показатели внутренней согласованности заданий

Для цитирования: Корнилова Т.В., Корнилов С.А., Зиренко М.С., Чумакова М.А. Психометрические свойства модифицированной батареи Интернационального Ресурса Когнитивных Способностей (ICAR) // Национальный психологический журнал. - 2019. - № 3(35). - С. 32-45. doi: 10.11621/npj.2019.0304

ISSN 2079-6617 Print | 2309-9828 Online © Lomonosov Moscow State University, 2019 © Russian Psychological Society, 2019

Национальный психологический журнал № 3(35) 2019 [ Когнитивная психология ]

National Psychological Journal 2019, 12(3)

http://npsyj.ru

как зрительно-пространственных субтестов, так и вербальных субтестов расширенной батареи КЖ Отметим, что введение ограничения по времени привело к небольшому снижению показателей надежности получаемых баллов, что можно связывать со снижением g-на-сыщенности субтестов в соответствии с интерпретацией показетелей Е^ -процента дисперсии, объясняемой общим фактором

Анализ вклада демографических показателей в успешность выполнения заданий 1СМ показывают, что возраст (В=0 .14, SE=0 .11, р=0 .199), пол (В=-0 .10, SE=1Л9, р=0.935), и их взаимодействие (В=-0 .21, SE=0 .16, р=0 .173) объясняют 0% дисперсии в получаемых показателях флюидного интеллекта, тогда как введение ограничения времени связано со снижением баллов на -7 .35 = 1.58, р < 0.0001) баллов в шкале объясняя 3 -39% дисперсии в выборке . Нами было установлено, что кристаллизованный вербальный интеллект показывает другие закономерности в отношении демографических показателей: возраст положительно связан с кристаллизованным интеллектом (В=0 . 91, SE=0.20, р<0.0001), а мужчины демонстрируют более низкие показатели, чем женщины (В=-10 .55, SE=1.77, р<0.0001) . В то же время, введение ограничения времени связано с общим снижением баллов (В=-13 .56, SE=1.52, р<0.0001) для женщин, и статистически значимо меньшим снижением (на 8 55 баллов) для мужчин (что отражено в значимом взаимодействии между фактором пола и времени, В=8. 55, SE=2 .31, р<0.0001) . Демографические показатели объясняют 14 5% дисперсии в показателях кристаллизованного интеллекта и до 24 -3% - в сочетании с фактором ограничения времени

В таблице 2 приведены показатели сложности отдельных заданий и факторные нагрузки заданий на выделенный общий фактор и два специфичных фактора ^1, GS2 для вербального и невербального интеллекта) при использовании подхода МШТ. Отметим, что три зрительно-пространственных задания 1СМ показали отрицательные коэффициенты корреляции с общим баллом по субтесту Вращение, что говорит о возможности доMR.44 0.73 0.29 0.75 0.18 0.08 - 0.50 0.36 - 0.21

MR.45 0.74 0.32 0.70 0.21 0.25 - 0.47 0.36 - 0.20

MR.46 0.70 0.37 0.66 0.22 0.24 - 0.56 0.24 - 0.26

MR.47 0.76 0.28 0.73 0.22 0.40 - 0.35 0.32 - 0.34

MR.48 0.69 0.37 0.72 0.18 0.08 - 0.61 0.06 - 0.32

MR.50 0.43 0.23 0.39 0.27 0.31 - 0.26 0.07 - 0.40

MR.53 0.75 0.36 0.66 0.35 0.34 - 0.46 0.10 - 0.62

MR.54 0.43 0.16 0.42 0.21 -0.02 - 0.29 -0.08 - 0.42

MR.55 0.54 0.42 0.35 0.31 0.31 - 0.59 -0.06 - 0.69

MR.56 0.55 0.38 0.40 0.24 0.13 - 0.58 -0.23 - 0.62

Примечание: Идентификаторы заданий приведены в соответствии с исходной номенклатурой ICAR. М - сложность задания (% правильных ответов). pBis - точечно-бисериальный коэффициент корреляции между заданием и общим баллом шкалы. Gf - стандартизованная факторная нагрузка задания (общий фактор). GS1, GS2 - стандартизованная факторная нагрузка задания (субтест-специфичные факторы).

Table 2. Psychometric properties of individual tasks of visual and ICAR spatial subtests

Temporary restriction - Temporary restriction + Temporary restriction - Temporary restriction +

Subtest Task M pBis M pBis Gf GS1 GS2 Gf GS1 GS2

Rotation R3D.01 0.25 0.57 0.16 0.40 0.75 0.25 - 0.57 -0.39 R3D.02 0.11 -0.25 0.15 -0.24 -0.45 -0.24 - -0.46 0.24 R3D.03 0.06 -0.24 0.07 -0.24 -0.54 -0.32 - -0.66 0.40 R3D.04 0.46 0.71 0.45 0.45 0.84 0.23 - 0.63 -0.36 R3D.05 0.48 0.65 0.41 0.53 0.68 0.49 - 0.52 -0.55 R3D.06 0.56 0.65 0.54 0.53 0.65 0.56 - 0.48 -0.58 R3D.07 0.44 0.66 0.37 0.53 0.93 -0.08 - 0.78 -0.40 R3D.08 0.50 0.73 0.38 0.51 0.81 0.40 - 0.56 -0.48 R3D.09 0.56 0.65 0.50 0.56 0.72 0.47 - 0.59 -0.56 R3D.10 0.41 0.68 0.31 0.57 0.73 0.43 - 0.50 -0.59 R3D.11 0.35 0.67 0.24 0.54 0.74 0.48 - 0.61 -0.52 R3D.12 0.41 0.69 0.35 0.60 0.81 0.29 - 0.50 -0.63 R3D.13 0.33 0.68 0.23 0.54 0.82 0.25 - 0.58 -0.53 R3D.14 0.48 0.67 0.40 0.52 0.93 -0.06 - 0.52 -0.53 R3D.15 0.49 0.70 0.40 0.61 0.85 0.20 - 0.40 -0.71 R3D.16 0.57 0.60 0.48 0.56 0.65 0.45 - 0.23 -0.76 R3D.17 0.48 0.74 0.39 0.59 0.83 0.31 - 0.33 -0.74 R3D.18 0.06 -0.29 0.07 -0.22 -0.87 0.07 - -0.44 0.39 R3D.19 0.52 0.64 0.39 0.57 0.89 -0.05 - 0.26 -0.76 R3D.20 0.62 0.63 0.47 0.49 0.68 0.53 - -0.10 -0.87 R3D.21 0.32 0.66 0.18 0.47 0.81 0.30 - 0.14 -0.72 R3D.22 0.60 0.62 0.37 0.46 0.64 0.57 - -0.19 -0.85 R3D.23 0.43 0.47 0.29 0.40 0.46 0.50 - -0.18 -0.75 R3D.24 0.45 0.64 0.31 0.60 0.67 0.42 - 0.01 -0.90 Matrices MR.43 0.86 0.37 0.85 0.16 0.28 - 0.60 0.05 - 0.29

MR.44 0.73 0.29 0.75 0.18 0.08 - 0.50 0.36 - 0.21

MR.45 0.74 0.32 0.70 0.21 0.25 - 0.47 0.36 - 0.20

MR.46 0.70 0.37 0.66 0.22 0.24 - 0.56 0.24 - 0.26

MR.47 0.76 0.28 0.73 0.22 0.40 - 0.35 0.32 - 0.34

MR.48 0.69 0.37 0.72 0.18 0.08 - 0.61 0.06 - 0.32

MR.50 0.43 0.23 0.39 0.27 0.31 - 0.26 0.07 - 0.40

MR.53 0.75 0.36 0.66 0.35 0.34 - 0.46 0.10 - 0.62

MR.54 0.43 0.16 0.42 0.21 -0.02 - 0.29 -0.08 - 0.42

MR.55 0.54 0.42 0.35 0.31 0.31 - 0.59 -0.06 - 0.69

MR.56 0.55 0.38 0.40 0.24 0.13 - 0.58 -0.23 - 0.62

NB: Task IDs are in accordance with the original ICAR nomenclature. M is task complexity (% of correct answers). pBis is the point-biserial correlation coefficient between the task and the total scale score. Gf is standardized factor load of the task (common factor). GSI, GS2 are standardized factor load indicators (subtest-specific factors).

ISSN 2079-6617 Print | 2309-9828 Online © Lomonosov Moscow State University, 2019 © Russian Psychological Society, 2019

Для цитирования: Корнилова Т.В., Корнилов С.А., Зиренко М.С., Чумакова М.А. Психометрические свойства модифицированной батареи Интернационального Ресурса Когнитивных Способностей (ICAR) // Национальный психологический журнал. - 2019. - № 3(35). - С. 32-45. doi: 10.11621/npj.2019.0304

полнительных модификаций субтестов в дальнейших исследованиях.

Факторная структура батареи ICAR на российской выборке

Факторная структура батареи ICAR была проанализирована как на уровне отдельных заданий зрительно-пространственного блока, так и на материале парцеллированых значений по субтестам для всей батареи в целом . Графически модели для расширенной батареи представлены на рисунке 1 В обоих случаях сравнивались следующие модели Модель М1 предполагала наличие одного фактора за выполнением всех заданий или субтестов М2 предполагала наличие двух ортогональных факторов (на уровне отдельных заданий - факторы субтестов Матрицы и Вращение, на уровне субтестов - факторов флюидного и кристаллизованного интеллекта) М3 включила оценку п

КОГНИТИВНЫЕ СПОСОБНОСТИ ИНТЕЛЛЕКТ ФЛЮИДНЫЙ ИНТЕЛЛЕКТ МОДЕЛЬ КЕТТЭЛЛА-ХОРНА-КЭРОЛЛА ИНТЕРНАЦИОНАЛЬНЫЙ РЕСУРС КОГНИТИВНЫХ СПОСОБНОСТЕЙ icar cognitive ability intelligence cattell-horn-carroll theory international cognitive ability resource
Другие работы в данной теме:
Контакты
Обратная связь
support@uchimsya.com
Учимся
Общая информация
Разделы
Тесты