Достоверность теста

Особой разновидностью валидности является ДОСТОВЕРНОСТЬ, которая не всегда выделяется в учебниках по психодиагностике, хотя требует специальных усилий и процедур по обеспечению. Речь идет о сознательных или бессознательных искажениях, которые вносит в тестовые результаты сам испытуемый, руководствуясь в ходе теста особой мотивацией, отличающейся от той, которая присуща ему в реальном поведении. Способность теста защищать информацию от МОТИВАЦИОННЫХ ИСКАЖЕНИЙ и есть достоверность теста. Особенно. остро проблема достоверности стоит в случае тест-опросников, которые допускают больше свободы в выборе испытуемым любого варианта ответа.

Типичный прием обеспечения достоверности — наличие в тест-опросниках ШКАЛ ЛЖИ. Эти шкалы основываются главным образом на феномене СОЦИАЛЬНОЙ ЖЕЛАТЕЛЬНОСТИ — стремлении испытуемых давать в ходе тестирования социально одобряемую информацию. Если испытуемый набрал по шкале лжи балл выше критического, то его протокол объявляется недостоверным и ему предлагается либо выполнить данный тест еще раз более откровенно, либо выполнить другой тест. Многие более специфичные «ловушки», направленные на измерение достоверности, часто входят как компонент в структуру конкретного теста, а иногда даже не подлежат разглашению как элемент «ноу-хау» (информационного изобретения) и профессиональной тайны, разделяемой разработчиками только с лицензированными пользователями методики, подписавшими особое лицензионное соглашение при приобретении теста.

Достоверность тестирования тесно связана со степенью доверительности общения, которую смог психолог установить с данным испытуемым. Здесь полезно различать две диагностические ситуации: консультативную (СИТУАЦИЯ КЛИЕНТА) и аттестационную (СИТУАЦИЯ ЭКСПЕРТИЗЫ). В первом случае испытуемый участвует в тестировании на добровольной основе и сам заинтересован получить рекомендации по результатам тестирования (как, например, в профориентационной консультации). Во втором случае тестирование проводится по инициативе педагога или администрации, психолога, родителей, т. е. других лиц, и эти другие больше заинтересованы в результатах, чем сам испытуемый.

Понятно, что в аттестационной ситуации вопрос о достоверности особенно актуален. И опросники, не снабженные шкалами лжи, использовать в таких ситуациях бесполезно. Наоборот, в ситуации клиента могут быть использованы такие методики, на которые испытуемый заведомо будет отвечать некорректно в ситуации экспертизы. Вопросы достоверности и стандартизации тесно связаны между собой. Очень часто даже объективные тесты достижений, если они проходили стандартизацию на добровольцах (в ситуации консультации), должны быть рестандартизированы для того, чтобы их использовали в аттестационной ситуации.

***

В заключение данной главы подчеркнем, что измерение психометрических характеристик теста, конечно, является прежде всего обязанностью разработчиков тестов. Но квалифицированный школьный психолог-методист с полным курсом университетского образования должен по своей подготовке уметь самостоятельно провести простейший психометрический эксперимент и пересчитать тестовые нормы, а также психометрические индексы надежности и валиднос-ти теста на своей собственной выборке (в своем регионе, обладающем определенной национально-культурной и социальной спецификой). Без этой проверки никто не может гарантировать, что тест действительно работает в данных условиях.

На сегодня подобная психометрическая работа с тестами облегчается, так как от массы рутинных вычислений специалиста освобождает компьютер. Научная фирма «Гуманитарные технологии» (МГУ) распространяет с 1993 года специализированный пакет программ ТЕСТАН (разработчик — А. Г. Шмелев) для психометрического анализа тестов. Задача пользователя такой программы — не тратить время на вычисления, а только содержательно разбираться в том, что означает тот или иной коэффициент.

О перспективах метода тестов в связи с компьютеризацией школы предстоит особый разговор в параграфе 2.6.

■

Ключевые термины: оптимальная трудность, надежность теста, ошибка измерения, ретестовая надежность, валидность теста, критерий валидное ти, прогностическая валидность, стандартизация теста, выборка стандартизации, линейная стандартизация, конверсионная таблица, репрезентативность тестовых норм, рестандартизация, критериальные нормы, достоверность теста, мо-тивационные искажения, шкалы лжи, социальная желательность, ситуация клиента, ситуация экспертизы,

Тест конструктов

Более разнообразные и гибкие техники шкалирования по сравнению с СД собраны под единым названием «ТЕСТ КОНСТРУКТОВ» (Келли, 1965). Главная специфика теста конструктов — выяснение названия для шкальных полюсов в процессе общения с испытуемым. Этот процесс может быть вполне формализован: например, в форме сравнения по тройкам, когда испытуемого просят назвать лишний объект среди тройки объектов и назвать признак, которым он отличается от двух других* Этот признак и будет «личностным конструктом», то есть персональной шкалой, предложенной (сконструированной) самим испытуемым. После того, как конструкт выделен, дальнейшая процедура может быть в принципе такой же, как в СД.

Информативны прежде всего сами названия этих конструктов и их смысл. Если подросток сравнивает известных ему молодежных эстрадных кумиров по тому, кто из них «сидит на игле», а кто «уже завя-зал», то можно не сомневаться в том, что он так или иначе вовлечен в мир наркотиков. То есть тест конструктов оказывается более изощренным и косвенным диагностическим инструментом, чем опросник, содержащий прямые, «лобовые» вопросы. Известны успешные примеры применения теста конструктов для выявления скрытых противоправных тенденций. Дело в том, что в структуре сознания противоправного подростка понятия, обозначающие мир легальных и обозначающие мир криминальных явлений, разделяются более жестко — они разнесены на противоположные полюса семантического пространства.

Для того, чтобы построить семантическое пространство по результатам теста конструктов, необходимо воспользоваться определенными компьютерными программами. В отличие от СД конструкты нельзя заранее отнести к определенным глобальным факторам, так как они просто неизвестны. Поэтому приходится подвергать эти результаты факторному анализу. Первичные данные теста конструктов имеют вид таблицы (она также называется матрицей, или решеткой): по строкам — конструкты, по столбцам — объекты, в клетках таблицы — оценки, данные испытуемым. С помощью факторного анализа из каждой такой матрицы можно выделить факторы-конструкты, объединенные между собой по смысловому сходству. На сегодня в России уже имеются специализированные программы, позволяющие быстро строить семантические пространства по конструктам. Это уже упоминавшаяся в 2.2 программа ЭКСПАН и более специализированная программа КЕЛЛИ, позволяющая производить процедуру сравнения по тройкам прямо за компьютером. Программа КЕЛЛИ также распространяется научной фирмой «Гуманитарные технологии» (название новой версии этой программы — КОНСТРУКТОР).

Психодиагностической ценностью в тесте конструктов обладает не только содержание конструктов и факторов, но и число независимых факторов (размерность семантического пространства). Как правило, оно указывает на уровень дифференцированное™, развитости системы представлений испытуемого в той области, для которой проводился тест конструктов. Многократно показано, что для тех, кто увлекается, допустим спортом, существует больше независимых, не сводимых друг к другу конструктов именно в сфере спорта, а для тех, кто увлекается компьютерами, — в этой сфере. Методику конструктов часто также называют «техникой репертуарных решеток». Имеется в виду такой прием, когда сам список однозначно названных объектов тоже не дается испытуемому, а дается только список инструкций о том, как эти объекты подбирать. Подобные инструкции и называются «репертуарными». Испытуемый, например, сам подбирает известных ему людей на роли «человека, которому можно доверять», «самого преуспевающего из знакомых», «самого неудачливого из знакомых» и т- п.

Многие психологи видят главную силу и пафос данного подхода в том, что выявление круга людей, объектов и явлений, важных для самого испытуемого, которых он описывает на своем собственном языке, позволяют получить не только ценную структурную информацию, но прежде всего дают бесценный капитал для сокращения дистанции в консультативном диалоге, так как после этого диалог идет на языке самого испытуемого о понятных ему и значимых для него вещах.

Ранжирование

Одна из многочисленных модификаций техник шкалирования представлена методиками ранжирования. В этом случае испытуемому дается перечень слов или развернутых названий объектов (либо графических стимулов), и его задачей оказывается расположить их по порядку убывания (или возрастания) какого-то признака. Наверное, самая известная реализация этой техники представлена тестом «цветовых предпочтений» Люшера, когда испытуемый раскладывает на столе 6 цветных карточек — по критерию «нравится — не нравится».

Очень часто с помощью техник шкалирования измеряется самооценка. Это методика, в частности, широко применялась знаменитым американским психотерапевтом-гуманистом К, Роджерсом. Вначале испытуемый ранжирует список качеств по тому, насколько они описывают его самого: «наблюдаются у меня — не наблюдаются у меня». Затем испытуемый ранжирует эти же качества по их выраженности у «идеального человека». Обработка результатов состоит в расчете ранговой корреляции между двумя ранжировками. Содержательная логика здесь та же, что и при сравнении семантических профилей в СД. К. Роджерс показал, что у невротизированной личности наблюдается «отвержение образа Я» — резкий контраст между идеалом и реальностью. Такая нетерпимость к себе у подростка, которому свойственна максималистская «Я-концепция», — источник внутренней конфликтности, которая нередко прорывается во внешних протяжных реакциях.

Ранжировке могут подвергаться не только словесные названия черт личности, но и графические символы. Например, в методике КИСС (Соколова, Федотова, 1982) вместо словесных обозначений используются схематические изображения разных лиц. Когда количество инструкций (проранжируй по сходству с отцом, с матерью и т. п.) увеличивается, то мы получаем опять же ранговую решетку (матрицу) конструктов, которую следует обрабатывать уже на компьютере — чтобы «вычерпать» из нее всю наиболее ценную информацию.

Поиск по сайту: