Требование, предъявляемые к психодиагностическим методикам

Для того чтобы психолого-педагогический эксперимент был достаточно надежным средством исследования и позволял по­лучать вполне достоверные результаты, которым можно доверять и на основе которых можно делать правильные практические выводы, необходимо, чтобы используемые в нем психодиагностические методы были научно обоснованными, Такими считают методы, отвечающие следующим требованиям: валидность, надежность, однозначность и точность. Рассмотрим каждое из этих требований в отдельности.

Термин «валидность» — евроязычного происхождения. Он буквально означает: «полноценный», «пригодный», «соответствующий». Характеристика психодиагностической методики как валидной свидетельствует о ее соответствии и пригодности для оценивания именно того психологического качества, для которого она предназначается.

Характеристика валидности методики включает в себя не только сведения о том, что данная методика на самом деле измеряет, но также информацию об условиях, о сфере ее применения.

Есть несколько разновидностей валидности, каждую из которых следует рассматривать и оценивать отдельно, когда стоит вопрос о выяснении валидности психодиагностической методики. Валидность может быть теоретической и практической (эмпирической), внутренней и внешней.

Валидность теоретическая определяется по соответствию показателей исследуемого качества, получаемых с помощью данной методики, показателям, получаемым посредством других методик — таких, с показателями которых должна существовать теоретически обоснованная зависимость. Теоретическую валидность проверяют по корреляциям показателей одного и того же свойства, получаемым при помощи разных методик, опирающих­ся или исходящих из одной и той же теории.

Валидность эмпирическая проверяется по соответствию диа­гностических показателей реальному поведению, наблюдаемым действиям и реакциям испытуемого. Если, например, с помощью некоторой методики мы оцениваем черты характера у данного испытуемого, то применяемая методика будет считаться прак­тически или эмпирически валидной тогда, когда мы установим, что данный человек ведет себя в жизни именно так, как предска­зывает методика, т.е. в соответствии с имеющейся у него чертой характера.

По критерию эмпирической валидности методику проверяют путем сравнения ее показателей с реальным жизненным поведением или результатами практической деятельности людей.

Валидностъ внутренняя означает соответствие содержащихся в методике заданий, субтестов, суждений и т.п. общей цели и замыслу методики в целом. Она считается внутренне невалидной или недостаточно внутренне валидной тогда, когда все или часть включенных в нее вопросов, заданий или субтестов измеряют не то, что требуется от данной методики.

Валидность внешняя — это примерно то же самое, что и эмпирическая валидность, с той лишь разницей, что в данном случае речь идет о связи между показателями методики и наиболее важными, ключевыми внешними признаками, относящимися к поведению испытуемого.

При создании методики сразу оценить ее валидность трудно. Обычно валидность методики проверяется и уточняется в процессе ее достаточно длительного использования, тем более что речь идет о проверке по меньшей мере с четырех описанных выше сторон.

Кроме видов валидности, важно знать критерии валидности. Это основные признаки, по которым можно практически судить о том, является или не является данная методика валидной. Такими критериями могут стать следующие:

1. Поведенческие показатели — реакции, действия и поступки испытуемого в различных жизненных ситуациях.

2. Достижения испытуемого в различных видах деятельности: учебной, трудовой, творческой и других.

3. Данные, свидетельствующие о выполнении различных контрольных проб и заданий.

4. Данные, получаемые при помощи других методик, валидность или связь которых с проверяемой методикой считается достоверно установленной.

Надежность методики характеризует возможность получения с ее помощью устойчивых показателей (имеется в виду та степень устойчивости, которая зависит от измерительного инструмента, а не от испытуемого, поведения экспериментатора или изменяемого психологического свойства).

Результаты психологического тестирования зависят от множества трудно контролируемых факторов: качества измерительного инструмента, постоянства релевантных характеристик ситуации психологического тестирования, правильности понимания инструкции испытуемым, поведения экспериментатора, актуального психологического состояния испытуемого. Изменение любого из этих факторов в ходе психодиагностического обсле­дования обычно ведет к снижению степени надежности измерений. Поскольку держать все эти факторы в постоянстве всегда практически невозможно, то рассчитывать на высокую надежность любой психодиагностической методики не приходится. Из всех этих факторов наиболее важным является надежность самой методики, так как все остальные вносят гораздо меньший вклад в постоянство получаемых результатов.

Надежность психодиагностической методики можно устано­вить двумя способами: путем сравнения результатов, получаемых при помощи данной методики разными людьми, и путем сравнения результатов, получаемых при применении одной и той же методики в идентичных условиях.

Точность методики отражает ее способность тонко реагиро­вать на малейшие изменения оцениваемого свойства, происходящие в ходе психодиагностического эксперимента. Точность психологической методики в определенном смысле можно срав­нивать с точностью технических измерительных инструментов. Метр, например, разделенный только на сантиметры, будет грубее измерять длину, чем линейка, градуированная по миллиметрам. В свою очередь микрометр — прибор, позволяющий оценивать длины, отличающиеся друг от друга на 0,001 мм, будет намного более точным измерительным инструментом, чем школьная линейка.

Чем точнее психодиагностическая методика, тем тоньше с ее помощью можно оценивать градации и выявлять оттенки измеряемого качества. Однако в практической психодиагностике да­леко не всегда требуется очень высокая степень точности оценок. Ее необходимая практическая мера определяется задачей дифференциации, или разделения испытуемых на группы. Если, на­пример, всю исследованную выборку испытуемых нужно разде­лить всего лишь на две подгруппы, то и точность применяемой методики должна соответствовать именно этому делению, не больше. Если необходимо разделить испытуемых на пять подгрупп, то достаточно применить методику, имеющую измерительную шкалу, состоящую из пяти пунктов, скажем такую: «да», «скорее да, чем нет», «ни да, ни нет», «скорее нет, чем да», «нет». -

Однозначность методики характеризуется тем, в какой степени получаемые с ее помощью данные отражают измерения именно и только того свойства, для оценивания которого данная методика применяется. Если наряду с этим свойством в получаемых показателях отражаются и другие, никак не связанные с данной методикой, выходящие за пределы ее валидности, то считается, что методика не соответствует критерию однозначности, хотя при этом частично может оставаться валидной. Например, если экспериментатора интересуют оценки мотивов поведения человека и для того, чтобы их получить, он задает испытуемому пря­мые вопросы относительно мотивов его поведения, то ответы на эти вопросы вряд ли будут соответствовать критерию однозначности. В них почти наверняка отразятся и степень осознания испытуемым мотивов своего поведения, и его желание предстать в благоприятном свете в глазах экспериментатора, и оценки им возможных последствий диагностического эксперимента, и многое другое.

Критерию однозначности также может не вполне удовлетворять способ оценки знаний учащихся только по успеваемости, так как оценки успеваемости выставляются не всегда объективно. В них, кроме самих знаний учащегося, отражается отношение к нему учителя и поведение учащегося.

Прежде чем применять в практической психодиагностике те или иные методики, экспериментатор должен убедиться в том, что они отвечают требованиям валидности, надежности, точности и однозначности. Самыми важными из названных четырех критериев являются первые два: валидность и надежность, и если измерительный инструмент им не соответствует, то его вообще нельзя использовать как средство психодиагностики. Если же ме­тодика не вполне точна и не полностью однозначна, то ее тем не менее можно применять с определенными оговорками. Но при этом необходимо помнить, во-первых, о том, что неточная методика может не позволить установить сравнительно небольшие изменения, которые происходят в результате проведенного эксперимента, и, следовательно, может указать на отсутствие изменений там, где они на самом деле есть. Недостаточно однозначная методика не всегда позволяет соотносить величину получаемых показателей со степенью изменения именно оцениваемого качества, а не какого-либо другого.

Кроме применяемой методики, на результаты психодиагностики влияют:

- ситуация, ее понимание испытуемым,

- получаемая им инструкция,

- также личность и поведение самого экспериментатора во время тестирования.

Результаты психодиагностики

Ситуация, ее понимание испытуемым

получаемая инструкция

личность и поведение самого экспериментатора во время тестирования

Если ситуация воспринимается испытуемым как экзаменационная, то он будет вести себя в ней соответственно. Высокотревожный человек, вероятно, всегда и всюду будет испытывать повышенное беспокойство, видеть угрозу для своей личности и, следовательно, воспринимать любую ситуацию как потенциаль­но несущую в себе опасность для его личности. Низкотревожный индивид, напротив, даже в реально угрожающей его Я ситуа­ции будет вести себя относительно спокойно.

Поведение испытуемых и результаты, которые они показывают, зависят и от того, как они понимают инструкцию. Поэтому к доступности и точности формулировок инструкции в психо­диагностике предъявляются особые требования. Инструкция должна быть достаточно простой и понятной, не содержать в себе неоднозначно трактуемых слов и выражений. Лучше всего, если инструкция будет предложена испытуемым в письменном виде, так как устная инструкция разными людьми произносится с различными паралингвистическими компонентами: жестами, мимикой, пантомимикой, интонациями, темпом, паузами и т.п. Кроме того, устная инструкция довольно быстро забывается испытуемыми и, следовательно, возможны непроизвольные отклонения от нее.

Иногда на результаты исследования влияют личность и поведение экспериментатора. Замечено, например, что если экспериментатор лично симпатичен испытуемым, если его поведение свидетельствует об уважении и добром отношении к испытуемым, то они в свою очередь невольно будут стараться подыграть ему и показать такие результаты, которые должны доставить эксериментатору удовольствие. Напротив, если он вызывает антипатию у испытуемых, демонстрирует недоброе и неуважительное к ним отношение, то они, как правило, отвечают ему тем же: стараются дать такие результаты, которые, по их мнению, не понравятся экспериментатору.

Основная рекомендация, которая касается поведения экспериментатора, заключается в том, чтобы он был спокойным, уравновешенным, а его поведение — достаточно ровным, доброжелательным и уважительным по отношению к испытуемым.

Тесты и тестирование

Тестами в психологии называют стандартизированные методики психодиагностики, позволяющие получать сопоставимые количественные и качественные показатели степени развитости изучаемых свойств.

Под стандартизированностъю таких методик имеется в виду то, что они всегда и везде должны применяться одинаковым образом, начиная от ситуации и инструкции, получаемой испытуемым, кончая способами вычисления и интерпретации получаемых показателей.

Сопоставимость означает, что оценки, получаемые при по­мощи теста, можно сравнивать друг с другом независимо от того, где, когда, как и кем они были получены, если, разумеется, тест применялся правильно. Из всех возможных психодиагностичес­ких методик к тестам предъявляются самые строгие требования, касающиеся валидности, надежности, точности и однозначности.

Существует много разновидностей тестов, которые разделяются на группы по нескольким основаниям:

1. по предмету тестирования (тому качеству, которое оценивается с помощью данного теста);

2. по особенностям используемых в тесте задач;

3. по материалу, предъявляемому испытуемым;

4. по объекту оценивания.

1. По предмету тесты делятся на:

- интеллектуальные (оценивают степень развитости у человека различных познавательных процессов),

- личностные и

- межличностные.

2. По особенностям используемых задач выделяют:

- практические,

- образные и

- словесные (вербальные) тесты.

3. По характеру тестового материала, предъявляемого испытуемым, тесты делятся на:

- бланковые,

- аппаратурные.

4. По объекту оценки — на

- процессуальные тесты,

- тесты достижений,

- тесты состояний и свойств.

Интеллектуальные тесты предназначаются для оценки уровня развития мышления (интеллекта) человека и его отдельных когнитивных процессов, таких, как восприятие, внимание, воображение, память, речь.

Личностные тесты связаны с психодиагностикой устойчивых индивидуальных особенностей человека, определяющих его поступки.

Сюда относятся тесты:

- темперамента,

- характера,

- мотивации,

- эмоций,

- способностей.

Среди тестов встречаются такие, которые дают разностороннюю, комплексную оценку состояния личности или степени развитости ее отдельных свойств. Комплексными, например, являются тест Кеттела, MMPI и другие. К числу частных можно отнести тесты, с помощью которых оцениваются отдельные черты личности человека, мотивы, эмоции, например, акцентуации характера, тревожность, локус контроля, мотив достижения успеха, агрессивность и другие.

Межличностные тесты позволяют оценивать человеческие отношения в различных социальных группах, например, социометрический тест, тест социально-психологической самоаттестации группы как коллектива.

Практические тестовые задания включают в себя задачи и упражнения, которые испытуемый должен выполнить в наглядно-действенном плане, т.е. практически манипулируя реальными материальными предметами или их заменителями.

Образные задания содержат в себе упражнения с образами, с картинками, рисунками, схемами, представлениями. Они предполагают активное использование воображения, мысленных преобразований образов.

Вербальные тесты включают в себя задания на оперирование словами. Они предполагают, например, определение понятий, умозаключения, сравнение объема и содержания различных . слов, выполнение с понятиями различных логических операций и т.п.

Многие задания, которые используются в тестах, имеют комплексный характер, т.е. включают в себя и практические, и теоритические, и образные, и вербальные действия и упражнения.

Это связано с тем, что большинство задач, с которыми сталкивается человек в реальной жизни, являются комплексными по характеру, а тестирование проводится для того, чтобы предсказать поведениё и возможные достижения человека не в искусственнной - лабораторной ситуации, а в реальной жизни.

Бланковыми называются такие тесты, при использовании которых испытуемый получает тестовый материал в форме различных бланков: рисунков, схем, таблиц, опросников и т.п.

Аппаратурные— это такие тесты, в которых используется различного рода аппаратура для предъявления и обработки результатов тестирования, например аудио- и видеотехника, электронно-вычислительные машины.

Процессуальными называют тесты, с помощью которых исследуется какой-либо психологический или поведенческий процесс, и ему в результате дается точная качественная или количественная характеристика, например процесс запоминания человеком материала, процесс межличностного взаимодействия индивидов в группе.

К группе тестов достижений относят такие тесты, в итоге применения которых оцениваются успехи человека в том или ином виде деятельности, в той или иной сфере познания, скажем продуктивность памяти, логичность мышления, устойчи­вость внимания, уровень развития вербального мышления и др.

Тесты, состояний и свойств касаются диагностики более или менее стабильных психологических качеств человека, таких, например, как черты личности, свойства темперамента, способности и т.п.

В особую группу выделяются проективные тесты. Они основаны не на прямой, а на косвенной оценке тех или иных психологических качеств человека. Такая оценка получается в результате анализа того, как данный человек воспринимает и интерпретирует некоторые многозначные объекты: сюжетно неопределенные картинки, бесформенные пятна, незавершенные предложения и др.

Предполагается, что в оценки и интерпретации подобных объектов человек бессознательно «вкладывает» или «проецирует» самого себя. К этой группе тестов относятся, например, тест Роршаха, Тематический Апперцептивный Тест и многие другие.

К проективным тестам обращаются тогда, когда дело касается психодиагностики скрываемых или не осознаваемых испытуемыми психологических особенностей.

Психодиагностический эксперимент как метод применяется в исключительных случаях и в основном тогда, когда выявить и оценить нужное качество другим способом не представляется возможным.

Процессуальные тесты применяются в тех случаях, если исследователя интересуют особенности протекания психических и поведенческих процессов у испытуемых, а тесты достижений — когда решается задача оценки способностей, умений и навыков людей.

В отдельную группу тестов выделяются тесты интеллекта, к которым обращаются, если возникает необходимость точно определить и количественно оценить общий уровень интеллектуального развития человека.

Как к методам точной психодиагностики к тестам предъявляются особые требования.

Первое из них — социокультурная адаптированность теста. Это словосочетание означает соответ­ствие тестовых заданий и тестовых оценок, которые испытуемый получает по этим заданиям, особенностям культуры, сложив­шимся в том или ином обществе, где данный тест используется, будучи заимствованным в другой стране. Если, например, созданный в Европе тест интеллекта впервые применяется в стране, где доминирующим в структуре интеллекта является не словесно-логическое, а образное или практическое мышление, то он обязательно должен быть социокультурно адаптирован. В против­ном случае, применяя его в первоначальном, неадаптированном варианте, мы, скорее всего, получим низкие результаты, которые не будут соответствовать уровню развития мышления у жителей данной страны. И, наоборот, используя в качестве теста интеллекта такой, где преобладают задания на практическое мышление, в стране с доминированием вербального интеллекта, мы там можем получить неадекватные показатели умственного развития.

Если тест повторно используется в условиях, которые существенно отличаются от тех, где он был первоначально создан, то почти всегда требуется соотнесение этих условий друг с другом или адаптация теста к новым условиям. В первую очередь это ужасается бланковых тестов, заимствованных из другой страны и написанных в оригинале на ином языке. Перевод словесных формулировок тестовых заданий с одного языка на другой никогда не бывает точным по значениям и смысловому содержанию понятий. Для того чтобы в максимально возможной степени снять и это неизбежное в силу самой природы языка несоответствие, приходится иногда отказываться от буквального перевода и делать его относительно произвольным, близким не по значениям слов, а по их смыслам.

Второе требование к тестам — простота формулировок и однозначность тестовых заданий. Согласно данному требованию в словесных и иных заданиях теста не должно быть таких моментов (слов, рисунков и т.п.), которые могут по-разному вос­приниматься и пониматься людьми.

Третье требование — ограниченное время выполнения тесто­вых заданий. Здесь речь идет о том, что полное время выполнения заданий психологического теста не должно превышать полутора-двух часов, так как в течение большего времени человеку трудно сохранить свою работоспособность на достаточно высоком уровне.

Четвертое требование — наличие тестовых норм для данного теста. Под такими нормами понимаются репрезентативные средние показатели по данному тесту, т.е. показатели, представ­ляющие большую совокупность людей, с которыми можно сравнивать показатели данного индивида, оценивая уровень его пси­хологического развития. Норма теста обычно определяется в результате тестирования большой выборки испытуемых опреде­ленного возраста и пола и усреднения полученных оценок с их последующей дифференциацией по возрасту, полу и ряду других релевантных показателей. Норма теста — это средний уро­вень развития большой совокупности людей, похожих на данного испытуемого по ряду социалъно-демографическиххарактеристик.

Всякая норма со временем, как правило, изменяется вместе с теми естественными изменениями, которые с годами происхо­дят в психологическом развитии людей. Так, нормы интеллек­туального развития, установленные в первой четверти нашего века, не подходят для его последней четверти, так как за это время уро­вень развития мышления людей значительно возрос. Существу­ет эмпирически установленное правило, в соответствии с кото­рым как минимум один раз в пять лет нормы теста, особенно ин­теллектуального, должны пересматриваться.

Процедура пересмотра существующих норм и установления новых типична и выглядит следующим образом. Сначала опре­деляется группа людей, на которых предполагается проводить исследования с помощью данного теста. Затем эта группа людей разделяется на подгруппы, различающиеся по своим социально-демографическим характеристикам. Для каждой подгруппы под­бирается и посредством разработанного теста изучается доста­точно представительная выборка людей. Далее путем усредне­ния полученных на ней показателей определяется тестовая нор­ма для данной совокупности людей. Заметим, что в описании тес­та для каждой включенной в него нормы обязательно должно быть указано, где, как, на ком и когда она была установлена.

Кроме требований, предъявляемых к нормам теста, существуют определенные, строгие правила проведения тестирования, обработки и интерпретации его результатов. Наиболее важные ,из этих правил следующие:

1. Прежде чем применять тот или иной тест, психологу необходимо познакомиться с ним и попробовать его на самом себе или на другом человеке. Это позволит в дальнейшем избежать возможных ошибок, связанных с проведением тестирования и обусловленных недостаточно хорошим знанием его нюансов.

2. Важно заранее позаботиться о том, чтобы перед началом выполнения тестовых заданий испытуемые хорошо поняли их и сопровождающую тест инструкцию.

3. Во время проведения тестирования необходимо следить за тем, чтобы все испытуемые работали самостоятельно, независимо друг от друга и не оказывали друг на друга влияния, способ­ного изменить результаты тестирования.

4. Для каждого теста должна существовать обоснованная и выверенная процедура обработки и интерпретации результатов, позволяющая избежать ошибок, возникающих на этом этапе тестирования. Это, в частности, касается приемов математико-статистической обработки первичных данных, которые также должны быть строго и заранее установлены.

Прежде чем приступить к практическому тестированию, необходимо провести определенную подготовительную работу к нему. Она состоит в следующем. Вначале испытуемым представляют тест и объясняют, для чего он предназначен, с какой целью проводится тестирование, какие данные в результате него могут быть получены и каким образом они могут быть использованы в жизни. Затем дают инструкцию и добиваются того, чтобы она была правильно понята всеми испытуемыми. Убедившись в этом, психолог приступает к тестированию, строго следя за соблюдением инструкции и всех указанных выше условий, обеспечивающих достоверность получаемых результатов.

Вопросы для самоконтроля

1. Что понимается под психодиагностикой согласно двум существующим подходам?

2. Какие требования предъявляются к работе психодиагносту и к используемым им методам?

3. Каким образом классифицируются психодиагностический методики?

4. Что такое «валидность», какие виды и критерии валидности существуют ?

5. Что такое «надежность»?

6. Что такое «точность»?

7. Что такое «однозначность»?

8. Какие факторы оказывают влияние на результаты психодиагностики?

9. Что такое «тест»?

10. По каким критериям классифицируются тесты?

11. Каковы требования к тестам?

12. Каковы правила проведения тестирования, обработки и интерпретации его результатов.