Показывает в какой мере психическое свойство отражено в методике

Валидность как свойство психологического текста

Валидность методики означает соответствие ее тому, что с ее помощью изучается. “Валидность теста – важнейший критерий его доброкачественности, характеризующий точность измерения исследуемого свойства, а также насколько тест отражает то, что он должен оценивать; насколько отдельные составляющие его пробы адекватны исследуемой проблеме”. Иными словами, валидность означает соответствие того, что измеряется, тому, что предполагается измерить. Рассмотрим подробнее.

Все методы психологической диагностики, начиная со стандартизованных и заканчивая нестандартизованными, направлены на измерение свойств личности и особенностей интеллекта.

Каждый метод предназначен для измерения какого-либо свойства, что и определяет содержание этого метода. Сведения о степени, в которой тест действительно измеряет то, для чего он предназначен, входят в понятие валидности. Например, методика “Кольца Ландольта” предназначена для измерения таких свойств внимания, как концентрация, переключаемость. В психологии существуют определения понятий концентрации внимания и его переключаемости. Считается, что выводы, сформулированные на основании результатов тестирования с помощью “Колец Ландольта”, вполне отражают содержание определений этих свойств внимания. Значит, эта методика действительно измеряет то, для чего она предназначена.

Помимо общего значения в понятие валидности входят многие другие сведения. Существуют разные типы и виды валидности, в которых отражены эти сведения. Ниже приведены некоторые типы.

1) Практическая валидность характеризует тест не столько со стороны его психологического содержания, сколько с точки зрения его ценности в отношении достижения определенной практической цели (прогнозирования, диагностики). Выделяют подтипы практической валидности: прогностическая и совпадающая. Тест с высокой прогностической валидностью позволяет сделать прогноз, насколько успешно испытуемый будет выполнять определенную деятельность впоследствии. Тест с высокой совпадающей валидностью позволяет ответить на вопрос: “Какова вероятность того, что индивид Х обладает свойством У в настоящий момент времени?”

2) Валидность по объему отражает степень, в какой объем теста выборочно репрезентирует тот класс ситуаций или учебного материала, относительно которого должны быть сделаны выводы. Валидность по объему показывает, в каком объеме, в какой мере психическое свойство отражено в методике.

3) Оценочная валидность выражает степень корреляции (соответствия) между показателями, полученными испытуемыми по данному методу, и оценками измерительного свойства со стороны экспертов. Например, при валидации (проверке теста на валидность) тестов оценки умственных способностей школьников в качестве экспертов обычно выступают учителя.

4) Внешняя валидность означает, что впечатление, которое создается у неспециалистов при знакомстве со стимульным материалом и сугубо внешней стороной тестирования, соответствует заявленному содержанию метода.

Эффективная методика может быть создана, если она прошла все этапы валидации, то есть когда приняты меры для придания ей как содержательной валидности (см. общее значение понятия валидности выше), так и практической.

Требование надежности

Требование надежности – прежде всего требование внутренней согласованности частей методики и воспроизводимости результатов при повторном исследовании. “Надежность свидетельствует о свойстве метода приводить к одним и тем же результатам при использовании этого метода разными людьми или при повторном применении данного метода одним и тем же человеком с целью оценивания одного и того же психологического свойства”.

О высокой надежности метода говорят в том случае, когда метод точно измеряет то свойство, для измерения которого он предназначен. В качестве критериев точности можно отметить следующие:

1) При повторном применении метода к тем же самым испытуемым в одних и тех же условиях через определенный интервал времени результаты обоих тестирований существенно не различаются между собой.

2) Действия случайных посторонних факторов не оказывают существенного влияния на результаты тестирования.

В качестве посторонних факторов можно назвать следующие: эмоциональное состояние и утомление, если они не входят в круг исследуемых характеристик, температура, освещенность помещения и др. Такие посторонние случайные факторы еще называют факторами нестабильности измерительной процедуры.

3) При повторном применении метода к тем же самым испытуемым через определенный интервал времени в измененных условиях результаты обоих тестирований существенно не различаются между собой. Под измененными имеется в виду следующие условия: другой экспериментатор, состояние респондента и др.

Существуют различные методы оценки надежности:

Ретестовый метод – повторное тестирование выборки испытуемых одним и тем же тестом через определенный интервал времени при одних и тех же условиях. Временной интервал зависит от возраста (например, у маленьких детей изменения могут произойти в течение одного месяца), а также событий, происходящих с испытуемым в жизни.

За индекс надежности принимается коэффициент корреляции между результатами двух тестирований. Полученная высокая корреляция может быть результатом тренированности испытуемого на заданиях подобного типа; низкая корреляция может быть результатом происшедших изменений с испытуемым, а также может свидетельствовать о ненадежности теста.

Надежность взаимозаменяемых форм – повторное тестирование выборки испытуемых параллельной формой теста через минимальный интервал времени при одних и тех же условиях.

За индекс надежности принимается коэффициент корреляции между результатами тестирования двумя параллельными формами теста. Высокий коэффициент корреляции и большой интервал между двумя испытаниями свидетельствуют о высокой надежности теста.

Возможный обман со стороны испытуемого, его искушенность, события, происшедшие в интервале между тестированиями, не оказывают особого влияния (как в ретестовом методе) на степень надежности теста. Если фактор тренировки снижен при тестировании параллельными формами, то эффект переноса принципа заданий часто имеет место. Эффект переноса следует учитывать при построении параллельных форм.

Требования к построению параллельных форм:

параллельные формы должны быть независимо построенными тестами, но отвечать одним и тем же требованиям;

должны содержать одинаковое количество заданий со сходной степенью трудности;

эквивалентность параллельных форм необходимо проверять ретестовым методом.

Метод расщепления состоит в том, что тест разбивают на две сопоставимые части. Респондент выполняет задания этих двух частей в течение одного сеанса с получением двух результатов (например, тест Равена содержит две части: четные и нечетные задания).

За индекс надежности принимается коэффициент корреляции между результатами тестирования двумя этими частями. Он называется коэффициентом внутренней согласованности теста.

Валидность и надежность. Тест может быть надежен, но не валиден. Это означает, что он измеряет какое-то свойство очень точно, но какое именно – остается под вопросом. В такой ситуации необходима более точная валидизация теста, как содержательная, так и практическая.

Дискриминативность

Дискриминативность – это способность отдельных заданий теста и теста в целом дифференцировать обследуемых относительно ”максимального” и “минимального” результатов теста. Дискриминативность измеряется показателем дельта Фергюсона и принимает максимальное значение при равномерном (прямоугольном) распределении показателей (d=1).

Точность информации измеряется тем, насколько дробной шкалой являются применяемые метрики, или, другими словами, насколько чувствителен инструмент. Таким образом, это степень приближения результатов измерения к истинному значению измеряемой величины.

Конечно, каждый исследователь должен стремиться получить наиболее точные данные. Однако создание инструмента, обладающего нужной степенью точности, в ряде случаев достаточно трудное дело. Всегда необходимо решить, какая мера точности является допустимой. При определении этой меры исследователь пользуется всем арсеналом теоретических представлений об объекте.

При помощи тщательного конструирования теста можно обеспечить соответствующий уровень дискриминативности, а это именно то, в чем тесты значительно выигрывают по сравнению с другими формами испытаний. В общем, было обнаружено, что в оценке может быть использовано около девяти градаций, а в опросах, вероятно, наиболее эффективно использовать 3 (или пять) градации: ниже среднего, средний уровень и выше среднего. Подобно этому, шкалы ранжирования редко содержат более девяти градаций. Это означает, что испытуемые разбиваются в лучшем случае на девять групп.

Министерство образования и науки Республики Казахстан

Казахстанско-Российский Университет

РЕФЕРАТ

по дисциплине: Психодиагностика

На тему: Психометрия

Выполнила:

ст-ка гр. ЗП-309-01

Миронова Наталья

Проверил:

преподаватель

_____________________

Караганда 2008

Введение

1. Сущность дифференциальной психометрии

2. Валидность как свойство психологического текста

3. Требование надежности

4. Дискриминативность

5. Достоверность теста

Заключение

Список использованной литературы

Психологическая диагностика предназначена для того, чтобы обеспечить сбор информации об особенностях человеческой психики. Современная психологическая диагностика определяется как психологическая дисциплина, разрабатывающая методы выявления и изучения индивидуально-психологических и индивидуально-психофизиологических особенностей человека. Под психодиагностикой подразумевается также и область психологической практики, работа психолога по выявлению разнообразных качеств, психических и психофизиологических особенностей, черт личности.

Методологической основой психодиагностики называют психометрику – науку об измерении индивидуально-психологических различий, которая разрабатывает технологию создания конкретных методик, применяемых в психодиагностике – тестов. Она же определяет методологию обеспечения научных требований к этим методикам – а именно, требования надежности, валидности, а также выделяемое некоторыми авторами как самостоятельное требование – достоверности.

Психометрия – раздел психологии, изучающий теоретические и методологические проблемы психологических измерений. Занимается разработкой математических моделей психологического измерения (модель Терстоуна, модель многомерного шкалирования, модель латентных черт), регламентирует экспериментальную проверку по критериям валидности, надежности и пр. выявляемых психологических свойств. Целесообразно разделять психометрию. на “общую” и “дифференциальную”.

Первая устанавливает числовые соответствия между каким-то свойством стимула (например, интенсивностью света, звука) и соответствующим ощущением определенной силы (яркостью, громкостью и т.п.).

Дифференциальная психометрия выражает в количественной форме индивидуальные психологические различия между людьми. Понятие “психометрия” впервые было использовано в первой половине ХVII в. немецким философом Х. Вольфом. Христиан Вольф впервые указал на возможность измерения в психологии. В области дифференциальной психологии психометрия является технологической основой для измерительной психодиагностики.

Целью дифференциальной психометрии является разработка требований к измерительным психодиагностическим методам. Эти требования относятся к адаптации методов, интерпретации получаемых данных, к процедуре разработки методов, разработке и применению математического аппарата для анализа получаемых данных.

В этой второй области психометрии. разработаны основные критерии качества психологического измерения – такие свойства психологических тестов, как надежность, валидность, репрезентативность.

Для психологии, как и для других наук о человеке, особое место занимает вопрос о качестве, получаемом в процессе применения различных методов и средств. В этой связи могут быть выделены два вида параметров качества информации: объективные и субъективные.

Такое допущение вытекает из той особенности психологии, что источником информации в ней всегда является человек. Значит, не считаться с этим фактом нельзя и следует лишь обеспечить максимально возможный уровень надежности «субъективных» параметров. Для этого вводится ряд психометрических требований.

Эти требования, в первую очередь касаются качества того инструмента (теста), посредством которого собираются данные, и, прежде всего точности, достоверности и адекватности методики измерения.

Вот основные из них:

1) использование шкалы интервалов;

2) надежность;

3) валидность;

4) дискриминативность;

5) наличие нормативных данных.

Рассмотрим подробнее валидность и надежность.

Валидность методики означает соответствие ее тому, что с ее помощью изучается. “Валидность теста – важнейший критерий его доброкачественности, характеризующий точность измерения исследуемого свойства, а также насколько тест отражает то, что он должен оценивать; насколько отдельные составляющие его пробы адекватны исследуемой проблеме”. Иными словами, валидность означает соответствие того, что измеряется, тому, что предполагается измерить. Рассмотрим подробнее.

Все методы психологической диагностики, начиная со стандартизованных и заканчивая нестандартизованными, направлены на измерение свойств личности и особенностей интеллекта.

Каждый метод предназначен для измерения какого-либо свойства, что и определяет содержание этого метода. Сведения о степени, в которой тест действительно измеряет то, для чего он предназначен, входят в понятие валидности. Например, методика “Кольца Ландольта” предназначена для измерения таких свойств внимания, как концентрация, переключаемость. В психологии существуют определения понятий концентрации внимания и его переключаемости. Считается, что выводы, сформулированные на основании результатов тестирования с помощью “Колец Ландольта”, вполне отражают содержание определений этих свойств внимания. Значит, эта методика действительно измеряет то, для чего она предназначена.

Помимо общего значения в понятие валидности входят многие другие сведения. Существуют разные типы и виды валидности, в которых отражены эти сведения. Ниже приведены некоторые типы.

1) Практическая валидность характеризует тест не столько со стороны его психологического содержания, сколько с точки зрения его ценности в отношении достижения определенной практической цели (прогнозирования, диагностики). Выделяют подтипы практической валидности: прогностическая и совпадающая. Тест с высокой прогностической валидностью позволяет сделать прогноз, насколько успешно испытуемый будет выполнять определенную деятельность впоследствии. Тест с высокой совпадающей валидностью позволяет ответить на вопрос: “Какова вероятность того, что индивид Х обладает свойством У в настоящий момент времени?”

2) Валидность по объему отражает степень, в какой объем теста выборочно репрезентирует тот класс ситуаций или учебного материала, относительно которого должны быть сделаны выводы. Валидность по объему показывает, в каком объеме, в какой мере психическое свойство отражено в методике.

3) Оценочная валидность выражает степень корреляции (соответствия) между показателями, полученными испытуемыми по данному методу, и оценками измерительного свойства со стороны экспертов. Например, при валидации (проверке теста на валидность) тестов оценки умственных способностей школьников в качестве экспертов обычно выступают учителя.

4) Внешняя валидность означает, что впечатление, которое создается у неспециалистов при знакомстве со стимульным материалом и сугубо внешней стороной тестирования, соответствует заявленному содержанию метода.

Эффективная методика может быть создана, если она прошла все этапы валидации, то есть когда приняты меры для придания ей как содержательной валидности (см. общее значение понятия валидности выше), так и практической.

Требование надежности – прежде всего требование внутренней согласованности частей методики и воспроизводимости результатов при повторном исследовании. “Надежность свидетельствует о свойстве метода приводить к одним и тем же результатам при использовании этого метода разными людьми или при повторном применении данного метода одним и тем же человеком с целью оценивания одного и того же психологического свойства”.

О высокой надежности метода говорят в том случае, когда метод точно измеряет то свойство, для измерения которого он предназначен. В качестве критериев точности можно отметить следующие:

1) При повторном применении метода к тем же самым испытуемым в одних и тех же условиях через определенный интервал времени результаты обоих тестирований существенно не различаются между собой.

2) Действия случайных посторонних факторов не оказывают существенного влияния на результаты тестирования.

В качестве посторонних факторов можно назвать следующие: эмоциональное состояние и утомление, если они не входят в круг исследуемых характеристик, температура, освещенность помещения и др. Такие посторонние случайные факторы еще называют факторами нестабильности измерительной процедуры.

3) При повторном применении метода к тем же самым испытуемым через определенный интервал времени в измененных условиях результаты обоих тестирований существенно не различаются между собой. Под измененными имеется в виду следующие условия: другой экспериментатор, состояние респондента и др.

Существуют различные методы оценки надежности:

Ретестовый метод – повторное тестирование выборки испытуемых одним и тем же тестом через определенный интервал времени при одних и тех же условиях. Временной интервал зависит от возраста (например, у маленьких детей изменения могут произойти в течение одного месяца), а также событий, происходящих с испытуемым в жизни.

За индекс надежности принимается коэффициент корреляции между результатами двух тестирований. Полученная высокая корреляция может быть результатом тренированности испытуемого на заданиях подобного типа; низкая корреляция может быть результатом происшедших изменений с испытуемым, а также может свидетельствовать о ненадежности теста.

Надежность взаимозаменяемых форм – повторное тестирование выборки испытуемых параллельной формой теста через минимальный интервал времени при одних и тех же условиях.

За индекс надежности принимается коэффициент корреляции между результатами тестирования двумя параллельными формами теста. Высокий коэффициент корреляции и большой интервал между двумя испытаниями свидетельствуют о высокой надежности теста.

Возможный обман со стороны испытуемого, его искушенность, события, происшедшие в интервале между тестированиями, не оказывают особого влияния (как в ретестовом методе) на степень надежности теста. Если фактор тренировки снижен при тестировании параллельными формами, то эффект переноса принципа заданий часто имеет место. Эффект переноса следует учитывать при построении параллельных форм.

Требования к построению параллельных форм:

1. параллельные формы должны быть независимо построенными тестами, но отвечать одним и тем же требованиям;

2. должны содержать одинаковое количество заданий со сходной степенью трудности;

3. эквивалентность параллельных форм необходимо проверять ретестовым методом.

Метод расщепления состоит в том, что тест разбивают на две сопоставимые части. Респондент выполняет задания этих двух частей в течение одного сеанса с получением двух результатов (например, тест Равена содержит две части: четные и нечетные задания).

За индекс надежности принимается коэффициент корреляции между результатами тестирования двумя этими частями. Он называется коэффициентом внутренней согласованности теста.

Валидность и надежность. Тест может быть надежен, но не валиден. Это означает, что он измеряет какое-то свойство очень точно, но какое именно – остается под вопросом. В такой ситуации необходима более точная валидизация теста, как содержательная, так и практическая.

Дискриминативность – это способность отдельных заданий теста и теста в целом дифференцировать обследуемых относительно ”максимального” и “минимального” результатов теста. Дискриминативность измеряется показателем дельта Фергюсона и принимает максимальное значение при равномерном (прямоугольном) распределении показателей (d=1).

Точность информации измеряется тем, насколько дробной шкалой являются применяемые метрики, или, другими словами, насколько чувствителен инструмент. Таким образом, это степень приближения результатов измерения к истинному значению измеряемой величины.

Конечно, каждый исследователь должен стремиться получить наиболее точные данные. Однако создание инструмента, обладающего нужной степенью точности, в ряде случаев достаточно трудное дело. Всегда необходимо решить, какая мера точности является допустимой. При определении этой меры исследователь пользуется всем арсеналом теоретических представлений об объекте.

При помощи тщательного конструирования теста можно обеспечить соответствующий уровень дискриминативности, а это именно то, в чем тесты значительно выигрывают по сравнению с другими формами испытаний. В общем, было обнаружено, что в оценке может быть использовано около девяти градаций, а в опросах, вероятно, наиболее эффективно использовать 3 (или пять) градации: ниже среднего, средний уровень и выше среднего. Подобно этому, шкалы ранжирования редко содержат более девяти градаций. Это означает, что испытуемые разбиваются в лучшем случае на девять групп.

психика психологическая диагностика психометрия

Особой разновидностью валидности является достоверность, которая требует специальных усилий и процедур по ее обеспечению. Речь идет о сознательных или бессознательных искажениях, которые вносит 6 тестовые результаты сам испытуемый, руководствуясь в ходе теста особой мотивацией, отличающейся от той, которая присуща ему в реальном поведении.

Способность теста защищать информацию от мотивационных искажений испытуемого и есть достоверность теста. Особенно остро эта проблема стоит в случае тестов-опросников, которые допускают больше свободы в выборе испытуемым любого варианта ответа.

Типичный прием обеспечения достоверности – наличие в тест-опросниках шкал лжи. Шкала лжи – это шкала, состоящая из вопросов, касающихся незначительных проступков, которые совершаются большинством людей. Эти шкалы основываются главным образом на феномене социальной желательности – стремлении испытуемых давать в ходе тестирования социально одобряемую информацию.

Если испытуемый набрал по шкале лжи балл выше критического, то его протокол объявляется недостоверным и ему предлагается либо выполнить данный тест еще раз, будучи более откровенным, либо выполнить другой тест. Многие более специфичные “ловушки”, направленные на измерение достоверности, часто входят как компонент в структуру конкретного теста.

Достоверность тестирования тесно связана со степенью доверительности общения с психологом. Здесь принято различать две диагностические ситуации: консультативную (ситуация клиента) и аттестационную (ситуация экспертизы). В первом случае испытуемый участвует в тестировании на добровольной основе и сам заинтересован получить рекомендации по результатам тестирования (например, в профконсультации). Во втором случае тестирование проводится по инициативе педагога или администрации, психолога, родителей, т.е. других лиц, и эти другие больше заинтересованы в результатах, чем сам испытуемый.

Понятно, что в аттестационной ситуации вопрос о достоверности особенно актуален. И опросники, не снабженные шкалами лжи, использовать в таких ситуациях бесполезно. Наоборот, в ситуации клиента могут быть использованы методики, на которые испытуемый заведомо будет отвечать некорректно в ситуации экспертизы.

Целью данного реферата было рассмотреть общее понятие о дифференциальной психометрии и областях ее применения.

В соответствии с поставленным целям в реферате были исследованы: сущность дифференциальной психометрии, области ее применения, а также психометрические требования, такие как надежность и валидность качества исследований.

Были сделаны следующие выводы:

1. Дифференциальная психометрия – область психометрии, определяющая и обосновывающая требования к измерению индивидуально-психологических различий в психологической диагностике.

2. Дифференциальная психометрия, как особое направление психометрии, возникла в связи с появлением и развитием психологических тестов и окончательно оформилась в конце 20-х – начале 30-х гг. нашего века.

3. Основными направлениями дифференциальной психометрии являются: общая теория измерения психологических феноменов, конструирование на ее основе средств измерения, их психометрическая адаптация к новым условиям пользования, а в связи с этим анализ задач тестовых, обеспечение их валидности, надежности и дискриминативности.

Как видно из обсуждения проблемы, все вышеперечисленные требований к методикам взаимосвязаны. Нарушение одного требования сводит на нет и другое: скажем, данные могут быть обоснованны, но не устойчивы. В психологическом исследовании такая ситуация может возникнуть тогда, когда проводимое тестирование оказалось ситуативным, т. е. время его проведения могло играть определенную роль и в силу этого возник какой-то дополнительный фактор, не проявляющийся в других ситуациях.

1. Общая психодиагностика / Под ред. А.А.Бодалева, В.В.Столина.– М.: Изд-во МГУ, 1987.

2. Словарь-справочник по психологической диагностике / Бурлачук Л.Ф., Морозов С.М., отв. ред. С.Б. Крымский. – Киев : Наук. думка, 1989. С. 114-116.

3. Ярошевский М.Г. История психологии. – М.: Мысль, 1976. С.463

4. О. В. Белова. Психологическая диагностика как наука.