Глава 3. Психометрические требования к построению и проверке методик - Тесты

Глава 3. Психометрические требования к построению и проверке методик - Тесты

Глава 3.

Психометрические требования к построению
и проверке методик


Психодиагностические методики именуют измерительными инст­рументами. Но появляется вопрос, правомерно ли их так именовать, являются ли они такими, схожими, к примеру, тем, которые ис­пользуются Глава 3. Психометрические требования к построению и проверке методик - Тесты в физических измерениях? Ответ на этот вопрос можно отыскать в работах К. М Гуревича [34; 35]. На примере анализа тестов он указывает, что такое определение исследовательских методик носит условный нрав.

Поначалу необходимо вспомнить, что представляет Глава 3. Психометрические требования к построению и проверке методик - Тесты собой измерение. Из­мерить — означает найти какой-нибудь мерой величину измеряе­мого. Для этого необходимо, чтоб были соблюдены по последней мере два условия. 1-ое условие касается самого измерительного инстру­мента: он обязан иметь Глава 3. Психометрические требования к построению и проверке методик - Тесты в протяжении всего измерения одну и ту же, тождественную самой для себя меру. Нельзя определять инвентарем, у ко­торого нет таковой тождественной самой для себя меры (к примеру, если б на линейке Глава 3. Психометрические требования к построению и проверке методик - Тесты расстояния от 1-го деления до другого были неодинако­вы на различных участках). 2-ое условие — необходимо, чтоб то, что измеряется, во всех случаях оставалось одним и этим же, т. е. также было тождественно себе Глава 3. Психометрические требования к построению и проверке методик - Тесты. Как указывает дальше К. М. Гуревич, соблюсти эти два условия в психодиагностических исследовательских работах очень проблемно.


К примеру, в тесте предложены задания на умение создавать такую логическую операцию, как систематизация понятий. Так Глава 3. Психометрические требования к построению и проверке методик - Тесты, даны понятия пшеница, чечевица, кукуруза, тростник, ячмень. Испытуемый должен за­черкнуть слово, которое не подходит к четырем главным. Обычно ис­пытуемые зачеркивают тростник. Это ошибка. Тростник, как пшеница, яч­мень Глава 3. Психометрические требования к построению и проверке методик - Тесты и кукуруза, относится к злаковым, а чечевица — к бобовым. Это слово и следует зачеркнуть.


^ Чем можно разъяснить, что не все испытуемые дают верный ответ? Можно именовать несколько обстоятельств.

1-ая — испытуемый слабо обладает таковой Глава 3. Психометрические требования к построению и проверке методик - Тесты логической операци­ей, как систематизация.

2-ая — испытуемый обладает логической операцией, но не зна­ет того материала, на котором ее нужно применить.

3-я — испытуемый знает материал, обладает логической опе­рацией, но Глава 3. Психометрические требования к построению и проверке методик - Тесты он не способен работать в том, обычно достаточно резвом темпе, который требуется при выполнении теста.

Появляется вопрос, что все-таки определяет в реальности данное за­дание?

Как было показано выше, у одних Глава 3. Психометрические требования к построению и проверке методик - Тесты испытуемых оно определяет что-то одно, у других — другое. У испытуемых, обладающих подходящим материалом, оно определяет то, на что ориентировано — владение логиче­ской операцией. У тех же испытуемых, которым материал задания ма­лознаком Глава 3. Психометрические требования к построению и проверке методик - Тесты, измеряется их познание. Не считая того, у тех и других измеряет­ся их личный темп.

Этот анализ К. М. Гуревич продолжает далее. Тест состоит из це­лого набора заданий; время от Глава 3. Психометрические требования к построению и проверке методик - Тесты времени их число доходит до 40. Можно ли выпол­ненное задание считать мерой, через которую определяется количе­ственный показатель измеряемой стороны психики? Нельзя, потому что эта мера определяет различные стороны психики. У одних выявляется вла­дение Глава 3. Психометрические требования к построению и проверке методик - Тесты логическими действиями, у других — познание тех понятий, кото­рые представлены в тесте, у третьих практически измеряется их темп; у одних эта мера имеет одно, а у других — другое содержание Глава 3. Психометрические требования к построению и проверке методик - Тесты.

На основании проведенного анализа создатель делает вывод о том, что данные, которые получаются в тестировании, нельзя считать измере­ниями в подлинном смысле слова. Тест не является измерительным ин­струментом в том осознании Глава 3. Психометрические требования к построению и проверке методик - Тесты, которое существует, к примеру, в физи­ческих измерениях, хотя какую-то оценку той стороны психики, на диагностирование которой он ориентирован, тест указывает — правда, не в количественном выражении. Тест можно считать инвентарем сопоставления. При Глава 3. Психометрические требования к построению и проверке методик - Тесты сопоставлении не подчеркивается, что из 2-ух сравнивае­мых объектов один больше другого на столько-то единиц. В этом слу­чае довольно установить, чтó такой-то объект больше другого (либо других). По результатам сопоставления можно Глава 3. Психометрические требования к построению и проверке методик - Тесты расположить все изучае­мые объекты в определенном порядке — от наименьшего к большему либо напротив. Сопоставление не подразумевает неотклонимого измерения, а зна­чит, не подразумевает и единицы измерения. При сопоставлении устанав­ливается только Глава 3. Психометрические требования к построению и проверке методик - Тесты последовательность, порядок сравниваемых объектов по их величине.

Изготовленный К. М. Гуревичем вывод относительно тестов с пол­ным правом может быть перенесен и на другие диагностические мето­дики.


§ 1. Стандартизация


Диагностическая методика Глава 3. Психометрические требования к построению и проверке методик - Тесты отличается от хоть какой исследовательской тем, что она стандартизирована. Стандартизация — это единообразие процедуры проведения и оценки выполнения теста. Рассматривается она в 2-ух планах:

♦ как выработка единых требований к процедуре опыта;

♦ как определение одного аспекта Глава 3. Психометрические требования к построению и проверке методик - Тесты оценки результатов диагно­стических испытаний.

Стандартизация процедуры опыта предполагает унифика­цию инструкций, бланков обследования, методов регистрации резуль­татов, критерий проведения обследования.

К числу требований, которые нужно соблюдать при проведе­нии Глава 3. Психометрические требования к построению и проверке методик - Тесты опыта, можно, к примеру, отнести такие:

1) аннотации следует докладывать испытуемым схожим образом, обычно, письменно; в случае устных указаний они даются в различных группах одними и теми же словами, понятными для всех, в схожей манере;

2) ни Глава 3. Психометрические требования к построению и проверке методик - Тесты одному испытуемому не следует давать никаких преимуществ перед другими;

3) в процессе опыта не следует давать отдельным испытуе­мым дополнительные пояснения;

4) опыт с различными группами следует проводить в одинако­вое Глава 3. Психометрические требования к построению и проверке методик - Тесты, по способности, время денька, в схожих критериях;

5) временные ограничения в выполнении заданий для всех испыту­емых должны быть схожими и т. д.

Обычно создатели методики в руководстве приводят четкие и подроб­ные указания по процедуре Глава 3. Психометрические требования к построению и проверке методик - Тесты ее проведения. Формулирование таких указаний составляет основную часть стандартизации новейшей методи­ки, потому что только серьезное их соблюдение дает возможность сопоставить меж собой характеристики, приобретенные различными испытуемыми.

Другим более Глава 3. Психометрические требования к построению и проверке методик - Тесты принципиальным шагом в стандартизации методики явля­ется выбор аспекта, по которому следует проводить сопоставление ре­зультатов исследовательских испытаний, так как диагностические методики не имеют заблаговременно определенных эталонов удачливости либо беды в их выполнении.

Так, к Глава 3. Психометрические требования к построению и проверке методик - Тесты примеру, ребенок 6 лет, выполняя тест интеллектуального раз­вития, получил балл, равный 117. Отлично это либо плохо? Нередко ли таковой показатель встречается у малышей данного возраста? Количественный итог как такой ничего Глава 3. Психометрические требования к построению и проверке методик - Тесты не значит. Приобретенный дошколь­ником балл нельзя интерпретировать как показатель относительно вы­сокого, среднего либо низкого развития, потому что это развитие выражено в мерах, присущих данной методике, и, таким макаром, абсолютного значения приобретенные Глава 3. Психометрические требования к построению и проверке методик - Тесты результаты иметь не могут. Разумеется, необходимо располагать точкой отсчета и какими-то дозированными мерами, что­бы с помощью их оценивать приобретенные при диагностировании инди­видуальные и групповые данные. Появляется вопрос, что Глава 3. Психометрические требования к построению и проверке методик - Тесты за эту точку отсчета брать? В классическом тестировании такая точка добывается статистическим методом — это так именуемая статистическая норма.

В общих чертах стандартизация диагностической методики, ориен­тированной на норму, осуществляется методом ее проведения на боль Глава 3. Психометрические требования к построению и проверке методик - Тесты­шой презентабельной выборке испытуемых, которая ничем не отли­чается от той, для которой данная методика предназначена. На этой группе испытуемых, именуемой подборкой стандартизации, разраба­тываются нормы, указывающие не только лишь средний Глава 3. Психометрические требования к построению и проверке методик - Тесты уровень выпол­нения, да и его относительную вариативность выше и ниже среднего уровня. В итоге можно оценить различные степени удачливости либо неуспешности в выполнении диагностической пробы. Это позволяет найти положение определенного Глава 3. Психометрические требования к построению и проверке методик - Тесты испытуемого относительно вы­борки стандартизации [10, т. 1].

Для вычисления статистической нормы психологи-диагносты об­ратились к издавна используемым в биологии приемам математической статистики.


Разглядим пример.

На призывной пункт явилось несколько тыщ юных людей Глава 3. Психометрические требования к построению и проверке методик - Тесты.

Допустим, что они все приблизительно 1-го возраста. Что мы получим при измерении их роста? Обычно оказывается, что большая часть практически 1-го роста, совершенно мало будет людей очень малеханького и очень вы­сокого роста. Другие же Глава 3. Психометрические требования к построению и проверке методик - Тесты распределятся симметрично, уменьшаясь по количеству от среднего максимума в ту и другую сторону. Распреде­ление рассматриваемых величин — это обычное рассредотачивание (либо рассредотачивание по нормальному закону, кривая рассредотачивания Гаусса). Арифметики проявили, что Глава 3. Психометрические требования к построению и проверке методик - Тесты для описания такового рассредотачивания доста­точно знать два показателя — среднюю арифметическую и так назы­ваемое стандартное отклонение, которое выходит методом легких вычислений. Назовем среднюю арифметическую х, а стандартное откло­нение σ (сигма Глава 3. Психометрические требования к построению и проверке методик - Тесты малая). При обычном рассредотачивании все изучаемые величины фактически находятся в границах х + 5 σ.

Разглядим как определялась статистическая норма для тестов Стэн-форд-Бине. В группу испытуемых входили 4498 человек от 2,5 до 18 лет. Усилия стэнфордских психологов были Глава 3. Психометрические требования к построению и проверке методик - Тесты ориентированы на то, чтоб рассредотачивание приобретенных по каждому возрасту данных о выполнении

тестов было близко к нормальному. Этого результата удалось достигнуть далековато не сходу; в неких случаях ученым приходилось подменять одни Глава 3. Психометрические требования к построению и проверке методик - Тесты задания другими. В конце концов эта работа была закончена, и бы­ли подготовлены испытания по каждому возрасту со средней арифметиче­ской, равной 100, и со стандартным отклонением, равным 16. Принима­ется, что результаты в Глава 3. Психометрические требования к построению и проверке методик - Тесты границах х ± σ демонстрируют границы более соответствующей, презентабельной части рассредотачивания, границы нормы для данного возраста. При σ = 16 и х = 100 эти границы нормы будут от 84 до 116. Интерпретируется это так: результаты испытуемых, которые не выходят за эти Глава 3. Психометрические требования к построению и проверке методик - Тесты границы, находятся в границах нормы. Те, чьи резуль­таты наименее 84, находятся ниже нормы, а те, чьи результаты более 116, — выше нормы. Часто тот же прием используют и для предстоящей клас­сификации. Тогда Глава 3. Психометрические требования к построению и проверке методик - Тесты результаты в границах от х - σ до х - 2 σ интерпрети­руются как «несколько ниже нормы», а от х - 2 σ до х - З σ — как «значи­тельно ниже нормы». Соответственно классифицируются результаты, находящиеся выше нормы.

Вернемся к Глава 3. Психометрические требования к построению и проверке методик - Тесты результату, приобретенному ребенком 6 лет, о котором упоминалось выше. Его удачливость по тесту равна 117. Этот итог выше нормы, но очень некординально (верхняя граница нормы 116).


Не считая статистической нормы, основой для сопоставления, интерпрета­ции Глава 3. Психометрические требования к построению и проверке методик - Тесты результатов исследовательских испытаний могут стать и такие по­казатели, как процентили.

Процентиль — это процентная толика индивидов из подборки стандар­тизации, первичный итог которых ниже данного первичного по­казателя.


К примеру, если 28 % людей верно решат Глава 3. Психометрические требования к построению и проверке методик - Тесты менее 15 задач в ариф­метическом тесте, то первичному показателю 15 соответствует 28-й про­центиль (Р28). Процентили указывают на относительное положение ин­дивида в выборке стандартизации. Их также можно рассматривать, как ранговые градации, общее Глава 3. Психометрические требования к построению и проверке методик - Тесты число которых равно 100, с той только разни­цей, что при ранжировании принято начинать отсчет сверху, т. е. с луч­шего члена группы, получающего ранг 1. В случае же процентилей от­счет ведется Глава 3. Психометрические требования к построению и проверке методик - Тесты снизу, потому чем ниже процентиль, тем ужаснее позиция индивидума.


50-й процентиль (^ Р50) соответствует медиане — одному из показа­телей центральной тенденции. Процентили выше 50 представляют характеристики выше среднего, а те, которые лежат Глава 3. Психометрические требования к построению и проверке методик - Тесты ниже 50, — сравнитель­но низкие характеристики. 25-й и 75-й процентили известны также под на­званием 1-го и 3-го квартилей, так как они выделяют нижнюю и верхнюю четверти рассредотачивания. Как и медиана, они комфортны для опи­сания Глава 3. Психометрические требования к построению и проверке методик - Тесты рассредотачивания характеристик и сопоставления с другими распреде­лениями [10, т. 1].

Процентили не следует соединять с обыкновенными процентными пока­зателями. Последние являются первичными показателями и представляют собой процент верно выполненных заданий, тогда как процентиль Глава 3. Психометрические требования к построению и проверке методик - Тесты — это производный показатель, указывающий на долю от общего числа членов группы. Первичный итог, который ниже хоть какого показателя, приобретенного в выборке стандартизации, имеет ну­левой процентильный ранг (Ро). Итог, превосходящий хоть какой Глава 3. Психометрические требования к построению и проверке методик - Тесты по­казатель в выборке стандартизации, получает процентильный ранг 100 (Р100). Эти процентили, но, не означают нулевого либо абсолютно­го результата выполнения теста.

Процентильные характеристики владеют рядом плюсов, а именно:

♦ их просто высчитать Глава 3. Психометрические требования к построению и проверке методик - Тесты и осознать даже сравнимо неподготовлен­ному человеку;

♦ их применение довольно универсально и подходит к хоть какому типу тестов.

Но недочет процентилей - это существенное неравенство единиц отсчета в этом случае, когда анализируются Глава 3. Психометрические требования к построению и проверке методик - Тесты последние точки рас­пределения. При использовании процентилей (как ранее говорилось вы­ше) определяется только относительное положение персональной оценки, но не величина различий меж отдельными показателями.

В психодиагностике существует и другой подход к оценке резуль Глава 3. Психометрические требования к построению и проверке методик - Тесты­татов исследовательских испытаний. В нашей стране под управлением К. М. Гуревича [35] разрабатываются испытания, в каких в качестве точ­ки отсчета выступает не статистическая норма, а независящий от ре­зультатов тесты Глава 3. Психометрические требования к построению и проверке методик - Тесты, беспристрастно данный социально-психологиче­ский норматив.

Социально-психологический норматив реализуется в совокупы заданий, составляющих тест. Как следует, сам тест в полном его объеме и является таким нормативом. Все сравнения индивиду­альных либо групповых Глава 3. Психометрические требования к построению и проверке методик - Тесты результатов тестирования проводятся с тем максимумом, который представляется в тесте (а это полный набор зна­ний). В качестве аспекта оценки выступает показатель, отражающий степень близости результатов к нормативу. Имеется разработанная схема Глава 3. Психометрические требования к построению и проверке методик - Тесты представления групповых количественных данных.

Для анализа данных относительно их близости к социально-психо­логическому нормативу, условно рассматриваемому как 100 %-ное вы­полнение всего теста, все испытуемые разделяются по результа­там тестирования на 5 подгрупп Глава 3. Психометрические требования к построению и проверке методик - Тесты:

1) более удачные — 10%;

2) близкие к удачным — 20 %;

3) средние по удачливости — 40 %;

4) не достаточно удачные — 20 %;

5) менее удачные — 10%.

Для каждой из подгрупп подсчитывается средний процент правиль­но выполненных заданий. Строится система координат, где по оси аб Глава 3. Психометрические требования к построению и проверке методик - Тесты­сцисс идут номера подгрупп, по оси ординат — процент выполненных каждой из подгрупп заданий. После нанесения соответственных то­чек вычерчивается график, отражающий приближение каждой из под­групп к социально-психологическому нормативу. Такая обработка проводится по результатам Глава 3. Психометрические требования к построению и проверке методик - Тесты как теста в целом, так и каждого субтеста в отдельности.

^ Подборка стандартизации. При разработке и применении хоть какой точки отсчета следует обращать повышенное внимание на подборку испыту­емых, на которой Глава 3. Психометрические требования к построению и проверке методик - Тесты проводится стандартизация диагностической мето­дики. В математической статистике принято различать такие понятия, как генеральная совокупа (популяция) и подборка.

Всякая большая совокупа людей, которую желали бы исследо­вать либо относительно которых собираются Глава 3. Психометрические требования к построению и проверке методик - Тесты делать выводы, называет­ся генеральной совокупой.

Подборка — это часть либо подмножество совокупы. Проводить исследование всей популяции не принято. Обычно из нее выделяют группу людей — подборку стандартизации — которая реально подверга­ется тестированию, и с Глава 3. Психометрические требования к построению и проверке методик - Тесты ее помощью оценивается генеральная совокуп­ность. Чтоб оценки носили достоверный нрав, подборка должна быть репрезентативна, презентабельна рассматриваемой популя­ции, т. е. ее вероятностные характеристики должны совпадать либо быть близ­кими к Глава 3. Психометрические требования к построению и проверке методик - Тесты свойствам генеральной совокупы.


А. Анастази [10, т. 1] приводится пример формирования репрезента­тивной подборки при стандартизации шкалы Векслера. Подборка вклю­чала 1700 человек с равным количеством парней и дам. Испытуе­мые в возрасте от 16 до 64 лет были распределены Глава 3. Психометрические требования к построению и проверке методик - Тесты по 7 возрастным уровням. При формировании подборки исследователи опирались на дан­ные последней переписи населения США. Учитывалось пропорциональ­ное рассредотачивание населения по географическим районам, принадлеж­ность к городскому и сельскому популяции, принадлежность к Глава 3. Психометрические требования к построению и проверке методик - Тесты белоснежной либо цветной расе, учитывались также уровень образования и профес­сия. На каждом возрастном уровне в подборку были введены один муж­чина и одна дама, находящиеся в учреждениях для интеллектуально от Глава 3. Психометрические требования к построению и проверке методик - Тесты­сталых.


По воззрению А. Анастази, подавляющее большая часть диагностиче­ских методик стандартизовано не для настолько широких популяций, как многие считают. Тяжело рассчитывать, что по какому-либо тесту имеются адекватные нормы для Глава 3. Психометрические требования к построению и проверке методик - Тесты таких широких популяций, как, напри­мер, «взрослые американцы-мужчины» либо «американские малыши 14-лет­него возраста». Подборки, направленные на широкие популяции, не всегда репрезентативны и в большинстве случаев бывают сдвинуты в тех либо Глава 3. Психометрические требования к построению и проверке методик - Тесты других отношениях (т. е. некие подгруппы популяции могут быть пред­ставлены диспропорционально собственной численности). Так, если опре­делить популяцию как «14-летние дети», а подборку стандартиза­ции составить из 14-летних школьников, то ее нельзя рассматривать Глава 3. Психометрические требования к построению и проверке методик - Тесты в качестве репрезентативной, так как не все 14-летние детки являют­ся школьниками. В данном случае лучше сузить определение популяции (т. е. найти ее как «14-летние школьники»), чем переносить нор­мы, приобретенные на Глава 3. Психометрические требования к построению и проверке методик - Тесты школьниках, на популяцию 14-летних малышей.

Таким макаром, одним из методов обеспечения репрезентативно­сти подборки является ограничение популяции. Ограничить популяцию можно по различным признакам: по возрасту, полу, соц проис­хождению, профессии Глава 3. Психометрические требования к построению и проверке методик - Тесты, социально-экономическому статусу, здоровью и т. д. Такая популяция определяется как специфичная, и стандар­тизация исследовательских методик осуществляется на узконаправлен­ных подборках, которые репрезентативны специфичной популяции. Создатель диагностической методики должен всегда докладывать, для ка Глава 3. Психометрические требования к построению и проверке методик - Тесты­кой специфичной популяции были разработаны нормативные по­казатели.

Отбор испытуемых в подборку стандартизации осуществляется сле­дующим образом:

1) дается определение популяции с выделением в ее структуре пе­ременных, важных и малозначимых для Глава 3. Психометрические требования к построению и проверке методик - Тесты изучаемого психиче­ского явления (возраст, образование, профессия и т. д.);

2) популяция делится на части в согласовании со важными пере­менными;

3) испытуемые отбираются в случайном порядке и пропорциональ­но численности каждой важной части совокупы Глава 3. Психометрические требования к построению и проверке методик - Тесты. Случай­ный отбор может осуществляться по алфавиту, по таблице слу­чайных чисел либо другим методом. Принципиально, чтоб у всех пред­ставителей популяции были равные шансы попасть в подборку стандартизации. Это Глава 3. Психометрические требования к построению и проверке методик - Тесты условие предполагает, что каждый выбор не находится в зависимости от других.

Объем подборки может варьироваться в широких границах, но ее малый порог, нужный для получения достоверных ре­зультатов, — порядка 200 человек [26].


§ 2. Надежность и Глава 3. Психометрические требования к построению и проверке методик - Тесты валидность


До того как психодиагностические методики могут быть использо­ваны для практических целей, они должны пройти проверку по ряду формальных критериев, доказывающих их высочайшее качество и эффек­тивность. Эти требования в психодиагностике складывались годами в Глава 3. Психометрические требования к построению и проверке методик - Тесты процессе работы над тестами и над их совершенствованием. В резуль­тате появилась возможность оградить психологию от различных малограмотных подделок, претендующих на то, чтоб называться диаг­ностическими методиками.

К числу Глава 3. Психометрические требования к построению и проверке методик - Тесты главных критериев оценки психодиагностических мето­дик относятся надежность и валидность. Большой вклад в разработку этих понятий занесли забугорные психологи (А. Анастази, Е. Гизелли, Дж. Гилфорд, Л. Кронбах, Р. Торндайк и Е. Хаген и др.). Ими Глава 3. Психометрические требования к построению и проверке методик - Тесты были разработаны как формально-логический, так и математико-статисти-ческий аппарат (сначала, корреляционный способ и факторный анализ) обоснования степени соответствия методик отмеченным кри­териям.

В психодиагностике препядствия надежности и валидности методик тесновато Глава 3. Психометрические требования к построению и проверке методик - Тесты взаимосвязаны, все же существует традиция раздельного изложения этих важных черт. Следуя ей, начнем с рас­смотрения надежности методик.


Надежность


В классической тестологии термин «надежность» значит относительное посто­янство, устойчивость, согласованность Глава 3. Психометрические требования к построению и проверке методик - Тесты ре­зультатов теста при первичном и повторном его применении на одних и тех же испытуемых. Как пишет А. Анастази [ 10, т. 1 ], навряд ли можно с доверием относиться к тесту ума, если по Глава 3. Психометрические требования к построению и проверке методик - Тесты нему сначала неде­ли ребенок имел показатель, равный 110, а к концу — 80. Повторное применение надежных методик дает схожие оценки. При всем этом в оп­ределенной мере могут совпадать как сами результаты, так и порядко­вое Глава 3. Психометрические требования к построению и проверке методик - Тесты место (ранг), занимаемое испытуемым в группе. И в том, и в дру­гом случае при повторении опыта вероятны некие расхождения, но принципиально, чтоб они были малозначительными, в границах одной груп­пы Глава 3. Психометрические требования к построению и проверке методик - Тесты. Таким макаром, можно сказать, что надежность методики — это таковой аспект, который гласит о точности психических изме­рений, т. е. позволяет судить о том, как внушают доверие полу­ченные результаты.

Степень надежности Глава 3. Психометрические требования к построению и проверке методик - Тесты методик находится в зависимости от многих обстоятельств. Потому принципиальной неувязкой практической диагностики является выяснение причин, снижающих точность измерений. Была изготовлена попытка со­ставить систематизацию таких причин. Посреди их более нередко именуются последующие:

1) непостоянность диагностируемого Глава 3. Психометрические требования к построению и проверке методик - Тесты характеристики;

2) несовершенство исследовательских методик (небережно составле­на аннотация, задания по собственному нраву разнородны, нечет­ко сформулированы указания, как методику предъявлять испы­туемым, и т. д.);

3) меняющаяся ситуация обследования (различное время денька Глава 3. Психометрические требования к построению и проверке методик - Тесты, когда проводятся опыты, различная освещенность помещения, на­личие либо отсутствие сторонних шумов и т. д.);

4) различия в манере поведения экспериментатора (от опыта к опы­ту по-разному предъявляет аннотации, по-разному стимулиру­ет выполнение Глава 3. Психометрические требования к построению и проверке методик - Тесты заданий и т. д.);

5) колебания в многофункциональном состоянии испытуемого (в одном опыте отмечается не плохое самочувствие, в другом — утом­ление и т. д.);

6) элементы субъективности в методах оценки и интерпретации результатов Глава 3. Психометрические требования к построению и проверке методик - Тесты (когда ведется протоколирование ответов испы­туемых, оцениваются ответы по степени полноты, оригинально­сти и т. п.).

Если все эти причины подразумевать и попытаться в каждом из их убрать условия, снижающие точность Глава 3. Психометрические требования к построению и проверке методик - Тесты измерений, то можно до­биться применимого уровня надежности теста. Одним из важных средств увеличения надежности психодиагностической методики яв­ляется единообразие процедуры обследования, его строгая регламен­тация: схожие для обследуемой подборки испытуемых Глава 3. Психометрические требования к построению и проверке методик - Тесты обстановка и условия работы, однотипный нрав инструкций, схожие для всех временные ограничения, методы и особенности контакта с ис­пытуемыми, порядок предъявления заданий и т. д. При таковой стандар­тизации процедуры исследования можно значительно уменьшить вли Глава 3. Психометрические требования к построению и проверке методик - Тесты­яние сторонних случайных причин на результаты теста и таким макаром повысить их надежность.

На характеристику надежности методик огромное воздействие оказыва­ет исследуемая подборка. Она может как снижать, так и Глава 3. Психометрические требования к построению и проверке методик - Тесты завышать этот показатель, к примеру, надежность может быть искусственно завышена, если в выборке маленький разброс результатов, т. е. если результаты по своим значениям близки друг к другу. В данном случае при повтор­ном Глава 3. Психометрические требования к построению и проверке методик - Тесты обследовании новые результаты также расположатся тесноватой груп­пой. Вероятные конфигурации ранговых мест испытуемых будут незна­чительными, и, как следует, надежность методики будет высочайшей. Такое же неоправданное завышение надежности может появиться при анализе Глава 3. Психометрические требования к построению и проверке методик - Тесты результатов подборки, состоящей из группы, имеющей очень высочайшие результаты, и из группы с очень низкими оценками по тесту. Тогда эти далековато отстоящие друг от друга результаты не будут перекрываться, даже если Глава 3. Психометрические требования к построению и проверке методик - Тесты и вмешаются в условия опыта слу­чайные причины. Потому в руководстве обычно делается описание подборки, на которой определялась надежность методики.

В текущее время надежность все почаще определяется на более однородных подборках, т. е Глава 3. Психометрические требования к построению и проверке методик - Тесты. на подборках, похожих по полу, возрасту, уровню образования, проф подготовке и т. п. Для каж­дой таковой подборки приводятся свои коэффициенты надежности. При­водимый показатель надежности применим только к группам, подоб­ным Глава 3. Психометрические требования к построению и проверке методик - Тесты тем, на которых он определялся. Если методика применяется к выборке, отличающейся от той, на которой проверялась ее надежность, то эта процедура должна быть проведена поновой.

Потому что надежность отражает степень согласованности 2-ух неза Глава 3. Психометрические требования к построению и проверке методик - Тесты­висимо приобретенных рядов характеристик, то математико-статистический прием, при помощи которого устанавливается надежность мето­дики — это корреляции (по Пирсону либо Спирмену). Надежность тем выше, чем поближе приобретенный коэффициент корреляции подходит к единице, и Глава 3. Психометрические требования к построению и проверке методик - Тесты напротив.

В данной книжке при описании видов надежности основной упор де­лается на работы К. М. Гуревича [30-33], который, проведя тщатель­ный анализ забугорной литературы по этой дилемме, предложил тол Глава 3. Психометрические требования к построению и проверке методик - Тесты­ковать надежность как всеохватывающую характеристику, включающую:

♦ надежность самого измерительного инструмента;

♦ стабильность изучаемого признака;

♦ константность, т. е. относительную независимость результатов от личности экспериментатора.

Главные характеристики он предложил обозначить последующим образом:

♦ показатель, характеризующий измерительный инструмент, пред Глава 3. Психометрические требования к построению и проверке методик - Тесты­лагается именовать коэффициентом надежности;

♦ показатель, характеризующий стабильность измеряемого свой­ства — коэффициентом стабильности;

♦ показатель оценки воздействия личности экспериментатора — коэф­фициентом константности.

Конкретно в таком порядке рекомендуется производить проверку ме­тодики на надежность Глава 3. Психометрические требования к построению и проверке методик - Тесты: целенаправлено поначалу проверить инструмент измерения. Если приобретенные данные удовлетворительны, то можно перебегать к установлению меры стабильности измеряемого характеристики, а уже после чего, по мере надобности, заняться аспектом констант­ности.

Остановимся на Глава 3. Психометрические требования к построению и проверке методик - Тесты более подробном рассмотрении этих характеристик, характеризующих с различных сторон надежность психодиагностической методики.

^ Определение надежности измерительного инструмента. От того, как составлена методика, как верно подобраны задания исходя из убеждений их взаимосогласованности, как она однородна, зависит точность Глава 3. Психометрические требования к построению и проверке методик - Тесты, объективность хоть какого психического измерения. Внутренняя однородность методики указывает, что ее задания акту­ализируют одно и то же свойство, признак.

Для проверки надежности измерительного инструмента, говоря­щего о его однородности Глава 3. Психометрические требования к построению и проверке методик - Тесты (либо гомогенности), употребляется так назы­ваемый способ «расщепления». Обычно задания делятся на четные и нечетные, раздельно обрабатываются, а потом результаты 2-ух получен­ных рядов коррелируются меж собой. Для внедрения этого спосо Глава 3. Психометрические требования к построению и проверке методик - Тесты­ба необходимо поставить испытуемых в такие условия, чтоб они смогли успеть решить (либо попробовать решить) все задания. Если методика однородна, то большой различия в удачливости решения по таким по­ловинкам не будет, и, как следует Глава 3. Психометрические требования к построению и проверке методик - Тесты, коэффициент корреляции будет довольно высочайшим.

Можно разделять задания и другим методом. К примеру, можно сопоста­вить первую половину теста со 2-ой, первую и третью четверть со 2-ой и четвертой и т. п Глава 3. Психометрические требования к построению и проверке методик - Тесты. Но «расщепление» на четные и нечет­ные задания представляется более целесообразным, так как конкретно этот метод более независим от воздействия таких причин, как врабатываемость, тренировка, утомление и пр.

Методика Глава 3. Психометрические требования к построению и проверке методик - Тесты признается надежной, когда приобретенный коэффициент не ниже 0,75-0,85. Наилучшие по надежности испытания дают коэффициенты порядка 0,90 и поболее.

^ Определение стабильности изучаемого признака. Найти на­дежность самой методики — это не означает решить все вопросы, связан Глава 3. Психометрические требования к построению и проверке методик - Тесты­ные с ее применением. Необходимо еще установить, как устойчив, стабилен признак, который исследователь хочет определять. Было бы методологической ошибкой рассчитывать на абсолютную стабиль­ность психических признаков. В том, что измеряемый признак с течением времени Глава 3. Психометрические требования к построению и проверке методик - Тесты изменяется, нет ничего небезопасного для надежности. Все дело в том, в каких границах варьируются результаты от опыта к опыту у 1-го и такого же испытуемого, не приводят ли эти колебания Глава 3. Психометрические требования к построению и проверке методик - Тесты к тому, что испытуемый по непонятным причинам оказывается то сначала, то посреди, то в конце подборки. Сделать какие-то определенные вы­воды об уровне представленности измеряемого признака у такового ис­пытуемого нельзя. Таким Глава 3. Психометрические требования к построению и проверке методик - Тесты макаром, колебания признака не обязаны иметь непредсказуемый нрав. Если не ясны предпосылки, по которым происходит резкое колебание, то таковой признак не может быть исполь­зован в исследовательских целях.

Для проверки стабильности Глава 3. Психометрические требования к построению и проверке методик - Тесты диагностируемого признака, характеристики употребляется прием, узнаваемый под заглавием тест-ретест. Он зак­лючается в повторном обследовании испытуемых при помощи той же методики. О стабильности признака судят по коэффициенту корреля­ции меж плодами первого Глава 3. Психометрические требования к построению и проверке методик - Тесты и второго обследования. Он будет свидетельствовать о сохранении либо несохранении каждым испытуе­мым собственного порядкового номера в выборке.

На степень стойкости, стабильности диагностируемого характеристики оказывают влияние различные причины. Число их довольно велико. Выше уже Глава 3. Психометрические требования к построению и проверке методик - Тесты говорилось о том, как принципиально соблюдать требования единообразия процедуры проведения опыта. Так, к примеру, если 1-ое тес­тирование проводилось в утренние часы, то и повторное должно быть проведено с Глава 3. Психометрические требования к построению и проверке методик - Тесты утра; если 1-ый опыт сопровождался подготовительным показом заданий, то и при повторном испытании это условие также должно быть соблюдено и т. д.

При определении стабильности признака огромное значение имеет просвет времени меж Глава 3. Психометрические требования к построению и проверке методик - Тесты первым и вторым обследованием. Чем короче срок от первого до второго тесты, тем (при иных рав­ных критериях) больше шансов, что диагностируемый признак сохра­нит уровень первого тесты. С повышением временного интервала стабильность признака имеет Глава 3. Психометрические требования к построению и проверке методик - Тесты тенденцию понижаться, потому что возрас­тает число сторонних причин, влияющих на нее. Как следует, навязывается вывод, что целенаправлено проводить повторное тести­рование через маленький срок после первого. Но здесь есть Глава 3. Психометрические требования к построению и проверке методик - Тесты свои трудности: если срок меж первым и вторым опытом маленькой, то некие испытуемые могут воспроизвести свои прежние ответы по памяти и, таким макаром, отойдут от смысла выполнения заданий. В данном случае результаты Глава 3. Психометрические требования к построению и проверке методик - Тесты 2-ух предъявлений методики уже нельзя рассматривать как независящие.

Тяжело верно ответить на вопрос, какой срок можно считать опти­мальным для повторного опыта. Только исследователь, исхо­дя из психической сути методики, критерий, в каких Глава 3. Психометрические требования к построению и проверке методик - Тесты она проводится, особенностей подборки испытуемых, должен найти этот срок. При всем этом таковой выбор должен быть научно обусловлен. В те-стологической литературе более нередко именуются временные ин­тервалы в несколько месяцев (но менее Глава 3. Психометрические требования к построению и проверке методик - Тесты полугода). При обследова­нии деток младшего возраста, когда возрастные конфигурации и развитие происходят очень стремительно, эти интервалы могут быть порядка несколь­ких недель [10, т. 1].

Коэффициент стабильности методики должен быть довольно Глава 3. Психометрические требования к построению и проверке методик - Тесты вы­соким (не ниже 0,80).

^ Определение константности (относительной независимости резуль­татов от личности экспериментатора). Так как методика, разрабо­танная для исследовательских целей, не создана для того, чтоб вечно оставаться в руках собственных создателей, очень принципиально Глава 3. Психометрические требования к построению и проверке методик - Тесты знать, в ка­кой мере ее результаты поддаются воздействию личности эксперимента­тора. Хотя диагностическая методика всегда снабжается подробными инструкциями по ее применению, правилами и примерами, указыва­ющими, как проводить опыт, но регламентировать Глава 3. Психометрические требования к построению и проверке методик - Тесты мане­ру поведения экспериментатора, скорость его речи, тон голоса, паузы, выражение лица очень тяжело. Испытуемый в собственном отношении к опы­ту всегда отразит то, как сам экспериментатор к этому опыту Глава 3. Психометрические требования к построению и проверке методик - Тесты относит­ся (допускает небрежность либо действует точно в согласовании с тре­бованиями процедуры, проявляет требовательность, напористость либо бесконтрольность и т. п.).

Хотя в тестологической практике аспектом константности поль­зуются нечасто, но это Глава 3. Психометрические требования к построению и проверке методик - Тесты не может служить основанием для его не­дооценки. Если у создателей методики появляются подозрения по поводу вероятного воздействия личности экспериментатора на финал диагно­стической процедуры, то целенаправлено проверить методику по этому аспекту. При Глава 3. Психометрические требования к построению и проверке методик - Тесты всем этом принципиально подразумевать последующий момент. Если под воздействием нового экспериментатора все испытуемые в схожей степени стали работать незначительно лучше либо малость ужаснее, то сам по для себя данный факт (хотя и заслуживает Глава 3. Психометрические требования к построению и проверке методик - Тесты внимания) на надежность мето­дики не окажет воздействия. Надежность поменяется только тогда, когда воздействие экспериментатора на испытуемых различно: одни стали работать лучше, другие ужаснее, а третьи так же, как и Глава 3. Психометрические требования к построению и проверке методик - Тесты при первом экспериментаторе. Другими словами, если испытуемые при новеньком экспе­риментаторе изменили свои порядковые места в выборке.

Коэффициент константности определяется методом корреляции ре­зультатов 2-ух опытов, проведенных в относительно схожих усло Глава 3. Психометрические требования к построению и проверке методик - Тесты­виях на одной и той же выборке испытуемых, но различными экспери­ментаторами. Коэффициент корреляции не должен быть ниже 0,80.

Итак, подверглись рассмотрению три показателя надежности психодиагно­стических методик. Может появиться вопрос, необходимо ли Глава 3. Психометрические требования к построению и проверке методик - Тесты при созда­нии методик производить проверку каждого из их? На этот вопрос следует дать утвердительный ответ.

Так, создатели «Стандартных требований к педагогическим и психо­логическим тестам» в главе «Надежность» отмечают, что коэффици Глава 3. Психометрические требования к построению и проверке методик - Тесты­ент надежности — это родовое понятие, включающее в себя некоторое количество видов, и каждый вид имеет собственный особенный смысл. Делит эту точку зрения и К. М. Гуревич [32]. По его воззрению, когда молвят о различных методах определения Глава 3. Психометрические требования к построению и проверке методик - Тесты надежности, то имеют дело не с наилучшей либо худшей мерой, а с мерами разной по существу надежности. По правде, чего стоит методика, если не ясно, надежна ли она сама по для Глава 3. Психометрические требования к построению и проверке методик - Тесты себя как измерительный инструмент, либо не установлена стабильность из­меряемого характеристики? Чего стоит диагностическая методика, если не­известно, могут ли изменяться результаты зависимо от того, кто ведет опыт? Каждый в отдельности показатель Глава 3. Психометрические требования к построению и проверке методик - Тесты никак не заме­нит других методов проверки и, как следует, не может рассматри­ваться в качестве нужной и достаточной свойства надеж­ности. Только методика, располагающая полной чертой надежности, более применима для диагностико-практического Глава 3. Психометрические требования к построению и проверке методик - Тесты при­менения.


Валидность


Другим после надежности главным аспектом оценки свойства методик является валидность. Вопрос о валидности методи­ки решается только после того, как установлена достаточная ее надеж­ность, так как ненадежная Глава 3. Психометрические требования к построению и проверке методик - Тесты методика не может быть валидной. Но самая надежная методика без познания ее валидности является практи­чески никчемной.

Следует увидеть, что вопрос о валидности до ближайшего времени представляется одним из самых сложных. Более устоявшимся Глава 3. Психометрические требования к построению и проверке методик - Тесты определением этого понятия будет то, которое приведено в книжке А. Анастази: «Валидность теста — понятие, указывающее нам, что тест определяет и как отлично он это делает» [10, т. 1 с. 126].

Валидность по собственной Глава 3. Психометрические требования к построению и проверке методик - Тесты сущности — это всеохватывающая черта, вклю­чающая, с одной стороны, сведения о том, применима ли методика для измерения того, зачем она была сотворена, а с другой стороны, какова ее действенность, эффективность, практическая полезность Глава 3. Психометрические требования к построению и проверке методик - Тесты.

По этой причине не существует какого-то одного универсального подхода к определению валидности. Зависимо от того, какую сто­рону валидности желает разглядеть исследователь, употребляются и различные методы подтверждения. Другими словами, понятие валидно Глава 3. Психометрические требования к построению и проверке методик - Тесты­сти содержит в себе различные ее виды, имеющие собственный особенный смысл. Проверка валидности методики именуется валидизацией.

Валидность в первом ее осознании имеет отношение к самой мето­дике, т. е. это валидность измерительного Глава 3. Психометрические требования к построению и проверке методик - Тесты инструмента. Такая провер­ка именуется теоретической валидизацией. Валидность во 2-м осознании уже относится не столько к методике, сколько к цели ее использования. Это прагматическая валидизация.

Обобщая, можно сказать последующее:

♦ при теоретической валидизации исследователя интересует Глава 3. Психометрические требования к построению и проверке методик - Тесты само свойство, измеряемое методикой. Это, по существу, значит, что проводится фактически психическая валидизация;

♦ при прагматической валидизации сущность предмета измерения (пси­хологического характеристики) оказывается вне поля зрения. Главный акцент изготовлен на Глава 3. Психометрические требования к построению и проверке методик - Тесты то, чтоб обосновать, что нечто, измеряемое мето­дикой, имеет связь с определенными областями практики.

Провести теоретическую валидизацию, в отличие от прагматиче­ской, иногда оказывается существенно сложнее. Не вдаваясь пока в кон­кретные Глава 3. Психометрические требования к построению и проверке методик - Тесты детали, остановимся в общих чертах на том, как проверяется прагматическая валидность: выбирается какой-либо независящий от методики наружный аспект, определяющий фуррор в той либо другой деятельности (учебной, проф и т. п.), и с ним Глава 3. Психометрические требования к построению и проверке методик - Тесты сравнива­ются результаты диагностической методики. Если связь меж ними признается удовлетворительной, то делается вывод о практической зна­чимости, эффективности, действенности диагностической методики.

Для определения теоретической валидности отыскать какой-нибудь не­зависимый аспект Глава 3. Психометрические требования к построению и проверке методик - Тесты, лежащий вне методики, еще сложнее. Поэто­му на ранешних стадиях развития тестологии, когда концепция валидно­сти только складывалась, бытовало интуитивное представление о том, что тест определяет:

1) методика называлась валидной, потому что то, что Глава 3. Психометрические требования к построению и проверке методик - Тесты она определяет, про­сто разумеется;

2) подтверждение валидности основывалось на убежденности иссле­дователя в том, что его способ позволяет осознать испытуемого;

3) методика рассматривалась как валидная (т. е. принималось ут­верждение, что такой Глава 3. Психометрические требования к построению и проверке методик - Тесты-то тест определяет такое-то качество) только поэтому, что теория, на основании которой строилась методика, очень отменная.

Принятие на веру голословных утверждений о валидности методи­ки не могло длиться долгое Глава 3. Психометрические требования к построению и проверке методик - Тесты время. 1-ые проявления дей­ствительно научной критики развенчали таковой подход: начались по­иски научно обоснованных доказательств.

Таким макаром, провести теоретическую валидизацию методики — это обосновать, что методика определяет конкретно то свойство, качество, которое Глава 3. Психометрические требования к построению и проверке методик - Тесты она по плану исследователя должна определять.

Так, к примеру, если некий тест разрабатывался для того, чтоб диагностировать интеллектуальное развитие малышей, нужно проанализировать, вправду ли он определяет конкретно это развитие, а не какие-то дру­гие Глава 3. Психометрические требования к построению и проверке методик - Тесты особенности (к примеру, личность, нрав и т. п.). Таким макаром, для теоретической валидизации кардинальной неувязкой является отношение меж психическими явлениями и их показателями, средством которых эти психические явления пробуют Глава 3. Психометрические требования к построению и проверке методик - Тесты узнать. Это указывает, как план создателя и результаты методики со­впадают.

Не настолько трудно провести теоретическую валидизацию новейшей ме­тодики, если для измерения данного характеристики уже имеется методика с доказанной валидностью. Наличие Глава 3. Психометрические требования к построению и проверке методик - Тесты корреляции меж новейшей и ана­логичной уже испытанной методикой показывает на то, что разра­ботанная методика определяет то же психологическое качество, что и эталонная. И если новый способ сразу оказывается более ком­пактным и экономным Глава 3. Психометрические требования к построению и проверке методик - Тесты в проведении и обработке результатов, то психодиагносты получают возможность использовать новый инстру­мент заместо старенького.

Но теоретическая валидность доказывается не только лишь методом сопо­ставления с схожими показателями, также и Глава 3. Психометрические требования к построению и проверке методик - Тесты с теми, где, исходя из догадки, важных связей не должно быть. Таким макаром, для проверки теоретической валидности принципиально, с одной стороны, устано­вить степень связи с схожей методикой (конвергентная валид­ность) и Глава 3. Психометрические требования к построению и проверке методик - Тесты отсутствие этой связи с методиками, имеющими другое тео­ретическое основание (дискриминантная валидность).

Еще сложнее провести теоретическую валидизацию методики тогда, когда таковой путь проверки неосуществим. В большинстве случаев конкретно с таковой ситуацией сталкивается Глава 3. Психометрические требования к построению и проверке методик - Тесты исследователь. В таких обстоятельствах только постепенное скопление различной инфы о изуча­емом свойстве, анализ теоретических предпосылок и эксперименталь­ных данных, значимый опыт работы с методикой позволяет рас­крыть ее психический смысл Глава 3. Психометрические требования к построению и проверке методик - Тесты.

Важную роль для осознания того, что методика определяет, играет сравнение ее характеристик с практическими формами деятельно­сти. Но тут в особенности принципиально, чтоб методика была кропотливо прора­ботана в теоретическом плане, т. е. чтоб Глава 3. Психометрические требования к построению и проверке методик - Тесты имелась крепкая, обосно­ванная научная база. Тогда при сравнении методики с взятым из ежедневной практики наружным аспектом, подходящим тому, что она определяет, может быть получена информация, подкрепляющая теоретические представления о Глава 3. Психометрические требования к построению и проверке методик - Тесты ее сути.

Принципиально держать в голове, что если подтверждена теоретическая валидность, то ин­терпретация приобретенных характеристик становится более ясной и од­нозначной, а заглавие методики соответствует сфере ее внедрения. Что касается прагматической валидизации Глава 3. Психометрические требования к построению и проверке методик - Тесты, то она предполагает проверку методики исходя из убеждений ее практической эффективности, значимости, полезности, так как диагностической методикой име­ет смысл воспользоваться только тогда, когда подтверждено, что измеряемое свойство проявляется в определенных актуальных ситуациях, в Глава 3. Психометрические требования к построению и проверке методик - Тесты опре­деленных видах деятельности. Ей присваивают огромное значение особен­но там, где встает вопрос отбора.

Если снова обратиться к истории развития тестологии [1; 10; 31; 62; 88 и др.], то можно выделить таковой период Глава 3. Психометрические требования к построению и проверке методик - Тесты (20-30-е гг. XX в.), когда научное содержание тестов и их теоретический багаж заинтересовывали в наименьшей степени. Принципиально было, чтоб тест работал, помогал стремительно отбирать более приготовленных людей. Эмпирический аспект оценки тестовых заданий числился единственно верным Глава 3. Психометрические требования к построению и проверке методик - Тесты ориентиром в решении научных и прикладных задач.

Внедрение исследовательских методик с чисто эмпирическим обоснованием, без ясной теоретической базы часто приводило к псевдонаучным выводам, к неоправданным практическим рекомен­дациям. Нельзя Глава 3. Психометрические требования к построению и проверке методик - Тесты было точно именовать те особенности, свойства, которые испытания выявляли. По существу они являлись слепыми пробами.

Таковой подход к дилемме валидности тестов был характерен прямо до начала 50-х гг. XX в. не только лишь в Глава 3. Психометрические требования к построению и проверке методик - Тесты США, да и в других странах. Те­оретическая слабость эмпирических способов валидизации не могла не вызвать критики со стороны тех ученых, которые в разработке тестов призывали опираться не только лишь на нагую эмпирику Глава 3. Психометрические требования к построению и проверке методик - Тесты и практику, да и на теоретическую концепцию. Практика без теории, как понятно, слепа, а теория без практики мертва. В текущее время теоретико-практическая оценка валидности методик воспринимается как наибо­лее Глава 3. Психометрические требования к построению и проверке методик - Тесты продуктивная.

Для проведения прагматической валидизации методики, т. е. для оценки ее эффективности, действенности, практической значимости, обычно употребляется независящий наружный аспект — показатель проявления изучаемого характеристики в ежедневной жизни. Таким кри­терием может быть и успеваемость Глава 3. Психометрические требования к построению и проверке методик - Тесты (для тестов возможностей к обу­чению, тестов достижений, тестов ума), и производственные заслуги (для методик проф направленности), и эф­фективность реальной деятельности — рисование, моделирование и т. д. (для тестов особых возможностей Глава 3. Психометрические требования к построению и проверке методик - Тесты), личные оценки (для тестов личности).

Южноамериканские исследователи Д. Тиффин и Е. Мак-Кормик, прове­дя анализ применяемых для подтверждения валидности наружных кри­териев, выделяют четыре их типа [по 31):

1) аспекты выполнения Глава 3. Психометрические требования к построению и проверке методик - Тесты (в их число могут заходить такие, как коли­чество выполненной работы, успеваемость, время, затраченное на обучение, темп роста квалификации и т. п.);

2) личные аспекты (они включают разные виды ответов, которые отражают отношение человека к чему Глава 3. Психометрические требования к построению и проверке методик - Тесты-либо либо к кому-либо, его мировоззрение, взоры, предпочтения; обычно личные аспекты получают при помощи интервью, опросников, анкет);

3) физиологические аспекты (они применяются при исследовании вли­яния среды и других ситуационных переменных Глава 3. Психометрические требования к построению и проверке методик - Тесты на организм и психику человека; замеряется частота пульса, давле­ние крови, электросопротивление кожи, симптомы утомления И т. д.);

4) аспекты случайностей (используются, когда цель исследования касается, к примеру, трудности отбора для работы таких лиц Глава 3. Психометрические требования к построению и проверке методик - Тесты, ко­торые наименее подвержены злосчастным случаям).

Наружный аспект должен отвечать трем главным требованиям:

♦ он должен быть релевантным;

♦ свободным от помех;

♦ надежным.

Под релевантностью имеется в виду смысловое соответствие диаг­ностического инструмента Глава 3. Психометрические требования к построению и проверке методик - Тесты независящему актуально принципиальному аспекту. Другими словами, должна быть уверенность в том, что в крите­рии задействованы конкретно те особенности персональной психики, которые измеряются и диагностической методикой. Наружный крите­рий и Глава 3. Психометрические требования к построению и проверке методик - Тесты диагностическая методика должны находиться меж собой во внутреннем смысловом согласовании, быть отменно однородны­ми по психической сути. Если, к примеру, тест определяет ин­дивидуальные особенности мышления, умение делать логические деяния с определенными объектами, понятиями Глава 3. Психометрические требования к построению и проверке методик - Тесты, то и в аспекты необходимо находить проявление конкретно этих умений. Это в одинаковой мере относится и к проф деятельности. Она имеет не одну, а несколько целей, задач, любая из которых специфична Глава 3. Психометрические требования к построению и проверке методик - Тесты и предъяв­ляет свои условия к выполнению. Из этого вытекает существование нескольких критериев выполнения проф деятельности. Потому не следует проводить сравнение удачливости по диагно­стическим методикам с производственной эффективностью в целом. Нужно Глава 3. Психометрические требования к построению и проверке методик - Тесты отыскать таковой аспект, который по нраву выполняе­мых операций соотносим с методикой.

Если относительно наружного аспекта непонятно, релевантен он измеряемому свойству либо нет, то сравнение с ним результатов психодиагностической методики становится фактически Глава 3. Психометрические требования к построению и проверке методик - Тесты бесполез­ным. Оно не позволяет придти к любым выводам, которые могли бы дать оценку валидности методики.

Требования свободы от помех вызываются тем, что, к примеру, учеб­ная либо производственная удачливость находится в зависимости Глава 3. Психометрические требования к построению и проверке методик - Тесты от 2-ух переменных: от самого человека, его личных особенностей, измеряемых методиками, и от ситуации, критерий учебы, труда, которые могут при­внести помехи, «загрязнить» используемый аспект. Чтоб в некий мере избежать этого Глава 3. Психометрические требования к построению и проверке методик - Тесты, следует отбирать для исследования такие груп­пы людей, которые находятся в более либо наименее схожих критериях. Можно использовать и другой способ. Он состоит в корректировке воздействия помех. Эта корректировка носит обычно статистический Глава 3. Психометрические требования к построению и проверке методик - Тесты ха­рактер. Так, к примеру, производительность следует брать не по абсо­лютным значениям, а в отношении к средней производительности ра­бочих, работающих в подобных критериях.

Когда молвят, что аспект обязан иметь Глава 3. Психометрические требования к построению и проверке методик - Тесты статистически достовер­ную надежность, это значит, что он должен отражать всепостоянство и устойчивость исследуемой функции.

Поиски адекватного и просто выявляемого аспекта относятся к очень принципиальным и сложным задачкам валидизации. В западной тестологии мно­го методик Глава 3. Психометрические требования к построению и проверке методик - Тесты дисквалифицировано только поэтому, что не удалось отыскать подходящего аспекта для их проверки. К примеру, у большей части анкет данные по их валидности непонятны, потому что тяжело отыскать адекватный наружный Глава 3. Психометрические требования к построению и проверке методик - Тесты аспект, отвечающий тому, что они определяют.

Оценка валидности методик может носить количественный и каче­ственный нрав.

Для вычисления количественного показателя — коэффициента ва­лидности — сопоставляются результаты, приобретенные при применении диагностической методики, с данными Глава 3. Психометрические требования к построению и проверке методик - Тесты, приобретенными по наружному аспекту, тех же лиц. Употребляются различные виды линейной корреля­ции (по Спирмену, по Пирсону).

^ Сколько испытуемых нужно для расчета валидности?

Практика показала, что их не должно быть меньше 50, но луч Глава 3. Психометрические требования к построению и проверке методик - Тесты­ше всего более 200. Нередко появляется вопрос, какой должна быть вели­чина коэффициента валидности, чтоб она числилась применимой? В общем отмечается, что довольно того, чтоб коэффициент валид­ности был статистически значим. Низким Глава 3. Психометрические требования к построению и проверке методик - Тесты признается коэффициент валидности порядка 0,20-0,30, средним — 0,30-0,50 и высочайшим — свы­ше 0,60.

Но, как подчеркивают А. Анастази [10, т. 1], К. М. Гуревич [31] и др., не всегда для вычисления коэффициента валидности правомерно ис­пользовать линейную корреляцию. Этот Глава 3. Психометрические требования к построению и проверке методик - Тесты прием оправдан только тогда, когда подтверждено, что фуррор в некий деятельности прямо пропорцио­нален успеху в выполнении диагностической пробы. Позиция зару­бежных тестологов, в особенности тех, кто занимается профпригодностью и профотбором, в большинстве Глава 3. Психометрические требования к построению и проверке методик - Тесты случаев сводится к беспрекословному признанию того, что для профессии больше подойдет тот, кто больше выполнил заданий в тесте. Но может быть и так, что для фуррора в деятельности необходимо владеть свойством на уровне 40 % решения Глава 3. Психометрические требования к построению и проверке методик - Тесты теста. Предстоящий фуррор в тесте уже не имеет никакого значения для профессии. Нагляд­ный пример из монографии К. М. Гуревича [31]: почтальон должен уметь читать, но читает ли он с обыкновенной Глава 3. Психометрические требования к построению и проверке методик - Тесты скоростью либо с очень боль­шой скоростью — это уже не имеет проф значения. При таком соотношении характеристик методики и наружного аспекта наи­более адекватным методом установления валидности может быть кри­терий Глава 3. Психометрические требования к построению и проверке методик - Тесты различий.

Вероятен и другой случай: более высочайший уровень характеристики, чем это просит профессия, служит помехой проф успеху. Так, еще на заре XX в. южноамериканский исследователь Ф. Тейлор отыскал, что более развитые работницы Глава 3. Психометрические требования к построению и проверке методик - Тесты производства имеют невысокую производительность труда. Другими словами высочайший уровень их интеллектуального развития мешал им высокопроизводительно трудиться. В данном случае для вычисления коэффициента валидности более подошел бы диспер­сионный анализ либо вычисление корреляционных отношений.

Как Глава 3. Психометрические требования к построению и проверке методик - Тесты показал опыт работы забугорных тестологов, ни одна стати­стическая процедура не в состоянии стопроцентно отразить многообра­зие личных оценок. Потому нередко для подтверждения валид­ности методик употребляют другую модель — клинические оценки. Это Глава 3. Психометрические требования к построению и проверке методик - Тесты не что другое, как высококачественное описание сути изучаемого свой­ства. В данном случае идет речь об использовании приемов, не опира­ющихся на статистическую обработку.


Вопросы и задания


1. Дайте определение понятию «стандартизация методик».

2. Что Глава 3. Психометрические требования к построению и проверке методик - Тесты такое репрезентативная подборка? Как она строится?

3. Назовите приведенные в главе аспекты оценки результатов ди­агностических испытаний.

4. Что такое надежность методики? Назовите виды надежности.

5. Что такое валидность методики? Назовите ее главные виды Глава 3. Психометрические требования к построению и проверке методик - Тесты.


Рекомендуемая литература


1. Анастази А. Психологическое тестирование: В 2 кн. / Под ред. К. М. Гуревича, В. И. Лубовского. Кн. 1. - М., 1982.

2. Бурлачук Л. Ф. Психодиагностика. — СПб., 2003.

3. Бурлачук Л. Ф., Морозов С. М. Словарь-справочник по Глава 3. Психометрические требования к построению и проверке методик - Тесты психоло­гической диагностике. — Киев, 1989.

4. Гайда В. К., Захаров В. П. Психологическое тестирование. — Л., 1982.

5. Гуревич К. М. О надежности психофизиологических показате­лей // Препядствия дифференциальной психофизиологии. Т. 6. — М., 1969.

6. Гуревич К. М. Надежность психических тестов // Психоло­гическая Глава 3. Психометрические требования к построению и проверке методик - Тесты диагностика. Ее трудности и способы. — М., 1975.

7. Гуревич К. М. Статистика — аппарат подтверждения психологи­ческой диагностики // Трудности психической диагности­ки. — Таллин, 1977.

8. Гуревич К. М. Что такое психическая диагностика. — М., 1985.

9. Гуревич К. М. Препядствия дифференциальной Глава 3. Психометрические требования к построению и проверке методик - Тесты психологии. — М.; Воронеж, 1998.

10. Носс И. Н. Введение в технологию психодиагностики. — М., 2003.

11. Общая психодиагностика / Под ред. А. А. Бодалева, В. В. Столина. - М., 1987.

12. Базы психодиагностики / Под ред. А. Г. Шмелева. — Ростов Глава 3. Психометрические требования к построению и проверке методик - Тесты на дону н/Д, 1996.


Часть II

ДИАГНОСТИКА

КОГНИТИВНОЙ

СФЕРЫ




glava-3-publichnie-slushaniya-publichnie-servituti-bekovskogo-rajona-penzenskoj-oblasti-reshenie.html
glava-3-puti-rasshireniya-i-povisheniya-kachestva-uslug-banka-centr-invest.html
glava-3-puti-sovershenstvovaniya-sistemi-nalogooblozheniya-na-rinke-cennih-bumag-i-mehanizmi-ih-realizacii.html