Валидность тестов. Словарьсправочник по психодиагностике издание 2е, переработанное и дополненное Серия Мастера психологии

• Название: Словарьсправочник по психодиагностике издание 2е, переработанное и дополненное Серия Мастера психологии
• Дата: 10.08.2022
• Размер: 5.87 Mb.
• Имя файла: Валидность тестов.doc
• Тип: Справочник; #643669
• страница: 62 из 71

3. Требования к психологу-поль­зователю

3.1. Психологом-пользователем явля­ется лицо, имеющее психологическое об­разование, работающее по этой специаль­ности в исследовательских и практиче­ских учреждениях и использующее в сво­ей работе психодиагностические мето­дики.

3.1.1. Квалификация пользователя должна быть не ниже той, которая указа­на в руководстве к тесту.

Комментарий. Требование, что­бы тесты использовались только квали­фицированными экспериментаторами, призвано защищать индивида от непра­вильного использования теста. Квали­фикация пользователя должна соответ­ствовать типу теста. Так, например, для правильного применения индивидуальных тестов интеллекта и большинства лично­стных тестов требуется относительно дли­тельный период интенсивного обучения и

наблюдения за процессом тестирования, в то время как для тестирования учебных достижений нужна минимальная психоло­гическая подготовка. Следует также заме­тить, что студенты, участвовавшие в учеб­ном тестировании, обычно не готовы к са­мостоятельному проведению тестов или к правильной интерпретации тестовых по­казателей.

3.2. Психолог осознает границы своей компетентности и ограниченность своих средств и не предлагает свои услуги, а так­же не использует методы, которые не удовлетворяют профессиональным стан­дартам, установленным в конкретных об­ластях исследования.

3.3. Психолог-пользователь должен быть способен правильно выбрать тест, исходя из поставленной перед ним задачи и особенностей обследуемого человека или выборки. Он несет всю ответствен­ность за правильное применение теста и интерпретацию его результатов, а также за соблюдение этических норм по отноше­нию к обследуемому.

3.4. В своей деятельности психолог должен всегда соблюдать принцип «не на­вреди». Это относится главным образом к сообщениям как обращенным к испытуе­мому, так и о нем. Психолог должен вы­ражать свое мнение, устное или письмен­ное, с осторожностью.

Комментарий. Пользователь должен избегать субъективизма, препят­ствующего правильному суждению в отно­шении испытуемых, а также исключить любое возможное отрицательное воздей­ствие на них, проистекающее из его пове­дения. При интерпретации данных обяза­тельно следует рассматривать наряду с наиболее вероятной и альтернативную ди­агностическую гипотезу.

3.5. Психолог-пользователь обеспечи­вает тщательное соблюдение всех стан­дартных требований при использовании

методики. Он не имеет права отклонять­ся от стандарта в использовании методи­ки, вносить модификации в уже изданную методику и распространять скорректиро­ванные инструктивные материалы. Рабо­та по модификации и адаптации методики проводится лишь с согласия автора теста или организации, обладающей правом на данную методику.

3.6. Недопустимо тестирование по почте.

Комментарий. Выполнение ин­дивидом каких-либо тестов не может быть правильно оценено с помощью бланков, высылаемых и возвращаемых по почте. Такой способ не только не обеспечивает контроль за соблюдением условий тести­рования, но также предполагает интерпре­тацию тестовых показателей без привле­чения необходимой для этого информации об индивиде. В этих обстоятельствах ре­зультаты теста могут оказаться бесполез­ными и даже вредными.

3.7. В своей профессиональной дея­тельности психолог-пользователь руко­водствуется своими знаниями и опытом, на основе которых он самостоятельно при­нимает решение и лично несет за него от­ветственность. В сомнительных и спорных случаях психолог обязан проконсультиро­ваться с экспертом в соответствующей области и объективно рассмотреть полу­ченные рекомендации.

Комментарий. В случае, если обследуемый находится на лечении, ре­зультаты которого могут измениться вследствие вмешательства психолога, последний может действовать только с со­гласия лечащего врача.

3.8. Пользователь не имеет права собирать статистический и психологиче­ский материал по изданным методикам с целью публикации научных статей и от­сылки этих материалов разработчикам методик.

4. Требования к специалистам-не­психологам

4.1. В качестве пользователей психо­диагностических методик могут выступать специалисты в смежных с психологией областях: учителя, врачи, социологи, ин­женеры, экономисты и пр.

4.2. Специалисты-непсихологи имеют право использовать только некоторые, хо­рошо теоретически и психометрически обоснованные методики, не требующие специальных знаний при интерпретации результатов (например, тесты учебных достижений или профессиональной уме­лости). Методики, не обеспеченные од­нозначной стандартной инструкцией, не­обходимыми показателями надежности и валидности, требующие параллельного использования высокопрофессиональных экспертных методов, не могут использо­ваться специалистами-непсихологами.

4.3. Пользователь-непсихолог должен предварительно проконсультироваться с

психологами, работающими в данной практической отрасли, о том, какие имен­но методики могут быть применены для ре­шения поставленных задач.

Комментарий. Если психологи предупреждают пользователя о том, что правильное использование методики тре­бует общих знаний по психодиагностике или специальной подготовки по овладе­нию методикой, то пользователь обязан либо выбрать другую методику, либо прой­ти соответствующую подготовку, либо привлечь к проведению психодиагностики психолога, либо отказаться от проведения психодиагностики.

4.4. Пользователь, получающий доступ к психодиагностическим методикам, авто­матически берет на себя обязательство по соблюдению всех требований профессио­нальной тайны, следует всем этическим нормам в проведении обследования по отношению к испытуемому и третьим лицам.

Б. Стандартные требования к психологическим тестам*

Введение

Настоящие «Стандартные требова­ния...» предназначены для разработчиков и пользователей психологических тестов и психодиагностических методик. При­менение «Стандартных требований* при создании теста обеспечивает создание на­дежного и валидного психодиагностичес­кого инструментария, соответствующего мировым требованиям. Пользователям данные «Стандартные требования...» дают возможность определить качество исполь­зуемых ими методик.

Настоящие «Стандартные требова­ния...» содержат нормы, которым должны отвечать стандартизированные психологи­ческие тесты и руководства. Предполага­ется, однако, что настоящие требования приложимы к любой процедуре оценива­ния, средствам оценивания и пособиям по оцениванию, т. е. к любой стандартизиро­ванной основе составления заключений о свойствах людей.

Психологический тест является специ­фическим видом процедуры оценивания. Его можно понимать как совокупность за-

* Текст воспроизводится по: Рукавишни­ков А. А., Соколова М. В. Нормы профессио­нальной этики для разработчиков и пользовате­лей психодиагностических методик. Стандарт­ные требования к психологическим тестам. — Ярославль: Дебют, 1991. -

дании или вопросов, предлагаемых в стан­дартных условиях и предназначенных для установления количественных и каче­ственных индивидуально-психологичес­ких различий.

К тестам относятся стандартизирован­ные инструменты измерения способнос­тей и достижений, вопросники интересов, опросники личностные, проективные ме­тодики и многие другие методы изучения личности.

Стандартные требования приложимы как к бланковым, так и к компьютерным вариантам тестов. Но они не в полной мере отражают требования к перепроверь ке теста при создании его компьютерного варианта. Изложенные в «Стандартных требованиях...» нормы подразделяются по трем уровням обязательности их соблюде­ния.

1) Существенные требования касают­ся тех характеристик и параметров теста, наличие которых наиболее необходимо для создания новых тестов, а также для их использований. Если некоторое суще­ственное требование в данном тесте невы­полнимо, пользователь должен знать, что исследование теста в этом отношении не завершено. В таком случае нужна ссылка на невозможность или ненужность выпол­нения какого-либо общепринятого суще-

ственного требования в данном тесте. Часть этих требований может быть прило-жима только к отдельным видам тестов.

2) Требования, обозначенные как очень желательные, обращают внимание на виды информации или деятельности, которые в большой степени содействуют пониманию теста или компетентному его применению. В отличие от существенных требований, необходимость очень жела­тельных рекомендаций не является обще­принятой.

3) Остальные рекомендации представ­лены как желательные для соблюдения (в тексте обозначение требований: суще­ственно; очень желательно; желательно).

«Стандартные требования к психоло­гическим тестам», созданные в НПЦ «Пси­ходиагностика* АН СССР и утвержденные научно-техническим советом центра, обя­зательны для методик, разрабатываемых в центре, и для авторов, сотрудничающих с НПЦ «Психодиагностика».

Все алгоритмы создания новых тестов и адаптации существующих отражены в «Руководстве по созданию психологичес­ких тестов», а также в составленном НПЦ «Психодиагностика».

I. Составные части теста и требо­вания к ним

Тест, опубликованный для использова­ния, содержит:

1) руководство к тесту, включающее опи­сание диагностируемого конструкта, процедуры создания и проверки теста, данные психометрической проверки и стандартизации, данные по интерпре­тации результатов;

2) стимульный материал или его описа­ние;

3) регистрационный бланк;

4) ключи и шаблоны для проверки пра­вильности ответов.

1. Пользователь теста нуждается в ин­формации, описывающей концептуальную

основу теста, этапы его разработки, пси­хометрические характеристики, его прове­дение и интерпретацию результатов. Та­кую информацию обычно дает руковод­ство к тесту. (Существенно.)

Комментарий. Соответствую­щим образом подготовленное руководство позволяет пользователям и другим заин­тересованным лицам получить информа­цию о конструкции теста, сферах его при­менения и интерпретации получаемых ре­зультатов. Приводимые в руководстве дан­ные о требованиях к программе проверки, об используемых критериях, соответству­ющих процедурах и другая связанная с этим информация необходимы для того, чтобы тест правильно и по назначению ис­пользовался (а также в целях доступнос­ти информации для публичного рассмот­рения).

2. Материал, которым пользуется ис­пытуемый в процессе тестирования, носит название «Стимульный материал». В него 'могут включаться: описание заданий, ко­торые необходимо выполнить; примеры, помогающие лучше понять эти задания, и собственно вопросы задания, с которыми работает испытуемый. Стимульный мате­риал обычно предназначен для многократ-ного'использования. (Существенно.)

Комментарий. Стимульный ма­териал приходит в негодность после того, как в нем будут сделаны различные помет­ки. Назначение примеров состоит в озна­комлении с типом и формой заданий, со­ставляющих тест, с правилами ответа на вопросы и в формировании первичных на­выков решения задач данного типа.

2.1. Пользователь не имеет права вно­сить поправки,дополнения или исправле­ния в набор стимульного материала без надлежащей проверки и согласования с автором методики. (Существенно.)

2.2. Стимульный материал должен быть представлен в тесте стандартным образом. (Существенно.)

2.3. Руководство должно включать в себя описание стимульного материала. (Существенно.)

3. Для регистрации ответов испытуе­мого необходим регистрационный бланк (бланк ответов, лист ответов, протокол). (Существенно.)

3.1. Регистрационный бланк составля­ют таким образом, чтобы обеспечить наи­большие удобства при его заполнении" и обработке. (Очень желательно.)

3.2. Предпочтительно свести ответы к подчеркиванию, обведению кружком, обо­значению простыми символами («+»,«-», «V»). (Очень желательно.) Это требова­ние обязательно для задач закрытого типа. (Существенно.)

3.3. Бланк не должен быть перегружен цифрами, делениями, строками и другими обозначениями (Существенно.)

3.4. Ответы по различным субтестам должны быть зрительно отделены друг от друга. (Очень желательно.)

3.4.1. Там, где количество заданий ве­лико, но они не разделяются на группы, графы для ответов разделяются на отдель­ные блоки по 10-25 заданий. (Очень же­лательно.)

3.5. Бланк не должен содержать ин­формации, указывающей на измеряемый конструкт. (Существенно.)

3.6. На бланке должны быть преду­смотрены места для представления не­обходимых социально-демографических сведений (фамилия, имя, пол, возраст, об­разование, место жительства, место рабо­ты и т. п.), если исследование не аноним­но, а также номер регистрации исследова­ния, даты проведения; фактических затрат времени, первичных («сырых») и шкаль­ных оценок. (Существенно.)

3.6.1. На бланке также может быть предусмотрено место для фамилии сотруд­ника, проводившего тестирование и обра­ботку результатов.

3.7. Иногда на регистрационном блан­ке целесообразно продублировать инст­рукцию для испытуемого. (Желательно.) При проведении группового обследования это требование обязательно. (Сущест­венно.)

3.8. При переходе к ответам на новый субтест необходимо дать примеры запол­нения бланков. (Желательно.)

3.9. При использовании шаблонов-ключей для получения первичных оценок необходимо соответствующее оформле­ние регистрационного бланка. (Очень же­лательно.)

3.10. В руководстве по методике поме­щается образец регистрационного бланка или дается описание требований к его со­ставлению. (Существенно.)

Комментарий. В ряде психологи­ческих методик незначительное измене­ние внешнего вида бланка может суще­ственно изменить результаты работы ис­пытуемого. Так, показатели выполнения корректурной пробы будут .значительно отличаться при применении бланков с раз­личной величиной шрифта, формой букв, интервалов между строками, жирностью шрифта, оттенком бумаги и т. п.

3.11. Иногда на обратной стороне блан­ка приводятся формулы для подсчета общей оценки на основе правильных и неправильных ответов с учетом числа про­пущенных задач, таблицы перевода пер­вичных оценок в шкальные, сетки для построения профиля и указания для за­полнения бланков. (Желательно.)

3.12. В случае индивидуального прове­дения тестирования бланк, как правило, заполняет экспериментатор. Для него на бланке отмечены подсказки, временные ограничения либо схемы вариантов реше­ния (когда регистрируется и способ вы­полнения задач). (Желательно.)

3.13. В ряде случаев текст задания со­вмещается с регистрационным бланком. Обычно это касается небольших по объе-

му и простых по обработке опросников (Желательно.)

4. Для оценки ответов применяются ключи к тесту. Они представляют собой либо упорядоченные наборы правильных (или неправильных) ответов на задания — для интеллектуальных тестов, тестов до­стижений и пр.," либо наборы ответов с оценками к вопросам или оценками к ва­риантам ответов для определения степе­ни выраженности той или иной характери­стики личности. (Существенно.)

4.1. Ключи применяются в форме: а) шаблонов с отверстиями; б) шаблонов с вырезами в виде полосок; в) спиц к пер­фокартам, имеющим прорези в определен­ных местах. (Существенно.)

4.2. Шаблон изготовляется из какого-либо плотного материала (картон, плас­тик). (Желательно.)

4.3. Шаблон по размеру точно совпа­дает с регистрационным бланком и имеет специальные вырезы (отверстия, уголки) для точного совмещения.

В шаблоне вырезаются отверстия, со­впадающие с правильными отверстиями на регистрационном бланке или с ответа-ми, относящимися к одному фактору, ха­рактеристике. (Существенно.)

4.3.1. На шаблоне рядом с каждым от­верстием проставляется цифра, обознача­ющая вес соответствующего ответа, если это возможно в данном типе теста. (Очень желательно.)

4.4. Ключи с вырезами в виде полосок применяются в случаях, когда ответы от­носятся к одному фактору, характеристи­ке, группе вопросов, вынесенных на одну линию. (Очень желательно.)

4.5. В руководстве к тесту помещают­ся образцы шаблонов или дается описание условий его изготовления. (Существен­но.)

4.6. Описание работы с шаблоном по­мещается в руководстве к тесту. (Суще­ственно.)

4.7. Если тест предполагает использо­вание не одного, а нескольких ключей-шаблонов, то на каждом из них делается соответствующее обозначение. (Суще­ственно.)

II. Требования к руководству теста

Руководство к тесту составляется для его пользователей — организаций, специ­альных психологических служб, профес­сиональных психологов, педагогов, психи­атров и некоторых других специалистов. В руководстве, как правило, излагаются следующие сведения о тесте:

1) сведения о процедуре разработки (тео­ретическое и операционное опреде­ление, сфера применения, данные о выборке, на которой проводилась стан­дартизация, анализ пунктов теста, ва-лидности и надежности;

2) требования к применению (область распространения теста, требования к пользователям, описание процедуры проведения, стандарт тестового мате­риала);

3) данные по обработке и интерпретации результатов (образцы регистрационно­го бланка и ключей, процедура обра­ботки таблицы'для перевода «сырых»

- баллов в стандартные шкалы (нормы), примеры интерпретации результатов).

А. Общие требования к информа­ции, содержащейся в руководстве.

Пользователи тестов нуждаются в ин­формации, которая помогла бы применить тест стандартным образом и оценить его в сравнении с другими тестами, которые можно выбрать для данной цели. Автор теста должен представить хотя бы частич­ную информацию, в которой нуждается пользователь при выборе теста или при его использовании. Практика авторов и издателей в представлении информации разнообразна. По некоторым тестам пользователю представляются только не-

четкие указания к тестированию и нормы для оценивания результатов, да и те неизвестного происхождения. Наоборот, другие тесты имеют руководства, в кото­рых представлена обширная и детальная информация о разработке теста, его валид-ности и надежности, а также нормах, ви­дах интерпретации результатов и возмож­ных областях его применения.

А. 1. Когда тест становится доступным для операционного использования, он дол­жен сопровождаться руководством, для того чтобы сделать реальными требова­ния, которые предъявляются к его приме­нению. (Существенно.)

Комментарий. Под термином «операционное пользование» подразуме­вается принятие практических решений относительно оценивания индивидов, групп, учебных предметов, терапевтичес­кой интерпретации и т. д.

В зависимости от объема сообщаемой информации, разнообразия областей при­менения и пользователей, термин руко­водство» может означать документы мо­нографического характера или серию от­дельных публикаций. Данный термин мо­жет также распространяться на процедур­ное руководство по использованию тестов или их батарей, например в ситуации от­бора; словесная формулировка и значение данных о стандартных требованиях могут быть иными для процедурных руководств, однако принципы составления руковод­ства к тестам аналогичны.

АЛЛ. Если некоторая информация, необходимая для подтверждения интер­претации результатов, предложенных в руководстве, не может быть представлена ко времени публикации руководства, тре­бование АЛ. может быть удовлетворено подчеркиванием отсутствия и важности такой информации. (Существенно.)

АЛ .2. Если информация слишком об­ширна для сообщения в руководстве, она должна быть обобщена и сопровождена

ссылками на другие соответствующие ис­точники, статьи или книги. (Очень жела­тельно.)

Комментарий. Некоторые тесты имеют или объемные технические руко­водства, или включают соответствующую информацию в справочники для пользова­телей, которые рекомендуются для кон­сультации. В других случаях в руковод­стве дается только существенная инфор­мация и ссылка на другие полезные источ­ники.

Публикации других лиц, не связанных с автором теста, часто выполняют многие функции руководства к тесту. Если подоб­ная публикация о тесте предназначена в качестве руководства, ее автор и издате­ли отвечают за тест в той же степени,, как и авторы теста.

А. 1.2.1. Когда информация представ­лена автором или издателем в отдельной публикации, эта публикация должна соот­ветствовать тем же требованиям, что и руководство, и не содержать моментов, ве­дущих к ошибкам, так же, как это требу­ется от руководства. (Существенно.)

АЛ.2.2. Дополнительный материал к тесту должен быть точным и полным и не должен давать повода для ошибочного по­нимания. (Существенно.)

Комментарий. В случае, когда публикатор приводит обширную и исчер­пывающую библиографию исследований, касающихся теста, желательно снабдить ее комментариями аннотациями.

АЛ .2.3. Информационный материал, предназначенный для пользователя, не являющегося специалистом в данной об­ласти, должен быть точным, полностью соответствовать целям его обращения к данному материалу и написан языком, не допускающим ошибочного понимания у читателя. (Существенно.)

Комментарий^Такая информа­ция часто дается в виде краткой памятки. При подготовке такого краткого сообще-

ния может учитываться психологическая подготовленность читателя, но это не по­зволяет пропускать или искажать суще­ственную информацию. Если можно наде­яться, что читатель постоянно имеет дело с такими сообщениями, необходимо при­ложить усилия к, повышению его способ­ности понимать детали.

А.2. Тест и руководство к нему долж­ны периодически пересматриваться. Вре­мя пересмотра зависит от изменения условий применения или от исследова­тельских данных, ввиду которых некото­рые утверждения в руководстве к тесту оказываются неправильными или ведущи­ми к ошибкам. (Очень желательно.)

Комментарий. Технические ха­рактеристики и полезность теста изменя­ются с изменением социальных условий и установок, определенных видов труда, ус­ловий и содержания обучения и состава соответствующей популяции.

А.2.1. Перепроверки теста, проведен­ные после его публикации, вне зависимо­сти от благоприятности или неблагопри­ятности для теста, должны быть учтены в пересмотренных изданиях руководства или в дополняющих сообщениях. В руко­водство должны также включаться данные не только авторов и публикаторов, но и других исследователей. (Очень жела­тельно.)

А.2.2. Когда тест пересмотрен или из­дана его новая форма, руководство к нему должно быть соответственно пересмотре­но с учетом изменений теста. Кроме того, должны быть ясно указаны природа и сте­пень пересмотра, сравнимость данных, полученных по старому и по пересмотрен­ному тестам. (Существенно.)

Комментарий. Целесообразно, чтобы издатели указывали на пересмотры руководств к тесту в каталогах и прини­мали другие меры для увеличения вероят­ности того, что пользователь теста полу­чит текущую информацию.

А.2.2.1. Когда на основе хорошо прове­ренного теста разработана укороченная форма, в руководстве должны быть пред­ставлены данные о том, что задания в уко­роченной форме адекватны заданиям в полной форме или что укороченная фор­ма измеряет те же самые характеристики, что и полная форма. (Очень желатель­но.)

Комментарий. Если короткая форма теста не была разработана, но есть основание полагать, что обычно тест ис­пользуется в укороченной форме, в руко­водстве должно быть напоминание для читателя, что данные, отраженные в руко­водстве, не могут быть прнложимы к ре­зультатам использования укороченной формы.

А.2.2.2. Если укороченная форма раз­работана путем сокращения числа зада­ний или преобразованием части теста в от­дельную форму, то укороченный тест дол­жен пройти психометрическую проверку и ее данные должны быть приведены в ру­ководстве. (Существенно.)

Комментарий. В руководстве к тесту, имеющему две альтернативные формы, необходимо представить независи­мые данные для каждой формы.

А.2.3. При переводе теста с другого языка и их адаптации в руководстве сле­дует указать все внесенные в тест измене­ния и данные новой психометрической проверки. (Существенно.)

А.З. Наименования для публикуемых тестов и для отдельных частей тестов дол­жны выбираться так, чтобы обеспечить минимальный риск ошибок интерпрета­ции пользователями. (Существенно.)

Комментарий. Желательно,что­бы наименования не содержали много­значных терминов в качестве измеритель­ных характеристик. Такие наименования, как «свободный от влияния культуры», «интеллект», «креативность», «интровер-сия», «первичные умственные способное-

ти», «показатель продуктивности», сомни­тельны для опубликованных тестов, не со­держащих необходимых свидетельств их продуктивной валидности, так как могут предполагать интерпретации, не вытекаю­щие из демонстрируемого смысла тесто­вых оценок.

А.3.1. Средства идентификации инте­ресов и свойств личности путем самоотче­та следует называть не «тесты», а «опрос­ники», «вопросники», «оценочные листы», «оценочные шкалы». (Очень желатель­но.)

Комментарий. Когда о таких ин­струментах говорится в руководстве, сло­во «тест» может использоваться для упро­щения языка даже в том случае, если оно отсутствует в наименовании.

А.4. Если тест предназначен только для исследовательского пользования и не может быть распространен для широкого применения, это должно быть ясно выра­жено в сопровождающих материалах. (Существенно.)

Комментарий. Если психолог, разрабатывающий новый диагностичес­кий тест, например для изучения личнос­ти, передает свой инструмент для иссле­дований другим научным работникам до того, как сочтет тест готовым для опера­ционного пользования, на обложке руко­водства, а также в каталоге, где он заре­гистрирован, следует печатать «Распрос­транение только для исследовательского пользования». Это служит предупрежде­нием против поспешного использования инструмента.

А.5. В руководстве должна быть ука­зана квалификация пользователя. (Суще­ственно.)

Комментарий. Обычно на об­ложке руководства ставится обозначение, соответствующее уровню квалификации пользователя: (А) — тестом может пользоваться любой человек; (Б) — пользователь должен про#ти полный курс

обучения психодиагностике и иметь за­конченное высшее гуманитарное образо­вание; (В) — пользователь должен иметь опыт в тестировании, подтвержденный со­ответствующими документами, и иметь как минимум законченное высшее психо­логическое образование или быть членом психологической ассоциации. При покуп­ке тестов группы (В) обязательно предос­тавление квалификационного документа.