Nan, AlexFox, прежде всего спасибо за ответы! С ними нужно будет внимательно ознакомиться, прежде чем что-то по ним писать.
Nan, единственный момент по этому пункту (может тебе тоже будет интересно):
>>> Я в реале не раз и наблюдал и сам был участником создания подобных опросников.
Источник: http://sergey-smirnov.ru/psytests-barnum-effect
Статья: Почему не стоит доверять психологическим тестам
Знакомьтесь, это - Ученый. Прямо сейчас он, специально для вас, создаст тест и позволит вам понаблюдать за этим процессом.
Для начала, Ученый выбирает что хочет измерять. Допустим, это будет уровень агрессии. У Ученого нет отдельной теории, которая структурирует агрессию или разбивает ее на составляющие. Он хочет мерить просто агрессию. В общем и целом.
Для начала, он составляет список из того, что, по его мнению, характеризует агрессивных людей. Ну какие они? Что они делают? Они часто кричат, комфортно чувствуют себя в споре, считают что лучшая защита - это нападение и конечно любили драться в детстве. "Ах да!" - вспоминает Ученый о Фрейде - "у них наверняка был властный отец!".
Из списка утверждений Ученый делает список вопросов: "Легко ли вы переходите на крик? Вы комфортно чувствуете себя в споре? Ваш отец часто заставлял вас выполнять работу по дому силой?"
Затем Ученому нужно проверить как работает его опросник. Для этого ему нужно много людей. Он собирает 1000 людей и нарекает их выборкой. Ученый заставляет несчастных людей заполнить его опросник. Теперь настало время Ученому быть несчастным.
Он обрабатывает полученные данные. Он смотрит на то, какие ответы давали люди на вопросы. Используя математические и статистические методы, Ученый выявляет неэффективные вопросы и выкидывает их. Другие аспекты исследования он усиливает дополнительными вопросами. Прибегает к ухищрениям чтобы минимизировать разные эффекты, искажающие результаты. Ученый наверняка проведет еще несколько проверочных исследований.
Затем Ученый определяет надежность. Это важный показатель, который говорит нам что тест дает достоверные данные. Для определения надежности, Ученый дает тот один и тот же вариант теста одним и тем же людям, но с паузой между подходами. Если для каждого человека тест дает примерно один и тот же результат - он надежный. Ученый подгоняет тест под определенные требования к погрешностям. Для этого, возможно, придется вернуться на несколько шагов назад.
Валидность - еще один важный показатель. Он говорит нам что тест измеряет действительно то что должен. Чтобы не получилось так что мы хотели померить агрессию, а померили уровень открытости или длину большого пальца правой руки. Ее тоже сложными методами проверяют и доводят до высокого уровня.
В результате нескольких лет(!) упорной работы в горах анкет, людей, столов и цифр, на свет рождается тест. Он измеряет всего-лишь одну шкалу - шкалу агрессивности. Ученый устал, Ученый уходит на пенсию со спокойной душой. Он обогатил мировую коллекцию психологических тестов еще одним.
Мировую ли? Как выясняется - нет, только локальную.
Стандартизация и требования к использованию тестов
Именно так. Просто переведя вопросы, вы превратите микроскоп в кучу мусора. Если перевести тест на другой язык - будет ли он работать так же хорошо? Ученые пробовали и однозначно отвечают - нет, не будет. Разница в языке и культуре очень значительна. Для того чтобы он заработал так же, как оригинал, нужно провести все те процедуры, что проводил Ученый, подгоняя надежность и валидность и бесконечно изменяя тест и проверяя его на больших выборках. То есть, фактически создать его заново.
Пойдем дальше. Влияет ли бланк, на котором даются вопросы на точность теста? Ученые пробовали, изучали и точно отвечают - да, влияет. Влияет не только бланк с вопросами и ответами, но обстановка в комнате, процедура проведения теста. Проводится ли он один на один? Остается ли тестируемый в одиночестве с опросником? Может, тест дается группе респондентов? Читались ли психологом инструкции? Отвечал ли психолог на вопросы, возникающие у испытуемых? А как он отвечал?
Все это крайне важно и абсолютно точно - влияет на точность теста.
Итак, тест - это мощный инструмент, но чтобы просто им пользоваться, нужно учиться. Причем долго. На западе нужно получать лицензию для использования каждого (!), теста. Отучившись год для использования опросника Кеттела, психолог будет использовать его везде. И подтрунивать над коллегами за то, что они не имеют права его использовать потому что не умеют. Более того, опросник Кеттела они нигде не достанут! Потому что продается он только в специальном магазине по лицензии. И стоит дорого.
Тест - это не просто инструкция в два предложения и список вопросов с ключом. Это книга! В которой описано все. Зачем создавался тест? Что он измеряет? На ком его можно использовать? Когда? Какие редакции существуют? В чем отличия? Какова валидность теста (в процентах)?
Инструкция - это не просто несколько предложений. Там расписано все. В плоть до пауз между словами и уровня громкости произнесения некоторых фраз. Инструкция зачитывается с листа, либо заучивается наизусть! В противном случае данные теста будут настолько ненадежны, что проще их выбросить.