Да, наверное, об этом следует написать подробнее (в полной публикации, конечно, - в журнальной и
так усечено все, что можно), поскольку так это рассуждение остается за кадром.
Колбаса и
тесты
Тем, кто любит колбасу и уважает закон, не стоит видеть, как делается
и то и
другое.
Колбасный принцип
От кого: Евгений Осенчаков
Тема: IQ для Виктора Васильева
Приветствую вас, жители компьютерной земли.
Начало письма будет таким же, как и большинство других: после
прочтения последнего номера, меня заинтересовал один вопрос (вот оно, это стандартное начало). В этом самом номере была
статья про IQ-тесты (тема номера). Странно, но впервые (читаю вас уже более четырех лет, не пропуская ни номера) после
прочтения темы у меня сложилось ужасное чувство ее незаконченности. Поговорили о тестах Айзенка, перешли к общим
тенденциям, первая часть закончилась одним выводом, вторая - выводом ему противоположным, но это не беда, итоги
подвели и нормально, дело в другом. В теме фигурировал такой вопрос: "Чем мерить интелект?", почему не рассказали (хотя
бы в двух словах) о существующих тестах? Стоило ли вообще из этого раздувать тему номера? У всех тестов есть еще одна
огромная проблема, которую, как мне кажется, никто не учитывает, хотя она и находится на самой поверхности и ставит под
сомнение объективность любого теста, использующегося в данное время, к примеру, при приеме на работу.
Не
исключаю возможность ошибочности моего мнения по данному поводу, но вот так я себе представляю эту проблему и, в общем,
развитие любого из коммерческих тестов. Для большей наглядности опишу одну из частей известного теста SHL (числовая
часть) и разобью свою мысль на этапы развития и продвижения в массы.
Этап первый -
разработка
Здесь никаких претензий нету (сам составлял тесты, тогда-то я и понял всю абсурдность
тестирования в том виде, в котором оно сейчас существует). Собирается много умных людей, думают над классами вопросов,
придумывают в каждом классе несколько категорий, в категориях продумывают вопросы.
Этап второй - сбор
статистики, подсчеты, одобрение
Собирается куча людей, максимально абстрагированных друг от друга, каждый
проходит тестирование (видя его впервые в жизни), собирается статистика, делаются выводы, одобряется.
Этап третий - продвижение и применение на практике
Тест создан, статистика собрана,
облщестлвенность оценила. Вот тут и возникает та самая проблема, о которой я говорил ранее. Чтобы что-то продать, нужно
сначала объяснить, что это такое, потом дать сами тесты с определенным количеством стандартных (!) вопросов, дать
ответы, показать статистику, объяснить, что есть что, в общем. Первое заблуждение начинается уже здесь - все почему-то
считают, что результаты, полученные от первых испытуемых, будут в среднем такими же, как и результаты последующих
тестирующихся. Это заблуждение! Первые испытуемые не знали, что им предстоит делать и в каком тестировании участвовать,
не знали, какие будут вопросы, и так далее. А в реальности получается, что тесты попадают в компании, нанимающие при
помощи них своих новых сотрудников и проверяя старых, - и все бы ничего, но после выхода теста в массы информация о нем
появляется незамедлительно, и, зная примерные вопросы, можно получить приличную фору относительно человека, который о
тесте не знал заранее, и не знал, какие будут вопросы, что нужно делать и как делать. В итоге тот же самый "SHL
числовой" профессор мат. наук может пройти хуже, чем школьник, натасканный на определенный спектр задач. Где
справедливость и объективность?