Кросс-валидизация

КРОСС-ВАЛИДИЗАЦИЯ (cross-validation) - процедура, в которой для определения стабильности предсказательной силы системы баллов или весов, модель (системы ключей к тесту), экспериментально полученная на одной выборке, применяется к другой выборке. Предсказательная (прогностическая) сила тестов, основанных на подсчитанных корреляциях между тестовыми баллами (или тестовыми заданиями) и внешним критерием, как правило, резко завышается, если подсчитывается на той самой выборке (экспериментальной), на которой производился поиск значимых корреляций. При переносе на другую выборку (контрольную выборку) баллы, подсчитанные по статистически-выявленным тестовым ключам (весам тестовых заданий), как правило, гораздо слабее коррелируют с тем же самым внешним критерием. Это доказывает необходимость кросс-валидизации при применении эмпирико-статистической стратегии конструирования тестов. Один из приемов кросс-валидизации, позволяющий не ждать появления новой выборки, состоит в том, что уже обследованная выборка разбивается на 2 части: на экспериментальной половине выборки рассчитываются ключи к тестовым заданиям, а на второй контрольной половине проверяется их прогностичность.