106 Дональд кэмпбелл

бланками фирмы 1ВМ 1, то это скорее по соображениям удобства, а не

из-за того, что мы хотим включить в наши результаты дисперсию,

обусловленную навыками работы с машинными бланками, зна-

комством с заполняемой формой, способностью следовать инструкции

и т. д. Точно так же проверку знаний по пройденному материалу

посредством письменных работ приходится осуществлять с учетом

индивидуального стиля и лексики, и поэтому результирующие

колебания показателей должны содержать дисперсию, обусловленную

этими источниками, что, как правило, не входит в число наших целей.

Ввиду комплексного характера любого О попытка распространить

результаты на другие потенциальные О ставит нас перед проблемой:

каким аспектом примененного в эксперименте О был обусловлен

внутренне валидный эффект? Поскольку цель обучения - не просто

подготовка к будущим сочинениям и контрольным работам, мы

должны все время иметь в виду эту проблему внешней валидности, или

обобщаемости результатов.

И снова с концептуальной точки зрения следует не уповать на

<чистые> показатели, свободные от иррелевантных наслоений, а

использовать множество разных измерений, в которых специфические

средства реализации, конкретные иррелевантные детали были бы по

возможности различными, а общее, существенное для нас содержание

присутствовало бы в каждом из них. В рамках одного эксперимента в

этом плане можно больше сделать применительно к О, чем к X, так как

в один и тот же эксперимент обычно можно включить целый ряд мер

эффекта (то есть зависимых переменных). В исследовании Гецкоу,

Келли и Мак-Кичи [47] эффекты регистрировались не только в ходе

экзаменов и проведения специальных тестов установок, но учитывались

и такие последующие действия, как выбор профилирующего предмета

и запись на продвинутый курс по данной проблематике. (Эти

последние оказались столь же чувствительными к различиям в

экспериментальных воздействиях, как и результаты тестов.)

Требование множественности О должно стать стандартом для

1Вм (1п1егпа(юпа1 Визшезэ МасЬшез) - одна из крупнейших американских

фирм, производящих вычислительную аппаратуру, в частности, для школ. - Прим.

перев.

Ю7

любого исследования методов обучения. В простейшем случае

следует сочетать результаты письменных работ и экзаменов (см.

Згашеу, Веетап [115]), присоединяя к ним по возможности данные

относительно активности учащихся на уроке. (Распространение этого

подхода на вопросы валидности тестов содержится в: СатрЬеП, НзЬе

[15]; СатрЬеИ [12]).

КВАЗИЭКСПЕРИМЕНТАЛЬНЫЕ ПЛАНЫ

Существует немало естественных социальных условий, в которых

исследователь может использовать нечто вроде планирования

эксперимента при сборе данных (то есть в отношении того, когда и на

ком производить измерения), даже если он не полностью контролирует

порядок экспериментальных воздействий (то есть когда и кому

предъявляются воздействия, рандомизацию предъявления), что делает

возможным подлинный эксперимент. Такие исследования в целом

могут рассматриваться как квазиэксперименты. Одна из целей

настоящей главы - пробудить интерес к таким квазиэкспериментам и

уточнить условия, в которых возникает возможность их проведения. Но

как раз из-за отсутствия полного контроля экспериментальных

параметров исследователь должен отдавать себе отчет в том, какие

именно переменные в его конкретном плане не поддаются контролю.

Собственно говоря, список источников невалидности, приведенный в

табл. 1, 2 и 3, был разработан скорее ради оценки квазиэкспериментов,

чем для понимания истинного эксперимента.

Ознакомившись с предыдущим параграфом, будущий исследо-

ватель, вероятно, почувствовал, что планирование эксперимента

сопряжено с более многочисленными трудностями, чем он полагал

ранее. Такой итог следует приветствовать, если результатом будет

планирование и проведение более совершенных экспериментов и

большая осмотрительность в выводах, которые делаются на основе

полученных результатов. Однако мы вовсе не хотели бы, чтобы у

читателя сложилось впечатление, будто контроль параметров

эксперимента все равно недостижим, и прекратил направленные на это

усилия, обратившись к еще более неформальным методам иссле-