362 Дональд кэмпбелл

заключавшие контракт, обучали ответам на конкретные вопросы теста,

которые должны были использоваться при итоговом тестировании и

по результатам которых и производилась выплата вознаграждения.

Хотя они приводили в свою защиту логико-позитивистский, операцио-

нально-дефиниционалистский аргумент о том, что цель, на которую они

согласились, была определена как улучшение показателей по одному

только данному тесту, этот случай был расценен всеми как скандаль-

ный. Однако вопрос о том, насколько приемлемо натаскивание

учащихся на сходных вопросах из других тестов, дебатируется до сих

пор. С моей точки зрения, тесты успеваемости вполне могут служить

ценными показателями общей школьной успеваемости в условиях

нормального преподавания, ставящего своей целью общую образован-

ность. Но когда тестовые оценки становятся целью процесса обучения,

они утрачивают свое значение как индикаторы образовательного

статуса и в то же время извращают в нежелательном отношении

процесс образования. (Использование <объективных> тестов в курсах

обучения и на вступительных экзаменах сопровождается, несомненно,

подобными же погрешностями.) С компенсаторным образованием в

целом связаны случаи еще и других искажений процесса измерения,

таких, например, как проведение предварительного тестирования в

расчете на получение как можно более низких показателей, с тем

чтобы итоговое тестирование обнаружило более значительное улуч-

шение, или выбор для специального обучения только тех, кто при пред-

варительном тестировании показал наихудшие результаты, так чтобы

регрессия к среднему обнаружила явное улучшение. Стэйк [86] при-

водит перечень еще и других проблем. Тесты успеваемости фактически

являются индикаторами, весьма подверженными искажениям.

Эта серьезная методологическая проблема, возможно, является

универсальной. Я убежден, что это одна из главных проблем, которые

предстоит решить, если мы собираемся достичь осмысленных оценок

наших усилий в осуществлении запланированных социальных

изменений. Эта проблема будет стоять тем острее, чем большее

распространение получат количественные оценки социальных

программ. Мы должны разрабатывать средства, позволяющие

избежать этой проблемы, если собираемся идти вперед. Нам следовало

363

бы изучать социальные процессы, посредством которых обнаружи-

вается коррупция и искажение, пытаться проектировать социальные

системы, наделенные этими средствами. В исследовании по теме

<Контракт о выполнении> данную проблему обнаружил <внешний

оценщик>. В одном из более поздних американских исследований

такого рода роль <караульного> взял на себя Союз учителей Сиэтла.

Мы должны искать и институционализировать подобные формы и

средства, предотвращающие утрату объективности. Нам следовало бы,

кроме того, изучить институциональную форму таких индикаторных

систем, как индексы переписи населения или стоимости жизни в США,

которые представляются сравнительно невосприимчивыми к искаже-

ниям. Многие комментаторы, включая меня самого (СатрЬеП [16]),

считают, что применение многочисленных индикаторов, из которых

каждый признан несовершенным, облегчит решение проблемы;

Риджуэй [72], однако, сомневается в этом.

Имеются еще и другие проблемы, которые можно предвидеть в

будущем. Особого внимания требует группа проблем, сконцентри-

рованных вокруг использования при оценке эффективности программ

обследований общественного мнения, вопросников или измерений

социальных установок. В США дело идет к тому, что в скором

времени нужно будет предварительно сообщать всем, кто участвует в

подобных опросах, как будут использоваться полученные данные, и

высылать им копии результатов. Участники будут иметь право

пользоваться этими результатами в своих собственных политических

целях. (Когда дело касается обследований общественного мнения, к

которым прибегает правительство США, существующего у нас статуса

свободы информации было бы достаточно, чтобы установить это право

уже сейчас.) Можно ожидать, что в этих условиях использование

опросов для оценки локальных программ правительственных служб,

если оно будет осуществляться в сложных в политическом отношении

сообществах, каковые мы находим в некоторых из наших беднейших

городских кварталов, приведет к следующим новым проблемам. Будут

проходить политические кампании, рассчитанные на то, чтобы

участники обследования отвечали именно так, как угодно местным по-

литическим организациям, - точно так же, как проводятся кампании,