Квазиэкспериментальные планы

Т. Д. Кук и Д. Т. Кэмпбелл разработали теоретические основания применения квазиэкспериментальных планов в психологическом исследовании.

Существуют два типа квазиэкспериментальных планов:

а) планы экспериментов для неэквивалентных групп;

 б) планы дискретных временных серий.

Квазиэкспериментом является любое исследование, направленное на установление причинной зависимости между двумя переменными («если А, то В»), в котором отсутствует предварительная процедура уравнивания групп или «параллельный контроль» с участием контрольной группы заменен сравнением результатов неоднократного тестирования группы (или групп) до и после воздействия.

Если пользоваться строгими определениями экспериментального и квазиэкспериментального исследований, то эксперимент с одним испытуемым следует отнести к квазиэкспериментам. В то же время квазиэкспериментальные планы временных серий по сути являются модификацией доэкспериментального плана

О1        Х          О2

                                       О3                     О4

Выбираются две естественные группы, например два параллельных школьных класса. Обе группы тестируются. Затем одна группа подвергается воздействию (ставится в особые условия деятельности), а другая — нет. Через определенное время обе группы проходят тестирование повторно. Результаты первого и второго тестирования обеих групп сопоставляются; для сравнения используют t-критерий Стьюдента и дисперсионный анализ. Различие О2 и О4 свидетельствует о естественном развитии и фоновом воздействии. Разница результатов первичного тестирования двух групп позволяет установить меру их эквивалентности в отношении измеряемой переменной. Для выявления эффекта действия независимой переменной с помощью t-критерия сравнивать нужно не О2 и О4,  а δО12 и δО34, т. е. величины сдвигов показателей во времени. Значимость различия приростов показателей будет свидетельствовать о влиянии независимой переменной на зависимую. Примером такого исследования является психолого-педагогический эксперимент. На первом этапе мы тестируем с помощью дидактического теста уровень знаний учащихся по иностранному языку (словарный запас). Экспериментальную группу обучаем мнемотехническим приемам при заучивании слов, а контрольная занимается с учителем, как и прежде. Затем проводится второе тестирование, и если прирост словарного запаса будет выше в экспериментальном классе, чем в контрольном, то мнемотехника полезна для запоминания иностранных слов.

Этот план аналогичен плану истинного эксперимента для двух групп с тестированием до и после воздействия. Главными источниками артефактов являются различия в составе групп. В первую очередь на результаты эксперимента может повлиять «эффект смешения», т. е. взаимодействия состава группы с факторами тестирования, фоновых событий, естественного развития и др. Например, если для участия в эксперименте отобраны параллельные классы А и В, то в В могут оказаться дети с меньшим IQ, чем в А, поэтому различия в результатах (увеличение запаса слов от первого тестирования ко второму) могут быть обусловлены большей обучаемостью первой группы по сравнению со второй. Чем больше сходство экспериментальной и контрольной групп, тем более валидны результаты, получаемые с помощью этого плана.

Кэмпбелл различает два варианта отбора групп. В первом случае в исследовании участвуют естественные группы, которые по отношению к самой процедуре эксперимента не отбираются, Поэтому эффект состава группы может присутствовать, но он не столь значим. Во втором случае экспериментальная группа формируется из добровольцев, а аналогичную контрольную группу приходится комплектовать другим способом (принуждением, обещанием оплаты и т. д.). При этом фактор состава группы может оказать решающее влияние на различие в результатах экспериментальной и контрольной групп.

Существует множество других вариантов квазиэкспериментальных планов для неэквивалентных групп: так называемые «лоскутные планы», планы «множественных серий замеров», план с контрольными выборками для предварительного и итогового тестирования и т. д. Интересующихся проблемой квазиэкспериментального планирования я отсылаю к монографии Кэмпбелла «Модели эксперимента в социальной психологии и прикладных исследованиях» (1980). Рассмотрим в качестве примеров еще два плана.

План с предварительным и итоговым тестированием различных рандомизированных выборок отличается от истинного эксперимента тем, что предварительное тестирование проходит одна группа, а итоговое (после воздействия) — эквивалентная (после рандомизации) группа, которая подверглась воздействию:

R      O1   (X)

R              X    O2

Этот план называют также «имитацией плана с начальным и конечным тестированием». Главный его недостаток— невозможность контролировать влияние фактора «истории» — фоновых событий, происходящих наряду с воздействием в период между первым и вторым тестированием.

Усложненным вариантом этого плана является схема с контрольными выборками для предварительного и итогового тестирования. В этом плане используются 4 рандомизированные группы, но воздействию подвергаются лишь 2 из них, причем тестируется после воздействия одна. План имеет следующий вид:

R     O1  (X)

R            X   O2

-       -      -

R     O3

R                 O4

В том случае, если рандомизация проведена удачно, т. е. группы действительно эквивалентны, данный план по качеству не отличается от планов «истинного эксперимента». Он обладает наилучшей внешней валидностью, поскольку позволяет исключить влияние основных внешних переменных, ее нарушающих: взаимодействие предварительного тестирования и воздействия; взаимодействие состава групп и экспериментального воздействия; реакцию испытуемых на эксперимент. Не удается лишь исключить фактор взаимодействия состава групп с факторами естественного развития и фона, так как отсутствуют возможности сравнить влияния предварительного и последующего тестирования на экспериментальную и контрольную группы. Особенность плана состоит в том, что каждая из четырех групп тестируется всего лишь один раз: либо в начале, либо в конце исследования.

План этот применяется крайне редко. В большинстве учебников по экспериментальной психологии он даже не упоминается. Кэмпбелл также утверждает, что этот план ни разу не был реализован.

Гораздо чаще, чем приведенные выше «экстравагантные» планы, применяются схемы квазиэкспериментов, которые имеют общее название «дискретные временные серии». Для классификации этих планов можно выделить два основания: исследование проводится

1) с участием одной группы или нескольких;

2) с одним воздействием либо серией/

Следует заметить, что планы, в которых реализуется серия однородных или разнородных воздействий с тестированием после каждого воздействия, получили в советской и российской психологической науке по традиции название «формирующие эксперименты». По своей сути они, конечно, являются квазиэкспериментами со всеми присущими таким исследованиям нарушениями внешней и внутренней валидности.

Используя такие планы, мы с самого начала должны отдавать себе отчет в том, что в них отсутствуют средства контроля внешней валидности. Невозможно проконтролировать взаимодействие предварительного тестирования и экспериментального воздействия, ликвидировать эффект систематического смешения (взаимодействия состава групп и экспериментального воздействия), проконтролировать реакцию испытуемых на эксперимент и определить эффект взаимодействия между различными экспериментальными воздействиями.

Квазиэкспериментальные планы, построенные по схеме временных серий на одной группе, по структуре сходны с экспериментальными планами для одного испытуемого.

План дискретных временных серий чаще всего используется в психологии развития, педагогической, социальной и клинической психологии. Суть его состоит в том, что первоначально определяется исходный уровень зависимой переменной на группе испытуемых с помощью серии последовательных замеров. Затем исследователь воздействует на испытуемых экспериментальной группы, варьируя независимую переменную, и проводит серию аналогичных измерений. Сравниваются уровни, или тренды, зависимой переменной до и после воздействия. Схема плана выглядит так:

O1    O2   O3    X    O4    O5    O6

Главный недостаток плана дискретных временных серий в том, что он не дает возможности отделить результат влияния независимой переменной от влияния фоновых событий, которые происходят в течение исследования. Чтобы ликвидировать эффект «истории», рекомендуют использовать экспериментальную изоляцию испытуемых.

Модификацией этого плана является другой квазиэксперимент по схеме временных серий, в котором воздействие перед замером чередуется с отсутствием воздействия перед замером:

X      О1   -   О2     X      О3  -   О4     X      О5

Чередование может быть регулярным или случайным. Этот вариант подходит лишь в том случае, когда эффект воздействия обратим. При обработке данных, полученных в эксперименте, серии разбивают на две последовательности и сравнивают результаты тех замеров, где было воздействие, с результатами тех замеров, где оно отсутствовало. Для сравнения данных используется (t-критерий Стьюдента с числом степеней свободы п - 2 (где п — число ситуаций одного типа).

Планы временных серий часто реализуются на практике (как я уже заметил, в советской педагогической психологии формирующий эксперимент считался чуть ли не единственным вариантом доказательного исследования). При их реализации часто наблюдается известный «эффект Хотторна». Впервые его обнаружили Диксон и Ротлизбергер в 1939 г., когда проводили исследование на заводах Хотторна в Чикаго. Предполагалось, что изменение системы организации труда позволит повысить его производительность. В результате оказалось, как выявили опросы рабочих, что само по себе участие в эксперименте повысило их мотивацию к труду. Испытуемые поняли, что ими лично интересуются, и стали работать продуктивнее. Чтобы контролировать этот эффект (по своей сути он не отличается от плацебо-эффекта в квазиэкспериментах, проводимых по методу временных серий), используется контрольная группа.

Схема плана временных серий для двух неэквивалентных групп, из которых одна не получает воздействия, выглядит так:

O1   O2   O3   O4   O5    X    O6   O7   O8   O9   O10

              O1   O2   O3   O4   O5           O6   O7   O8   O9   O10

Квазиэксперимент позволяет контролировать действие фактора фоновых воздействий (эффект «истории»). Обычно именно этот план рекомендуется исследователям, проводящим эксперименты с участием естественных групп в детских садах, школах, клиниках или на производстве. Его можно назвать планом формирующего эксперимента с контрольной выборкой. Реализовать этот план весьма трудно, но в том случае, если удается провести рандомизацию групп, он превращается в план «истинного формирующего эксперимента».

Возможна комбинация этого плана и предыдущего, в котором чередуются серии с воздействием и его отсутствием на одной выборке.