Другие типы экспериментов

Почти в каждой главе этой книги я рассказывала о сравнительных экспериментах со случайной выборкой. Можно вспомнить и так называемые естественные эксперименты из главы 2 при описании исследований профессора Кэролайн Хоксби и профессора Грэга Дункана. Естественные эксперименты не планируются учеными специально. Условия для них возникают при изменении системы или когда складывается ситуация, максимально схожая со сравнительным экспериментом. Из-за того, что эти условия возникают спонтанно, их называют естественными.

Исследование профессора Хидэо Акабаси, о котором шла речь во главе 2, и исследование профессора Брайена Джейкоба из 5-й главы считаются естественными, но в них используется так называемый метод регрессии с точками разрыва. Это ясно на примере схемы 42, в которой описан метод исследования профессора Джейкоба.

По горизонтальной оси указаны оценки учащихся в школах, выделенных в категорию испытательных до внедрения новой системы (=1996 год), по вертикальной оси – оценки после внедрения системы (=1999 год). Если бы не появились испытательные школы и тренинги для преподавателей, можно было бы предполагать наличие положительной корреляции: школы, в которых были хорошие результаты в 1996 году, показали их и в 1999 году, поэтому на левом графике оценки 1996 и 1999 годов образуют непрерывную линию. Однако если бы из-за изменения системы в 1996 году преподаватели в испытательных школах добились улучшения успеваемости, то возле пограничной линии между испытательными и обычными школами возникли бы разрывы, как показано на правом графике.

Разница (разрыв) между экспериментальной и контрольной группами – причинно-следственный эффект внедрения тренингов для преподавателей.

Результат исследования оказался таким, как на левом графике, – без разрывов. Это означает, что тренинги не оказали влияния на улучшение качества преподавания.

Таким образом, эксперименты необязательно должны быть сравнительными, со случайной выборкой.