Как искать и читать исследования об эффективном обучении и образовании
2026-02-21 08:55 Diff
https://skillbox.ru/media/education/dokazatelnoe-obrazovanie/

#Руководства

  • 17 авг 2021
  • 0

Как искать и читать исследования об эффективном обучении и образовании

Эксперты уверены — в образовании нужно внедрять только методы обучения с научно доказанной эффективностью. Но как их найти?

Обозреватель Skillbox Media. Магистр по научной коммуникации, интересуется социологией науки, историей и будущим образования.

В этой статье мы разберёмся:

Один из главных трендов в сфере образования — доказательный подход. Сегодня он проявляется и в России. Новые педагогические магистратуры готовят не только преподавателей, но и и исследователей, а Минпросвещения увеличивает финансирование научных работ в педвузах.

Термин «доказательное образование» появился в англоязычных странах в 1990-е годы. Аналогия с доказательной медициной неслучайна: как и в медицинской сфере, этот подход в образовании предлагает использовать методы, эффективность которых научно доказана. В идеале метод должен сработать в десятках независимых экспериментов.

У доказательного образования есть и сторонники, и критики. Некоторые исследователи считают, что доказательный подход из медицины внедряют в образование некорректно: если в клинических исследованиях новых лекарств всегда отслеживают нежелательные побочные эффекты, то при внедрении педагогических инноваций, увы, на «побочку» нередко не обращают внимания. Другие авторы вообще сомневаются, что подходы медицинских наук, например, метаанализ, применимы в образовании.

Но никто не спорит с тем, что практикам в образовании необходимо ориентироваться в научных исследованиях по своей области. Разработчики EdTech-решений, авторы инновационных педагогических методик, профильные блоги и медиа — все теперь стараются подкреплять свои слова ссылками на доказательную базу. Но для того, чтобы это было действительно на пользу, нужно уметь искать исследования и отделять зёрна от плевел — выбирать те работы, которым стоит доверять.

Что вообще считать исследованием? Базовая единица научной информации в современном мире — научная статья. Это текст, опубликованный в специализированном научном журнале, редакторы которого — специалисты в соответствующей научной области. Перед публикацией в таком издании статья проходит рецензирование — текст должны проверить минимум два независимых специалиста в этой области.

Подсказка: запомните стандартную структуру научной статьи.

Современная научная статья строится по шаблонному плану. Например, во введении обязательно должно быть место для обзора предыдущих исследований, где указывается, к каким выводам по теме пришли предшественники учёного. В отдельном разделе описываются методы исследования. И, как правило, конкретные результаты исследования и попытка авторов объяснить, что эти результаты означают, тоже разделены. Обобщённо такую структуру называют IMRaD — введение, методы, результаты и обсуждение.

При этом содержание статьи в рамках шаблонной структуры сильно зависит от научной дисциплины, темы и выбранных методов исследования. Образование — очень широкая область, поэтому интересующие вас статьи могут быть написаны совершенно по-разному:

  • В количественном исследовании главное — анализ данных методами статистики. В образовании количественные исследования могут быть и экспериментами (когда учёные создают искусственную ситуацию, например, в лаборатории), и наблюдениями (данные собираются из реального мира), и различными опросами.
  • В качественном исследовании автор сосредоточенно рассматривает конкретный опыт во всех деталях. Его тоже проводят разными методами — учёный может сделать глубинное интервью с респондентом, а может исследовать уже опубликованный контент.

Из научных статей собирается «здание» научного знания по теме — постепенно авторы обобщают свои работы в книгах (монографиях) и диссертациях. Более доказательным считается объединение работ разных авторов по одной теме, например, в виде систематического обзора. Такие работы подводят промежуточный итог в изучении темы.

Тут стоит сделать важную оговорку: не всякое исследование делается по научным канонам. Например, многие цифровые платформы проводят среди своих пользователей различные опросы, результаты которых затем попадают в новости ради PR. Практически все компании сейчас организуют маркетинговые исследования для собственных бизнес-целей (в частности, изучают потребителей и их «боли»), и если результаты получаются интересными, их потом тоже пускают в публичное поле. Некоторые IT-компании, обладая большим массивом данных, делятся своей аналитикой. Всё это называется в новостном потоке «исследованиями», но редко имеет отношение к науке.

Предположим, вы хотите узнать, какие исследования подтверждают эффективность интервального повторения для запоминания информации. Начать поиск можно по-разному:

Способ №1: поиск по ключевым словам в обычном поисковике

Большая часть ссылок в выдаче, конечно, приведёт вас на рекламные материалы и статьи в медиа. Но статьи специализированных медиа будут содержать и ссылки на конкретные исследования — например, в этой статье о кривой забывания есть две ссылки на работы по результатам экспериментов с интервальным повторением. Если пары ссылок на научные публикации вам недостаточно, воспользуйтесь другими способами.

Подсказка: ищите информацию на двух языках.

Чтобы правильно сформулировать поисковой запрос на английском — международном языке современной науки, — лучше проверить перевод термина в Википедии или с помощью инструментов вроде «Мультитрана» или Reverso. Принятый в англоязычной науке термин может не совпадать с буквальным переводом русского аналога. Например, вместо буквального interval repetition нам стоит искать устоявшееся spaced repetition.

Способ №2: поиск по агрегаторам научных новостей

Сузить выдачу до результатов исследований можно, если прийти со своим запросом на специализированные порталы. На таких сайтах, как ScienceDaily или EurekAlert, публикуются пресс-релизы университетов или новости, написанные журналистами, о недавних исследованиях. Пересказы опубликованных статей простым языком публикуют и многие научные журналы, особенно такие гиганты, как Nature, Science, PNAS. Российские исследования собирают на агрегаторе «Открытая наука», а также в специализированных научно-популярных СМИ (например, здесь).

Способ №3: поиск по базам научной литературы

Самая известная из бесплатных баз — «Google Академия», для поиска англоязычных статей также можно использовать Dimensions или Microsoft Academic Search. Поиск по русскоязычным научным публикациям возможен как через «Google Академию», так и на сайте Российского индекса научного цитирования (РИНЦ), но там нужна регистрация. Все эти базы выдадут вам ссылки исключительно на научные работы.

Скриншот: сайт Microsoft Academic Search

Плюс по сравнению с агрегаторами в том, что в базе вы увидите не изолированную новость в том виде, как её понял автор пресс-релиза или журналист, а целую сеть исследовательских статей. Можно открыть профиль автора и посмотреть, что ещё он написал по этой теме; увидеть, кто из учёных ссылался на эту статью в своих работах и что писали они. Так вы найдёте гораздо больше, чем по ключевым словам. Минус — упрощённых пересказов статей тут не будет.

Подсказка: различайте типы научных публикаций.

Отличие научной статьи от любой другой не только в том, где она опубликована. Во-первых, авторы научных публикаций — исследователи с официальными учёными степенями, их квалификацию подтверждают научные и образовательные организации, в которых они работают (эта информация обязательно сопровождает статью). Во-вторых, чтобы выпустить статью в научном журнале, нужно пройти не только обычную редактуру, но и научное рецензирование. Это снижает вероятность ошибок, хотя не исключает их полностью. Другие формы научных публикаций — монографии, исследовательские отчёты, тезисы докладов на конференциях — тоже проходят рецензирование. Исключение — препринт, то есть текст ещё не изданной научной работы. За её содержание отвечают только авторы.

Предположим, вы нашли несколько заинтересовавших вас статей. Вернее, пока не статей, а ссылок на них — лишь небольшую часть находок вы сразу увидите как полные тексты. Большинство научных статей доступны, увы, только платно на сайтах журналов. Такая закрытость научных публикаций от тех, на чьи средства в общем-то и делается наука, — налогоплательщиков — давно служит мишенью для критики.

Пока издатели выдерживают натиск борцов за открытый доступ, легальных способов найти полный текст платной статьи мало. Фактически всё, что можно сделать без нарушения авторских прав, — проверить профили авторов статьи в научных сетях ResearchGate и Academia и на сайтах вузов и институтов, где они работают. Там, а также в архивах препринтов в области образования и социальных наук могут лежать предварительные или даже финальные версии нужной вам работы.

Подсказка: с учёными можно общаться.

Если по названию и краткому пересказу (он содержится в открытой вводной части — так называемом абстракте статьи) текст кажется вам очень важным и потенциально полезным, попробуйте связаться с ведущим автором напрямую и запросить статью у него. Никакой гарантии, что вам ответят, нет. Но если письмо не затеряется, велик шанс, что статью вы всё же получите — обычно учёные не отказываются делиться своими знаниями.

Попробуем теперь определить, стоит ли доверять найденным статьям. Это не так просто. Если бы честное хорошее исследование можно было с ходу всегда отличить от статьи с подтасовкой данных, некорректными заимствованиями из других работ или просто с плохой методологией, то научным журналам никогда не пришлось бы извиняться за уже опубликованные статьи. В реальном мире отозванных научных статей так много, что существуют уже специальные базы данных для них. Подделку под науку не всегда просто распознать, но есть несколько инструментов. Ниже перечислено, что имеет значение, — вам нужно оценить эти критерии.

Например, поищите его в SCImago Journal Ranking или в открытом списке на сайте Scopus. В них, как и на других платформах, научные издания ранжированы по тому, как часто исследователи ссылаются в других работах на статьи в этих изданиях. Чем больше ссылок, тем более значимыми и влиятельными считают статьи, а значит, и журнал, который их опубликовал.

Скриншот: сайт SCImago Journal Ranking

В список журналов на платформе eLibrary (там же размещена база данных РИНЦ) входят в основном российские издания. Для каждого журнала указано, в какие относительно престижные базы данных (зарубежные Web of Science или Scopus, «ядро» РИНЦ или RSCI) он входит.

Если журнал не входит ни в какие солидные базы, это ещё не значит, что он ни на что не годится. Посмотрите его сайт. Вот несколько «красных флажков»:

  • нет данных об издателе;
  • нет данных о редколлегии;
  • ложная информация об индексации в базах (допустим, в списке Scopus журнала нет, а на сайте издания указано, что он туда входит);
  • не размещаются аннотации статей, их ключевые слова, сведения об авторах;
  • по опубликованным статьям видно, что с текстом не работали, — например, в них много опечаток.

Подсказка: нездоровая продуктивность — тоже плохой сигнал.

Вас должно насторожить, если издание демонстрирует явную неразборчивость — условно, публикует 50 выпусков по 300 статей в год, среди которых исследования по педагогике соседствуют с биотехнологиями. Это не универсальное правило: с развитием интернета появились огромные онлайн-журналы, которые публикуют очень много статей по самым разным тематикам. Среди таких мегажурналов есть и «хищники» (издания, которые за деньги публикуют что угодно без проверки), и достаточно авторитетные рецензируемые PLOS One или Scientific Reports. Но большинство изданий в сфере образования не относятся к мегажурналам.

Чтобы полноценно оценить методологию научной работы, конечно, нужно быть специалистом в той области, которой она посвящена (и даже этого не всегда достаточно). В силах рядового читателя, как правило, лишь убедиться, что выводы в статье не взяты с потолка. Обратите внимание на такие пункты:

  • Любое утверждение в научной работе должно быть обосновано. Поэтому даже вводная часть всегда пестрит ссылками на предыдущие исследования. Если вы видите в статье громкое утверждение без ясного указания, как и кем получен такой вывод, это повод усомниться в качестве исследования.
  • Если исследование основано на опросе или эксперименте, убедитесь, что отбор участников выглядит адекватным. Насторожить могут слишком малый объём выборки (например, выводы о целом университете делаются на группе из 20 студентов) и её несоответствие цели исследования. Допустим, авторы хотели изучить отношение молодёжи к VR-технологиям, а в эксперименте участвовали только девушки со второго курса «Психологии».
  • Постарайтесь в общих чертах понять, как авторы измеряют параметры, которые они оценивают в исследовании. Например, как определяют, улучшилось ли понимание темы учениками после внедрения нового метода, и с чем именно сравнивают результат «после». Подход авторов может не совпадать с вашим, но важно, чтобы они его объясняли и обосновывали, почему выбрали именно такие параметры для оценки.
  • Проверьте, не считают ли авторы себя всемогущими. У каждого исследования есть ограничения, потому что ни один эксперимент или опрос не воспроизводит всю сложность реального мира. В хорошей статье будет указано, на какие ситуации и контексты выводы распространяются, а какие исследование просто не охватило.
  • В целом открытость — хороший тон. Если в начале статьи автор выдвинул три гипотезы, и только одну из них удалось подтвердить, а по остальным не получилось ни «да», ни «нет», это показатель научной честности. Менее щепетильный учёный просто не написал бы в статье о неподтверждённых гипотезах. Некоторые исследования также могут быть заранее зарегистрированы — при этом учёные открыто фиксируют, что собираются изучить, какие гипотезы выдвигают. Многие также публикуют наряду со статьёй наборы данных по эксперименту, чтобы у желающих была возможность проверить расчёты.

Что, кроме нерепрезентативной выборки, может снизить доверие к статье, опубликованной в неплохом журнале? В одном из эпизодов подкаста EdU.Radio Александр Фенин, на тот момент руководитель Центра продуктовых исследований «СберКласса», предложил своё буллшит-бинго. В частности, по его мнению, не стоит доверять статьям, авторы которых:

  • уверены в уникальности своего исследования;
  • обесценивают работу оппонентов;
  • делают чересчур категоричные выводы и обобщения;
  • злоупотребляют метафорами;
  • запугивают читателя и делают конспирологические намёки;
  • ссылаются в подтверждение своих мыслей на работы, авторы которых ничего такого не писали;
  • некритично ссылаются на знаменитые классические исследования (например, Стэнфордский тюремный эксперимент), результаты которых уже не считаются достоверными;
  • сводят все социальные явления к биологии или работе мозга.

Если необходимо сверить свои выводы об исследовании с мнением эксперта, а обсудить их не с кем, посмотрите, кто и как ссылался на прочитанную вами статью. Узнать это можно в «Google Академии» и других базах — к каждой статье приводится список более новых работ, авторы которых на неё ссылаются. Также можно поискать, что писали о близких темах в систематических обзорах, например, в Campbell Collaboration или в What Works Clearinghouse.

Подсказка: помните, что вы тоже можете быть неправы.

Ещё один совет от директора по исследованиям сообщества The Learning Guild Джейн Бозарт — важно осознавать собственную предвзятость. В море научной литературы всегда можно найти статью, и не одну, которая подтвердит вашу точку зрения на предмет. А всё, что ей противоречит, легко будет объявить некачественными выдумками из журналов-хищников. Помните про такое когнитивное искажение, как предвзятость подтверждения: учитывайте, что ваши намерения влияют на результат поиска и оценки научных статей.

Предположим, описанный в одном из исследований метод так вам понравился, что вы хотите внедрить его в практику. Чтобы принять такое решение, недостаточно убедиться в том, что исследование качественно и результаты достоверны. Нужно понять, применимы ли они в вашей работе.

Австралийская организация исследований в области образования (AERA) предлагает педагогам и управленцам руководство к размышлению над научными доказательствами. Вот над какими вопросами эксперты советуют задуматься:

  • что в исследовании связано с вашей практикой, схоже с вашими текущими условиями и задачами;
  • что отличается;
  • что привлекает вас в исследовании;
  • почему применённый в исследовании подход сработал, какие ресурсы и условия были ключевыми для успеха;
  • что вам придётся изменить в своей практике, чтобы внедрить этот подход, и будет ли этого достаточно, чтобы достичь эффекта;
  • как вы адаптируете новшество к своей системе и как адаптация повлияет на ключевые элементы, которые обеспечили успех подхода в исследовании;
  • сколько будут стоить перемены и откуда вы возьмёте эти средства и время;
  • что нужно будет убрать из практики, чтобы ввести новый подход, и какими будут последствия отказа от старых, привычных форм работы для учеников.

Если вам кажется, что польза от внедрения нового перевешивает все издержки, решите для себя ещё два вопроса:

  • какие ресурсы потребуются по ходу внедрения, как вы их получите и как будете распределять;
  • как вы будете отслеживать эффективность нововведения — какие данные собирать, как убедиться, что изменения связаны именно с новым подходом.

Этот длинный список только подтверждает — доказательное образование не панацея и даже не набор выписанных доктором лекарств. Работа с исследованиями предполагает, что практики тоже становятся немного исследователями — или хотя бы партнёрами учёных.

Курс с трудоустройством: «Профессия Методист с нуля до PRO» Узнать о курсе