Консультант по планированию эксперимента

Помогает спроектировать строгий научный эксперимент: переменные, контроли, выборку, статистику и этику.

// промпт
# Консультант по планированию эксперимента Ты — методолог-эксперт по экспериментальному дизайну с опытом в области **{{naucnaia_oblast}}**. Спроектируй строгий, воспроизводимый эксперимент, который проверяет гипотезу и устойчив к артефактам и систематическим ошибкам. ## Исходные данные - **Исследовательский вопрос:** {{issledovatelskii_vopros}} - **Гипотеза:** {{proveriaemaia_gipoteza}} - **Объект изучения / популяция:** {{celevaia_populiaciia}} - **Доступные ресурсы и ограничения:** {{biudzet_vremia_oborudovanie}} ## Что сделать 1. **Уточни задачу.** Переформулируй вопрос в фальсифицируемую нулевую и альтернативную гипотезы; укажи практическую значимость. 2. **Определи переменные.** Независимая(ые): **{{nezavisimaia_peremennaia}}** и её уровни; зависимая(ые): **{{zavisimaia_peremennaia}}** с единицами измерения и шкалой; контролируемые и мешающие факторы — как их нейтрализовать (рандомизация, балансировка, ковариаты). 3. **Выбери схему.** Обоснуй между-/внутри-субъектный или смешанный дизайн для **{{tip_dizaina}}**; опиши группы (контроль, экспериментальные) и условия. 4. **Спланируй выборку.** Критерии включения/исключения, способ рекрутирования, ослепление и расчёт размера выборки исходя из ожидаемого размера эффекта, α = **{{uroven_znacimosti}}** и мощности 0.80. 5. **Опиши процедуру.** Пошаговый протокол: подготовка материалов, пилот, рандомизация, инструктаж, воздействие, измерения, дебрифинг, проверка манипуляции. 6. **Заложи статистику.** Основной и вторичные тесты, поправки на множественные сравнения, план обработки пропусков и выбросов. 7. **Учти этику и угрозы.** Информированное согласие, конфиденциальность, минимизация рисков; перечисли угрозы внутренней и внешней валидности и меры против них. ## Формат ответа - Сначала краткое резюме дизайна (3–4 предложения). - Затем разделы по пунктам выше — заголовки, маркированные списки, таблица «Переменная → Тип → Контроль». - В конце: чек-лист предрегистрации и список главных рисков с митигацией. Где данных не хватает — задай уточняющие вопросы и предложи разумные значения по умолчанию, не выдумывая фактов.
Заполните переменные

Пример запуска

Сгенерировано Claude Opus 5.5, 24 сентября 2026 г.

Значения переменных

Научная область
Когнитивная психология / психология обучения
Исследовательский вопрос
Влияет ли интервальное повторение (spaced repetition) по сравнению с массированным повторением (cramming) на долговременное удержание иностранной лексики у взрослых, изучающих английский язык как второй?
Проверяемая гипотеза
Студенты, заучивающие новые английские слова по схеме интервального повторения, покажут более высокую долю правильно воспроизведённых слов через 7 дней после обучения по сравнению со студентами, использующими массированное повторение (зубрёжку) за один присест, при равном суммарном времени тренировки.
Целевая популяция
Взрослые 18–35 лет, носители русского языка, уровень английского A2–B1 по CEFR, без диагностированных нарушений памяти или внимания, студенты и выпускники языковых курсов при университете
Бюджет время оборудование
6 недель на набор и проведение эксперимента, бюджет 150 000 рублей на компенсации участникам и печать материалов, доступна университетская компьютерная лаборатория на 20 мест с ПО для предъявления стимулов (PsychoPy), онлайн-платформа Anki для интервального повторения, штатный ассистент-исследователь на полставки
Независимая переменная
Схема повторения лексики: (1) интервальное повторение с нарастающими интервалами 1-3-7 дней, (2) массированное повторение — всё обучение за одну сессию, (3) контрольная группа без структурированного повторения (однократное предъявление)
Зависимая переменная
Доля правильно воспроизведённых английских слов в тесте свободного припоминания перевода через 7 дней после последней тренировочной сессии, измеряется в процентах правильных ответов (0-100%) из списка 40 целевых слов
Тип дизайна
Между-субъектный дизайн с тремя параллельными группами и рандомизированным распределением участников
Уровень значимости
0.05

План эксперимента: интервальное и массированное повторение английской лексики

Краткое резюме дизайна

Между-субъектный рандомизированный эксперимент с тремя параллельными группами: интервальное повторение (4 сессии с промежутками 1–3–7 дней), массированное повторение (одна сессия) и контроль с однократным предъявлением. Участники: взрослые русскоязычные с уровнем A2–B1. Все группы проходят финальный тест ровно через 7 дней после последней сессии обучения. Интервальная и массированная группы получают одинаковое число предъявлений каждого слова и одинаковое время тренировки, что обеспечивается пробами фиксированной длительности в PsychoPy. Главная подтверждающая проверка одна: планируемый контраст «интервальное против массированного» по доле правильно воспроизведённых слов (40 целевых слов, припоминание перевода) в смешанной логистической модели с ковариатой исходного уровня. Контрольная группа служит нижней точкой отсчёта и анализируется во вторичных сравнениях.

⚠️ Три методологических решения, которые я внёс в исходную постановку. Их стоит подтвердить.

  1. Anki не используется для экспериментальной манипуляции. Алгоритм Anki (SM-2/FSRS) адаптивный: он сдвигает интервалы и повторяет карточки после ошибок. Поэтому фиксированную схему 1–3–7 и равенство числа повторений между группами в нём обеспечить нельзя. Вся тренировка идёт в PsychoPy, онлайн-сессии через Pavlovia или бесплатный JATOS. Anki можно дать всем участникам после дебрифинга как бонус.
  2. Контрольная группа не уравнена по времени обучения. Однократное предъявление по определению короче, поэтому гипотеза проверяется только контрастом интервальное против массированного. Время пребывания в лаборатории и число визитов уравниваются нейтральным заполнителем.
  3. «Зубрёжка» операционализирована как циклическое прохождение всего списка в одной сессии. Повторы одного слова внутри сессии разделены примерно 40 другими пробами. Такой вариант ближе к реальной практике, но даёт более консервативную оценку эффекта, чем повторение слова подряд. Альтернатива описана в уточняющих вопросах.

1. Уточнение задачи

Гипотезы

Обозначим через p долю (%) правильно воспроизведённых целевых слов в отсроченном тесте (через 7 дней после последней тренировки) при равном времени тренировки.

Формулировка
H₀ (подтверждающая) p(интервальное) = p(массированное). Схема распределения повторений не влияет на удержание через 7 дней.
H₁ p(интервальное) ≠ p(массированное). Направленное предсказание: p(интервальное) > p(массированное).
Вторичные H₂: интервальное > контроль; H₃: массированное > контроль.

Условие фальсификации. H₁ считается опровергнутой, если 95% доверительный интервал разницы исключает положительные эффекты не меньше минимального значимого эффекта (SESOI). Если интервал лежит в пределах ±SESOI (тест эквивалентности TOST), делается вывод о практическом отсутствии эффекта. Если интервал широкий и пересекает обе границы, результат признаётся неинформативным, а не «эффекта нет».

Практическая значимость

  • SESOI принимается равным d = 0.5, это около 10 процентных пунктов при ожидаемом SD ≈ 20 п.п. Это допущение, его нужно уточнить по пилоту. Обоснование: разница примерно в 4 слова из 40 заметна для учащегося и оправдывает смену стратегии.
  • Прикладной вывод касается языковых курсов. Если эффект подтвердится при равных временны́х затратах, перераспределение повторений ничего не стоит, но повышает удержание. Это аргумент для встраивания интервальных схем в программы курсов и домашние задания.

2. Переменные

Независимая переменная: схема повторения (3 уровня)

Уровень Сессии (день от начала) Экспозиций на слово Время тренировки
Интервальное (SP) Д0 → Д1 → Д4 → Д11, промежутки 1–3–7 дней 8: 1 заучивание + 7 проб припоминания с обратной связью ≈ 51 мин, 4 × ≈13 мин
Массированное (MA) Д11, одна сессия 8, то же количество ≈ 51 мин, одним блоком
Контроль (CO) Д11, одно предъявление 1 заучивание ≈ 4 мин и нейтральный заполнитель до ≈ 51 мин

Структура проб (одинакова для SP и MA):

  • Проба заучивания: пара «рус. — англ.» на экране 6 с.
  • Проба припоминания: русский стимул, окно ввода английского слова фиксированно 7 с (не прерывается досрочно), затем правильный ответ 3 с.
  • Порядок слов внутри каждого круга рандомизирован.
  • Распределение для SP: Д0 — заучивание + 1 круг; Д1 — 2 круга; Д4 — 2 круга; Д11 — 2 круга. Для MA: заучивание + 7 кругов подряд на Д11.
  • Благодаря фиксированной длительности проб время тренировки равно у всех участников, а не только в среднем по группе.

Зависимые переменные

Переменная Операционализация Шкала
Основная: отсроченное припоминание Д18 (7 дней после Д11). Русский стимул, участник набирает английское слово, без обратной связи. Мягкое автоматическое оценивание: точное совпадение или расстояние Левенштейна ≤ 1 для слов из ≥ 5 букв % правильных из 40 (0–100); в модели бинарный исход на пробу
Вторичная: строгое оценивание Только точное совпадение 0–100%
Вторичная: узнавание Д18, после теста припоминания: выбор из 4 вариантов (англ. → рус.) 0–100%; нужна на случай «пола» в контроле
Вторичная: конец обучения Результат последнего круга Д11 (SP, MA) 0–100%

Направление теста (рус. → англ., продуктивное) выбрано по умолчанию, потому что оно лучше соответствует формулировке «воспроизведение английских слов». См. уточняющие вопросы.

Переменная → тип → контроль

Переменная Тип Способ контроля
Схема повторения НП (манипулируемая) Рандомизация, скрытое распределение
% правильных, Д18 ЗП (основная) Автоматическое слепое оценивание, заранее заданный алгоритм
Исходный уровень английского (LexTALE + заявленный CEFR) Мешающая / ковариата Стратификация при рандомизации (A2/B1) и ковариата в модели
Суммарное время тренировки, число экспозиций Контролируемая Фиксированная длительность проб, одинаковое число проб
Интервал удержания (последняя сессия → тест) Контролируемая Ровно 7 дней ± 4 ч для всех групп
Время суток обучения и теста Мешающая Тест в то же время суток ± 2 ч; время записывается как ковариата для разведочного анализа
Характеристики слов (частота, длина, конкретность, когнатность) Мешающая Нормирование слов; единый список; случайный эффект слов в модели
Предварительное знание целевых слов Мешающая Нормирующий пилот; вопрос «знали ли вы слово раньше?» после теста с исключением таких слов у конкретного участника
Самостоятельное повторение вне протокола Мешающая (история / контаминация) Список не выдаётся на руки; инструкция; самоотчёт о повторении
Число визитов и контакт с исследователем Мешающая (ожидания, отсев) Одинаковый график визитов для всех групп с заполнителями
Утомление в массированной сессии Часть конструкта Не устраняется (это свойство зубрёжки), но фиксируется: опрос о субъективной усталости
Когорта и дата проведения Мешающая Блочная рандомизация внутри когорты: все условия в каждой когорте
Экспериментатор Мешающая Один ассистент, стандартный скрипт инструкций, инструкции на экране

3. Схема эксперимента

Дизайн: между-субъектный, 3 параллельные группы, рандомизация 1:1:1, стратификация по уровню (A2/B1).

Почему не внутри-субъектный. Внутри-субъектный дизайн с разными списками слов под разные схемы статистически эффективнее. Но он несёт серьёзные риски:

  • участник, заметивший разницу, может переносить стратегии между условиями;
  • возможно перекрёстное повторение списков;
  • интерференция между списками;
  • сложный и длинный график.

Главное же в том, что гипотеза сформулирована на уровне «студентов, использующих стратегию», и между-субъектный дизайн отвечает на неё напрямую. Он также исключает асимметричный перенос.

Выравнивание контакта (график для всех групп одинаков):

День SP MA CO Где
−7…−1 Скрининг, согласие ← ← Онлайн
Д0 Базовые меры + сессия 1 (13 мин) Базовые меры + заполнитель 13 мин = MA Лаборатория
Д1 Сессия 2 Заполнитель Заполнитель Онлайн (окно 20–28 ч)
Д4 Сессия 3 Заполнитель Заполнитель Онлайн (окно ± 12 ч)
Д11 Сессия 4 Массированная сессия Однократное предъявление + заполнитель Лаборатория
Д18 Тест, опрос, дебрифинг ← ← Лаборатория

Заполнитель — невербальное задание без лексической нагрузки (например, визуальные головоломки или матрицы). Оно не должно создавать интерференции с английскими словами.

Известное ограничение дизайна. В группе SP от первой встречи со словом до теста проходит 18 дней, в MA — 7. Это работает против гипотезы, то есть оценка консервативна. Это следует явно указать в отчёте.


4. Выборка

Критерии включения

  • Возраст 18–35 лет, русский язык как родной.
  • Уровень английского A2–B1: заявленный CEFR курсов и LexTALE в заранее заданном диапазоне. Ориентир — примерно 50–70%, границы уточнить по пилоту.
  • Доступ к компьютеру и интернету для онлайн-сессий.
  • Готовность прийти на все визиты.

Критерии исключения

  • Самоотчёт о диагностированных нарушениях памяти, внимания или о дислексии.
  • Участие в пилоте или нормировании слов.
  • Одновременное интенсивное изучение английского с целевой лексикой невозможно проверить заранее. Поэтому это фиксируется в самоотчёте и используется в анализе чувствительности.
  • Исключения на уровне анализа (предрегистрируются):
    • пропуск или выход за окно любой сессии тренировки — исключение из анализа per-protocol, но не из ITT;
    • провал более 2 из 3 проверок внимания;
    • участник сообщил, что знал более 20% целевых слов до исследования.

Рекрутирование

  • Рассылка и объявления на языковых курсах университета, а также у выпускников курсов.
  • Онлайн-анкета скрининга.
  • В объявлении исследование описывается как «исследование методов запоминания иностранных слов» без указания гипотезы.

Ослепление

  • Участники: не знают гипотезы и условий других групп. Полное ослепление невозможно, так как человек видит свой график.
  • Распределение: последовательность генерируется заранее R-скриптом с зафиксированным seed. Это делает лицо, не взаимодействующее с участниками (например, научный руководитель). Условие подгружается в PsychoPy по ID участника, ассистент заранее его не видит.
  • Оценивание: автоматический алгоритм. Спорные ответы оценивают 2 независимых оценщика, не знающих условия; согласованность проверяется по κ Коэна.
  • Анализ: основной анализ выполняется на данных с замаскированными метками групп (A/B/C) и раскрывается после фиксации кода.

Расчёт объёма выборки

  • Основной тест: контраст SP против MA, двусторонний α = 0.05, мощность 0.80, d = 0.5 (SESOI).
    • Без ковариаты: n = 2 × (1.96 + 0.84)² / 0.5² ≈ 64 на группу.
    • С ковариатой (ANCOVA) при корреляции исходного уровня с исходом r ≈ 0.5 дисперсия умножается на (1 − r²) = 0.75, и получается ≈ 48 на группу.
  • Решение: 50 завершивших исследование на группу, 150 всего. При ожидаемом отсеве около 15% за 18 дней набрать 60 на группу, 180 человек.
  • Что выдерживает эта выборка:
    • вторичные сравнения с контролем (поправка Холма, α до 0.025) — эффекты d ≈ 0.6 и больше; в сравнении с однократным предъявлением ожидаются эффекты заметно крупнее;
    • тест эквивалентности с границами ±0.5 имеет низкую мощность. Это указывается как ограничение.
  • Уточнение после пилота: оценить SD исхода и корреляцию с LexTALE, провести симуляцию мощности для GLMM (пакет simr в R), чтобы учесть вклад дисперсии слов.
  • Ориентир из литературы. Эффекты интервального повторения при недельной задержке в работах по парным ассоциациям и лексике часто больше d = 0.5; см. метаанализ Cepeda et al., 2006, Psychological Bulletin. Выбор 0.5 намеренно консервативен и защищает от завышенных эффектов в литературе.

Бюджет (оценка, требует проверки)

Суммарное время участника ≈ 3 ч: Д0 ≈ 60 мин, Д1 и Д4 по 15 мин, Д11 ≈ 65 мин, Д18 ≈ 30 мин.

Статья Расчёт Сумма, ₽
Компенсации 180 × 700 126 000
Печать (согласия, дебрифинг, объявления) — ≈ 6 000
Онлайн-платформа (Pavlovia; JATOS бесплатен) — ≈ 0–8 000
Резерв — ≈ 10 000
Итого ≈ 150 000
  • 700 ₽ за 3 часа — скромная сумма, и это риск отсева.
  • Рекомендация: выплачивать компенсацию частями (например, 200 ₽ после Д0 и 500 ₽ после Д18), чтобы не ставить под давление право выйти из исследования. По возможности добавить учебные баллы на курсах.
  • Если бюджет не позволяет, уменьшить контрольную группу до 35 человек (она вторична): SP 60 + MA 60 + CO 35 = 155 человек, около 850 ₽ на человека.

5. Процедура

Календарь (6 недель)

Неделя Задачи
1 Нормирование слов (онлайн, n ≈ 30 из той же популяции, не участники основного исследования); сборка и отладка PsychoPy/онлайн-версии; пилот (n ≈ 10–12); открытие набора и скрининга; предрегистрация до первого участника основного исследования
2–3 Старт когорт: 9 когорт по ≈ 20 человек, 3–4 когорты в неделю, Д0 не позднее 23-го дня проекта
3–6 Сессии Д1/Д4 (онлайн), Д11 и Д18 (лаборатория) по когортам
6 Последние тесты (≈ 41-й день), дебрифинг, закрытие данных

Критично: одобрение этического комитета должно быть получено до первой недели.

Пошаговый протокол

  1. Подготовка материалов.
    • Пул примерно из 100 английских существительных (при желании с глаголами) низкой частотности, выше уровня B2.
    • Исключаются когнаты и заимствования (например, слова, похожие на русские).
    • Слова уравниваются по длине (5–9 букв), частотности (SUBTLEX-US) и конкретности (нормы Brysbaert).
    • У каждого слова однозначный русский перевод из одного слова.
  2. Нормирование. В основной список проходят 40 слов, которые знают менее 5% нормирующей выборки. Целевые слова в основной выборке заранее не тестируются, чтобы избежать эффекта тестирования.
  3. Пилот.
    • Проверка длительности проб, достаточности 7 с на ввод, работы онлайн-окон.
    • Цель по сложности: точность MA в конце обучения около 60–85%, чтобы не было потолка.
    • При необходимости корректируются длительности. Данные пилота в основной анализ не входят.
  4. Скрининг и согласие (онлайн). Анкета критериев, информированное согласие, согласие на обработку персональных данных.
  5. Рандомизация. Блочная (размер блока 3 или 6 — скрыт от ассистента), стратифицированная по уровню A2/B1, внутри каждой когорты.
  6. Д0 — инструктаж и базовые меры (лаборатория).
    • Общая инструкция на экране, одинаковая для всех групп: «вам предстоит изучать слова и выполнять задания, в конце будет тест».
    • LexTALE, демографическая анкета, анкета опыта изучения языка.
    • Затем сессия 1 (SP) или заполнитель (MA, CO).
  7. Д1, Д4 (онлайн).
    • Ссылка открывается только в заданном окне, время старта и окончания записывается автоматически.
    • Встроены проверки внимания.
    • Напоминания по e-mail или в мессенджере за 12 ч и 1 ч.
  8. Д11 (лаборатория).
    • Последняя сессия SP, массированная сессия MA, однократное предъявление с заполнителем для CO.
    • Условия идут параллельно на разных местах, в наушниках, со стандартными инструкциями на экране.
    • Затем опрос субъективной усталости.
    • Напоминание: не искать и не повторять слова.
  9. Д18 (лаборатория), тест.
    • Припоминание рус. → англ. по 40 словам в случайном порядке, без обратной связи.
    • Затем узнавание (4 варианта).
    • Затем вопрос по каждому слову «знали ли вы это слово до исследования?».
    • Затем самоотчёт: «повторяли ли вы слова вне сессий? искали ли их?».
  10. Проверка манипуляции.
    • Объективно: все пробы пройдены, временны́е отметки попадают в окна, фактическое время тренировки одинаково (лог PsychoPy).
    • Субъективно: вопрос «сколько раз и когда вы занимались словами?» подтверждает, что участник воспринял свой график.
  11. Дебрифинг.
    • Раскрытие цели и гипотезы; объяснение, почему группы различались.
    • Рекомендации по эффективному изучению слов.
    • Колода Anki с изученными словами для всех групп.
    • Просьба не обсуждать детали с потенциальными участниками до окончания сбора.
  12. Качество данных. Еженедельная выгрузка, проверка полноты, журнал отклонений от протокола.

6. Статистический план

Основной анализ (подтверждающий)

  • Модель: обобщённая линейная смешанная модель (логит-связь) на уровне проб: correct ~ condition + LexTALE_c + (1 | participant) + (1 | item)
    • условие закодировано с MA в качестве референсной группы;
    • LexTALE центрирован;
    • если модель сходится, добавить (1 + condition | item).
  • Проверяемый параметр: коэффициент SP против MA, двусторонний α = 0.05.
  • Отчёт: отношение шансов с 95% ДИ, а также разница в процентных пунктах в исходной шкале (маргинальные средние, emmeans).
  • Проверка устойчивости: ANCOVA на доле правильных по участникам с той же ковариатой.

Вторичные анализы

  • SP против CO и MA против CO — одно семейство, поправка Холма.
  • Те же модели для строгого оценивания и для узнавания.
  • Тест эквивалентности (TOST) для SP против MA с границами ±SESOI.
  • Байесовский фактор (BF₁₀) для SP против MA как оценка поддержки H₀ при незначимом результате.
  • Разведочно: модерация исходным уровнем (condition × LexTALE), результат в конце обучения против отсроченного теста (ожидаемое «пересечение»: MA лучше сразу, SP лучше через неделю).

Множественность. Основной тест единственный, поправка не нужна. Вторичные гипотезы корректируются внутри семейства. Разведочные анализы явно помечаются как разведочные.

Пропуски

  • Основной анализ — ITT: анализируются все рандомизированные, прошедшие Д0.
    • Если ЗП отсутствует, используется множественная импутация (m ≥ 20) по условию, LexTALE и результату в конце обучения, в предположении MAR.
    • Анализы чувствительности: только завершившие (complete cases); анализ точки перелома (tipping-point) для отклонения от MAR.
  • Per-protocol: только соблюдавшие окна и прошедшие все сессии.
  • Отсев: сравнивается между группами (χ²). Если различия больше 10 п.п., это обсуждается как угроза валидности.

Выбросы и оценивание

  • Результаты тестов не обрезаются.
  • Исключения только по заранее заданным критериям (п. 4). Слова, которые участник знал раньше, исключаются из знаменателя для этого участника.
  • Влиятельные наблюдения проверяются через расстояние Кука и анализ с исключением по одному (influence.ME) как анализ чувствительности.
  • Подозрительные ответы — копирование, латиница вместо ответа, набор по одной букве — выявляются алгоритмом, правила задаются заранее.

7. Этика и угрозы валидности

Этика

  • Одобрение этического комитета университета до набора.
  • Информированное согласие: цель в общих чертах, процедура, время, компенсация, право выйти в любой момент без потери уже заработанной части компенсации.
  • Минимальный обман (скрыта гипотеза, не условия участия). Раскрывается на дебрифинге, данные можно отозвать.
  • Конфиденциальность:
    • псевдонимизированные ID; таблица соответствия ID и контактов хранится отдельно, доступ только у ассистента и PI;
    • хранение на университетском сервере;
    • соблюдение 152-ФЗ «О персональных данных»;
    • онлайн-платформа не собирает лишних идентификаторов;
    • открытые данные публикуются только анонимизированными.
  • Минимизация рисков:
    • риск минимален (лёгкое утомление, разочарование от ошибок);
    • в массированной сессии разрешено сделать паузу по запросу, пауза фиксируется;
    • компенсация не зависит от результатов теста.
  • Справедливость: контрольная и массированная группы после исследования получают те же обучающие материалы.

Угрозы внутренней валидности

Угроза Проявление Мера
Селекция Группы различаются по уровню Стратифицированная рандомизация, ковариата
Дифференциальный отсев SP нагружена сильнее, чаще выбывает Одинаковое число визитов для всех групп, выплата частями, напоминания, ITT + MI
История / контаминация Самостоятельное повторение или поиск слов Список не выдаётся, инструкция, самоотчёт, анализ чувствительности
Диффузия между участниками Участники с одних курсов обсуждают исследование Просьба не обсуждать, рандомизация внутри когорт, вопрос в анкете
Эффект тестирования Предтест целевых слов сам служит обучением Предтеста нет; нормирование на отдельной выборке
Инструментальная ошибка Субъективная оценка ответов Автоматический алгоритм, слепые оценщики, κ
Ожидания экспериментатора Ассистент невольно влияет на мотивацию Инструкции на экране, скрытое распределение, стандартный скрипт
Требования ситуации Участник угадывает гипотезу Нейтральное название, одинаковая инструкция
Неравное время обучения Разная скорость ответа Пробы фиксированной длительности, контроль по логам
Интервал с первой встречи SP дольше хранит слова (18 против 7 дней) Работает против гипотезы; явно отражается в отчёте

Угрозы внешней валидности

  • Выборка: студенты и выпускники университетских курсов, мотивированные и образованные. Перенос на других взрослых учащихся ограничен.
  • Материал: изолированные пары слов без контекста; не проверяется употребление слов в речи.
  • Одна схема и одна задержка: 1–3–7 и тест через 7 дней. Выводы не обобщаются на другие соотношения промежутка и задержки (см. Cepeda et al., 2008).
  • Фиксированная схема против адаптивной: результаты не переносятся напрямую на Anki и аналоги.
  • Лабораторный контекст: обратная связь и структура жёстче, чем при самостоятельных занятиях.

Уточняющие вопросы (с решениями по умолчанию)

# Вопрос По умолчанию
1 Направление основного теста: рус. → англ. (продуктивное) или англ. → рус. (рецептивное)? рус. → англ.; рецептивное узнавание как вторичная мера
2 «Зубрёжка»: циклы по всему списку или подряд повторяемые слова? Циклы по списку (реалистичнее, консервативнее)
3 Как интерпретировать «1-3-7»: промежутки между сессиями (Д0–Д1–Д4–Д11) или дни сессий (Д1, Д3, Д7)? Промежутки: 4 сессии
4 Получено ли одобрение этического комитета? Если нет, 6 недель нереалистичны. Предполагается, что получено до старта
5 Допустимы ли онлайн-сессии Д1/Д4, или всё должно быть в лаборатории? Онлайн с контролем окон; лабораторный вариант возможен, но дороже
6 Есть ли институциональный доступ к Pavlovia, или поднять JATOS на сервере университета? JATOS (бесплатно)
7 Можно ли начислять учебные баллы на курсах вместо части денег? Если да, это снизит отсев
8 Нужна ли контрольная группа полного размера? 60 человек; при нехватке бюджета — 35

Чек-лист предрегистрации (OSF или AsPredicted)

  • Гипотезы H₁–H₃ и их направленность; разделение на подтверждающие и разведочные
  • Точная операционализация всех уровней НП: график, окна, число и длительность проб
  • Список 40 слов и протокол нормирования
  • Основная ЗП и алгоритм оценивания (правило Левенштейна), вторичные ЗП
  • Расчёт выборки: SESOI d = 0.5, α, мощность, допущения, целевое n = 180, правило остановки (сбор до 150 завершивших или до конца 6-й недели)
  • Процедура рандомизации: стратификация, блоки, seed, кто генерирует
  • Критерии включения, исключения, исключений на уровне анализа
  • Спецификация основной модели и ковариат; действия при несходимости
  • Вторичные тесты и поправка Холма; границы TOST; априорное распределение для байесовского фактора
  • План работы с пропусками: ITT + MI, чувствительность, per-protocol
  • Правила для выбросов и подозрительных ответов
  • Аналитический код, проверенный на данных пилота или симуляции
  • Порядок раскрытия маскировки групп

Главные риски и митигация

Риск Вероятность / влияние Митигация
Недобор за 6 недель (нужно 180 человек за ≈ 3 недели) Высокая / высокое Скрининг с 1-й недели; несколько каналов набора; запасной сценарий с 150 участниками и уменьшенной контрольной группой; честная переоценка мощности
Дифференциальный отсев, особенно в SP Средняя / высокое Одинаковый график визитов, выплата частями, напоминания, ITT + MI, сравнение отсева
Эффект пола в контроле или потолка в SP/MA Средняя / среднее Калибровка сложности в пилоте, мера узнавания как страховка
Самостоятельное повторение слов Средняя / среднее Список не выдаётся, инструкции, самоотчёт, анализ чувствительности
Сбои онлайн-сессий (выход за окно, техника) Средняя / среднее Автоматическая блокировка вне окна, пилот онлайн-части, резервный слот в лаборатории
Недостаточная компенсация Средняя / среднее Учебные баллы, частичные выплаты, короткие сессии
Задержка этического одобрения Неизвестна / критичное Подать заявку немедленно; без одобрения сбор данных не начинается
Завышенные ожидания эффекта Средняя / среднее Консервативный SESOI, TOST и байесовский фактор для интерпретации нулевого результата
Нагрузка на ассистента на полставки Средняя / среднее Автоматизация (инструкции на экране, авторассылки, автооценивание), не более 2 лабораторных слотов в день

Могу подготовить скрипт PsychoPy со структурой проб, R-код для симуляции мощности GLMM или текст информированного согласия и дебрифинга.

Похожие промпты

Наука и Исследования

Разбор задачи по химии по шагам

Разбирает задачу по химии так, чтобы научить решать похожие: от чего отталкиваться, почему выбран этот путь, где обычно теряют вещество и как проверить ответ на разумность.

Наука и Исследования

Объяснение темы по химии под свой уровень

Объясняет тему по химии на нужной глубине — от школьной программы до вузовской, с проверкой понимания и разбором типовых заблуждений, а не пересказом учебника.

Наука и Исследования

Фактчекинг утверждения по свежим источникам

Проверяет конкретное утверждение по актуальным источникам: что подтверждается, что искажено, откуда пошло и какой вердикт выдерживает критику.

Наука и Исследования

План диссертации: структура глав и логика

Выстраивает план диссертации: формулировка проблемы, логика глав, связь задач с выводами и проверка на то, что работа отвечает на заявленный вопрос.