ИИ-репетитор догоняет живого эксперта по приросту баллов GRE

В рандомизированном исследовании Handshake AI с 2383 студентами обучение с LLM-репетитором дало статистически эквивалентный прирост баллов GRE по сравнению с экспертом-человеком, а Gemma 4 31B показала тот же результат в 918 раз дешевле.

Автор Sergey KostenchukОпубликовано 2026-09-25Обновлено 2026-09-25

2026-09-25 Исследования HuggingFace

🤖 ИИ-репетитор догоняет живого эксперта по приросту GRE

Handshake AI опубликовали StudentBench (arXiv:2609.28470): 2383 студента, 2139 ИИ-сессий против 140 с живым экспертом. Прирост GRE от LLM-репетитора статистически эквивалентен занятиям с репетитором за $75/час (p = .015), в 5 из 7 доменов ИИ обошёл человека. Gemma 4 31B даёт тот же результат в 918 раз дешевле: $0.0052 против $4.81 за пункт.

🌍 StudentBench впервые доказывает экономическую эквивалентность ИИ-репетитора живому эксперту и смещает фокус с «что модель знает» на «что она может научить» — аргумент против «иллюзии обучения» и за массовые ИИ-репетиторы.

👤 Код, данные (176 614 сообщений) и reproduce.py открыты на GitHub и Hugging Face; платформа — studentbench.org. ИИ-репетитор уже конкурирует с человеком по скорости обратной связи, а по цене — вне конкуренции.

Источник 1: https://arxiv.org/abs/2609.28470 Источник 2: https://github.com/Handshake-AI-Research/studentbench

Источники