Для конкретной задачи научиться говорить ИИ-приложение и живой репетитор дают похожий результат. Кроссовер-исследование Зафера Сусоя не нашло значимой разницы в разговорных достижениях между ними. Настоящая разница в тревожности, цене и глубине. Используйте приложение для ежедневных повторов, а человека для глубины.

Какой вопрос люди на самом деле задают

Почти никто не вбивает этот запрос из интереса к методике преподавания. Его вбивают, потому что учат язык годами, могут его читать, могут смотреть фильм на нём, а потом официант что-то спрашивает, и рот отказывается работать.

Стандартный совет звучит так: «просто найдите репетитора». Это хороший совет, которому конкретно этот человек не последует. Он не забронирует репетитора именно потому, что репетитор играет роль свидетеля. Платить незнакомцу за то, чтобы он смотрел, как вы плохо справляетесь, оказывается тяжёлым решением для того, чья главная проблема как раз в том, что наблюдение его и ломает.

Так что вопрос стоит перевернуть. Вместо того чтобы спрашивать, какой вариант теоретически лучше, стоит спросить, какой убирает то, что реально мешает. И на этот вопрос исследования способны ответить.

Что показывает исследование, когда сравнивает оба варианта напрямую

Самое чистое сравнение даёт внутригрупповое кроссовер-исследование Зафера Сусоя, опубликованное в Frontiers in Psychology. 48 первокурсников педагогического направления по английскому языку в турецком государственном университете сдавали по два сопоставимых устных экзамена с разницей в две недели. Один экзамен вёл ИИ-чат-бот, а другой принимали преподаватели-люди. Оба оценивались по рубрике TOEFL iBT от 0 до 12, а перед каждым экзаменом измерялась шкала разговорной тревожности.

Важны три результата.

Оценки оказались одинаковыми. ИИ-условие: 8,12, человеческое условие: 8,35, t(47) = 1,21, p = 0,23. Разница незначима. Чего бы, по мнению людей, ни не хватало ИИ-экзаменатору, это не проявилось ни в более мягких, ни в более строгих оценках. Оценки людей и ИИ также сильно совпадали друг с другом: каппа Коэна = 0,86.

Тревога была ниже с машиной, 98,48 против 102,94, p = 0,01, эффект небольшой.

А вот результат, который переворачивает всё сравнение: с человеком в комнате тревога предсказывала оценку, r = −0,500, p < 0,01. С ИИ она не предсказывала ничего, r = −0,042. Более нервные студенты теряли реальные баллы перед человеком. Перед машиной их нервы вообще не отражались на итоговой оценке.

Это не означает, что ИИ учит лучше. Это означает, что живая аудитория взимает своего рода налог, и этот налог тяжелее всего ложится именно на тех, кому и так труднее всего говорить.

Где живой репетитор явно выигрывает

Теперь противовес, потому что сравнение, которое цитирует только выгодное исследование, по сути является рекламой.

Йи Ма и Минъян Чэнь провели 16-недельное исследование со 150 китайскими учащимися среднего уровня, изучающими английский, опубликованное в Frontiers in Psychology, с отложенным тестом на 20-й неделе. Три группы: ИИ с поддержкой преподавателя, ИИ отдельно и контрольная группа.

  • Прирост балла IELTS: 1,45 при ИИ плюс преподаватель, 0,92 при ИИ отдельно, 0,31 в контрольной группе.
  • Сохранение через 20 недель: 94 % у группы с поддержкой преподавателя, 87 % у группы с ИИ отдельно.
  • Группа только с ИИ достигла того, что исследователи назвали плато новизны, примерно между 9-й и 12-й неделями. Один учащийся описал это как застревание в петле, когда ничто не подталкивало к более сложному материалу.
  • 34 % учащихся расстраивала недостаточная культурная гибкость ИИ.
  • Распознавание речи было не ко всем одинаково снисходительно. Учащимся из сельской местности требовалось в 2,3 раза больше повторений, чем городским сверстникам. Один участник сказал, что американский акцент ИИ заставлял его чувствовать себя иностранцем на собственной практике.

Если читать эти цифры честно: ИИ сам по себе дал почти целый балл IELTS за 16 недель, и это реальный результат. Группа с человеком набрала заметно больше, реже упиралась в плато и сохранила больше из достигнутого. Вклад преподавателя был конкретным: поддержка преподавателя предсказывала автономию учащегося, то есть ощущение, что вы сами управляете своим обучением, с β = 0,52. Персонализация ИИ предсказывала другое: компетентность, ощущение, что у вас хорошо получается, с β = 0,37. Это не взаимозаменяемые вещи. Они закрывают разные потребности.

Ограничение, о котором молчат продавцы ИИ

Литература про чат-ботов сильна в краткосрочном прогрессе внутри программы и слаба в том, что происходит после неё.

Мэнди Ли, Иньюй Ван и Сяожун Ян обобщили 41 экспериментальное и квазиэкспериментальное исследование, охватившее 3515 участников, и нашли умеренный или большой положительный эффект на освоение второго языка, ES = 0,576, с 95-процентным доверительным интервалом от 0,385 до 0,768, p < 0,001. В собственном анализе модераторов они честно отмечают оговорку: вмешательства длительностью от одного до семи дней показали одни из самых больших эффектов. Очень короткие исследования с очень большими цифрами обычно означают, что измеряется новизна и эффект немедленной практики, а не устойчивый навык.

Есть и вторая проблема, структурная, а не статистическая. Большие языковые модели обучены быть покладистыми. Стэнфордское исследование SycEval зафиксировало угодливое поведение в 58,19 % ответов моделей. Собеседник, склонный соглашаться с тем, что вы говорите, плохо ловит ошибки и, что хуже для этой конкретной задачи, плохо готовит к реальности. Настоящие собеседники перебивают. Они теряют терпение. Они не замедляются просто потому, что вы выглядите растерянным. Практика только против бесконечно терпеливого партнёра оставляет одну мышцу совершенно нетренированной.

Если нужна одна честная фраза о переносе навыка: практика с ИИ надёжно строит рефлекс речи, а настоящий человеческий разговор по-прежнему остаётся тем местом, где проверяется, выдерживает ли этот рефлекс столкновение с реальностью.

Сколько стоит каждый вариант

Цена здесь не второстепенная деталь. Именно она определяет, сколько вы будете практиковаться.

Занятия с живым человеком, по данным собственной страницы цен italki: репетиторы из сообщества, то есть носители языка или свободно говорящие без формальной педагогической подготовки, обычно берут от 4 до 20 долларов за урок. Профессиональные преподаватели с квалификацией, сертификатами и структурированным планом занятий обычно берут от 10 до 40 долларов за урок. Вы платите цену, указанную в профиле репетитора, без скрытой комиссии при оформлении, а italki берёт комиссию со стороны преподавателя. Большинство репетиторов предлагают пробный урок, обычно на 30 минут, со скидкой от 30 до 50 %. Preply остаётся другой крупной площадкой в этой категории и работает по подписке на фиксированное число часов в неделю.

Это действительно разумные деньги за внимание живого эксперта. Но обратите внимание, что делает с поведением сама структура цены. У репетитора урок обычно оформлен как событие в календаре с ценником, поэтому вы бронируете одно или два в неделю. У ИИ-приложения фиксированная ежемесячная цена за пакет минут, поэтому дополнительный десятиминутный разговор практически ничего не стоит, и вы можете провести его в 6 утра или по дороге в магазин. Именно частота порождает разговорный навык. Приложение не выигрывает по качеству за час. Оно выигрывает по количеству часов.

Кому что подходит

Берите живого репетитора, если: вы уже говорите достаточно хорошо, чтобы вести разговор, и хотите перейти от уверенного уровня к точному. Вам нужны культурные и прагматические нюансы, смена регистра речи, вещи, которые технически верны, но звучат неправильно. У вас есть дедлайн, экзамен, собеседование, переезд. Вы знаете, что не будете заниматься сами, если кто-то не будет ждать вас во вторник в семь. Или вы хотите, чтобы кто-то помнил вашу конкретную вредную привычку и не спускал её вам с рук четвёртую неделю подряд.

Используйте ИИ-приложение, если: вы понимаете куда больше, чем можете произнести. Вы не говорили ни одной полной фразы вслух на этом языке уже месяцы или годы. Ваше время на практику раздроблено: пятнадцать минут тут, десять там, в часы, когда ни один репетитор не бодрствует. Вам нужен объём, и вы хотите совершить одну и ту же ошибку сорок раз, ни разу не увидев, как у кого-то меняется выражение лица.

Используйте оба варианта, если настроены серьёзно. Это не дипломатичный уход от ответа, а результат с самым большим измеренным приростом в исследовании Ма и Чэня. Продуктивный порядок для большинства взрослых таков: сначала приложение, потом человек. Наберите объём и избавьтесь от страха с машиной, а затем приведите гораздо менее напуганного собеседника к репетитору, который наконец сможет работать над чем-то, кроме вашей паники.

Где в этом рассуждении место Mintza

Mintza устроена как живая, свободная голосовая беседа с двуязычным ИИ-преподавателем. Никакой транскрипции с ожиданием, никакого текстового чата, никакого сценария урока, который нужно пройти от начала до конца. Вы говорите, он отвечает и поправляет вас прямо внутри разговора, а не выдаёт отчёт после.

Для этого сравнения важна именно двуязычная механика. Преподаватель говорит и на языке, который вы учите, и на том, которым вы уже владеете. Когда вы замираете посреди фразы, он переходит на язык, которым вы уже владеете, снимает затор и возвращает вас обратно в целевой язык. Это поведение закреплено за уровнем, а не оставлено на волю случая: на Нулевом уровне он говорит в основном на вашем родном языке и вводит новый небольшими повторяемыми фрагментами, на Начальном ведёт разговор в основном на целевом языке, а ваш язык использует, чтобы объяснить и подбодрить, на Среднем остаётся почти полностью на целевом языке и переходит на ваш только тогда, когда вы действительно застряли, а на Продвинутом остаётся полностью на целевом языке в естественном темпе и даёт обратную связь на равных, а не в режиме учителя. Интенсивность исправлений масштабируется так же: от простого моделирования без явных исправлений на Нулевом уровне до нюансов и стиля речи на Продвинутом.

Именно это делает разговор выживаемым с первого дня. Репетитор, который случайно говорит на вашем родном языке, тоже способен на это, и хорошие репетиторы так и делают. Но такого не всегда получится найти, вы платите за эту возможность по часам, а репетитор из сообщества, ориентированный только на погружение, к которому многих учащихся направляют, вообще на это не способен. Именно этот запасной выход не даёт новичку бросить фразу на середине, а брошенная на середине фраза обычно и становится причиной, по которой люди бросают учёбу.

Всё остальное сделано ради объёма, а не церемонии. Пятнадцать языков в любой паре и в любом направлении. Четыре уровня и выбор регионального акцента для языков с выраженными региональными вариантами. Оба параметра сохраняются отдельно для каждого языка. Приложение помнит прошлые беседы и может продолжить с того места, где вы остановились, вместо того чтобы каждый раз начинать со светской болтовни. Никаких серий, никаких часов на экране, пока вы говорите, никакого навязанного пути, а напоминания только если вы сами их поставите. Вы получаете 20 бесплатных минут при входе через Google или Apple, без карты, и они никогда не сгорают. Платные тарифы устроены как месячные пакеты минут: Basic 180, Plus 360, Pro 600, без дневного лимита. Актуальную цену уточняйте в App Store или Google Play, она зависит от страны.

Вердикт

Честный ответ на вопрос «приложение или репетитор» в том, что они борются не за одно и то же место.

Живой репетитор остаётся лучшим преподавателем. Репетитор даёт глубину, культурное чутьё, ответственность и полезный дискомфорт от живого человека, который не будет подстраиваться под вас бесконечно. Если вы можете себе это позволить и правда будете приходить, бронируйте репетитора. Исследования это подтверждают: учащиеся, у которых рядом с ИИ был живой человек, набрали больше всего и сохранили больше всего.

Из ИИ-приложения получается лучший тренажёрный зал: здесь повторения достаточно дёшевы, чтобы делать их каждый день, и никто не оценивает вас, пока вы спотыкаетесь. Результат Сусоя сводит весь этот аргумент в одну фразу: оценки оказались одинаковыми, и только человеческое условие брало с вас плату за нервозность.

Если вы понимаете язык и замираете, когда к вам обращаются, порядок действий несложный. Постройте рефлекс там, где вас никто не видит. А потом идите туда, где вас увидят.

По теме: почему вы понимаете язык, но не можете на нём говорить, как практиковать речь на языке в одиночку и лучшие приложения с ИИ для разговорной практики языка.

Mintza доступна для iPhone, iPad и Mac и Android.