Впервые в истории искусственный интеллект достиг уровня человеческого эксперта в анализе языка. Исследования, проведенные лингвистами из Калифорнийского университета в Беркли и Ратгерского университета, показали, что один из больших языковых моделей (LLM) способен выполнять сложные лингвистические задачи.

Новые горизонты в лингвистике

Профессор лингвистики Гашпер Бегуш и его коллеги, включая Максимиана Домбковского и Райана Роудса, подвергли несколько больших языковых моделей ряду тестов, включая способность обобщать правила вымышленного языка. Хотя большинство моделей не справились с задачей на уровне человека, одна модель продемонстрировала выдающиеся способности, схожие с уровнем магистранта-лингвиста.

Тестирование возможностей

Тесты включали анализ сложных предложений с использованием синтаксических деревьев, а также работу с рекурсией. Например, фраза "Астрономия, которую изучали древние, которых мы уважаем, не была отделена от астрологии" была успешно разложена на синтаксические элементы одной из моделей OpenAI, известной как o1. Эта модель смогла также добавить новый уровень рекурсии к предложению, что стало неожиданностью для исследователей.

Фонология и новые языки

В рамках исследования была создана серия из 30 новых мини-языков для анализа фонологических процессов. Один из примеров: слово "θalp", где модель o1 смогла определить, что "гласная становится дыхательной, если предшествующий согласный является звонким и обструентом".

Значение и перспективы

Эти открытия имеют значительное значение для понимания возможностей ИИ. Как отметил Том Маккой из Йельского университета, важно понимать, где ИИ может успешно заменить человеческие навыки, а где его возможности ограничены. Эти исследования проливают свет на то, как ИИ может глубже анализировать язык, что до сих пор считалось исключительно человеческой способностью.

Исследование открывает новые перспективы для использования ИИ в области лингвистики и, возможно, в других сферах, требующих глубокого понимания языка.