Спустя более двадцати лет после того, как Джоан Роулинг (Joanne Rowling) открыла миру волшебную вселенную, главный персонаж её книг, Гарри Поттер (Harry Potter) обрёл новую актуальность в совершенно иной области — области исследований искусственного интеллекта. На это обращает внимание Bloomberg.
Источник изображений: wizardingworld.com
Бестселлеры о Гарри Поттере всё чаще используются для экспериментов с технологиями ИИ из-за непреходящего влияния серии на массовую культуру, широкого спектра языковых данных и сложной игры слов на страницах книг. Список исследований и научных статей, ссылающихся на Гарри Поттера, даёт представление о передовых проектах в области ИИ и некоторых сложнейших вопросах, стоящих перед этой областью.
В научной статье «Кто такой Гарри Поттер?» описывается методика, помогающая большим языковым моделям выборочно забывать информацию. Это важная задача для области ИИ: большие языковые модели обучаются на огромных массивах онлайн-данных, включая защищённые авторским правом материалы и прочий проблемный контент — в результате на разработчиков этих систем всё чаще подают в суд, а их работы привлекают всё более пристальное внимание общественности. Авторы статьи, сотрудники Microsoft Марк Руссинович (Mark Russinovich) и Ронен Элдан (Ronen Eldan), продемонстрировали, что ИИ-модели можно изменять, удаляя любую информацию о существовании книг о Гарри Поттере, включая персонажей и сюжеты, не жертвуя при этом творческими и аналитическими способностями системы. Учёные говорят, что выбрали книги о юном волшебнике из-за их известности — об элементах сюжета и персонажах знают даже те, кто их не читал.
Схожие вопросы поднимают в своём исследовании (PDF) учёные Вашингтонского университета в Сиэтле, Калифорнийского университета в Беркли и Института искусственного интеллекта Аллена. Они разработали языковую модель Silo, в которой поддерживается удаление данных для снижения юридических рисков. Исследователи обращают внимание, что если исключить из обучающего массива защищённые авторским правом материалы и правительственные документы, и оставить только тексты с низким уровнем риска, то производительность модели снижается. Удаляя книги о Гарри Поттере из обучающих массивов, они обнаружили повышение перплексии — коэффициента неопределённости, на основе которой оценивается качество языковой модели: чем он ниже, тем более качественный результат выдаёт ИИ.
Исследователи ИИ цитируют Гарри Поттера не менее десяти лет, и сегодня книги о нём упоминаются в работах всё чаще, поскольку и учёные, и технологии всё больше сосредоточены на инструментах ИИ, помогающих в обработке естественного языка и механизмов реакции на него. Присутствующее в книгах о Гарри Поттере «обилие сцен, диалогов, эмоциональных моментов делает его очень актуальным для конкретной области обработки естественного языка», отметила исследователь университета Карнеги Меллона Лейла Вебе (Leila Wehbe), которая в 2014 году провела серию экспериментов, собирая данные МРТ у читающих книги о юном волшебнике людей, чтобы глубже изучить языковые механизмы.
Поиск на открытом портале arXiv.org среди недавних публикаций показывает такие наименования статей как «Машинное обучение при создании зелий в Хогвартсе», «Гарри Поттер и большие языковые модели», а также «Обнаружение заклинаний в фентезийной литературе с помощью искусственного интеллекта на основе [архитектуры] трансформера». В некоторых проектах Гарри Поттер хотя и не оказывается центральным объектом исследования, но остаётся любимым литературным персонажем учёных. В одном из исследований книги Роулинг используются для оценки уровня интеллекта ИИ-систем. А, по мнению Терренса Сейновски (Terrence Sejnowski), руководителя лаборатории вычислительной нейробиологии при Институте биологических исследований Солка, чат-боты просто отражают интеллект и предубеждения своих пользователей, как «Зеркало Еиналеж» из первой книги о Гарри Поттере, которое показывало самые сокровенные желания каждому, кто в него смотрел. «Гарри Поттер популярен среди молодых исследователей. Они читали их [эти книги] в детстве или в юности, вот и выбирают их в качестве письменных или устных массивов текста», — заключила доцент Вебе.
Источник:
