21 сентября Яндекс выложил в открытый доступ претрейн-версию Alice AI Foundation LLM: большую языковую модель, построенную с нуля на архитектуре MoE, с 80 млрд параметров, из которых в каждый момент активны 3 млрд. Лицензия Apache 2.0 позволяет использовать модель и в исследованиях, и в коммерческих проектах. Вместе с моделью компания опубликовала два бенчмарка, WikiWebFacts и HardMultiQA, с наборами задач и эталонными ответами.
Для ИИ-сообщества это новость про архитектуру: Яндекс называет релиз экспериментальной версией для тестирования решений, которые лягут в основу будущей единой рассуждающей модели. Но у открытой лицензии есть следствие, которое касается не разработчиков, а брендов, и о нём стоит поговорить отдельно.
Пока модель Алисы жила только внутри продуктов Яндекса, знание модели о брендах имело понятную географию: приложение Алисы, поиск, колонки. Ответ на вопрос «какой банк выбрать» или «какая CRM подойдёт малому бизнесу» рождался в одном месте, и мониторить его можно было в одном месте.
Apache 2.0 эту географию отменяет. Свободная лицензия означает, что на модели можно строить коммерческие продукты без разрешения Яндекса: чат-боты поддержки, встроенных ассистентов, отраслевые сервисы, корпоративные базы знаний. Каждый такой продукт унаследует от претрейна его картину мира, включая то, что модель усвоила о компаниях, продуктах и их репутации. Что она запомнила о вашем бренде, то и будет воспроизводиться в приложениях, о существовании которых вы не узнаете.
Открытые бенчмарки добавляют штрих. WikiWebFacts, судя по названию, проверяет фактические знания модели, и публикация эталонных ответов делает сравнение воспроизводимым. Индустрия получает общедоступную линейку для вопроса, который раньше обсуждали на глазок: что именно русскоязычная модель знает о мире фактов, в котором живут в том числе бренды.
Модель, которая отвечала на вопросы внутри одного приложения, теперь будет отвечать на них везде, куда её принесут чужие руки. Для Яндекса это способ проверить архитектуру будущей рассуждающей модели. Для брендов это напоминание, что разговор нейросетей о них давно вышел за пределы одного окна, а теперь у этого разговора не останется даже одного адреса.