• Roblox создал модель ИИ, способную быстро переводить 16 языков в чатах.
  • Roblox построил большую языковую модель (LLM) на основе трансформеров, а затем поместил её в архитектуру смеси экспертов (MoE), что позволило сэкономить ресурсы, не снижая защиту приватности пользователей.

Простое общение

Robloxсоздал модель ИИ, которая переводит текстовые чаты так быстро, что пользователи поначалу даже не замечают, что она переводит сообщения других игроков. Она поддерживает 16 языков, включая английский, французский, японский, тайский, польский и вьетнамский.
Цель — чтобы пользователи Roblox понимали, о чём идёт речь, и чувствовали себя комфортнее в общении, рассказал The Verge технический директор Roblox Dan Sturman. Переводчик автоматически переводит содержимое чатов, но пользователь может нажать на значок, чтобы увидеть исходное сообщение.

«Мы знаем, что вовлечённость растёт, когда пользователи говорят на родном языке или взаимодействуют с другими».

Dan Sturman, технический директор Roblox

«Мы взяли эту концепцию и устранили языковой барьер с помощью автоматического перевода».

Как они это делают

Roblox начинает с создания большой языковой модели (LLM) на основе трансформеров, обученной как на публичных, так и на внутренних данных. Он помещает LLM в архитектуру смеси экспертов (MoE) — среду, в которой работают несколько приложений перевода, каждое из которых является экспертом в одном языке. Это позволяет Roblox экономить ресурсы, не создавая отдельные LLM для каждого языка. Dan Sturman объясняет, что из-за масштаба проекта его команда решила, что проще создать собственную модель, чем дорабатывать существующую LLM.
Roblox отслеживает журналы чатов (из соображений доверия и безопасности) и получает обратную связь, если перевод не совсем точен, уточняет Dan Sturman. Он добавил, что добавление ИИ-перевода чатов «не изменит наши процессы обеспечения конфиденциальности и безопасности, а запрещённые слова по-прежнему будут блокироваться».

Читайте также:Китай одобрил более 40 языковых моделей ИИ для публичного использования

По теме

Roblox уже несколько лет пытается привлечь более взрослую аудиторию, используя генеративные модели ИИ для улучшения пользовательского опыта. В прошлом году компания запустила чат-бота-ассистента на базе ИИ для разработчиков. Она также будет автоматически переводить графические ассеты (например, текст, нанесённый на здания) на язык, установленный у пользователя по умолчанию.