👾 Новый ресерч от MTS AI
Команда MTS AI представила результаты двух новых исследований на EMNLP 2024 — входит в топ-3 международных конференции по NLP.
→ Первое предлагает снизить затраты на обучение языковых моделей с помощью адаптеров. Эти дополнительные слои уменьшают вычислительную нагрузку, сохраняя точность работы модели. Подход протестирован на задачах классификации текста и определения именованных сущностей. Время цикла активного обучения сократилось на 20%.
→ Второе посвящено системе Efficient Answer Retrieval System (EARS), которая объединяет локальные базы данных с генеративными моделями. EARS позволяет эффективно отвечать на фактологические и специализированные вопросы и минимизировать ошибки благодаря гибридному подходу. В тестах система повысила точность ответов на 92,8% и увеличила производительность в 7 раз.
Обе технологии уже внедряются в коммерческие продукты и решения MTS AI. Они могут применяться в таких сферах, как ритейл и телекоммуникации, где требуется скорость и эффективность обработки данных.
Подробнее:
🔗 Ссылка на исследование обучения LLM c помощью адаптеров: https://aclanthology.org/2024.findings-emnlp.840/
🔗 Ссылка на исследование EARS: https://aclanthology.org/2024.emnlp-industry.116/