Опубликовано 20 ноября 2024, 06:00
1 мин.

Создан метод сжатия больших языковых моделей для мобильных устройств

Новый алгоритм позволит снизить затраты на энергию
Ученые из Принстонского и Стэнфордского университетов представили новый алгоритм сжатия больших языковых моделей (LLM), который обещает сделать использование таких моделей более доступным, экономичным и безопасным. В своей работе исследователи предложили способ уменьшить объем данных, хранимых в таких моделях, что может снизить энергозатраты и улучшить приватность пользователей.