Бизнесмены и их достижения

Как устроены малые языковые модели: эффект масштаба Microsoft объявил SLM — малые языковые модели — одним из главных ИИ-трендов 2024 года. Изучаем, в чем их отличие от LLM, как они работают и где могут использоваться Об авторе: Сергей Лукашкин, директор научно-образовательного центра «Цифровые технологии в образовании» ВШМ СПбГУ. Малые языковые модели (Small Language Models или SLM), в отличие от больших языковых моделей (LLM), обученных на огромных массивах данных, используют небольшие объёмы, но лучшего качества, поэтому работают точнее. Четкого разделения между LLM и SLM пока что нет. Одни относят к большим языковым моделям те, что работают со 100 млн и более параметров, а к малым — от 1 до 10 млн. Другие называют цифры в 100+ млрд и 10 млрд соответственно. Но речь идёт не только о числе параметров, но и объёме данных, физическ...
http://informanet.org/component/k2/item/97560

Telegram

Политкухня

"Взятки и власть: кто стоит за схемами?"

Прислать новость и другие вопросы [email protected]

www.tgoop.com/biznesmeny_dostizhenija/347

2 viewsSep 24 at 19:42

Как устроены малые языковые модели: эффект масштаба Microsoft объявил SLM — малые языковые модели — одним из главных ИИ-трендов 2024 года. Изучаем, в чем их отличие от LLM, как они работают и где могут использоваться Об авторе: Сергей Лукашкин, директор научно-образовательного центра «Цифровые технологии в образовании» ВШМ СПбГУ. Малые языковые модели (Small Language Models или SLM), в отличие от больших языковых моделей (LLM), обученных на огромных массивах данных, используют небольшие объёмы, но лучшего качества, поэтому работают точнее. Четкого разделения между LLM и SLM пока что нет. Одни относят к большим языковым моделям те, что работают со 100 млн и более параметров, а к малым — от 1 до 10 млн. Другие называют цифры в 100+ млрд и 10 млрд соответственно. Но речь идёт не только о числе параметров, но и объёме данных, физическ...
http://informanet.org/component/k2/item/97560

BY Бизнесмены и их достижения