Поделится знаниями и результатами Петр Олегович Скобелев, ведущий научный сотрудник ФИАН, зав. лабораторией ИПУСС РАН, зав. кафедрой ФАИТ СамГТУ, профессор Самарского университета и автор более 230 научных работ.
Please open Telegram to view this post
VIEW IN TELEGRAM
Как оказалось, среди инструментов российского производства тоже есть немало достойных примеров.
Делимся с вами некоторыми из них
1. MERA (Multimodal Evaluation for Russian-language Architectures) – проект от SberDevices, Sber AI, НИУ ВШЭ, «Сколтеха» и других разработчиков. Его предназначение – оценивать на закрытых и открытых тестах современные большие языковые модели для русского языка. Кодовая база для оценки на бенчмарке MERA основана на международном фреймворке LM Evaluation Harness. Сейчас это единая площадка для рейтинга моделей и отражения их способностей по доменам, задачам и модальностям.
2. LLM Arena – общедоступная платформа, цель которой – сделать объективный, открытый и актуальный бенчмарк больших языковых моделей на русском языке. Она собирает и ранжирует парные сравнения пользователей с помощью вероятностной модели Брэдли-Терри. Так можно узнать, какой из ответов, сгенерированный разными нейросетями, более качественный. При этом существуют режимы сравнения как случайных моделей, так и выбранных пользователем.
3. RuCoLa – проект по оценке лингвистической компетентности больших языковых моделей от ABBYY, Huawei, Yandex Research, SberDevices и НИУ ВШЭ. Он может использоваться для сравнения способностей нейросети к пониманию языка, а также для улучшения качества генерации текстов. В основе RuCoLa – набор из 13,4 тысяч предложений на русском языке, которые размечены по бинарной шкале лингвистической приемлемости. Приемлемое высказывание – то, которое мог бы привести носитель языка, а другой носитель – понять. Датасет оценивает чувствительность моделей как к обычным лингвистическим явлениям (морфологии, синтаксису, семантике), так и к галлюцинациям, например, к бессмысленному повторению фрагментов предложения.
4. RussianSuperGlue – еще одна платформа для оценки понимания моделями русского языка, созданная SberDevices, Huawei и НИУ ВШЭ. Бенчмарк включает в себя четыре части: тесты для нейросетей, тесты для людей для сравнения, оценку существующих моделей и инструменты для помощи в оценке собственной модели. Разработчики хотят, чтобы RussianSuperGlue стал общедоступным рейтингом русскоязычных NLP-моделей (обрабатывающих естественный язык). Он также призван помочь специалистам в Data Science понять, какая из нейросетей больше подходит для выполнения тех или иных задач.
5. ruSciBench, разработанный в МГУ им. М. В. Ломоносова, предназначен для оценки эмбеддингов научных текстов. Представьте, что каждый текст – это точка в многомерном пространстве, так вот эмбеддинги помогают преобразовать текст в такие точки, где похожие по смыслу тексты будут находится близко друг к другу. Датасет бенчмарка состоит из 194 тысячи сочетаний названий и аннотаций статей на русском языке и 182,4 тысячи на английском. Всего есть два типа задач: классификация и поиск перевода. Задача поиска перевода проверяет, насколько хорошо модель понимает смысл текста, независимо от языка. Для этого сравнивают, насколько близки векторы (эмбеддинги) аннотации на русском и английском языках. Чем ближе они друг к другу, тем лучше работает модель. В результате получают две метрики: насколько успешно можно найти русскую аннотацию по английской и наоборот.
А с какими отечественными бенчмарками знакомы вы? Делитесь в комментариях
Please open Telegram to view this post
VIEW IN TELEGRAM
8 февраля 2025 года в ходе круглого стола «Межгосударственное научно-инновационное сотрудничество Кыргызстана и России: перспективы и приоритеты развития», приуроченного ко Дню российской науки, он представил доклад на тему «Правовые проблемы ИИ: опыт СПбГУ».
Вот основные тезисы выступления:
Please open Telegram to view this post
VIEW IN TELEGRAM
Доклад представит Ованес Леонович Петросян — доктор физико-математических наук, профессор.
Обычно модели глубокого обучения сжимают следующими методами:
Доклад посвящен разработке трех новых алгоритмов для данных методов. Особого внимания заслуживают подходы, учитывающие использование бинарного градиента для обучения бинарных нейронных сетей, и методы оптимизации архитектуры нейронной сети, используя информацию об ограничениях на вычислительные ресурсы и энергопотребление устройства, на котором эта модель будет работать.
Ждем всех желающих на обсуждение! Для посещения мероприятия обязательно зарегистрируйтесь по ссылке🔗
Please open Telegram to view this post
VIEW IN TELEGRAM
В чем особенность каждого из них — рассказал Ованес Леонович Петросян, д.ф.-м.н, профессор.
Алгоритм №
Симбиотическая адаптация с учетом специфических ограничений вычислительных устройств автоматически адаптирует модели машинного обучения к ограничениям конкретных вычислительных устройств.
Алгоритм №
Адаптивная квантовая компрессия с выбором функции и оптимальных уровней квантования максимизирует сжатие и сохраняет высокую точность.
Алгоритм №
Обучение нейронных сетей с учетом бинаризации весов с помощью вычисления бинарного градиента минимизирует размер сети, ускоряет инференс и энергопотребление.
В ходе семинара развернулась бурная, трёхчасовая
Please open Telegram to view this post
VIEW IN TELEGRAM
Наш следующий семинар будет посвящен обзору и периодизации развития кибернетики и искусственного интеллекта, которые представит Александр Львович Фрадков, доктор технических наук, заведующий лабораторией управления сложными системами Института проблем машиноведения РАН.
Не упустите возможности узнать об истоках появления ИИ и пообщаться с опытным специалистом!
Напоминаем, что для посещения мероприятия необходимо зарегистрироваться по ссылке 🔗
Please open Telegram to view this post
VIEW IN TELEGRAM
«Расскажи мне про ИИ» — первый митап в 2025🔥
🗓 28 февраля | 🕘 16:00 | Центр ИИ СПбГУ (Кадетская линия, 1-3, схема прохода)
Ученые и коммуникаторы объединятся, чтобы найти ответ на вопрос:как популяризировать технологию для широкой аудитории?
Свои секреты работы с ИИ раскроют:
⭐️ Мария Разыгрина — психолог, преподаватель кафедры машинного обучения и цифровой гуманитаристики МФТИ, автор проекта «Школа Психологической Компетентности».
⭐️ Кира Чуракова — редактор Hi-Tech Mail (VK).
⭐️ Полина Конорова — независимый PR-консультант в IT & руководитель PR в Just AI.
⭐️ Сергей Николенко — эксперт Центра ИИ СПбГУ, доцент СПбГУ, заведующий лабораторией искусственного интеллекта ПОМИ РАН.
Модератор научно-практической встречи — заведующая кафедрой цифровых медиакоммуникаций, эксперт Центра ИИ СПбГУ Камилла Нигматуллина.
Для посещения мероприятия нужно зарегистрироваться по ссылке🔗
Ученые и коммуникаторы объединятся, чтобы найти ответ на вопрос:
Свои секреты работы с ИИ раскроют:
Модератор научно-практической встречи — заведующая кафедрой цифровых медиакоммуникаций, эксперт Центра ИИ СПбГУ Камилла Нигматуллина.
Для посещения мероприятия нужно зарегистрироваться по ссылке
Please open Telegram to view this post
VIEW IN TELEGRAM
В этот день мы поздравляем всех, кто отважно защищает нашу страну, обеспечивая безопасность как в реальном, так и в цифровом мире.
Пусть ваши идеи и разработки окажутся сильными и надежными, а искусственный интеллект послужит верным помощником в достижении новых высот!
С уважением, Центр ИИ СПбГУ
Please open Telegram to view this post
VIEW IN TELEGRAM
В центре ИИ
Завтра в Центре ИИ вместо Александра Львовича Фрадкова выступит Татьяна Матвеевна Косовская, доктор физико-математических наук, профессор кафедры информатики СПбГУ.
Выступление Александра Львовича переносится на следующую неделю. Следите за обновлениями!
🔗 Ссылка для регистрации на мероприятие 26 февраля остается прежней.
Приносим извинения за доставленные неудобства и с нетерпением ждём вас на завтрашнем семинаре!
Please open Telegram to view this post
VIEW IN TELEGRAM
28 февраля в 16:00 в Центре ИИ СПбГУ вместе с экспертами обсудим технологии для широкой аудитории
Please open Telegram to view this post
VIEW IN TELEGRAM
Telegram
В центре ИИ
«Расскажи мне про ИИ» — первый митап в 2025🔥
🗓28 февраля | 🕘16:00 | Центр ИИ СПбГУ (Кадетская линия, 1-3, схема прохода)
Ученые и коммуникаторы объединятся, чтобы найти ответ на вопрос: ⠘⠸⠲ ⠔⠲⣁⠊⠒⠢⢐⠬⠘⠚⠊⡰⣈⢑⢢⡡ ⣐⡘⡘⠌⢅⢑⠨⠕⢒⠲ ⠣⢆⠢ ⠩⢠⡢⠬⡤⢃⡆ ⣀⠱⡅⢨⠜⡌⠡⢢⣂⠅
Свои секреты…
🗓28 февраля | 🕘16:00 | Центр ИИ СПбГУ (Кадетская линия, 1-3, схема прохода)
Ученые и коммуникаторы объединятся, чтобы найти ответ на вопрос: ⠘⠸⠲ ⠔⠲⣁⠊⠒⠢⢐⠬⠘⠚⠊⡰⣈⢑⢢⡡ ⣐⡘⡘⠌⢅⢑⠨⠕⢒⠲ ⠣⢆⠢ ⠩⢠⡢⠬⡤⢃⡆ ⣀⠱⡅⢨⠜⡌⠡⢢⣂⠅
Свои секреты…
Еще по реакциям мы поняли, что вам нравится, когда мы разбавляем ленту мемами
Please open Telegram to view this post
VIEW IN TELEGRAM
В центре ИИ
Зарегистрироваться на семинар можно здесь
Please open Telegram to view this post
VIEW IN TELEGRAM