Приглашаем спикеров на TeamLead Conf 2025 🖐️
Если у вас есть опыт, который может быть полезен для участников конференции — присылайте ваши заявки. И обязательно подключайтесь на традиционную онлайн-встречу с Программным комитетом конференции:
📍5 июня в 18:00 (мск)
На встрече вы узнаете подробности о конференции: как все будет, какие темы особенно актуальны. Поговорите о трендах, набросаете темы докладов, узнаете закулисье работы Программного комитета и получите ответы на свои вопросы.
Будет очень полезно как опытным спикерам, так и тем, кто только задумывается о роли докладчика, но пока не уверен, что его тема будет интересна.
✅ Участие во встрече свободное, необходима регистрация
Готовьте вопросы, идеи и подключайтесь на встречу 🙌
Если у вас есть опыт, который может быть полезен для участников конференции — присылайте ваши заявки. И обязательно подключайтесь на традиционную онлайн-встречу с Программным комитетом конференции:
📍5 июня в 18:00 (мск)
На встрече вы узнаете подробности о конференции: как все будет, какие темы особенно актуальны. Поговорите о трендах, набросаете темы докладов, узнаете закулисье работы Программного комитета и получите ответы на свои вопросы.
Будет очень полезно как опытным спикерам, так и тем, кто только задумывается о роли докладчика, но пока не уверен, что его тема будет интересна.
✅ Участие во встрече свободное, необходима регистрация
Готовьте вопросы, идеи и подключайтесь на встречу 🙌
🔥1
Генеральный директор Microsoft Сатья Наделла сообщил, что уже 20-30% кода в репозиториях компании написано с помощью ИИ. Результаты варьируются в зависимости от языка: наибольший прогресс наблюдается в Python, меньший — в C++.
А Кевин Скотт, CTO Microsoft, предсказывает значительное увеличение доли кода, генерируемого ИИ, к 2030 году до 95%. Однако он подчеркивает, что роль человека в программировании останется важной. По его мнению, ИИ может упростить процесс разработки и снизить барьер входа в программирование для широкой аудитории, но для решения сложных задач все еще будут нужны опытные программисты.
Интересно ваше мнение 😉 Реалистичен ли прогноз Кевина Скотта? Какие +/- вы видите в использовании ИИ для генерации кода? Действительно ли может снизиться барьер входа?
А Кевин Скотт, CTO Microsoft, предсказывает значительное увеличение доли кода, генерируемого ИИ, к 2030 году до 95%. Однако он подчеркивает, что роль человека в программировании останется важной. По его мнению, ИИ может упростить процесс разработки и снизить барьер входа в программирование для широкой аудитории, но для решения сложных задач все еще будут нужны опытные программисты.
Интересно ваше мнение 😉 Реалистичен ли прогноз Кевина Скотта? Какие +/- вы видите в использовании ИИ для генерации кода? Действительно ли может снизиться барьер входа?
🗿8😁6😱2
Конференции завалены историями успеха. Но путь к успеху всегда лежит через фейлы, о которых рассказывать не принято. Но только не на нашем fail-митапе!
В своих коротких, но зажигательных выступлениях спикеры поделятся настоящими историями фейлов.
Без записи, без трансляции, без комплексов 🔥
Будет интересно тем, кто уже хотя бы раз положил прод и тем, кто пока еще нет.
Ждем вас на Saint HighLoad++ 2025 🙌
✅ Полная программа конференции и билеты на сайте
В своих коротких, но зажигательных выступлениях спикеры поделятся настоящими историями фейлов.
Без записи, без трансляции, без комплексов 🔥
Будет интересно тем, кто уже хотя бы раз положил прод и тем, кто пока еще нет.
Ждем вас на Saint HighLoad++ 2025 🙌
✅ Полная программа конференции и билеты на сайте
🔥4👍1💯1
Все это ждет вас на докладах, о которых рассказываем сегодня:
1) Анализ кода: символьная виртуальная машина. Георгий Александрия (Positive Technologies)
Глубокий доклад про алгоритмы статического анализа безопасности. Будет интересен не только безопасникам, но и тем, кто любит красивые низкоуровневые решения.
2) Современные механизмы определения параметров устройств в вебе. Евгений Шарамед (Яндекс)
Как Яндекс работает с информацией о вашем устройстве? Все, что вы хотели знать об этом, но боялись спросить — в одном докладе!
3) Взгляд за кулисы Яндекс.Карт: от сырых спутниковых данных до четких изображений. Игорь Орпанен (Яндекс)
Как выглядят исходные данные со спутников, как их готовят в Яндексе и при чем тут рельеф Земли? Все это в докладе Игоря, а также технологии: Cloud Optimized GeoTIFF, Pansharpening, RPC-трансформации и, конечно, бесценный опыт с картой обхода шишек и граблей.
4) Как сделать исполнение low-code прозрачным: опыт большой IoT-платформы. Владимир Плизга (Tibbo Systems)
У вас есть свой DSL, которым оперируют конечные пользователи. На этом DSL можно писать скрипты, и скрипты эти могут быть небыстрыми. Рассказ о том, как дать пользователю инструмент для анализа и улучшения производительности и при этом не потерять в производительности исполнения скрипта.
5) Геометрия на стероидах: практический опыт переноса тяжелых вычислений на GPU при проектировании инженерных сетей. Михаил Лукин (Судо)
Автоматическое проектирование электрических, газовых и других сетей разумно делать на графах. Но есть один нюанс... Чем точнее граф, тем он больше и дольше строится. Михаил расскажет, как для этого использует GPU, шишки, опыт — все, как мы любим. И бонус: ликбез о программировании GPU.
6) Аспект DDD и GraphQL в задачах построения высоконагруженных интеграционных систем. Виктор Бирюков (СберТех)
В одном докладе можно сразу почерпнуть, как практически использовать принципы предметно-ориентированного проектирования и принципы GraphQL. При этом подход можно внедрить для разработки и реализации однотипных сервисов, что значительно может снижать расходы на разработку и дальнейшую поддержку.
Ждем вас на Saint HighLoad++ 2025 🖐️
✅ Программа конференции, расписание и билеты на сайте
Please open Telegram to view this post
VIEW IN TELEGRAM
❤2👍2🔥2👏1
Если вы заинтересованы в апгрейде своего резюме и будете на Saint HighLoad++ 2025 — этот пост для вас ⚡
На конференции вас ждет специальная активность – «Резюме глазами HR», на которой профессиональный HR-эксперт разберет реальные резюме и расскажет:
- как выглядит резюме глазами рекрутера и HR;
- как работают российские агрегаторы, алгоритмы HH.RU.
Для этого нам требуются настоящие профессиональные резюме в качестве кейсов для разбора. Все резюме будут обезличены. Также мы можем скрыть какие-то конкретные блоки по запросу.
Участники, чьи резюме будут выбраны, получат ценные комментарии, которые помогут улучшить данные документы 😉
📍Активность пройдет 23 июня на Демо-сцене, начало в 19:20.
✉️ Если хотите принять участие — отправляйте резюме в лс: @liza0lis
До встречи 🖐️
На конференции вас ждет специальная активность – «Резюме глазами HR», на которой профессиональный HR-эксперт разберет реальные резюме и расскажет:
- как выглядит резюме глазами рекрутера и HR;
- как работают российские агрегаторы, алгоритмы HH.RU.
Для этого нам требуются настоящие профессиональные резюме в качестве кейсов для разбора. Все резюме будут обезличены. Также мы можем скрыть какие-то конкретные блоки по запросу.
Участники, чьи резюме будут выбраны, получат ценные комментарии, которые помогут улучшить данные документы 😉
📍Активность пройдет 23 июня на Демо-сцене, начало в 19:20.
✉️ Если хотите принять участие — отправляйте резюме в лс: @liza0lis
До встречи 🖐️
👍4🔥2🤝1
Масштабируемая система и распределенная в разные дата-центры система — две разные вещи.
Принесли вам записи трех докладов Saint HighLoad++ 2024, в которых тема геораспределенных архитектур впервые в истории конференции раскрыта столь подробно ⤵️
1) Как регулярно терять один ДЦ и не волноваться? Михаил Кабищев.
Михаил рассказал историю о том, как в Ozon превратили крайне неприятную ситуацию падения ДЦ в абсолютно спокойный и предсказуемый для них процесс.
👀 VK Видео
👀 RUTUBE
2) Геораспределенные системы. Евгений Кузовлев.
Самое сложное в больших проектах — сделать нормально работающий геораспределенный сторадж. В докладе Евгений поделился своим практическим опытом построения геораспределененных систем, а также рассказал всю необходимую теорию (CAP/PACELC) для тех, кто еще не сталкивался с распределенными системами.
👀 VK Видео
👀 RUTUBE
3) Hadoop в 3 ДЦ. Андрей Коняев.
Петабайтные размеры данных давно перестали быть cutting-edge и их можно встретить в огромном количестве организаций. With great power comes great responsibility — надо делать работу с данными экономически эффективной, а инфраструктуру — надежной и масштабируемой. Из доклада вы узнаете про это.
👀 VK Видео
👀 RUTUBE
Продуктивного просмотра 🙌
Принесли вам записи трех докладов Saint HighLoad++ 2024, в которых тема геораспределенных архитектур впервые в истории конференции раскрыта столь подробно ⤵️
1) Как регулярно терять один ДЦ и не волноваться? Михаил Кабищев.
Михаил рассказал историю о том, как в Ozon превратили крайне неприятную ситуацию падения ДЦ в абсолютно спокойный и предсказуемый для них процесс.
2) Геораспределенные системы. Евгений Кузовлев.
Самое сложное в больших проектах — сделать нормально работающий геораспределенный сторадж. В докладе Евгений поделился своим практическим опытом построения геораспределененных систем, а также рассказал всю необходимую теорию (CAP/PACELC) для тех, кто еще не сталкивался с распределенными системами.
3) Hadoop в 3 ДЦ. Андрей Коняев.
Петабайтные размеры данных давно перестали быть cutting-edge и их можно встретить в огромном количестве организаций. With great power comes great responsibility — надо делать работу с данными экономически эффективной, а инфраструктуру — надежной и масштабируемой. Из доклада вы узнаете про это.
Продуктивного просмотра 🙌
Please open Telegram to view this post
VIEW IN TELEGRAM
❤9👍2
В этом видео Александр Крылов приглашает вас на свой доклад на Saint HighLoad++ 2025 🖐️
У нас не задеплоилось с первого раза, давайте влепим кол инфраструктуре. А то, что мы криво поставили переменные пода — это не к нам, это к DevOps. Часто ли вы такое слышали от разработчиков, тестировщиков или поддержки? Как сделать доказательную базу того, что с инфраструктурой все хорошо, а проблема в коде?
Приходите за ответами на доклад Александра «Метрики удовлетворенности инфраструктуры. Понять и простить или отпустить?»
Доклад — расследование вопросов, связанных с обвешиванием метриками всего, что можно обвешать. Будет интересен всем, кто пытается понять, как померить эффективность процессов на разных уровнях, где работает, а где лучше не надо.
Встречаемся уже через 2 недели в Санкт-Петербурге, присоединяйтесь к нам 🙌
✅ Посмотреть всю программу конференции и купить билет можно на сайте
У нас не задеплоилось с первого раза, давайте влепим кол инфраструктуре. А то, что мы криво поставили переменные пода — это не к нам, это к DevOps. Часто ли вы такое слышали от разработчиков, тестировщиков или поддержки? Как сделать доказательную базу того, что с инфраструктурой все хорошо, а проблема в коде?
Приходите за ответами на доклад Александра «Метрики удовлетворенности инфраструктуры. Понять и простить или отпустить?»
Доклад — расследование вопросов, связанных с обвешиванием метриками всего, что можно обвешать. Будет интересен всем, кто пытается понять, как померить эффективность процессов на разных уровнях, где работает, а где лучше не надо.
Встречаемся уже через 2 недели в Санкт-Петербурге, присоединяйтесь к нам 🙌
✅ Посмотреть всю программу конференции и купить билет можно на сайте
🔥12👍2❤1
This media is not supported in your browser
VIEW IN TELEGRAM
На HighLoad++ особенно интересно ловить людей из больших компаний — просто послушать, как у них все устроено внутри. Как хранят данные, как дебажат прод, как соединяют десятки команд и сервисов. Все то, что редко попадает в публичные доклады.
Поэтому Валерий Котелов, СЕО KOTELOV, поговорил с Филиппом Бочаровым, CPO платформы мониторинга и наблюдаемости в МТС. Филипп отвечает за платформу, через которую проходят сотни внутренних продуктов и десятки терабайт данных.
В этом выпуске подкаста обсудили:
Если вам интересен боевой опыт и хочется просто «послушать, как у других» — этот выпуск подойдет идеально🍿
Смотрите на удобной площадке:
🎧 Слушайте на mave
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥13❤🔥1👍1
Как связаны скидки, пользовательские пути и петабайты данных в Яндекс Рекламе?
Максим Стаценко работает в Яндексе в DWH поиска и рекламы. Он рассказал о том, как они смогли отказаться от сотен тяжелых Join'ов и MapReduce в пользу Stateful Streaming и Key-Value Storage. Как построили систему, которая обрабатывает миллион запросов в секунду, хранит всю историю событий в одном месте и позволяет быстро находить нужные данные для антифрода и аналитики, даже когда цепочка событий растягивается на 100 дней.
Подробности в статье ✅
Максим Стаценко работает в Яндексе в DWH поиска и рекламы. Он рассказал о том, как они смогли отказаться от сотен тяжелых Join'ов и MapReduce в пользу Stateful Streaming и Key-Value Storage. Как построили систему, которая обрабатывает миллион запросов в секунду, хранит всю историю событий в одном месте и позволяет быстро находить нужные данные для антифрода и аналитики, даже когда цепочка событий растягивается на 100 дней.
Подробности в статье ✅
Хабр
Как мы заменили сотни Join’ов на один РТ-процессинг с 1kk RPS
Как связаны скидки, пользовательские пути и огромные массивы данных в Яндекс Рекламе? Привет, Хабр! Меня зовут Максим Стаценко, я работаю с базами данных и яростно в них копаюсь с 2010 года, а в...
🔥17⚡1👍1
На Saint HighLoad++ 2025 приходите на следующие доклады из секции «BigData и инфраструктура машинного обучения (data engineering)», чтобы обсудить преимущества и ограничения Spark, познакомиться с аспектами MLOps-архитектуры для запуска рекомендательных сценариев, разобрать адаптацию классического MLOps для LLM-проектов, узнать, как устроен стриминг в ОК. А также послушать, как в X5 построили отказоустойчивый, масштабируемый и полностью open source-стек, и о том, как устроены хранение и обработка агрегированных знаний о клиенте в МТС.
1) Spark: один для всего? Искандер Фахрутдинов (Ozon)
Спикер много лет изучал исходный код Spark и поделится своим мнением о подходах, которые лежат в основе модели вычислений платформы. Он расскажет о том, как понимание единой модели вычислений Spark позволяет писать запросы лучше и о том, что предлагают смежные фреймворки.
2) MLOps-архитектура рекомендательной платформы. Деннис Хассан (Сбер)
Спикер расскажет, как они выстроили cloud-native-инфраструктуру, ускоряющую запуск персонализированных сценариев, и какие инструменты использовались — от Feature Store до онлайн-моделей.
3) LLMOps: адаптация классических практик MLOps для разработки и деплоя LLM-решений. Игорь Терехин (Napoleon IT)
Игорь часто выступает с темами про MLOps и рассказывает о том, как в реальности выглядит работа с ML в компаниях небольшого размера. В этом докладе он сделает основной фокус на практике деплоя и ежедневной работы с большими языковыми моделями: лучшие практики того, что он делает для разных клиентов.
4) Приключение на 20 минут: проблемы и патчи, возникшие при обновлении стриминга ОК. Алина Шестакова (VK)
Доклад строится вокруг проблемы наличия старого компонента в архитектуре. Непростой путь, полный вопросов, проблем и поиска решений в условиях постоянного хайлоада.
5) Pipeline real-time-аналитики цепочек поставок в X5 на основе Debezium CDC, Flink и Apache Iceberg. Иван Смольянинов (X5 Group)
Захватывающий доклад о том, как собрать аналитические данные из более чем 80 разбросанных по всей стране огромных складов. Все бы ничего, но там далеко не всегда стабильный и широкий канал, нет возможности доставить оборудование, а версии ПО заметно разнятся.
6) Как мы в МТС создали единый экосистемный профиль клиента. Евгений Ненахов (MWS (МТС Web Services))
Как объединить разрозненные данные клиентов экосистемы? МТС Big Data агрегирует операционные, аналитические и прогнозные данные в единый профиль. Доклад раскроет структуру его бизнес-модулей, стек технологий и инфраструктуру. А еще будет демо — что на самом деле МТС знает про своих клиентов.
Ждем вас 23 и 24 июня в Санкт-Петербурге на Saint HighLoad++ 2025 🙌
✅ Программа конференции, расписание и билеты на сайте
1) Spark: один для всего? Искандер Фахрутдинов (Ozon)
Спикер много лет изучал исходный код Spark и поделится своим мнением о подходах, которые лежат в основе модели вычислений платформы. Он расскажет о том, как понимание единой модели вычислений Spark позволяет писать запросы лучше и о том, что предлагают смежные фреймворки.
2) MLOps-архитектура рекомендательной платформы. Деннис Хассан (Сбер)
Спикер расскажет, как они выстроили cloud-native-инфраструктуру, ускоряющую запуск персонализированных сценариев, и какие инструменты использовались — от Feature Store до онлайн-моделей.
3) LLMOps: адаптация классических практик MLOps для разработки и деплоя LLM-решений. Игорь Терехин (Napoleon IT)
Игорь часто выступает с темами про MLOps и рассказывает о том, как в реальности выглядит работа с ML в компаниях небольшого размера. В этом докладе он сделает основной фокус на практике деплоя и ежедневной работы с большими языковыми моделями: лучшие практики того, что он делает для разных клиентов.
4) Приключение на 20 минут: проблемы и патчи, возникшие при обновлении стриминга ОК. Алина Шестакова (VK)
Доклад строится вокруг проблемы наличия старого компонента в архитектуре. Непростой путь, полный вопросов, проблем и поиска решений в условиях постоянного хайлоада.
5) Pipeline real-time-аналитики цепочек поставок в X5 на основе Debezium CDC, Flink и Apache Iceberg. Иван Смольянинов (X5 Group)
Захватывающий доклад о том, как собрать аналитические данные из более чем 80 разбросанных по всей стране огромных складов. Все бы ничего, но там далеко не всегда стабильный и широкий канал, нет возможности доставить оборудование, а версии ПО заметно разнятся.
6) Как мы в МТС создали единый экосистемный профиль клиента. Евгений Ненахов (MWS (МТС Web Services))
Как объединить разрозненные данные клиентов экосистемы? МТС Big Data агрегирует операционные, аналитические и прогнозные данные в единый профиль. Доклад раскроет структуру его бизнес-модулей, стек технологий и инфраструктуру. А еще будет демо — что на самом деле МТС знает про своих клиентов.
Ждем вас 23 и 24 июня в Санкт-Петербурге на Saint HighLoad++ 2025 🙌
✅ Программа конференции, расписание и билеты на сайте
❤2🔥2⚡1👍1
В наш век повсеместного распространения контейнеров все считают их привычной магией и забывают о том, что они построены на базе самых стандартных технологий, которым не один десяток лет. Особенно это касается организации сетевого взаимодействия. Пора снять завесу тайны с этих технологий и потрогать их руками!
Приходите на воркшоп «Контейнеры и сети. Изучаем, разбираемся, отлаживаем» от Александра Попова и Георгия Меликова (VK, VK Cloud), чтобы разобрать те кирпичики, из которых построены все сети как под K8s, так и под стандартными облаками.
Докладчики имеют большой опыт построения сложных систем. Воркшоп рекомендуется к посещению всем, кто хочет глубоко разобраться в сетях и в тех принципах, что лежат в основе систем контейнеризации.
✋ Будет практика. Настоятельно рекомендуем взять ноутбук.
Ждем вас на Saint HighLoad++ 2025 🖐️
✅ Посмотреть всю программу конференции можно на сайте
Приходите на воркшоп «Контейнеры и сети. Изучаем, разбираемся, отлаживаем» от Александра Попова и Георгия Меликова (VK, VK Cloud), чтобы разобрать те кирпичики, из которых построены все сети как под K8s, так и под стандартными облаками.
Докладчики имеют большой опыт построения сложных систем. Воркшоп рекомендуется к посещению всем, кто хочет глубоко разобраться в сетях и в тех принципах, что лежат в основе систем контейнеризации.
✋ Будет практика. Настоятельно рекомендуем взять ноутбук.
Ждем вас на Saint HighLoad++ 2025 🖐️
✅ Посмотреть всю программу конференции можно на сайте
❤2👍1🔥1🤔1
Конференция HighLoad++ — это о том, как устроены инструменты, которые мы используем ежедневно. Знание внутрянки инструментов позволяет использовать их с максимальной эффективностью.
🖐️ Принесли вам записи 7 докладов с конференции Saint HighLoad++ 2024, в которых вы погрузитесь во внутрянку баз данных.
1) О распределённых транзакциях. Владимир Комаров
Доклад от автора книги «Путеводитель по базам данных», человека, разбирающегося в предметной области максимально глубоко. На примере конкретных баз данных рассмотрены паттерны распределенных транзакций. Квинтэссенция архитектурного опыта, максимально полезная информация за минимальное время.
VK Видео
RUTUBE
2) YTsaurus SPYT: внедряем Spark SQL в массы. Алексей Шишкин
История от разработчиков YTsaurus о том, как сделать собственный клиент к Spark и на уровне сетевого протокола отправлять к нему запросы из удобного веб-интерфейса.
VK Видео
RUTUBE
3) Как научить MongoDB делать горячие физические бэкапы. Юрий Фролов
История о том, как Яндекс возвращал возможность физических бэкапов в MongoDB. В докладе много подробностей про движок базы, про подход MongoDB к хранению данных и про то, как написать собственную логику бэкапа.
VK Видео
RUTUBE
4) Про UUID v.7. Андрей Бородин
Андрей делает Яндекс.Облако, хорошо разбирается в базах и пишет код, чтобы они работали лучше. В своем докладе он рассказал о патче, который добавляет поддержку UUID в качестве primary key для PostgreSQL. И о том, почему так важно реализовать RFC 7 и 8, а не просто «как-то сгенерировать 16 байт».
VK Видео
RUTUBE
5) Гарантии доставки сообщений в YDB Topics. Александр Зевайкин
Докладчик погрузит вас во внутреннее устройство брокеров сообщений, вы узнаете, как правильно «готовить» exactly-one и какие улучшения для этого типа доставки предлагает YDB Topics относительно Kafka.
VK Видео
RUTUBE
6) Переосмысление Picodata как cluster-first-СУБД. Ярослав Дынников
Ярослав много лет разрабатывал Tarantool, а теперь использует его в создании базы данных Picodata. Он рассказал, зачем бизнесу сейчас нужны распределенные OLTP-решения, как разные продукты реализуют «распределенность» и какими принципами руководствовалась компания, собирая свое решение в 2024 году.
VK Видео
RUTUBE
7) Redis — такой простой и такой сложный! Андрей Комягин
Redis уже давно не является чем-то новым. Каждый использует его немного по-своему и практически каждый думает, что это всё элементарно. Этот доклад покажет, что возможностей и нюансов очень много и, даже если сейчас вам это не понадобится, когда-то пригодится точно.
VK Видео
RUTUBE
Продуктивного просмотра и отличных выходных 🙌
🖐️ Принесли вам записи 7 докладов с конференции Saint HighLoad++ 2024, в которых вы погрузитесь во внутрянку баз данных.
1) О распределённых транзакциях. Владимир Комаров
Доклад от автора книги «Путеводитель по базам данных», человека, разбирающегося в предметной области максимально глубоко. На примере конкретных баз данных рассмотрены паттерны распределенных транзакций. Квинтэссенция архитектурного опыта, максимально полезная информация за минимальное время.
VK Видео
RUTUBE
2) YTsaurus SPYT: внедряем Spark SQL в массы. Алексей Шишкин
История от разработчиков YTsaurus о том, как сделать собственный клиент к Spark и на уровне сетевого протокола отправлять к нему запросы из удобного веб-интерфейса.
VK Видео
RUTUBE
3) Как научить MongoDB делать горячие физические бэкапы. Юрий Фролов
История о том, как Яндекс возвращал возможность физических бэкапов в MongoDB. В докладе много подробностей про движок базы, про подход MongoDB к хранению данных и про то, как написать собственную логику бэкапа.
VK Видео
RUTUBE
4) Про UUID v.7. Андрей Бородин
Андрей делает Яндекс.Облако, хорошо разбирается в базах и пишет код, чтобы они работали лучше. В своем докладе он рассказал о патче, который добавляет поддержку UUID в качестве primary key для PostgreSQL. И о том, почему так важно реализовать RFC 7 и 8, а не просто «как-то сгенерировать 16 байт».
VK Видео
RUTUBE
5) Гарантии доставки сообщений в YDB Topics. Александр Зевайкин
Докладчик погрузит вас во внутреннее устройство брокеров сообщений, вы узнаете, как правильно «готовить» exactly-one и какие улучшения для этого типа доставки предлагает YDB Topics относительно Kafka.
VK Видео
RUTUBE
6) Переосмысление Picodata как cluster-first-СУБД. Ярослав Дынников
Ярослав много лет разрабатывал Tarantool, а теперь использует его в создании базы данных Picodata. Он рассказал, зачем бизнесу сейчас нужны распределенные OLTP-решения, как разные продукты реализуют «распределенность» и какими принципами руководствовалась компания, собирая свое решение в 2024 году.
VK Видео
RUTUBE
7) Redis — такой простой и такой сложный! Андрей Комягин
Redis уже давно не является чем-то новым. Каждый использует его немного по-своему и практически каждый думает, что это всё элементарно. Этот доклад покажет, что возможностей и нюансов очень много и, даже если сейчас вам это не понадобится, когда-то пригодится точно.
VK Видео
RUTUBE
Продуктивного просмотра и отличных выходных 🙌
🔥22👍1🤩1
Дмитрий Синявский, SR-инженер в Ви.Tech, приглашает вас на свой доклад «Как добыть SLO: источники и инструменты гномов SREдней полосы», с которым он выступит на Saint HighLoad++ 2025.
В этом видео он поделился, о чем вы узнаете и что получите, если придете послушать 😉
В этом видео он поделился, о чем вы узнаете и что получите, если придете послушать 😉
🆒20❤3🔥3😁2
На следующие 5 докладов из секции «Базы данных и системы хранения» особое внимание советуем обратить:
- разработчикам информационных систем на основе СУБД;
- инженерам и DBA, которые сталкиваются с задачами миграции больших объемов данных, решардирования и минимизации downtime;
- Backend-инженерам, особенно тем, в стеке которых есть PostgreSQL;
- архитекторам, SRE-специалистам, инженерам;
- системным программистам. ⤵️
1) Пределы масштабирования дисковой СУБД Сокол. Андрей Коротченко (РЕЛЭКС)
Из доклада вы узнаете, как дисковая СУБД Сокол, реализованная на неблокирующих подходах, справляется с высокими нагрузками и масштабированием. А также сравните ее возможности с другими системами.
2) Как мы без downtime шардировали и мигрировали MongoDB на 20 ТБ. Иван Перевощиков (Авито)
Рассказ о типовой ситуации в большом бизнесе, когда команде приходится решать несколько задач одновременно: переезд базы в Kubernetes для запаса по нагрузке, решардирование со сменой ключа и все это без даунтайма. Спикер покажет, какие инструменты выбрали, как доработали и что получилось.
3) Эволюция PostgreSQL-хранилища размещений в Авито. Евгений Константинов (Авито)
Инженеры Авито делятся опытом масштабирования базы для размещений объявлений — фактически гигантского упорядоченного «лога» с метаинформацией и со сложной логикой обновления. Отчасти ретроспективный доклад о том, какие оптимизации использовали и к чему пришли в результате.
4) Собственное файловое хранилище для 350 Пбайт видеоконтента. Эдгар Воскресенский (RUTUBE)
В докладе раскрывается устройство хранилища видеоконтента RUTUBE с глубокими деталями реализации, архитектурными решениями и цифрами реальной нагрузки. Докладчик делится практическим опытом эксплуатации хранилища и адаптации под хранение видео.
5) SPDK под капотом: лезем внутрь дисковой подсистемы в user-space. Василий Иванов (MWS (МТС Web Services))
SPDK используют Alibaba, nVidia и другие компании, разрабатывающие свои облака. Доклад Василия — это история о том, как SPDK на масштабах МТС проседал по производительности, когда клиентов становилось особенно много. И о том, как компания сделала собственный форк, часть наработок которого уже передана в апстрим.
До скорой встречи на Saint HighLoad++ 2025 🖐️
✅ Программа конференции, расписание и билеты на сайте
- разработчикам информационных систем на основе СУБД;
- инженерам и DBA, которые сталкиваются с задачами миграции больших объемов данных, решардирования и минимизации downtime;
- Backend-инженерам, особенно тем, в стеке которых есть PostgreSQL;
- архитекторам, SRE-специалистам, инженерам;
- системным программистам. ⤵️
1) Пределы масштабирования дисковой СУБД Сокол. Андрей Коротченко (РЕЛЭКС)
Из доклада вы узнаете, как дисковая СУБД Сокол, реализованная на неблокирующих подходах, справляется с высокими нагрузками и масштабированием. А также сравните ее возможности с другими системами.
2) Как мы без downtime шардировали и мигрировали MongoDB на 20 ТБ. Иван Перевощиков (Авито)
Рассказ о типовой ситуации в большом бизнесе, когда команде приходится решать несколько задач одновременно: переезд базы в Kubernetes для запаса по нагрузке, решардирование со сменой ключа и все это без даунтайма. Спикер покажет, какие инструменты выбрали, как доработали и что получилось.
3) Эволюция PostgreSQL-хранилища размещений в Авито. Евгений Константинов (Авито)
Инженеры Авито делятся опытом масштабирования базы для размещений объявлений — фактически гигантского упорядоченного «лога» с метаинформацией и со сложной логикой обновления. Отчасти ретроспективный доклад о том, какие оптимизации использовали и к чему пришли в результате.
4) Собственное файловое хранилище для 350 Пбайт видеоконтента. Эдгар Воскресенский (RUTUBE)
В докладе раскрывается устройство хранилища видеоконтента RUTUBE с глубокими деталями реализации, архитектурными решениями и цифрами реальной нагрузки. Докладчик делится практическим опытом эксплуатации хранилища и адаптации под хранение видео.
5) SPDK под капотом: лезем внутрь дисковой подсистемы в user-space. Василий Иванов (MWS (МТС Web Services))
SPDK используют Alibaba, nVidia и другие компании, разрабатывающие свои облака. Доклад Василия — это история о том, как SPDK на масштабах МТС проседал по производительности, когда клиентов становилось особенно много. И о том, как компания сделала собственный форк, часть наработок которого уже передана в апстрим.
До скорой встречи на Saint HighLoad++ 2025 🖐️
✅ Программа конференции, расписание и билеты на сайте
👍1
В этом видео Дмитрий Ларионов приглашает вас на свой доклад «Как мы переписали аутентификацию в микросервисной платформе»
Дмитрий расскажет про перевод платформы партнерских отношений МТС с устаревшего корпоративного SDK и корпоративного агента SSO на OAuth2/ OIDC с рефакторингом всей внутренней архитектуры безопасности. Некоторые подробности узнайте, послушав видео 😉
Ждем вас на Saint HighLoad++ 2025 🙌
✅ Полная программа конференции и расписание на сайте
Дмитрий расскажет про перевод платформы партнерских отношений МТС с устаревшего корпоративного SDK и корпоративного агента SSO на OAuth2/ OIDC с рефакторингом всей внутренней архитектуры безопасности. Некоторые подробности узнайте, послушав видео 😉
Ждем вас на Saint HighLoad++ 2025 🙌
✅ Полная программа конференции и расписание на сайте
👍20🔥2
В этой статье никакой воды, только хардкор: как устроена доставка защищенного видео в современных CDN, почему HTTPS — это не просто галочка, и как выжать максимум из железа и протоколов. Под капотом — KTLS, Zero-copy, оптимизация CPU и настоящие инженерные лайфхаки, проверенные на сотнях тысяч RPS.
🖐️ Кирилл Шваков из Kinescope делится реальным опытом разгона Go TLS
🖐️ Кирилл Шваков из Kinescope делится реальным опытом разгона Go TLS
Хабр
Разгоняем Go TLS до 100 Gbps с сервера: опыт Kinescope
Современные пользователи ожидают, что видео загрузится мгновенно, не зависнет на 47-й секунде и будет защищено от посторонних глаз. При этом большинство из них не догадывается, кто именно доставляет...
👍34⚡1🔥1
Три доклада из секции «Безопасность», которые вам нужно послушать, если:
✔️ вы стремитесь модернизировать подходы к аутентификации, снизить риски утечек данных и соответствовать современным стандартам;
✔️ хотите узнать опыт, как удалось пересобрать SIEM-систему, чтобы обрабатывать больше 2 млн событий в секунду и хранить суммарно больше 10 петабайт данных в сжатом виде;
✔️ хотите разобрать 3 ключевых принципа, которые помогают создавать безопасные, но человечные интерфейсы. ⤵️
1) Passwordless в PAM: миф или реальность? Артём Назаретян (БИЗон)
История о том, как профессиональные безопасники делают надежную аутентификацию в большой компании со множеством различных сервисов и требований.
2) Потоковый коррелятор для обработки более 2 млн EPS. Андрей Борисов, Алексей Киселев (VK)
Доклад описывает создание высокопроизводительного коррелятора событий для SIEM на базе FlinkCEP и собственного DSL, который обходит лимиты готовых решений и достигает 1M EPS уникальных событий при ~100 правилах на 720 vCPU.
3) Темные паттерны безопасности: когда защита мешает пользователю. Артем Бачевский, Наталья Проценко (Солар)
Вы создаете сервис и комплексно подумали о безопасности. И даже со стороны пользователя предусмотрели регулярные разлогинивания, поставили CAPTCHA, написали миллион предупреждений. Увы, вы все могли сделать не так. Возможно, этот доклад поможет вам сделать сервис более безопасным и дружелюбным.
До скорой встречи на Saint HighLoad++ 2025 ⚡
✅ Полная программа конференции и расписание на сайте
✔️ вы стремитесь модернизировать подходы к аутентификации, снизить риски утечек данных и соответствовать современным стандартам;
✔️ хотите узнать опыт, как удалось пересобрать SIEM-систему, чтобы обрабатывать больше 2 млн событий в секунду и хранить суммарно больше 10 петабайт данных в сжатом виде;
✔️ хотите разобрать 3 ключевых принципа, которые помогают создавать безопасные, но человечные интерфейсы. ⤵️
1) Passwordless в PAM: миф или реальность? Артём Назаретян (БИЗон)
История о том, как профессиональные безопасники делают надежную аутентификацию в большой компании со множеством различных сервисов и требований.
2) Потоковый коррелятор для обработки более 2 млн EPS. Андрей Борисов, Алексей Киселев (VK)
Доклад описывает создание высокопроизводительного коррелятора событий для SIEM на базе FlinkCEP и собственного DSL, который обходит лимиты готовых решений и достигает 1M EPS уникальных событий при ~100 правилах на 720 vCPU.
3) Темные паттерны безопасности: когда защита мешает пользователю. Артем Бачевский, Наталья Проценко (Солар)
Вы создаете сервис и комплексно подумали о безопасности. И даже со стороны пользователя предусмотрели регулярные разлогинивания, поставили CAPTCHA, написали миллион предупреждений. Увы, вы все могли сделать не так. Возможно, этот доклад поможет вам сделать сервис более безопасным и дружелюбным.
До скорой встречи на Saint HighLoad++ 2025 ⚡
✅ Полная программа конференции и расписание на сайте
❤5👍2🔥2🤔1