📔 База System Design. Продолжаю перевод.

💡 В новой части вы изучите:
✔️ Микросервисы
+ Что такое монолит и микросервис?
+ Почему мы разбиваем наше приложение на микросервисы?
+ Когда следует использовать микросервисы?
+ Как клиенты отправляют запросы?

✔️ Load Balancer
+ Зачем нам нужен балансировщик нагрузки?
+ Алгоритмы балансировщика нагрузки

✔️ Кэширование
+ Введение в кэширование
+ Преимущества кэширования
+ Типы кэшей
+ Подробное описание Redis

👉 System Design для начинающих: всё, что вам нужно. Часть 3

🚀 На моём boosty доступен ранний доступ к материалам. Плюс, чек листы по прохождению System Design Интервью.
⚡️ Смотреть boosty.

⚡️ Как пустое хранилище S3 может привести к резкому увеличению вашего счета за AWS

Happy path:
1. Создать S3 private bucket для работы над прототипом системы индексирования документов клиента
2. Загрузить туда несколько файлов для тестирования
3. Через два дня проверить счёт
4. Увидеть задолженность в 1300$🫨

❔ Почему это произошло?
Имя bucket'а автора совпало с именем бакета другой компании.
Запросы от пользователей той системы, за которые надо платить, стали отправляться ему!

Автор делает вывод:

Кто угодно, знающий имя любой из ваших корзин S3, может задрать ваши счета в AWS до какого угодно уровня.

И рекомендует добавлять рандомный суффикс в имя бакета.

🦺 Такая вот безопасная безопасность у крупнейшего поставщика облачных услуг 😟
Как трушный разработчик автор решил пойти дальше и посмотреть, что ещё можно сделать зная эту "особенность". Об этом подробнее в статье.

✨ Насколько ваше взаимодействие с облачными провайдерами оказывалось всегда понятным и результат ожидаемым?

Читать статью:
https://habr.com/ru/companies/wunderfund/articles/879130/

💯 - использую услуги облачного провайдера, всё прекрасно описано, проблем не встречал/не встречала
👍 - облачные сервисы в стадии становления, бывает разное, не всегда получал, что хотел
🤯 - постоянно у них какие-то профилактические работы, выключения, необоснованные счета, сколько можно!
🤷 - такими услугами не пользуюсь

#Рецензия

🏦 System Design. База. Клеппман. You are welcome! Глава 5

⚡️Репликация⚡️

🗣 Как вы будете масштабировать систему на чтение и не только?!

✔️ Учимся отвечать на популярный вопрос на System Design Интервью! Разбираем базу построения HighLoad систем.

🔜 Только здесь. Только в эту субботу. В 19:00.

❔ А какие ещё способы масштабирования вы знаете?

⚡️ - анонс потрясный, хочу ещё такой! 🤩
🔥 - контент огонь как всегда
👍 - полезное дело делаете

📺 System Design. База. Клеппман. You are welcome!
Глава 5.

Репликация!

· Подключится в трансляцию👌
upd. Закончена! Спасибо за участие!

👍 - накидываем Мише лайков за крутую подачу, полезный System Design контент.

🥇 10 System Design паттернов + Проектирование популярной задачи!

👨‍💻 Вторая встреча для прокачки коллег по цеху - продакт менеджеров - в теме проектирования систем.
Рассказал 10 популярных паттернов построения отказоустойчивой масштабируемой архитектуры.
➕ Плюс, спроектировал популярную на System Design Интервью задачу - выдачу ленты.

💪 Успел за 60 минут.

☑️ Смотрите, получайте знания!
⚡️ И хорошей недели!

Что ещё хотите, чтобы я освятил в будущих встречах?

🏦 System Design. База. Клеппман. You are welcome! Глава 6

⚡️Шардирование⚡️

🗣 Как вы будете масштабировать систему на чтение и не только?!

✔️ Учимся отвечать на популярный вопрос на System Design Интервью! Разбираем базу построения HighLoad систем.

🔜 Только здесь. Только в эту субботу. В 19:00. Ссылка будет в дополнительном посте.

❔ Какие ещё интересные материалы по шардированию встречали?

Накидываем лайков 😏 Проводим хорошо вечер 😀

🔡SON, ProtoBuf, Data formats

· Чем существенно отличаются JSON, XML, CSV?
· Как эволюционировать схему данных когда на проде уже многое на ней завязано?

🔎 Эти и другие темы из 4 главы "Высоконагруженные приложения" в новом видео!

Смотреть:
Youtube
VK

Пост на линкедин Михаила - смотреть здесь.

⚡ Почему Redis работает так быстро, несмотря на то, что он однопоточный?

📬 Выпустил статью - перевод про Redis на habr 😊

Охваченные темы:
· Модель потоков Redis
· Преимущества хранения данных в ОЗУ
· Типы данных
· Неблокирующий ввод-вывод
· Преимуществам однопоточной модели

💡 Кэш в задачах на System Design Интервью поможет вам справиться с однотипными запросами, повышенной нагрузкой.
Сам Redis - является популярным выбором в этом разделе проектирования систем.

🌇 Не удержался и дополнил статью тематическими картинками для наглядности и повышения усвоения материала 😏

✔️ Читать статью на habr

Где же ваши лайки?)
🔥 💯 ⚡️👍

📺 System Design. База. Клеппман. You are welcome!
Глава 6.

Шардирование!

10 минутная готовность 🚀

upd
Встреча состоялась! Прокачали тему шардирования, партиционирования, ребалансировки 💪
Запись будет 👌

🏗 Собираюсь на закрытую архитектурную кату среди компаний в Sber.

👨‍🏫 С True Tech Art от МТС прорабатываем нашу совместную кату. Коллеги идут в Сбер своей командой. Пригласили меня присоединиться.
Решим задачу, посмотрим как Сбер организует каты.

🔜 О впечатлениях расскажу 😊

📺 Будет живая трансляция в 20:00. Запасайтесь попкорном и наслаждайтесь баттлом 🍿🥳

🛒 Единая платформа цифровизации ТЦ

🔭 Подробности каты

🧾 Коллеги со Сбера подготовили задачу с описанием на 6 листах. И дали примерно 2 часа на вопросы и прорабоку 🤯

💡 Нужны были идеи(и их реализация!) по направлениям:
1) Внедрение дополненной реальности - покупатель ходит с телефоном, ему прокладывается маршрут, показываются дополнительные плюшки, релевантные скидки в зависимости от его профиля
2) Объединение CRM продавцов и ТЦ для понимания что сейчас продаётся и формирования релевантных персонализированных предложений
3) Связывание в одну IT инфраструктуру IoT устройств начиная от камер с возможностью трека заканчивая управлением отоплением, света для более разумного использования ресурсов
4) Формирование масштабируемой инфраструктуры

🫙 Всё это приправлено удобными админками, разделением ролей, соблюдением ФЗ-152, черными пятницами... Астанавись!

🤔 До этого я думал, что System Design Интервью - это вызов 🤓
⏳ Здесь было не намного больше времени. Но намного объёмней задача.

🕙 Возможно, это было черезчур. На холодную голову можно сказать, что это прекрасная возможность загнать себя в соревновательную стрессовую ситуацию с заведомо не выполнимой задачей. Выделить приоритеты, удовлетворить все требования сделать чтобы хотя бы что-то работало.

Наша команда постаралась. Мы пошли в контейнерную схему со стрелочками. Также описали use cases.
Организаторы предложили всем не пользоваться ChatGPT и рисовать в draw.io.

🗓 В конце после защиты и фуршета 😏 услышали распределение по местам. Скажу как оптимист - для первого такого корпоративного захода получилось хорошо✔️
Позже устроили ретро и поняли как улучшиться в будущем.📈

Итого:
1) Было это сложно? Да
2) Было ли это стрессово? Да
3) Оно того стоило? Absolutely 🕯✨

👉 Делаем кату на канале весной? 😊

🔤eplication

➕ Не только лишь на всех собеседованиях о ней спрашивают. Не только лишь все её знают. Пришёл ваш час.
Узрите репликацию!

🤩 Содержание:
· Виды репликации
· Репликация с одним ведущим узлом
· Синхронная и асинхронная репликация, Отказы узлов
· Sequence диаграммы, которые из этой книги распространились в разных вариациях по всему интернету

...И многое другое. За 1 час! 🫢

Смотреть:
Youtube

Пост на линкедин Михаила - смотреть здесь.

🚩расивые данные

В интернете данных много. Невероятно много.
402.74 миллиона ТБ создаются ежедневно 🥳
Скоро приведу об этом статью.

📊 Меня зацепил график, в котором авторы представили определенный прогресс деятельности.
Стало интересно - а как такие или подобные данные могут изобразить специалисты с различных областей?

В итоге родился контест. Создал задачу.

🚩 Конкурс
Итак. У вас есть данные. Их не так много. В целом, они понятные. Ваша задача - наглядно их представить директорам, которые очень ждут вашего отчета.

🚩 Номинации:
1) "Творческий подход" от моего канала System Design World. Приз - фирменная худи.
2) "Архитектурный стиль" от дружественного канала True Tech Arch - архитектурных экспертов МТС, с которыми мы запланировали проведение совместной Arch Kata (спойлер 😏). Приз - фирменный мерч и private invitation на конференцию.

➡️ Go участвовать:
Форма с заданием и вводом ответов. До 31.03.25. Смотреть.

✍️ На подведение итогов покажу ту самую картинку, которая и запустила всю эту активность :)

Удачи!

📔 CDN, Blob Storage, Kafka

Продолжаю перевод базы System Design.

💡 В очередной части вы изучите:

✔️ Хранилище BLOB-объектов
+ Что такое BLOB и зачем нам нужно хранилище BLOB?
+ AWS S3

✔️ Сеть доставки контента (CDN)
+ Знакомство с CDN
+ Как работает CDN?
+ Ключевые понятия в CDN

✔️ Message Broker
+ Асинхронное программирование
+ Зачем мы добавили посредника для передачи сообщений?
+ Queue
+ Stream
+ Кейсы использования

✔️ Apache Kafka Deep dive
+ Когда использовать Kafka
+ Внутреннее устройство Kafka

👉 System Design для начинающих: всё, что вам нужно. Часть 4

🚀 Содержание прошлых частей со ссылками привёл на boosty - смотреть.

😊 Хорошей недели!

Какие ресурсы ещё помогают вам продвигаться в изучение темы?

😡 Даже когда ваш сервис масштабирован и отказоустойчив плохо может быть не по вашей вине.

❓ Наблюдаете потерю важного нефункионального требования к системе - Доступность/Availability?