tgoop.com/data_days/366
Last Update:
👷 решения из реального мира
один из источников данных для нашей команды — внешние API. Каждый день мы запрашиваем новые данные и иногда пере-запрашиваем исторические.
и вот внезапно в одном источнике упёрлись в лимит запросов. джоба падает с ошибкой, лаг в данных растёт, скоро начнутся вопросики от потребителей.
собрались мы, значит, и стали думать как такого избегать.
чисто по-инженерски тут же начали предлагать написать какую-нибудь лямбду, чтобы она каждый день ходила в апи и спрашивала сколько осталось до лимита. Ответ будем слать в датадог, где настроим алерты по порогам. Красота!
… но лямдбу-то надо ещё написать, плюс она будет сама по себе отжирать из тех же лимитов на запросы. А потом всё это поддерживать…
тут выходит менеджер и предлагает просто написать вежливое письмо с просьбой сбросить лимиты.
и представляете — сработало! сбросили лимит ещё и подняли порог на следующий месяц!
получается, вместо того, чтобы писать код и приносить сложность в систему, достаточно было «просто спросить»
BY data будни
Share with your friend now:
tgoop.com/data_days/366