tgoop.com/pyHints/33
Create:
Last Update:
Last Update:
اما بحث اصلاً راجب @lru_cache, ...
نبود و از فرصت استفاده کردم و توضیح دادم.
اما مسئله بحث چی بود، استفاده از cache فقط برای مصاحبه نیست
crawler
موقعیت خیلی مناسبی هست، دوستان زیادی در جریان برخی از کرالرهای نوشته شده بنده هستند بخصوص مواردی که نیاز به محاسبات پردازشی و درخواست به لینکهای تو در تو داره
درصد زیادی که کرالرهای بنده بلاک نمیشه یا توی معروفترین موارد تا بیش از ۱۰۰ گیگ دیتای سایتهای داخلی رو کرال کردم
استفاده از cache هست، یا حتی بهتر استفاده از ابزارهای دیگه که url های کرال شده دوباره براشون درخواست فرستاده نشه.
نکته دیگه راجب@lru_cache
که فراموش کردم بگم اگر argument های تابع رو جابجا بفرستید، دوباره محاسبات رو انجام میده پس به این نکته توجه کنید ینی : add(a=1, b=2)
و add(b=2, a=1)
۲ بار محاسبه میشه
BY Python Hints

Share with your friend now:
tgoop.com/pyHints/33
