爬虫必备Requests的裁减包总结

Requests-Cache模块是requests模块的一个裁减性能，用于为requests模块提供耐久化缓存允许。假设requests模块向一个URL发送重复恳求时，Requests-Cache模块将会智能判别的网络恳求能否发生了缓存。假设曾经发生了缓存，就会从缓存中读取数据作为照应内容。假设没有缓存就会向主机发送网络恳求，失掉主机所前往的照应内容。经常使用Requests-Cache模块可以缩小网络资源防止重复恳求的次数，这样可以变相地规避一些反爬机制。