爬虫框架Scrapy学习笔记

爬虫禁区

  1. 不能过量访问,即每秒请求次数不能过多,需要限制,还需要监控响应时间,好在Scrapy配备了相应功能。
  2. 需要遵循网站的版权声明
打赏
  • 版权声明: 本博客所有文章除特别声明外,著作权归作者所有。转载请注明出处!

请我喝杯咖啡吧~

支付宝
微信