【Python】爬虫需要注意的事情

  1. 爬取速度过快:time.sleep(n)
  2. 设置代理
  3. 设置User-Agent,把请求伪装成浏览器;不然会遇到 <Response [418]> 遭遇反爬
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容