爬虫基础

urlopen一般接收三个参数

urlopen(url,data,timeout)

data是访问url时要传送的数据

response对象有一个read()方法，可以返回获取的页面内容

如果不加read()打印的是该对象的描述

构建request对象的好处是，在请求时需要传入好多的内容，通过构建对象request,服务器响应时得到应答，这样显得逻辑清晰明确

©著作权归作者所有,转载或内容合作请联系作者
平台声明：文章内容（如有图片或视频亦包括在内）由作者上传并发布，文章内容仅代表作者本人观点，简书系信息发布平台，仅提供信息存储服务。

推荐阅读更多精彩内容

  • Spring Cloud
    Spring Cloud为开发人员提供了快速构建分布式系统中一些常见模式的工具（例如配置管理，服务发现，断路器，智...
    卡卡罗2017阅读 135,049评论 19赞 139
  • Python爬虫基础
    摘要：Python爬虫基础 前言 Python非常适合用来开发网页爬虫，理由如下： 1、抓取网页本身的接口 相比与...
    乱蓬头199302阅读 448评论 0赞 1
  • py爬虫基础【待续】
    前言 从二三月开始自学Python开始，到后来被傻叉项目折腾了半年多的时间，一直停滞了这么久，现在重新整理一些爬虫...
    小白猿阅读 344评论 0赞 0
  • 《Learning Scrapy》（中文版）第3章 爬虫基础
    序言第1章 Scrapy介绍第2章 理解HTML和XPath第3章 爬虫基础第4章 从Scrapy到移动应用第5章...
    SeanCheney阅读 15,172评论 13赞 61
  • 爬虫（1）--- Python网络爬虫二三事
    1 前言 作为一名合格的数据分析师，其完整的技术知识体系必须贯穿数据获取、数据存储、数据提取、数据分析、数据挖掘、...
    whenif阅读 18,113评论 45赞 523