最近开始学python爬虫，在没认识爬虫之前，觉得爬虫很高大上，浅学之后觉得爬虫也不过如此，随着学习的深放，发现爬虫差不多是一门系统的学问，而不是一门技术。刚接触的爬虫是bs4解析。
第一也是最基本的需要调用requests模块
import requests
当拿到所需的工具后，首先要找到目标即网址，就是url, url = 'https://www.sogou.com/'
#step_2:发起请求
#get方法会返回一个响应对象
response = requests.get(url=url)
#step_3:获取响应数据.text返回的是字符串形式的响应数据
page_text = response.text
print(page_text)
#step_4:持久化存储
with open('./sogou.html','w',encoding='utf-8') as fp:
fp.write(page_text)
print('爬取数据结束！！！')
python爬虫（一）
©著作权归作者所有,转载或内容合作请联系作者
- 文/潘晓璐 我一进店门，熙熙楼的掌柜王于贵愁眉苦脸地迎上来，“玉大人，你说我怎么就摊上这事。” “怎么了？”我有些...
- 文/花漫 我一把揭开白布。 她就那样静静地躺着，像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上，一...
- 文/苍兰香墨 我猛地睁开眼，长吁一口气：“原来是场噩梦啊……” “哼！你这毒妇竟也来了？” 一声冷哼从身侧响起，我...
推荐阅读更多精彩内容
- 一、简介 1.下载：pip install lxml 推荐使用douban提供的pipy国内镜像服务，如果想手动指...
