urllib在headers中设置User Agent

python版本:3.5

import urllib.request
from urllib.parse import urlencode

url = 'http://www.douban.com'
user_agent = 'Mozilla/4.0 (compatible; MSIE 5.5; Windows NT)'
values = {'username': 'zhancat200801@sina.com', 'password': 'xxxx'}
headers = {'User-Agent': user_agent}
data = urlencode(values)
print(data)
request = urllib.request.Request(url, data.encode("utf-8"), headers)
response = urllib.request.urlopen(request)
page = response.read().decode("utf-8")
print(page)

decode的作用是将其他编码的字符串转换成unicode编码,如str1.decode('gb2312'),表示将gb2312编码的字符串转换成unicode编码。

encode的作用是将unicode编码转换成其他编码的字符串,如str2.encode('gb2312'),表示将unicode编码的字符串转换成gb2312编码。'''

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容