urllib使用代理

Python urllib使用代理

  • 免费代理:
    当使用代理的,我们需要重写build_opener方法
import urllib.request
proxies = {
    'HTTP': '27.11.205.43:8118',
    'HTTP': '120.132.116.81:8080'
}
url = 'http://www.baidu.com'
# proxies必须是一个映射关系
proxy_handler = urllib.request.ProxyHandler(proxies=proxies)
bulid_opener = urllib.request.build_opener(proxy_handler)
response = bulid_opener.open(url)
  • 使用付费代理
import urllib.request
proxies = {
# 当你购买完毕以后会返回一个账号和密码
# 格式为账号:密码:IP:端口
    'HTTP': 'accout:passwd@ip:端口'
}
url = 'http://www.baidu.com'
# proxies必须是一个映射关系
proxy_handler = urllib.request.ProxyHandler(proxies=proxies)
bulid_opener = urllib.request.build_opener(proxy_handler)
response = bulid_opener.open(url)
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容