aiohttp-client的基本使用

  1. aiohttp介绍
  • 一个用于asyncio和python的异步http客户端/服务端
  • 支持客户端和http服务器
  • 在没有回调地狱的情况下支持服务器websockers和客户端websocket开箱即用
  • web服务器具有中间件,信号和可插拔路由

  1. 安装
  • pip3 install aiohttp
  • pip3 install cchardet 可选库
  • pip3 install aiodns 加快客户端api的dns解析

  1. 发送一个http请求
import asyncio
import aiohttp

async with aiohttp.ClientSession() as session:
    async with session.get('http://httpbin.org/get') as resp:
        print(resp.status)
        print(await resp.text())
  • 解释:在这使用了一个ClientSession的实例session调用了ClientResponse对象的resp实例,我们可以从resp这个实例中获取所有的信息
session.post('http://httpbin.org/post', data=b'data')
session.put('http://httpbin.org/put', data=b'data')
session.delete('http://httpbin.org/delete')
session.head('http://httpbin.org/head')
session.options('http://httpbin.org/options')
  • Note:不要为每个请求单独创建一个会话,很可能每个应用程序都只需要一个会话来完成所有的请求
  • 会话上下文管理器的使用并不是强制性的,但是不用会话上下文管理器创建会话时应该调用await session.close(),手动关闭会话
import asyncio
import aiohttp

session = aiohttp.ClientSession()

async with session.get(''):
    ...
await session.close()

  1. 在url中传递参数
  • 如果希望在url中传递一些参数,可以构建一个字典用于存放参数的键跟值,然后传递给get方法的params关键字参数
params = {'key1':'value1', 'key2': 'value2'}
async with session.get('http://httpbin.org', params=params) as resp:
    print(resp.url)
  • 相应内容和状态码
import asyncio
import aiohttp

async with session.get(url) as resp:
    print(resp.status) # http状态码
    print(await resp.text()) # 响应内容
  • Note:可以在text()方法中指定自定义的编码
    await resp.text(encoding='gb2312')

  • 二进制响应内容
  • 对于非文本请求,可以以字节为单位访问响应正文
    print(await resp.read())

  • 所有的会话的请求方法,如request(),ClientSession.get(), ClientSession.post()等接受json参数
async with aiohttp.ClientSession() as session:
    async with session.post(url, json={"test": "object"})

Note: 默认情况下,session使用python的标准库json模块进行序列化。但是可以使用不同的serializer。ClientSession接受json_serialize参数

import ujson
async with aiohttp.ClientSession(json_serializse=ujson.dumps) as session:
    await session.post(url, json={"txt": "ojk"})

Note: ujson库比标准库中的json库更快但是稍微不兼容


  • json响应内容
  • 如果需要处理json数据,session内置了一个json解释吗器
async with session.get(url) as resp:
    print(await resp.json())

Note:如果json解码失败将引发异常,可以为json()的调用指定自定义的编码和解码功能


  • 超时
  • 超时设置存储在ClientTimeout数据结构中。
  • 默认情况下,aiohttp使用total5分钟超时,这意味的整个操作应该在5分钟内完成
  • 该值可以被session的超时参数覆盖
timeout = aiohttp.ClientTimeout(total=60)
async with aiohttp.ClientSession(timeout=timeout) as session:
    ...
  • ClientTimeout支持的字段有以下
  • total:整个操作时间包括连接的建立,请求的发送和响应
  • sock_connect:时间包括建立的新连接,或者如果超出连接池限制,则等待池中的空闲连接
  • sock_read:从等待方读取新数据部分之间的最大允许超时时间
  • Note:所有字段都是浮点数,None或者0禁用特定的超时检查
aiohttp.ClientTimeout(total=5*60, connect=None, sock_connect=None, sock_read=None)

that's all
ps:后续补上高级使用

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 212,332评论 6 493
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,508评论 3 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 157,812评论 0 348
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,607评论 1 284
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,728评论 6 386
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,919评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,071评论 3 410
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,802评论 0 268
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,256评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,576评论 2 327
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,712评论 1 341
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,389评论 4 332
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,032评论 3 316
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,798评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,026评论 1 266
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,473评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,606评论 2 350

推荐阅读更多精彩内容

  • 【async/await】 asyncio--异步IO async--异步将异步从yieled写法中解放出来....
    奕剑听雨阅读 3,049评论 0 5
  • IOC 控制反转容器控制程序对象之间的关系,而不是传统实现中,有程序代码之间控制,又名依赖注入。All 类的创建,...
    irckwk1阅读 936评论 0 0
  • 国家电网公司企业标准(Q/GDW)- 面向对象的用电信息数据交换协议 - 报批稿:20170802 前言: 排版 ...
    庭说阅读 10,934评论 6 13
  • 快速开始 在安装Sanic之前,让我们一起来看看Python在支持异步的过程中,都经历了哪些比较重大的更新。 首先...
    hugoren阅读 19,511评论 0 23
  • ORA-00001: 违反唯一约束条件 (.) 错误说明:当在唯一索引所对应的列上键入重复值时,会触发此异常。 O...
    我想起个好名字阅读 5,256评论 0 9