实例:抓取全国天气信息

  • 说明
要点 内容
URL http://www.weather.com.cn/data/sk/101200401.html
主要技术 json数据处理
  • urllib + json
# 全国主要城市
city_list = [
    # 华北
    {"北京": "101010100"},
    {"天津": "101030100"},
    {"石家庄": "101090101"},
    {"太原": "101100101"},
    {"呼和浩特": "101080101"},
    {"保定": "101090201"},
    {"大同": "101100201"},
    {"包头": "101080201"},
    {"承德市": "101090402"},
    {"晋中": "101100401"},
    {"通辽": "101080501"},
    {"秦皇岛": "101091101"},
    # 东北
    {"哈尔滨": "101050101"},
    {"长春": "101060101"},
    {"沈阳": "101070101"},
    {"齐齐哈尔": "101050201"},
    {"吉林": "101060201"},
    {"大连": "101070201"},
    {"牡丹江": "101050301"},
    {"延吉": "101060301"},
    {"鞍山": "101070301"},
    {"绥化": "101050501"},
    {"白城": "101060601"},
    {"葫芦岛": "101071401"},
    # 华南
    {"广州": "101280101"},
    {"南宁": "101300101"},
    {"海口": "101310101"},
    {"香港": "101320101"},
    {"澳门": "101330101"},
    {"深圳": "101280601"},
    {"桂林": "101300501"},
    {"三亚": "101310201"},
    {"珠海": "101280701"},
    {"中山": "101281701"},
    {"百色": "101301001"},
    {"万宁": "101310215"},
    # 西北
    {"西安": "101110101"},
    {"兰州": "101160101"},
    {"西宁": "101150101"},
    {"银川": "101170101"},
    {"乌鲁木齐": "101130101"},
    {"延安": "101110300"},
    {"宝鸡": "101110901"},
    {"天水": "101160901"},
    {"吴忠": "101170301"},
    {"吐鲁番": "101130501"},
    {"酒泉": "101160801"},
    {"固原": "101170401"},
    # 西南
    {"重庆": "101040100"},
    {"成都": "101270101"},
    {"贵阳": "101260101"},
    {"昆明": "101290101"},
    {"拉萨": "101140101"},
    {"绵阳": "101270401"},
    {"遵义": "101260201"},
    {"大理": "101290201"},
    {"乐山": "101271401"},
    {"六盘水": "101260801"},
    {"丽江": "101291401"},
    # 华东
    {"上海": "101020100"},
    {"福州": "101230101"},
    {"合肥": "101220101"},
    {"南昌": "101240101"},
    {"济南": "101120101"},
    {"嘉兴": "101210301"},
    {"南京": "101190101"},
    {"宁波": "101210401"},
    {"杭州": "101210101"},
    {"苏州": "101190401"},
    {"青岛": "101120201"},
    {"厦门": "101230201"},
    {"台北市": "101340101"},
    # 华中
    {"郑州": "101180101"},
    {"武汉": "101200101"},
    {"长沙": "101250101"},
    {"安阳": "101180201"},
    {"襄阳": "101200201"},
    {"湘潭": "101250201"},
    {"株洲": "101250301"},
    {"许昌": "101180401"},
    {"常德": "101250601"},
    {"张家界": "101251101"},
    {"孝感": "101200401"},
    {"荆门": "101201401"}
]
    text = get_html_text('http://www.weather.com.cn/data/sk/101200401.html')
    obj = json.loads(text)
    weather = obj["weatherinfo"]
    print("城市:"+weather["city"])
    print("温度:" + weather["temp"])
    print("风向:" + weather["WD"])
    print("风力:" + weather["WS"])
    print("湿度:" + weather["SD"])
    print("气压:" + weather["AP"])
    print("发布时间:"+weather["time"])
  1. 如何把字符串转成JSON对象?
json.loads(字符串)

同理可以把JSON对象转成字符串

json.dumps(JSON对象)

把JSON对象当作字典对象使用。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 216,591评论 6 501
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,448评论 3 392
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 162,823评论 0 353
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,204评论 1 292
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,228评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,190评论 1 299
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,078评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,923评论 0 274
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,334评论 1 310
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,550评论 2 333
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,727评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,428评论 5 343
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,022评论 3 326
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,672评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,826评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,734评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,619评论 2 354

推荐阅读更多精彩内容

  • 第2章 基本语法 2.1 概述 基本句法和变量 语句 JavaScript程序的执行单位为行(line),也就是一...
    悟名先生阅读 4,148评论 0 13
  • 1 Object 对象 教程:https://wangdoc.com/javascript/stdlib/obje...
    智勇双全的小六阅读 1,736评论 0 0
  • 我爱家乡的冬天,冬天雪花飘飘,落在地上,像给大地铺上了一层雪白的地毯。树,也穿上了一件雪白的衣服,准备过冬了...
    麦田宁阅读 435评论 0 0
  • 关注的一个博主有零点话题,你的暗恋终于哪里。热门肯定抢不上,毕竟谁的暗恋都很酸涩。或者终于变甜。我这种无疾而终的暗...
    苏大善人阅读 191评论 0 0
  • 期待每一次的久别重逢, 为离别抹干眼泪, 却怎么也说不出, 只能用最虔诚的字体写下:我喜欢你。
    奔跑在夕阳下的青年阅读 132评论 0 1