Python作业4:通过提交cookie模拟登陆简书,爬取简友圈内容

import requests
import json
import re

headers = {
    'User-Agent': 'Mozilla/5.0 (iPhone; CPU iPhone OS 11_0 like Mac OS X) AppleWebKit/604.1.38 (KHTML, like Gecko) Version/11.0 Mobile/15A372 Safari/604.1',
    'cookie':'__yadk_uid=5kyh1UjidxhqlWFtKOx7cqon44UgzkTr; remember_user_token=W1sxNzkzMzQ0M10sIiQyYSQxMSRTR2U2eWZVaWYwWWpOY09DQ1BpR1cuIiwiMTU2MDQwMzUzNC4yNDE3NzI3Il0%3D--3f57c1a8eb169a27e092cac40772f8fe8ad35d57; _m7e_session_core=71caea6afa797c0017263c8d9b2067a3; read_mode=day; default_font=font2; locale=zh-CN; Hm_lvt_0c0e9d9b1e7d617b3e6842e85b9fb068=1560351677,1560357123,1560403537,1560429514; sensorsdata2015jssdkcross=%7B%22distinct_id%22%3A%2217933443%22%2C%22%24device_id%22%3A%2216b4c3528f0160-05fc10a3004fbc-e353165-1049088-16b4c35293716c%22%2C%22props%22%3A%7B%22%24latest_traffic_source_type%22%3A%22%E7%9B%B4%E6%8E%A5%E6%B5%81%E9%87%8F%22%2C%22%24latest_referrer%22%3A%22%22%2C%22%24latest_referrer_host%22%3A%22%22%2C%22%24latest_search_keyword%22%3A%22%E6%9C%AA%E5%8F%96%E5%88%B0%E5%80%BC_%E7%9B%B4%E6%8E%A5%E6%89%93%E5%BC%80%22%7D%2C%22first_id%22%3A%2216b4c3528f0160-05fc10a3004fbc-e353165-1049088-16b4c35293716c%22%7D; Hm_lpvt_0c0e9d9b1e7d617b3e6842e85b9fb068=1560431154'
}

url = 'https://www.jianshu.com/subscriptions/6931170'

def get_info(url):
    res = requests.get(url,headers=headers)
    json_data = json.loads(res.text)
    # print(res.text)
    sources = json_data['source']['notes']
    for source in sources:
        title = source['title']
        nickname = source['author']['nickname']
        public_abbr = source['public_abbr']
        print(nickname,title,public_abbr)

get_info(url)
jianyouquan.jpg
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容

  • github地址:https://github.com/haoxinl/spider_python 博客地址:ht...
    haoxinl阅读 5,708评论 0 2
  • 看了一段时间的爬虫文章和视频,总感觉看的懂但是实际操作自己的项目却是难点比较多,还是因为知识点不够扎实。今天尝试一...
    Linx00阅读 5,121评论 0 0
  • 1、把正能量带给别人,负能量要适当隐藏,自己内部消化。让自己开心,变得阳光你才可以暖身边的人,但也别试图去做所有人...
    嬉笑怒骂皆生活阅读 3,564评论 0 0
  • 广告投放要精确定位,花钱要花在刀刃上。想要找到对应的客户群就要通过大数据分析,找到产品适合的客户群体经常关注的平台...
    曲同宁阅读 910评论 0 0
  • 如果您知道夏令营绝不只是享受,而是一种感受,是人生的体验;您会送孩子来参加吗?如果告诉您,孩子参加夏令营会有亲身体...
    4f525100a234阅读 1,878评论 0 0