import requests
import json
import re
headers = {
'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/71.0.3578.98 Safari/537.36',
'cookie': '_T_WM=39971880054; SUHB=0G0vSx687zpwFs; MLOGIN=1; XSRF-TOKEN=8d7ee6'
}
url ='https://m.weibo.cn/feed/group?gid=3935483719458447'
def get_info(_url, page):
res = requests.get(_url, headers=headers)
json_data = json.loads(res.text)
statuses = json_data['data']['statuses']
for status in statuses:
text = status['text']
new_text = re.sub('[a-zA-Z0-9\s<="_>:/.?]+', '', text, re.S)
print(new_text)
next_cursor = json_data['data']['next_cursor']
page = page + 1
if page <= 10:
next_url = 'https://m.weibo.cn/feed/group?gid=3935483719458447&max_id={}'.format(next_cursor)
get_info(next_url, page)
else:
pass
get_info(url, 1)
第六讲作业
最后编辑于 :
©著作权归作者所有,转载或内容合作请联系作者
- 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
- 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
- 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...