第四周作业

#豆瓣cookie模拟登录,热门精选

import requests

import time

from lxml import etree

headers = {

  'User-Agent':'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/49.0.2623.87 Safari/537.36'

  'cookie':'###################################'

}

urls = ['https://www.douban.com/interest/1/1/?p={}'.format(str(i)) for i in range(1,10)]

for url in urls:

  res = requests.get(url,headers=headers)

  html = etree.HTML(res.text)

  infos = html.xpath('//div[@id="statuses"]/div[1]/div')

  for info in infos:

    name = info.xpath('div/div/div[1]/div[2]/a/text()')

    context = info.xpath('div/div/div[2]/div[1]/div/p/text()')

    print (name,context)

  time.sleep(2)

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
【社区内容提示】社区部分内容疑似由AI辅助生成,浏览时请结合常识与多方信息审慎甄别。
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

相关阅读更多精彩内容

友情链接更多精彩内容