课时12-如何获取网页中的动态数据

  • 动态抓取
    打开chrome 的network监控。 然后一直拖下去。
1.jpg

选择好XHR

  • 点击respons 可以看见加载回来的页面。
1.jpg

先构造一个抓元素的函数，在构造一个 列表页 的函数

def get_more_pages(start,end):    for one in range(start,end):        get_page(url+str(one))        time.sleep(2)
1.jpg
最后编辑于 ：
©著作权归作者所有,转载或内容合作请联系作者
平台声明：文章内容（如有图片或视频亦包括在内）由作者上传并发布，文章内容仅代表作者本人观点，简书系信息发布平台，仅提供信息存储服务。

推荐阅读更多精彩内容