Selenium爬取空白的问题

用xpath或者find都可以正确定位到元素,但是就是什么东西都抓取不下来,最最最最发现。。。是因为js没有加载完成,我就直接去定位了,所有什么都爬不到。。最简单的方法,在网页加载以前停顿10s。等待js加载完成在去爬取

time.sleep(10)

大功告成!

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
【社区内容提示】社区部分内容疑似由AI辅助生成,浏览时请结合常识与多方信息审慎甄别。
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

相关阅读更多精彩内容

  • 《 利用 Python36,基于 Scrapy 框架的爬虫思路 》 (一)引言利用爬虫抓取网页数据已经是常见技能,...
    yannis_lau阅读 5,572评论 0 3
  • 最近需要在一个网站下载一批数据。但是输入一个查询,返回三四万条结果,每次只能导出500条,而且每次还得输入下载条目...
    我就爱思考阅读 26,853评论 3 25
  • 1、5月盈利分析: 5月我们当月亏损店面有4家,累计亏损有3家。亏损门店在增加,主要原因在于销售,所以提升销售很重...
    松松劲柏阅读 2,656评论 0 0
  • 大一我要求买洗衣机,一个二个嫌弃别人的衣服脏,嫌贵不愿意买,终于等到大三下学期结束了,花了240元买了二手,然后才...
    市海阅读 1,378评论 0 1
  • 不知不觉自己已经坚持写了快小7万字了,当时写简书主要是为了记录自己在头马俱乐部的收获和成长,到后来一发和不可收拾。...
    祥祥布鲁斯阅读 1,468评论 0 2

友情链接更多精彩内容