之前给大家分享如何用excel爬取网站数据,有人说我还要装个excel,而且office是收费的,有没有可以推荐我们小白用户的方法呢?
今天我就给大家介绍一个方法,你的电脑只需要有一个浏览器即可,今天我们给大家分享一个数据爬取的网站造数,我用了快半年,基本上网站稍微复杂一些的,我就会用他去爬取数据,他具有可视化操作界面。
我们今天就抓取京东购物网站的笔记本商品列表页,作为案例分享给大家。
Step1我们把网址放进网站里,点击开始爬取
Step2鼠标选中想爬取的数据,我选中商品详情页,价格,商品标题,评分数量,以及商品标签等,点击完成创建。
Step3 点击立即执行,网站就开始爬取你想要的数据
Step4,爬取完成后,你可以选择在线预览,也可以选择下载到本地
这个时候有的同学会问我如果爬取数据有分页怎么办,这个也可以解决。
首先你在京东商品列表中,多点击几次下一页,发现网址的规律“?page=页数”;
然后在爬取网址设置选择网址生成规则
整个爬取工作就完成了,是不是很容易哈。下次分享给大家如果有的网站需要登录才能爬取数据的解决方法?