IP属地:广西
凭什么你可以靠辱骂他人苟活于世? 简书就这样了?
可以看出只有最后的数字在变化,所以进行url的构造,然后开始爬取
# 观察该页面的加载方式 分析产生的url与前一页存在id的关系 获取的数据
一共创建了三个表 yidong dianxin liantong。用来分别保存所爬取的数据
推荐看MongoDB的官方文档,有兴趣的小伙伴们可以一起学习哟
存在的问题: 1、通过推荐粉丝进行爬取无法全部获得。 2、爬取速度过慢,代码需要优化 3、写入用户信息时,粉丝信息写入了两遍,这个可以忽略......