Mongodb-mobilephone from58

需求

  1. 爬取58同城所有手机号码链接,存储到mongodb
  2. 读取mongodb手机号码链接,爬取详细信息,存储到mongodb
    结果:
11.png

代码:

22.png

难点:

  1. 去掉text中的换行符,tab以及不需要的空格
    "price":price.replace("\n","").replace("\t","").replace(" ","")

  2. mobilephone_url.find()的类型只是一个指针类型,无法直接操作
    必须用for info in mobilephone_url.find(): url = info["url"]的方法才能逐个拿到url的数值

3

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容