链家二手房、租房、居民区数据爬取及分析python

准备工作:

1、安装anaconda,并安装以下库:requests、numpy、pandas、time、random、lxml、os、datetime、json、pymongo、re、csv

参考教程:https://www.jianshu.com/p/eaee1fadc1e9

2、安装数据库mongodb

参考教程:http://www.runoob.com/mongodb/mongodb-window-install.html

3、安装MongoDB可视化工具Studio 3T

参考教程:https://blog.csdn.net/potato512/article/details/77844919

4、申请高德api的key(WEB服务,最多可申请10个)

参考教程:https://blog.csdn.net/qq_32444825/article/details/79441900

流程图:

1、 链家二手房数据爬取及分析

2、链家租房数据爬取及分析

3、链家居民区数据爬取及分析

具体说明及源码见github:

https://github.com/anniekorea/LianJiaCrawlAnalyze

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容

  • 第一部分 HTML&CSS整理答案 1. 什么是HTML5? 答:HTML5是最新的HTML标准。 注意:讲述HT...
    kismetajun阅读 27,816评论 1 45
  • 关于Mongodb的全面总结 MongoDB的内部构造《MongoDB The Definitive Guide》...
    中v中阅读 32,056评论 2 89
  • 包(lib)、模块(module) 在Python中,存在包和模块两个常见概念。 模块:编写Python代码的py...
    清清子衿木子水心阅读 3,836评论 0 27
  • 企业文化是一个企业发展强大的内在驱动力,以人为本的企业文化的构建本身就是一种人力资源管理上的突破,在华为十几...
    森槿_阅读 813评论 0 0
  • 最近很爱一个故事: 新东方的俞敏洪在创业初期时,疯狂地在北大周围贴招生广告,常常饿的有一顿没有一段的,然后他和北大...
    鱼头shiny阅读 704评论 2 11