实战:基于Scrapy+Elasticsearch+Django搭建的分布式电影搜索

Just Downlink

实战:基于 scrapy + elasticsearch + django 搭建的分布式电影搜索
源码:https://github.com/GFigure/JustDownlink
网页链接:Just Downlink

  • 利用 scrapy 爬取知名电影网站的下载链接
  • 利用 elasticsearch 存储数据
  • 利用 django 搭建电影搜索界面

数据采集

  • 支持同步、异步数据存储至 Mysql 数据库
  • 支持 elasticsearch 数据存储
  • 支持 json 数据导出
  • 保存日志至 logs 目录

搜索界面

  • 搜索建议
  • 简化电影下载页面

电影网站

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容

  • 那些說給樹聽的話 嵌在樹的年輪裡 隨流年一點點長成參天的大樹
    暗狐鳳凰DFP阅读 1,781评论 0 1
  • 刘瑜姐姐曾经写过文章,说一个人要活的像一支军队。按照这个标准,我简直就已经活的像个装甲师团。按照在家里面的排行,不...
    生如如花阅读 2,948评论 0 0
  • 此时,站在阳台上,感到有风从背后吹来,裙摆随之舞动。抬眼望着窗外,雪松的枝杪轻轻摇曳,时有鸟鸣飘至耳际。远处的马路...
    云淡风轻66阅读 2,915评论 0 0
  • 2016年4月14日,我们的朋友圈被一个美国黑人刷了屏,他的名字叫科比。 一时间,仿佛全世界都是科比的拥趸,大家争...
    沉船静坞阅读 2,256评论 0 1
  • 第11天·21天OH卡美颜瘦身课 #玩卡不卡·每日一抽# 每一位都可以通过这张卡片觉察自己: 1、直觉他叫什么名字...
    无心之盐阅读 1,566评论 0 0