01 网站数据采集与显示 构想

  • 序:
    序言里面说过,新装的WIN10,所以一切的环境都需要重新搭建.
    我想把这个搭建的过程,用文字的方式,半教程半记录的方式记录下来.总比这些东西一直封尘在我的印象笔记以及wiz笔记中要强,同时也能感概时间都去哪里.

  • 正文:
    话说搭建环境,那我肯定不能随便装一坨东西就算了,那显得很无趣,并且无聊,也不方便管理知识点.
    而从前几天群的聊天中,有一个群友问RSS相关的事情,然后我说了一嘴,自从某Google网因为不可描述的因素退华,以及后来G+的落幕以后,我已经很久没用RSS了.
    不过说到底,RSS获取信息的虽然方便,但是却不怎么方便观看,譬如论坛RSS,大部分时候我都只是想获得每天新帖的查看TOP20~50的帖子,针对这点来说RSS是无法简单做到的.
    而爬虫,就很容易能够获取,所以第一篇章先来一个

<爬虫→数据收集→数据保存→数据展示>

的搭建过程.

用导图做了一下笼统的大概脉路,以及路线.包含的知识点.


WEB框架 SQL数接口 (2).jpeg

简单点说就是写一个爬虫,然后用sqlite把数据保存下来,最后用网页的方式展示出来.
做好了以后,再上存到远程服务器中

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容

  • 33款可用来抓数据的开源爬虫软件工具 要玩大数据,没有数据怎么玩?这里推荐一些33款开源爬虫软件给大家。 爬虫,即...
    visiontry阅读 7,434评论 1 99
  • 发现 关注 消息 iOS 第三方库、插件、知名博客总结 作者大灰狼的小绵羊哥哥关注 2017.06.26 09:4...
    肇东周阅读 12,259评论 4 61
  • 虽然有不少教程,但找来找去没有一个能顺利的在Ubuntu上顺利部署的。因此在这里把自己部署的过程记录下来。 前提条...
    启发禅悟阅读 1,401评论 0 2
  • 比天还亮得早的 是与你聊天的心情 车水马龙的声音在窗外叫嚣 而我满心满眼只有你 你对我说早安了吗? 早晨对我来说最...
    情诗小铺阅读 286评论 4 3
  • 秋天,蓝蓝的天,阳光照在身上。凉风吹过来,背后有寒意了。记不清的人和事,象老胶片,只有磨花了的底片,洗印不出原来的...
    我这半辈子阅读 378评论 3 4