发简信
IP属地：浙江
-
Python学习 <一> Python基础
变量赋值 <1>赋值操作符 =Python语言中，等号（=）是主要的赋值操作符。<2>增量赋值x += 1 (不支持x++)<3>多重赋值x =...
-
除了39岁的清华教授颜宁，候选院士大多都是多少岁的呢？这两天中国科学院公布了 2017年中国科学院院士增选初步候选人名单，在157名候选人名单中最吸引人注意的是39岁清华大学教授、生物学家颜宁。 这...
-
scrapy阅读笔记(一):创建spider，继承scrapy.Spider
最近打算深入学习 scrapy 然后整理了一些官方文档以及爬虫源码的相关笔记写在这供自己和大家一起参考 我们创建一个爬虫后首先是要继承scrap...
-
CentOS7.0 （Linux）快速配置Scrapy爬虫开发环境
由于专门为黑苹果买的SSD容量很低，用来跑数据明显不现实。所以把机房的主机装上CentOS 用来跑数据，执行的最小化安装，没有图形化界面，从U盘...
-
CentOS 7.0 （Linux）下配置frp进行内网穿透机房有很多闲置的主机，再想到网上的云主机那么贵，配置容量还那么低，还不如自己配置下，看能不能通过公网连接到学校内网的主机，试了后感觉不错可以，只...
-
CentOS 7.0 出现network is unreachable 或者 Cannot find a valid baseurl for repo的问题配置好的CentOS称为Client的 连接的设备称为 PCPC和服务器是在同一个机房，不过为了不频繁的走动还是用SSH吧。 用SSH登录Cli...
-
（Mac下）安装CentOS7.0针对于Mac用户的提示 Mac下的Unix环境已经很好了 如果不是特殊原因 不推荐在Mac上面再装CentOS装了CentOS 后如果不能正常开...
-
python爬虫回顾<五>：利用XPath爬取指定网页的标题以及文本在爬取了政府工作报告以后，一项新的任务又出现了，我们需要人民日报社论的标题以及社论文章进行分析。与上几次不同的是这次我们运用的方法是XPath加...
-
python爬虫回顾<四>处理分页，不同时期网站排版不同的兼容问题，以及文件归类（分文件夹保存）上篇的爬虫回顾其实已经把爬虫基本上都做好了，但是我觉得一个个复制年度汇编地址也很麻烦，要从03年粘贴到16年，如果我能够再来一次循环就好了。并且...