一、Scrapy设置随机User-Agent 1. settings.py文件中，设置随机User-Agent MY_USER_AGENT = [ "Mozilla/4....
发简信
IP属地：陕西
-
Scrapy反爬设置（User-Agent、IPProxy、COOKIE）
-
爬虫框架Scrapy个人总结（详细）熟悉前言 我这两天想复习一下Scrapy框架，然后看了看自己之前的笔记，发现总结的有点乱，本来心思在网上找找资料，然后发现网上的也是有点乱和我之前总结的都差不多，所以我心思好好总...
-
flask-sqlalchemy的paginate查询少数据问题
今天遇到一个问题，用flask-sqlalchemy的paginate做分页的时候，发现联表查询时分页出来结果数据少了很多，直接all()出来就没问题，把sql单独执行发现是...
-
算法导论1.2 插入排序
这个小结主要是用插入排序法，讲了一下什么是“循环不变式”，这个方法主要是用来证明你的算法是OK的，用python实现一下书里面的例子 输出如下，这个算法也好理解，想象一下斗地...
-
Sqlalchemy的Model和Table需要联表查询问题解决
遇到的问题是，在已经建好的table和modle上怎么做联表，假设表结构如下,ClassA和ClassB是多对多关系 正常是先知道ClassA，然后检索ClassB，现在有个...
-
mysql两表数据合并
遇到的问题是，有两个单独的订单统计表，分别统计的是不同渠道的不同商品按日期的统计数据，在后台数据展示时，又要把两类渠道的数据，按时间顺序放在一起展示，如下是简化后的两个商品统...
-
git submodule的使用笔记
子模块的添加 添加子模块非常简单，命令如下： 其中，url为子模块的路径，path为该子模块存储的目录路径。 执行成功后，查一下状态 会看到项目中除了子模块外，还增加了.gi...
-
uWSGI的lazy-apps配置
默认情况下lazy-apps的配置是False，uWSGI在第一个进程中加载整个应用程序，并且在加载应用程序之后，它会多次执行fork()本身的操作。可以极大地减少应用程序的...
-
python SimpleHTTPServer简单分析
python 自带的SimpleHTTPServer 模块可迅速搭建一个httpserver。 进入某个目录里 源码结构： 模块结构 SimpleHTTPServer Bas...
