目标 在大规模爬取数据前，先定一个能达到的小目标，比方说先爬个10万条数据。 爬虫爬数据太慢了，怎么爬快点？程序中途中断了怎么办，好不容易爬了这么多数据，又要重头开始爬吗/(...
发简信
IP属地：北京
-
Python爬虫 -- 美股吧多线程（二） -
-
Python 多进程 multiprocessing.Pool类详解
Python 多进程 multiprocessing.Pool类详解 multiprocessing模块 multiprocessing包是Python中的多进程管理包。它与...
-
Python黑魔法 --- 异步IO（ asyncio） 协程
本文是17年写的，至今过去多年，有一篇更好的文档： https://superfastpython.com/python-asyncio/[https://superfast...
-
Python协程asynico模块解读为了搞清楚asynico模块的具体作用，那我们要先明白一些基本概念。一般在爬虫里面，为了加快速度，我们可以使用多进程、多线程、协程，这篇文章详细解读一下这三者的区别的区别。在...
-
机器学习初探之感知机模型最近在工作闲暇中也在追赶时代的潮流,于是就打起了机器学习的注意,通过网上查阅资料还有询问相关的从业人员,发现机器学习的成本还是蛮高的,对数理统计这方面的要求也蛮高,还好我同事...
-
Python3全角转半角的方法
相信大家都对全角半角的概念已经有所了解了。中文文字永远是全角，只有英文字母、数字键、符号键才有全角半角的概念,一个字母或数字占一个汉字的位置叫全角，占半个汉字的位置叫半角。标...
-
-
我的开源项目：<br><br>分布式微博爬虫<br><a href="https://links.jianshu.com/go?to=https%3A%2F%2Fgithub.com%2FSpiderClub%2Fweibospider" target="_blank">https://github.com/SpiderClub/weibospider</a><br><br>高可用分布式代理池<br><a href="https://links.jianshu.com/go?to=https%3A%2F%2Fgithub.com%2FSpiderClub%2Fhaipproxy" target="_blank">https://github.com/SpiderClub/haipproxy</a>
-
估值方法盘点:给我一把尺子，我能衡量所有的股票就目前的形势来看，指数企稳盘升应该是大概率，但是毫无疑问很有可能又需要数年的时间重新生发一茬韭菜，日光之下无新事，江河流了一年又一年。 历史数据清楚地告诉我们，市场90%以上...
