默认的去重逻辑 默认去重逻辑的瓶颈 默认去重： 'scrapy.dupefilters.RFPDupeFilter'通过request_fingerprint将request...
发简信
IP属地：湖南
-
爬虫笔记（三） - 关于Scrapy去重逻辑分析
-
业界难题-“跨库分页”的四种方案 学习笔记
微信公共号 [架构师之路] 上看到一篇文章 业界难题-“跨库分页”的四种方案，学习了下，一些笔记。 分页需求 互联网很多业务都有分页拉取数据的需求，例如：京东下单过多时，拉取...
-
第一章 kubernetes入门
1.1 Kubernetes是什么 首先，它是一个全新的基于容器技术的分布式架构领先方案； 其次，Kubernetes是一个开放的开发平台； 最后，Kubernetes是一个...
-
Docker可视化管理工具Shipyard安装与配置文章来源： Shipyard Automated Deployment Shipyard简介 Shipyard是一个集成管理docker容器、镜像、Registries的系统...
-
Docker和ELK搭建日志平台Elasticsearch, Logstash 和 Kibana 简称ELK，是日志平台。用途：Bug定位，历史统计。自从有了Dokcer 什么都想往里面放来着。 1. 规划...
-
Shiro + JWT + Spring Boot Restful 简易教程
GitHub 项目地址：https://github.com/Smith-Cruise/Spring-Boot-Shiro 。 原文地址：https://www.inligh...
-
shiro jwt 构建无状态分布式鉴权体系一:JWT 1、令牌构造 JWT(json web token)是可在网络上传输的用于声明某种主张的令牌（token），以JSON 对象为载体的轻量级开放标准（RFC 751...
