这是我们分布式爬虫系列文章的第三篇文章了，这是最后一篇打基础的文章，在下一篇文章中，我们就会通过一个实战，来彻彻底底教会大家分布式爬虫！...

首先，什么是分布式爬虫？其实简单粗暴一点解释就是我们平时写的爬虫都是孤军奋战，分布式爬虫就是一支军队作战。专业点来说就是应用多台机器同时实现爬虫任务，这多台机器上的爬虫，就是称作分布式爬虫。...

博客地址: https://www.lixiang.red公众号: 程序员心情站

HTTP协议本身是无状态的，为了保存会话信息，浏览器Cookie通过SessionID标识会话请求，服务器以SessionID为key来存储会话信息。在单实例应用中，可以考虑应用进程自身存储，随着应用体量的增长，需要横向扩容，多实例session共享问...

broker = 'redis://127.0.0.1:6379/1' backend = 'redis://127.0.0.1:6379/2' app = Celery('my_tasks', broker=broker, backend=backend)

Redis 没有直接使用 C 语言传统的字符串表示（以空字符串结尾的字符数组），而是构建了一种名为简单动态字符串（simple dynamic string）的抽象类型，并将 SDS 用作 Redis 的默认字符串表示。...

笔者曾经维护过千个redis实例，这些实例采用的简单主从结构，集群方案主要是客户端jar包。刚开始，个人并不是太喜欢redis cluster，因为它的路由实在是太死板，运维复杂。为什么这么说，可以参考之前的一篇文章《现实中的路由规...

用上这三招，不论秒杀时负载多大，都能轻松应对。更好的是，Redis能够满足上述三点。因此，用Redis就能轻松实现秒杀系统。 用我这个方案，无论是电商平台特价秒杀，12306火车票秒杀，都不是事:)...

目前公司数据量已经上来，单表最大已经5千万，之前使用分区表，用起来有很多需要注意的地方，以及坑等。

未授权访问漏洞可以理解为需要安全配置或权限认证的地址、授权页面存在缺陷导致其他用户可以直接访问从而引发重要权限可被操作、数据库或网站目录等敏感信息泄露。...