在复杂分布式系统中，往往需要对大量的数据和消息进行唯一标识。如在美团点评的金融、支付、餐饮、酒店、猫眼电影等产品的系统中，数据日渐增长，对数据库的分库分表后需要有一个唯一ID来标识一条数据或消息，数据库的自增ID...

我们小伙伴应该都听说够消息中间件MQ，如：RabbitMQ，RocketMQ，Kafka等。引入中间件的好处可以起到抗高并发，削峰，业务解耦的作用。

在开始介绍scrapy的去重之前，先想想我们是怎么对requests对去重的。requests只是下载器，本身并没有提供去重功能。所以我们需要自己去做。很典型的做法是事先定义一个去重队列，判断抓取的url是否在其中，如下：...

作者 | 山宝银，腾讯后台高级工程师，专注于分布式 NoSQL 存储领域的技术研发工作，参与腾讯多个自研存储系统的开发，在分布式系统、高可用与高性能服务等领域有较丰富的经验。...

关于Redis实现分布式锁的问题，网络上很多，但是很多人的讨论基本就是把原来博主的贴过来，甚至很多面试官也是一知半解经不起推敲就来面候选人，最近结合我自己的学习和资料查阅，整理一下用Redis实现分布式锁的方法，欢迎评论、...

在单机环境下，有个秒杀商品的活动，在短时间内，服务器压力和流量会陡然上升。这个就会存在并发的问题。想要解决并发需要解决一下问题

相信绝大部分人，应该是99%的人都知道Redis的5种的基本类型、它们分别是：字符串、哈希、列表、集合、有序集合，就如同下图这样：

Redis的主从复制可以把数据复制多个副本部署到其他机器，从而避免了系统中的单点问题以及满足故障恢复和负载均衡等需求。

RDB文件默认保存在配置文件中dir属性(./)指定的目录下，以dbfilename(dump.rdb)属性指定的文件名命名

上篇文章中对redis operator进行了开发工作，接下来对一些功能点进行验证，文末附上源码地址，欢迎star，顺便点个在看，手动笔芯！