当前位置: 首页 > news >正文

分布式锁(Distributed Lock)介绍(基于数据库(mysql);基于缓存(redis);基于ZooKeeper等分布式协调服务)

文章目录

  • 分布式锁介绍
    • 1. 分布式锁的工作原理
      • 1.1 锁的基本概念
      • 1.2 工作机制
    • 2. 分布式锁的实现方式
      • 2.1 基于数据库的分布式锁
      • 2.2 基于Redis的分布式锁
      • 2.3 基于ZooKeeper的分布式锁
    • 3. 分布式锁的挑战
      • 3.1 死锁问题
      • 3.2 锁粒度问题
        • 粗粒度锁
        • 细粒度锁
        • 锁粒度的选择
      • 3.3 锁的公平性问题
        • 1. 使用中心化的服务
        • 2. 时间戳排序
        • 3. 队列机制
    • 4. 总结

分布式锁介绍

分布式锁是一种在分布式环境下,对共享资源提供访问限制的方法。其主要目的是防止多个进程同时操作同一资源,造成数据的不一致性。分布式锁通过在多个节点上运行的进程之间引入协调机制,来解决这个问题。

1. 分布式锁的工作原理

1.1 锁的基本概念

在开始之前,先简单了解一下锁的基本概念。锁是一种保护共享资源不被并发操作破坏的技术。当一个进程想要访问共享资源时,必须首先获取锁。如果其他进程已经持有锁,那么该进程必须等待,直到锁被释放。

1.2 工作机制

在分布式系统中,分布式锁的实现比单机环境更为复杂。因为在分布式环境下,不同的进程可能在不同的物理机器上运行。因此,我们需要一种跨越多台机器,能够实现共享状态的方式来实现分布式锁。常见的实现方式包括基于数据库、基于缓存(如Redis)或者是基于ZooKeeper等系统。

2. 分布式锁的实现方式

接下来,将详细介绍一些常见的分布式锁实现方式。

2.1 基于数据库的分布式锁

这种实现方式通常是在数据库中创建一个表,用于存储锁信息。当一个进程想要获取锁时,会在该表中插入一条记录。如果插入成功,则表示获取锁成功;如果因为主键冲突等原因插入失败,则表示获取锁失败。

CREATE TABLE `Locks` (`key` varchar(64) NOT NULL,PRIMARY KEY (`key`)
) ENGINE=InnoDB;

2.2 基于Redis的分布式锁

Redis具有很好的性能和原子操作支持,因此也常被用于实现分布式锁。通过SETNX(Set if Not eXists)命令,我们可以尝试获取一个锁。如果该锁不存在,那么设置成功,获取锁;否则获取失败。

SET resource_name my_random_value NX PX 30000

2.3 基于ZooKeeper的分布式锁

ZooKeeper是一个开源的分布式协调服务,它提供了一种高效且可靠的分布式锁实现方式。通过创建短暂的顺序ZNode节点,可以让多个客户端争抢锁。只有序号最小的客户端才能获得锁。

public void lock() {if (!tryLock()) {waitForLock(waitNode, SESSION_TIMEOUT);lock();}
}

3. 分布式锁的挑战

虽然分布式锁看起来很理想,但在实际使用中还是有许多需要注意的地方。

3.1 死锁问题

死锁是分布式锁可能会遇到的一个问题。如果持有锁的进程在释放锁之前崩溃了,那么其他所有等待获取锁的进程都将永远阻塞。为了解决这个问题,一种常见的方法是设置锁的超时时间。

3.2 锁粒度问题

锁粒度是指在数据库管理系统中,对共享资源加锁时,可以选择的最小单位。它描述了一个锁定对象所占用的数据量大小。锁粒度的大小直接影响到并发控制机制的效率。

粗粒度锁

粗粒度锁,也被称为表级锁,是一种将整个表作为一个锁定对象的策略。当一个事务需要访问某个表中的任何数据时,都需要获取该表的锁。这种策略的优点是实现简单,管理开销较小,因为即使表中有数以百万计的行,也只需要维护一个锁。但是,由于一个事务获得锁后,其他所有事务都无法访问该表,导致并发性能较差。

细粒度锁

细粒度锁,又被称为行级锁,是一种将每一行数据作为一个独立的锁定对象的策略。在这种策略下,如果一个事务需要访问某个表中的某行数据,那么只需要获取该行数据的锁即可。这样可以大大提高并发性能,因为不同的事务可以同时访问表中的不同行。然而,这种策略的缺点是,由于需要为表中的每一行都维护一个锁,因此管理开销较大。

锁粒度的选择

选择适当的锁粒度是一项重要的任务。如果选择过大的锁粒度,可能会限制并发性能;而选择过小的锁粒度,可能会增加锁管理的开销。在实际应用中,需要根据系统的具体需求和环境来选择合适的锁粒度。

3.3 锁的公平性问题

公平性指的是请求锁的顺序应该与获取锁的顺序相同。然而,在实际的分布式环境中,由于网络延迟等因素,实现公平的分布式锁并不容易。

因为网络延迟和节点之间的时间差异,可能会导致请求顺序和获取顺序不同步。但是,这并不意味着无法解决这个问题。以下是几种常见的策略:

1. 使用中心化的服务

例如ZooKeeper、etcd等提供有序的节点特性,可以按照请求顺序排队。当一个进程释放锁时,按照请求锁的顺序,将锁赋予下一个进程。这种方法可以保证公平性,但对于中心化的服务依赖性较高。

public void lock() {if (!tryLock()) {waitForLock(waitNode, SESSION_TIMEOUT);lock();}
}
2. 时间戳排序

每个锁请求都附带一个时间戳,通过比较时间戳来确定获取锁的顺序。这需要所有参与节点的时钟大致同步,否则可能会影响公平性。

def request_lock():timestamp = get_current_time()send_request_to_lock_server(lock_name, timestamp)
3. 队列机制

创建一个全局的请求队列,每次只从队头取出一个请求进行处理,确保了先进先出(FIFO)的公平性。但这种方法可能会由于单点问题导致整个系统性能瓶颈。

Queue<LockRequest> lockQueue = new LinkedList<>();public void requestLock() {LockRequest request = new LockRequest();lockQueue.add(request);
}

虽然这些策略可以提高分布式锁的公平性,但也可能会增加系统的复杂性和开销。在实际应用中,需要根据具体的需求和环境进行权衡。

4. 总结

分布式锁是一种有效的协调在分布式环境中运行的并发进程的机制。它可以帮助我们避免因并发操作而导致的数据不一致性。然而,设计和实现一个可靠、高效且公平的分布式锁是一项具有挑战性的任务。

相关文章:

  • 基于卡尔曼滤波的平面轨迹优化
  • 《动手学深度学习(PyTorch版)》笔记3.2
  • 数据结构和算法笔记5:堆和优先队列
  • MYSQL数据库基本操作-DQL-基本查询
  • day34WEB 攻防-通用漏洞文件上传黑白盒审计逻辑中间件外部引用
  • CentOS 7 下安装 Docker 及配置阿里云加速服务
  • 浅析大数据汇总
  • PyTorch初探:基本函数与案例实践
  • HCIP之MPLS实验
  • TensorFlow2实战-系列教程4:数据增强:keras工具包/Data Augmentation
  • HTML — 区块元素
  • 嵌入式Linux系统下的智能家居能源管理系统的设计与实现
  • NIO-Selector详解
  • Java 基于SpringBoot+Vue的母婴商城系统,附源码,文档
  • React Hooks大全—useRef
  • 【前端学习】-粗谈选择器
  • css系列之关于字体的事
  • Docker下部署自己的LNMP工作环境
  • es6要点
  • Gradle 5.0 正式版发布
  • gulp 教程
  • Linux各目录及每个目录的详细介绍
  • Mac 鼠须管 Rime 输入法 安装五笔输入法 教程
  • node和express搭建代理服务器(源码)
  • 第三十一到第三十三天:我是精明的小卖家(一)
  • 分布式熔断降级平台aegis
  • 基于 Babel 的 npm 包最小化设置
  • 少走弯路,给Java 1~5 年程序员的建议
  • 使用common-codec进行md5加密
  • 算法系列——算法入门之递归分而治之思想的实现
  • 微信小程序上拉加载:onReachBottom详解+设置触发距离
  • ​LeetCode解法汇总2696. 删除子串后的字符串最小长度
  • ​TypeScript都不会用,也敢说会前端?
  • ​第20课 在Android Native开发中加入新的C++类
  • #前后端分离# 头条发布系统
  • $NOIp2018$劝退记
  • (3)选择元素——(17)练习(Exercises)
  • (delphi11最新学习资料) Object Pascal 学习笔记---第8章第2节(共同的基类)
  • (二)windows配置JDK环境
  • (二开)Flink 修改源码拓展 SQL 语法
  • (附源码)springboot 房产中介系统 毕业设计 312341
  • (附源码)ssm教师工作量核算统计系统 毕业设计 162307
  • (全部习题答案)研究生英语读写教程基础级教师用书PDF|| 研究生英语读写教程提高级教师用书PDF
  • (一)kafka实战——kafka源码编译启动
  • (一)基于IDEA的JAVA基础10
  • (已解决)什么是vue导航守卫
  • .net core 实现redis分片_基于 Redis 的分布式任务调度框架 earth-frost
  • .NET Framework 3.5中序列化成JSON数据及JSON数据的反序列化,以及jQuery的调用JSON
  • .net framework profiles /.net framework 配置
  • .net framework4与其client profile版本的区别
  • .NET/C# 异常处理:写一个空的 try 块代码,而把重要代码写到 finally 中(Constrained Execution Regions)
  • .NET面试题(二)
  • .net企业级架构实战之7——Spring.net整合Asp.net mvc
  • .sh 的运行
  • @RequestParam @RequestBody @PathVariable 等参数绑定注解详解