聊聊 Redis 的事务

本贴最后更新于 2813 天前,其中的信息可能已经东海扬尘

目前对于Redis的事务支持,我们知道的有如下几点:

  • 提供事务支持,保证一串命令操作的原子性,即开启事务后,所有命令放入一个队列中,然后一起执行,在此过程中不允许其他客户端操作来打断
  • 当队列中的命令在执行过程中,某个命令发生错误,或者是由于网络等原因导致,那么事务将终止,且执行过的命令不能回滚
  • 在事务执行过程中,如果两个操作之间存在依赖关系,如一个写操作依赖一个读操作的话,因为命令实质还没有执行,所以被依赖的操作不会有返回值,这种情况会导致事务失败;此种依赖操作在一个事务中应尽量避免
  • 将操作某个key的命令加入事务队列时,此刻其他客户端有可能对该key进行操作,并没有做任何的同步措施,此种情况我们需要使用watch来监视该key,在当前事务exec之前,如果该key的值发生变化,那么整个事务就会失败(乐观锁)

首先明确一点,不能使用关系数据库(特别是单机)的强事务标准来要求Redis,毕竟不是一个血统的,但我们也可以通过一些手段尽量来避免事务的失败;在我们目前的项目中,做了一些工作,总结起来有几点。

随用随取之线程变量

Redis官方推荐的java客户端是jedis,我们使用他自带的连接池pool,同时尽量做到当前同一个请求线程使用的是同一个客户端实例,即在一次请求开始到结束,所有的操作都尽量使用同一个jedis实例(是尽量而不是保证全部),这样可以减少对pool的存取操作,同时减少服务端的连接。

因为jedis客户端使用了2个类来分别对应普通操作和事务操作,即Jedis和Transaction,要实现以上的需求我们可以将这2个对象存入线程变量ThreadLocal中,当前请求过程中所有的需要使用客户端的地方,从线程变量中获取即可;根据情况需要用什么就取什么。

事务操作何时开始何时提交之嵌套调用

对于每个需要保证事务的业务操作,我们利用Spring的AOP(这部分内容不在本篇文章范围之内)在每个业务操作之前和之后加入jedis客户端实例初始化逻辑和事务提交逻辑,其实初始化逻辑只在第一次业务逻辑调用时做了一次,同时每次初始化时都递增方法调用计数器level(第一次初始化时level=1);下面执行业务逻辑代码,最后到事务提交逻辑,如果此时业务逻辑代码中没有嵌套调用其他的业务逻辑,那么就可以直接提交事务了,因为我们是根据level-1的值进行判断的,结果为0时,即可提交事务,看似完美,但实际情况是业务逻辑代码很傻很天真,不停的调用其他的业务逻辑,这种调用也分为3种情况:

  • 调用当前业务类中其他方法
X( ) ++++++++++++++ # initial: level = 1
a( ) # initial: level = 2, commit: level = 1
b( ) # initial: level = 2, commit: level = 1
c( ) # initial: level = 2, commit: level = 1
X( ) ++++++++++++++ # commit: level = 0
  • 调用其他业务类的方法
X( ) ++++++++++++++ # initial: level = 1
BS1.a( ) # initial: level = 2
BS2.b( ) # initial: level = 3
BS3.c( ) # initial: level = 4, commit: level = 3
BS2.b( ) # commit: level = 2
BS1.a( ) # commit: level = 1
x( ) ++++++++++++++ # commit: level = 0
  • 混合调用式

这种情况下,有可能是同一个业务类方法调用了其他业务类中的方法,同时再次调用了同一个业务类的方法等等情况;规则依然如上面列举的2中情况一样,进入方法计数器加一,退出时减一,判断是否可以提交事务。

事务操作和普通操作之混合式

如果一个事务操作单元很小,那我们必须让这个单元在一个事务中完成操作,但是对于某个比较大的业务逻辑单元,其中即包含了诸多小事务单元也同时包含了诸多普通操作单元(使用Jedis实例对象而不是Transaction对象实例操作),我们的措施就是---同化操作,如果当前已经开启了事务模式,此时进入了一个普通操作单元,那就将这个普通操作转为事务操作,即使用Transaction实例进行操作;反过来,如果当前使用的普通操作模式,此时进入一个事务操作单元,这种情况并没有多大影响,因为普通操作单元执行命令马上就会有结果,事务操作开始后,以及其后面所有的操作都将进入事务模式,直到业务逻辑结束时一齐提交命令。

事务操作命令之依赖

就如文章开头提到的第三点,两个操作直接存在依赖关系,如一个写操作需要依赖一个读操作的结果,但是在事务中读操作还没有真正执行,没有结果,怎么办?我们的办法就是当断即断,立即提交事务,redis这种内存数据库,操作都是毫秒级的,在开启事务的情况下,读取的值是有保障的,可以作为写操作的依赖;这里有个小技巧,就是每次立即提交事务后,都要清空线程变量threadlocal中的jedis客户端实例,因为事务提交后,jedis客户端对象本身的状态也会发生变化,下次使用需要重新生成。

watch之监视

对于更严格的事务要求,使用watch命令对key进行监视,保证一致性;当然对于不能回滚的问题,还没有好的解决办法!

总结一下:

使用redis不能苛求强事务标准,尽量使用简单的业务逻辑
选择适当的业务场景,充分利用redis高效存取速度的优势

  • Redis

    Redis 是一个开源的使用 ANSI C 语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value 数据库,并提供多种语言的 API。从 2010 年 3 月 15 日起,Redis 的开发工作由 VMware 主持。从 2013 年 5 月开始,Redis 的开发由 Pivotal 赞助。

    284 引用 • 247 回帖 • 172 关注
  • 事务
    23 引用 • 21 回帖 • 1 关注
  • level
    1 引用

相关帖子

欢迎来到这里!

我们正在构建一个小众社区,大家在这里相互信任,以平等 • 自由 • 奔放的价值观进行分享交流。最终,希望大家能够找到与自己志同道合的伙伴,共同成长。

注册 关于
请输入回帖内容 ...

推荐标签 标签

  • OAuth

    OAuth 协议为用户资源的授权提供了一个安全的、开放而又简易的标准。与以往的授权方式不同之处是 oAuth 的授权不会使第三方触及到用户的帐号信息(如用户名与密码),即第三方无需使用用户的用户名与密码就可以申请获得该用户资源的授权,因此 oAuth 是安全的。oAuth 是 Open Authorization 的简写。

    36 引用 • 103 回帖 • 8 关注
  • CAP

    CAP 指的是在一个分布式系统中, Consistency(一致性)、 Availability(可用性)、Partition tolerance(分区容错性),三者不可兼得。

    11 引用 • 5 回帖 • 566 关注
  • Git

    Git 是 Linux Torvalds 为了帮助管理 Linux 内核开发而开发的一个开放源码的版本控制软件。

    205 引用 • 357 回帖
  • ActiveMQ

    ActiveMQ 是 Apache 旗下的一款开源消息总线系统,它完整实现了 JMS 规范,是一个企业级的消息中间件。

    19 引用 • 13 回帖 • 626 关注
  • 星云链

    星云链是一个开源公链,业内简单的将其称为区块链上的谷歌。其实它不仅仅是区块链搜索引擎,一个公链的所有功能,它基本都有,比如你可以用它来开发部署你的去中心化的 APP,你可以在上面编写智能合约,发送交易等等。3 分钟快速接入星云链 (NAS) 测试网

    3 引用 • 16 回帖
  • PostgreSQL

    PostgreSQL 是一款功能强大的企业级数据库系统,在 BSD 开源许可证下发布。

    22 引用 • 22 回帖 • 1 关注
  • Hexo

    Hexo 是一款快速、简洁且高效的博客框架,使用 Node.js 编写。

    21 引用 • 140 回帖 • 30 关注
  • sts
    2 引用 • 2 回帖 • 152 关注
  • Node.js

    Node.js 是一个基于 Chrome JavaScript 运行时建立的平台, 用于方便地搭建响应速度快、易于扩展的网络应用。Node.js 使用事件驱动, 非阻塞 I/O 模型而得以轻量和高效。

    138 引用 • 268 回帖 • 192 关注
  • AngularJS

    AngularJS 诞生于 2009 年,由 Misko Hevery 等人创建,后为 Google 所收购。是一款优秀的前端 JS 框架,已经被用于 Google 的多款产品当中。AngularJS 有着诸多特性,最为核心的是:MVC、模块化、自动化双向数据绑定、语义化标签、依赖注入等。2.0 版本后已经改名为 Angular。

    12 引用 • 50 回帖 • 427 关注
  • 开源中国

    开源中国是目前中国最大的开源技术社区。传播开源的理念,推广开源项目,为 IT 开发者提供了一个发现、使用、并交流开源技术的平台。目前开源中国社区已收录超过两万款开源软件。

    7 引用 • 86 回帖
  • WebSocket

    WebSocket 是 HTML5 中定义的一种新协议,它实现了浏览器与服务器之间的全双工通信(full-duplex)。

    48 引用 • 206 回帖 • 394 关注
  • 开源

    Open Source, Open Mind, Open Sight, Open Future!

    396 引用 • 3416 回帖
  • React

    React 是 Facebook 开源的一个用于构建 UI 的 JavaScript 库。

    192 引用 • 291 回帖 • 440 关注
  • 前端

    前端技术一般分为前端设计和前端开发,前端设计可以理解为网站的视觉设计,前端开发则是网站的前台代码实现,包括 HTML、CSS 以及 JavaScript 等。

    247 引用 • 1347 回帖 • 1 关注
  • 酷鸟浏览器

    安全 · 稳定 · 快速
    为跨境从业人员提供专业的跨境浏览器

    3 引用 • 59 回帖 • 23 关注
  • VirtualBox

    VirtualBox 是一款开源虚拟机软件,最早由德国 Innotek 公司开发,由 Sun Microsystems 公司出品的软件,使用 Qt 编写,在 Sun 被 Oracle 收购后正式更名成 Oracle VM VirtualBox。

    10 引用 • 2 回帖 • 6 关注
  • Oracle

    Oracle(甲骨文)公司,全称甲骨文股份有限公司(甲骨文软件系统有限公司),是全球最大的企业级软件公司,总部位于美国加利福尼亚州的红木滩。1989 年正式进入中国市场。2013 年,甲骨文已超越 IBM,成为继 Microsoft 后全球第二大软件公司。

    103 引用 • 126 回帖 • 446 关注
  • danl
    64 关注
  • Sandbox

    如果帖子标签含有 Sandbox ,则该帖子会被视为“测试帖”,主要用于测试社区功能,排查 bug 等,该标签下内容不定期进行清理。

    370 引用 • 1215 回帖 • 582 关注
  • ZooKeeper

    ZooKeeper 是一个分布式的,开放源码的分布式应用程序协调服务,是 Google 的 Chubby 一个开源的实现,是 Hadoop 和 HBase 的重要组件。它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、域名服务、分布式同步、组服务等。

    59 引用 • 29 回帖 • 23 关注
  • Flume

    Flume 是一套分布式的、可靠的,可用于有效地收集、聚合和搬运大量日志数据的服务架构。

    9 引用 • 6 回帖 • 596 关注
  • 知乎

    知乎是网络问答社区,连接各行各业的用户。用户分享着彼此的知识、经验和见解,为中文互联网源源不断地提供多种多样的信息。

    10 引用 • 66 回帖
  • Spark

    Spark 是 UC Berkeley AMP lab 所开源的类 Hadoop MapReduce 的通用并行框架。Spark 拥有 Hadoop MapReduce 所具有的优点;但不同于 MapReduce 的是 Job 中间输出结果可以保存在内存中,从而不再需要读写 HDFS,因此 Spark 能更好地适用于数据挖掘与机器学习等需要迭代的 MapReduce 的算法。

    74 引用 • 46 回帖 • 547 关注
  • Eclipse

    Eclipse 是一个开放源代码的、基于 Java 的可扩展开发平台。就其本身而言,它只是一个框架和一组服务,用于通过插件组件构建开发环境。

    75 引用 • 258 回帖 • 624 关注
  • PHP

    PHP(Hypertext Preprocessor)是一种开源脚本语言。语法吸收了 C 语言、 Java 和 Perl 的特点,主要适用于 Web 开发领域,据说是世界上最好的编程语言。

    164 引用 • 407 回帖 • 524 关注
  • Electron

    Electron 基于 Chromium 和 Node.js,让你可以使用 HTML、CSS 和 JavaScript 构建应用。它是一个由 GitHub 及众多贡献者组成的活跃社区共同维护的开源项目,兼容 Mac、Windows 和 Linux,它构建的应用可在这三个操作系统上面运行。

    15 引用 • 136 回帖 • 5 关注