详解redis在微服务领域的贡献


Posted in Redis onOctober 16, 2021

前言

说到redis,可能大家的脑海中蹦出的关键词是:NoSQL、KV、高性能、缓存等。但今天的文章从另一个角度——微服务来展开。

这篇文章的起因也是源自一次面试经历,在面试一位来自陌陌的候选人(就是那个交友的陌陌)时,他提到一点让我觉得很有意思,他说redis在陌陌被使用的非常广泛,除了常规的缓存外,某些场景下也当NoSQL数据库来使用,还用redis作为微服务的注册中心,甚至连RPC的调用协议都用了redis协议。

注册中心

最早了解到redis可以作为注册中心是从dubbo的源码中看到,但一直也没有过多的了解,因为从没听说哪家公司使用redis来做服务发现。

在dubbo中使用redis来做服务发现还是挺简单的,引入jedis依赖,将注册中心地址改为redis地址即可:

<dependency>
	<groupId>redis.clients</groupId>
	<artifactId>jedis</artifactId>
	<version>2.9.0</version>
</dependency>

dubbo.registry.address=redis://127.0.0.1:6379

注册上来的数据是这样,类型是hash

/dubbo/${service}/${category}

/dubbo/com.newboo.sample.api.DemoService/consumers
/dubbo/com.newboo.sample.api.DemoService/providers

hash数据结构下保存的key是注册上来的url,value是过期时间

127.0.0.1:6379> hgetall /dubbo/com.newboo.sample.api.DemoService/providers
1) "dubbo://172.23.233.142:20881/com.newboo.sample.api.DemoService?anyhost=true&application=boot-samples-dubbo&deprecated=false&dubbo=2.0.2&dynamic=true&generic=false&interface=com.newboo.sample.api.DemoService&metadata-type=remote&methods=sayHello&pid=19807&release=2.7.8&side=provider&timestamp=1621857955355"
2) "1621858734778"

从理论上来说,注册中心只要符合数据存储、监听推送变更、心跳检测这几个基本的功能即可。

以dubbo为例看下redis是如何利用自身特性来完成注册中心的功能( 以dubbo 2.7.8版本为例):

服务注册

  • provider在服务注册时,将服务提供方的url写入/dubbo/${service}/providers下,数据类型为hash,key为提供方url,value为key的过期时间,默认为60s,可配置
  • 写入完成后以/dubbo/${service}/providers为key调用publish命令发布一个register事件provider在初始化时起一个单独的线程每隔1/2过期时间(默认30s)时对
  • provider进行重新重新注册并发布register事件

服务发现

  • 获取匹配/dubbo/${service}/*的key(此处用到了keys命令),拿到的有这几种:/dubbo/${service}/providers/dubbo/${service}/routers/dubbo/${service}/configuators
  • /dubbo/${service}/*拿到的key进行hgetall,拿到真实的provider列表以及配置等数据,进行组装、匹配
  • 同时对每个subscribe的服务单独开一个线程,对/dubbo/${service}执行psubscribe命令阻塞等待有事件发生

详解redis在微服务领域的贡献

从源码和测试来看,dubbo的redis注册中心不能直接用于生产环境,原因有如下两点:

  • 使用了keys命令,会阻塞单线程的redis,keys执行期间,其他命令都得排队
  • 没有心跳检测这个功能,我测试了provider被kill -9杀死后,consumer是无法感知的。但从实现上来看是想通过存储的过期时间来判断服务是否可用,即需要对比url对应的value与当前的时间,如果过期应被剔除,但这部分貌似没有实现完整

虽然dubbo的redis注册中心生产不可用,但这并不影响他可以构建一个生产可用的注册中心,陌陌就是个很好的例子。

RPC调用协议

redis协议作为RPC调用协议也是陌陌同学告诉我的,当时我问了他两个问题:

  • 为什么选择redis协议作为RPC调用协议
  • redis协议如何透传类似header的隐式参数

第一个问题的答案也比较出乎意料,他说是为了跨语言调用,当时觉得只有http、gRPC等协议做到了跨语言,redis协议跨语言也是第一次听说。但仔细一想,确实没毛病,现在哪个后端语言没有实现redis的客户端呢?

之所以redis协议能够做到跨语言,这也全仰仗它的设计非常简洁,易于实现,详细协议内容可以参考这个链接:

http://redisdoc.com/topic/protocol.html

我就举一个例子来证明redis协议简洁到了什么程度,这是我很久之前就关注的一个项目

https://github.com/jdp/redisent

它是一个php实现的redis客户端,只有一个php文件,共196行,这196行包含了注释,变量定义,链接建立等,真正解析协议的代码非常少,请求的编码和发送只用了17行代码,解析返回的代码只有58行!正如项目的介绍那样:simple, no-nonsense

第二个问题回答的和我的预期一致,从redis协议的层面暂时无法支持类似header的隐式参数,但陌陌的RPC框架是自研的,所以他们在框架层解决了这个问题,序列化他们选择了json,如果要透传header参数,框架将参数组装到传输体中去。

详解redis在微服务领域的贡献

遗憾的是dubbo中的redis协议实现并不完整,无法暴露redis协议,只能调用,所以测试也只能测试client连接到redis服务器进行get、set调用,意义不大。

总结

redis目前是个用途非常广泛的存储组件,虽然在微服务领域它不是主流,但这也给我们提供了一种思路,至少这条路是可以走通的。

到此这篇关于redis在微服务领域的贡献的文章就介绍到这了,更多相关redis微服务内容请搜索三水点靠木以前的文章或继续浏览下面的相关文章希望大家以后多多支持三水点靠木!

Redis 相关文章推荐
redis内存空间效率问题的深入探究
May 17 Redis
Redis高级数据类型Hyperloglog、Bitmap的使用
May 24 Redis
详解Redis复制原理
Jun 04 Redis
Redis 常见使用场景
Aug 30 Redis
Window server中安装Redis的超详细教程
Nov 17 Redis
Spring Boot实战解决高并发数据入库之 Redis 缓存+MySQL 批量入库问题
Feb 12 Redis
分布式架构Redis中有哪些数据结构及底层实现原理
Mar 13 Redis
Redis如何使用乐观锁(CAS)保证数据一致性
Mar 25 Redis
Redis 哨兵机制及配置实现
Mar 25 Redis
Redis超详细讲解高可用主从复制基础与哨兵模式方案
Apr 07 Redis
Redis实现主从复制方式(Master&Slave)
Jun 21 Redis
Redis+AOP+自定义注解实现限流
Jun 28 Redis
详解Redis在SpringBoot工程中的综合应用
Oct 16 #Redis
Redis三种集群模式详解
浅谈Redis的keys命令到底有多慢
基于Redis结合SpringBoot的秒杀案例详解
Jedis操作Redis实现模拟验证码发送功能
Sep 25 #Redis
为什么RedisCluster设计成16384个槽
使用redis生成唯一编号及原理示例详解
Sep 15 #Redis
You might like
将数组写入txt文件 var_export
2009/04/21 PHP
php使用include 和require引入文件的区别
2017/02/16 PHP
JS 拼图游戏 面向对象,注释完整。
2009/06/18 Javascript
js中匿名函数的N种写法
2010/09/08 Javascript
Jquery图片延迟加载插件jquery.lazyload.js的使用方法
2014/05/21 Javascript
javascript 动态创建表格的2种方法总结
2015/03/04 Javascript
jquery实现简单手风琴菜单效果实例
2015/06/13 Javascript
浅谈JavaScript异常处理语句
2015/06/26 Javascript
基于HTML模板和JSON数据的JavaScript交互(移动端)
2016/04/06 Javascript
Bootstrap CSS组件之面包屑导航(breadcrumb)
2016/12/17 Javascript
JS简单实现获取元素的封装操作示例
2017/04/07 Javascript
yarn的使用与升级Node.js的方法详解
2017/06/04 Javascript
vue mixins组件复用的几种方式(小结)
2017/09/06 Javascript
详解Nodejs 通过 fs.createWriteStream 保存文件
2017/10/10 NodeJs
vue实现的上传图片到数据库并显示到页面功能示例
2018/03/17 Javascript
Vue中对拿到的数据进行A-Z排序的实例
2018/09/25 Javascript
Python 多线程抓取图片效率对比
2016/02/27 Python
python如何对实例属性进行类型检查
2018/03/20 Python
python 实现提取某个索引中某个时间段的数据方法
2019/02/01 Python
python实现Excel文件转换为TXT文件
2019/04/28 Python
django框架防止XSS注入的方法分析
2019/06/21 Python
Python猴子补丁知识点总结
2020/01/05 Python
selenium如何定位span元素的实现
2021/01/13 Python
CSS3中Animation动画属性用法详解
2016/07/04 HTML / CSS
舞会礼服和舞会鞋:PromGirl
2019/04/22 全球购物
司机的工作范围及职责
2013/11/13 职场文书
水污染治理专业毕业生推荐信
2013/11/14 职场文书
2014年学习雷锋活动总结
2014/03/01 职场文书
温馨提示标语
2014/06/26 职场文书
学校党的群众路线教育实践活动对照检查材料
2014/09/24 职场文书
乡领导班子四风问题对照检查材料
2014/09/25 职场文书
狮子林导游词
2015/02/03 职场文书
个人总结与自我评价
2015/02/14 职场文书
酒店人事主管岗位职责
2015/04/11 职场文书
考勤制度通知
2015/04/25 职场文书
2016教师年度考核评语大全
2015/12/01 职场文书