记一次redis并发处理问题

douzifly 发布于2019-07-24 16:33 / 2607人阅读

摘要：记一次并发处理问题一场景分析所在的公司是物联网公司，涉及到向设备发送指令，现在的问题是在和天猫语音对接的一个产品线上出现了一个启用组合指令模式，例如一个情景模式，开卧室灯开走廊灯开客厅灯上面的三个灯对于我们的产品来说就是一个开关面板，面板上

记一次redis并发处理问题 一、场景分析

所在的公司是物联网公司，涉及到向设备发送指令，现在的问题是在和天猫语音对接的一个产品线上出现了一个bug

启用组合指令模式，例如一个情景模式，1、开卧室灯、2开走廊灯、3开客厅灯

上面的三个灯对于我们的产品来说就是一个开关面板，面板上面是一个三路开关,也就是每一个灯对应一个开关，如下图:

当天猫精灵一条控制指令发送过来，我在将指令发送给设备，流程图如下

二、流程分析

上面可以看到整个流程，包括天猫语音触发应用云到下发控制指令的过程，
那几乎可以把重点锁定在下发参数上面

1.下发二进制指令

现在有三路面板对应的是 1 1 1 二进制位，公司最多是8路开关

则如上面的流程所示，当控制客厅的时候下发参数 0 0 0 0 0 1 0 0

2.缓存机制

上面也看到了，在下发控制指令的时候会将其他开关位的状态也带上。

那么实际在控制的时候，会去查下其他开关位的状态

那么这个缓存状态是由设备来更新的

到这里来看，几乎也不会出现啥问题，接下来我们就要直面真正遇到的问题

三、并发问题分析

上面的例子都是单次请求，因为同一个面板的不同开关位虽然会依赖设备更新缓存，但是单次控制占时还是没有问题的，也就是用户触发天猫控制灯的时候都是一个一个控制的

但是现在引入了场景，也就是天猫精灵上面有场景模式，例如设置场景回家了，那么就是三路开关上所有的灯都要打开所有的灯,！而且天猫精灵是并发处理的，也就是会把三个请求同时发送到应用云上，然后应用云在下发控制指令。

问题分析

那么问题来了，三次请求之间都是有依赖关系的

列如开客厅灯会查询走廊灯的状态，还有卧室灯的状态，都会去查询缓存，而三条控制指令都是同时到达，那么设备还没有更新缓存

比如卧室灯(00000100) 走廊灯(00000101)已经开了，但是客厅灯最后进来，发现其他灯的缓存都是关的，那么会将0带下去((00000010))，然后导致前两次的灯开了又关。

四、优化处理方案 1.不依赖设备更新缓存，采用临时缓存

也就是不用去查询设备的缓存，直接采用临时缓存 ，时间1-2s，当并发的三个请求同时到来时，直接存储一个临时值，告诉其他请求针对要控制的面板有其他开关在控制

服务端采用的sowole进程模型
//采用hash结构，每一个案件对应一个key值,
//每一个按键的请求到来时更新hashkey时间为1s
$redis->hset("concurrent_control_hash_off".$devSn,$keynum,1);
$redis->expire("concurrent_control_hash_off".$devSn,1);
//直接从临时缓存里获取，如果没有在去设备缓存里获取
$res = $redis->hGetAll("concurrent_control_hash_off".$devSn);

上诉的方法的方法在高并发下还是有问题！

2.保证单次请求的redis操作原子性

也就是当并发请求的时候每条redis指令没有顺序

$redis->multi();
$redis->hset("concurrent_control_hash_on".$devSn,$keynum,1);
$redis->expire("concurrent_control_hash_on".$devSn,1);
$redis->hGetAll("concurrent_control_hash_on".$devSn);
$res = $redis->exec();
$concurrentArr = $res[2];

@multi()

@exec()

保持原子操作，效果到现在为止要好了些

总结

即使上面根据流程做了多次修改，已经对接流程的修改，总之没有绝对的情况，都需要进行优化，并发测试

云内存存储UMem Redis java处理并发问题记一次在阿里云搭建服务器记一次阿里云服务器集体中毒 redis并发

文章版权归作者所有，未经允许请勿转载,若此文章存在违规行为，您可以联系管理员删除。

转载请注明本文地址：https://www.ucloud.cn/yun/37258.html

记一次PHP并发性能调优实战 -- 性能提升104%

摘要：这是多处理器系统中，调度器用来分散任务到不同的机制，通常也被称为处理器间中断，。文章编写计划待完成: 详细介绍用到的各个工具作者: 万千钧(祝星) 适合阅读人群文中的调优思路无论是php, java, 还是其他任何语言都是用. 如果你有php使用经验, 那肯定就更好了业务背景框架及相应环境 laravel5.7, mysql5.7, redis5, nginx1.15 cento...

番茄西红柿 2019-05-23 16:07 评论0 收藏0
记一次PHP并发性能调优实战 -- 性能提升104%

摘要：这是多处理器系统中，调度器用来分散任务到不同的机制，通常也被称为处理器间中断，。文章编写计划待完成: 详细介绍用到的各个工具作者: 万千钧(祝星) 适合阅读人群文中的调优思路无论是php, java, 还是其他任何语言都是用. 如果你有php使用经验, 那肯定就更好了业务背景框架及相应环境 laravel5.7, mysql5.7, redis5, nginx1.15 cento...

xeblog 2019-05-23 14:34 评论0 收藏0
记一次Node项目的优化

摘要：相关环境由于是一个几年前的项目，所以使用的是这样的。一些小提示本次优化笔记，并不会有什么文件的展示。将异步改为了串行，丧失了作为异步事件流的优势。这两天针对一个Node项目进行了一波代码层面的优化，从响应时间上看，是一次很显著的提升。一个纯粹给客户端提供接口的服务，没有涉及到页面渲染相关。背景首先这个项目是一个几年前的项目了，期间一直在新增需求，导致代码逻辑变得也比较复杂，接...

dreamans 2019-08-26 12:02 评论0 收藏0
记一次小程序之旅

摘要：用户绑定的逻辑主要复杂在既需要考虑微信本身的接口在不同情况下提供的数据不同，另外一方面就是考虑本身用户模块的业务逻辑问题。针对每一节课以及每一节系列课程生成小程序太阳码主要涉及到几个细节问题。感觉已经好久没写程序了，最近这段时间，一方面是学习了python，然后折腾了scrapy框架，用python写了下守护进程程序监听任务以及用redis做队列任务通信，并开进程来处理爬虫任务。以上...

不知名网友 2019-07-01 10:31 评论0 收藏0
记一次解决线上 Redis 集群单节点 CPU 偏高问题

摘要：问题线上已经运行很久的一个阿里云节点集群版经常会报偏高，经确认后发现只有节点偏高，且是其他节点的倍以上，即大部分节点的占用率在到，大约是，问题节点的占用率超过，是。问题线上已经运行很久的一个 Redis （阿里云64节点集群版）经常会报 CPU 偏高，经确认后发现只有 13 节点 CPU 偏高，且是其他节点的 3 倍以上，即大部分节点的 CPU 占用率在 20% 到 30%，QPS...

meislzhua 2019-07-24 16:36 评论0 收藏0