java灰度现网缓存兼容性问题 ,java缓存一致性问题及解决方案:使用缓存,肯定会存在一致性问题;
读取缓存步骤一般没有什么问题,但是一旦涉及到数据更新:数据库和缓存更新,就容 易出现缓存(Redis)和数据库(MySQL)间的数据一致性问题。
一、讨论一致性问题之前,先来看一个更新的 *** 作顺序问题:
先删除缓存,再更新数据库
问题:同时有一个请求 A 进行更新 *** 作,一个请求 B 进行查询 *** 作。可能出现:
(1)请求 A 进行写 *** 作(key = 1 value = 2),先删除缓存 key = 1 value = 1
(2)请求 B 查询发现缓存不存在
(3)请求 B 去数据库查询得到旧值 key = 1 value = 1
(4)请求 B 将旧值写入缓存 key = 1 value = 1
(5)请求 A 将新值写入数据库 key = 1 value = 2
缓存中数据永远都是脏数据
我们比较推荐 *** 作顺序:
先删除缓存,再更新数据库,再删缓存(双删,第二次删可异步延时)
public void write(String key,Object data){
redisdelKey(key);
dbupdateData(data);
Threadsleep(500);
redisdelKey(key);
}
接下来,看一看缓存同步的一些方案,见下图:
1、 数据实时同步更新
更新数据库同时更新缓存,使用缓存工具类和或编码实现。
优点:数据实时同步更新,保持强一致性
缺点:代码耦合,对业务代码有侵入性
2、 数据准实时更新
准一致性,更新数据库后,异步更新缓存,使用观察者模式/发布订阅/MQ 实现;
优点:数据同步有较短延迟 ,与业务解耦
缺点:实现复杂,架构较重
3 、缓存失效机制
弱一致性,基于缓存本身的失效机制
优点:实现简单,无须引入额外逻辑
缺点:有一定延迟,存在缓存击穿/雪崩问题
4、 定时任务更新
最终一致性,采用任务调度框架,按照一定频率更新
优点:不影响正常业务
优点:不保证一致性,依赖定时任务
二、 缓存击穿、缓存雪崩及解决方案
1 、缓存击穿
缓存击穿是指缓存中没有但数据库中有的数据(一般是缓存时间到期),这时由于 并发用户特别多,同时读缓存没读到数据,又同时去数据库去取数据,引起数据库压力
瞬间增大,造成过大压力
2 、缓存雪崩
缓存雪崩是指缓存中数据大批量到过期时间,而查询数据量巨大,引起数据库压 力过大甚至 down 机。和缓存击穿不同的是,缓存击穿指并发查同一条数据,缓存雪崩
是不同数据都过期了,很多数据都查不到从而查数据库。
解决方案:
1)单体服务:此时需要对数据库的查询 *** 作,加锁 ---- lock (因考虑到是对同一个参数数值上 一把锁,此处 synchronized 机制无法使用) 加锁的标准流程代码如下:
/
解决缓存雪崩和击穿方案
/
@Service("provincesService")
public class ProvincesServiceImpl3 extends ProvincesServiceImpl implements ProvincesService{
private static final Logger logger = LoggerFactorygetLogger(ProvincesServiceImpl3class);
@Resource
private CacheManager cm;//使用注解缓存
private ConcurrentHashMap<String, Lock> locks = new ConcurrentHashMap<>();//线程安全的
private static final String CACHE_NAME = "province";
public Provinces detail(String provinceid) {
// 1从缓存中取数据
CacheValueWrapper valueWrapper = cmgetCache(CACHE_NAME)get(provinceid);
if (valueWrapper != null) {
loggerinfo("缓存中得到数据");
return (Provinces) (valueWrapperget());
}
//2加锁排队,阻塞式锁---100个线程走到这里---同一个sql的取同一把锁
doLock(provinceid);//32个省,最多只有32把锁,1000个线程
try{//第二个线程进来了
// 一次只有一个线程
//双重校验,不加也没关系,无非是多刷几次库
valueWrapper = cmgetCache(CACHE_NAME)get(provinceid);//第二个线程,能从缓存里拿到值?
if (valueWrapper != null) {
loggerinfo("缓存中得到数据");
return (Provinces) (valueWrapperget());//第二个线程,这里返回
}
Provinces provinces = superdetail(provinceid);
// 3从数据库查询的结果不为空,则把数据放入缓存中,方便下次查询
if (null != provinces){
cmgetCache(CACHE_NAME)put(provinceid, provinces);
}
return provinces;
}catch(Exception e){
return null;
}finally{
//4解锁
releaseLock(provinceid);
}
}
private void releaseLock(String userCode) {
ReentrantLock oldLock = (ReentrantLock) locksget(userCode);
//查询锁是否存在和查询当前线程是否保持此锁
if(oldLock !=null && oldLockisHeldByCurrentThread()){
oldLockunlock();
}
}
private void doLock(String lockcode) {//给一个搜索条件,对应一个锁
//provinceid有不同的值,参数多样化
//provinceid相同的,加一个锁,---- 不是同一个key,不能用同一个锁
ReentrantLock newLock = new ReentrantLock();//创建一个锁
Lock oldLock = locksputIfAbsent(lockcode, newLock);//若已存在,则newLock直接丢弃
if(oldLock == null){
newLocklock();//首次加锁,成功取锁,执行
}else{
oldLocklock();//阻塞式等待取锁
}
}
}
2} 集群或微服务场景下:
此场景下的锁换成分布式锁(redis或zk等);同时设置多次取锁功能;
/
解决缓存雪崩和击穿方案
/
@Service("provincesService")
public class ProvincesServiceImpl5 extends ProvincesServiceImpl implements ProvincesService{
private static final Logger logger = LoggerFactorygetLogger(ProvincesServiceImpl3class);
@Resource
private CacheManager cm;//使用注解缓存
@Autowired
private RedisTemplate<String, Object> redisTemplate;
private ConcurrentHashMap<String, Lock> locks = new ConcurrentHashMap<>();//线程安全的
private static final String CACHE_NAME = "province";
public Provinces detail(String provinceid) throws Exception{
// 1从缓存中取数据
CacheValueWrapper valueWrapper = cmgetCache(CACHE_NAME)get(provinceid);
if (valueWrapper != null) {
loggerinfo("缓存中得到数据");
return (Provinces) (valueWrapperget());
}
//2加锁排队,阻塞式锁---100个线程走到这里---同一个sql的取同一把锁
//32个省,最多只有32把锁,1000个线程
boolean flag=false;
flag = RedisUtilsetNX(provinceid, 3000);
//如果首次没有取到锁,可以取10次
if(!flag){
for(int i=0;i<10;i++){
Threadsleep(200);
flag = RedisUtilsetNX(provinceid, 3000);//分布式锁
if(flag){
break;
}
}
}
//如果首次没有取到锁,一直取直到取到为止
/ if(!flag){
for (;;){
Threadsleep(200);
flag = RedisUtilsetNX(provinceid, 3000);//分布式锁
if(flag){
break;
}
}
}/
try{//第二个线程进来了
// 一次只有一个线程
//双重校验,不加也没关系,无非是多刷几次库
valueWrapper = cmgetCache(CACHE_NAME)get(provinceid);//第二个线程,能从缓存里拿到值?
if (valueWrapper != null) {
loggerinfo("缓存中得到数据");
return (Provinces) (valueWrapperget());//第二个线程,这里返回
}
Provinces provinces = superdetail(provinceid);
// 3从数据库查询的结果不为空,则把数据放入缓存中,方便下次查询
if (null != provinces){
cmgetCache(CACHE_NAME)put(provinceid, provinces);
}
return provinces;
}catch(Exception e){
return null;
}finally{
//4解锁
RedisUtilreleaseLock(provinceid);
}
}
}
这里加分布式锁解决缓存一致性问题,也解决缓存击穿的问题;分布式锁参考:分布式锁使用及原理。
今天缓存一致性问题到此结束,下篇我们使用布隆过滤器解决缓存穿透问题,敬请期待。
public class Ctianchong extends tool {
@Override
/
实现图像填充功能,从to中鼠标对应的一个位置将周围填充为颜色c
参数e表示鼠标事件,to表示对象,c表示颜色对象
/
public void mousepress(MouseEvent e, BufferedImage to,Color c) {
// TODO Auto-generated method stub
int[] dx={0,1,0,-1}; //水平偏移
int[] dy={1,0,-1,0}; //竖直偏移
int lim_x=togetWidth(),lim_y=togetHeight(); //获得的宽度和高度。
LinkedList<node> q=new LinkedList<node>(); //节点类型为node的链表
node a=new node(); //node应该有一个参数x表示水平坐标,y表示竖直坐标
node b;
ax=egetX();
ay=egetY(); //获得鼠标的水平与竖直坐标
int initrgb=togetRGB(ax, ay); //initrgb表示图像在水平坐标为x,竖直坐标为y处的灰度值。
int drawrgb=cgetRGB(); //颜色c对应的RGB值
if(initrgb==drawrgb) return; //如果此处颜色一致,直接返回
tosetRGB(ax, ay, drawrgb); //直接填充颜色
qaddLast(a); //将a加入到链表q中去
while(!qisEmpty()) //链表是否为空
{
a=qpollFirst(); //d出链表首位的node
for(int i=0;i<4;i++) //表示填充坐标(x,y)上、下、左、右的颜色,填充时对应的偏移量分别为dx[i],dy[i]
{
b=new node();
bx=ax+dx[i];
by=ay+dy[i];
if(bx<0 || by<0 || bx>=lim_x || by>=lim_y) continue;
if(togetRGB(bx, by)!=initrgb) continue;
tosetRGB(bx, by, drawrgb);
qaddLast(b); //将b加入链表中,
}
}
}
以上就是关于java灰度现网缓存兼容性问题全部的内容,包括:java灰度现网缓存兼容性问题、请java高手注释一下这段程序、等相关内容解答,如果想了解更多相关内容,可以关注我们,你们的支持是我们更新的动力!
欢迎分享,转载请注明来源:内存溢出
评论列表(0条)