后端程序员常犯的错误-本地缓存相关bug和技术思考

news2024/9/9 7:29:00

1 springboot集成本地缓存基本常识：

SpringBoot集成本地缓存性能之王Caffeine示例详解
SpringBoot 缓存之 @Cacheable介绍

2 线上问题

2.1 发现过程

接口内的rpc调用报错，error级别的日志被监控平台报警。

2.2 故障排查

2.2.1 代码

@Cacheable(cacheManager = RedisKeyConstants.CACHE_MANAGER_LOCAL, value = RedisKeyConstants.Gpc.certificate.CACHE_NAME, key = RedisKeyConstants.Gpc.certificate.CACHE_KEY)
public User getData(Object obj) {
	User user = new User();
	try {
		Response<User> res = aliyunClient.doRpcCall(obj);
		if (!resp.getCode().equals("success!")) {
        	log.error("error happening, code:{}, msg:{}", resp.getCode(), resp.getMsg());
            return null;
		}
		if (res.getData() == null) {
        	log.error("error happening. rpc return a Null Object, code:{}, msg:{}", resp.getCode(), resp.getMsg());
			return null;
		}
	} catch (Exception e) {
        log.error("rpc调用异常", e);
        return user;
    }
    return user;
}

2.2.2 原因

（1）主要有两个，一个是当rpc调用异常的时候，会被try捕获并且直接return一个实例化的user对象，然后触发@Cacheable注解定义的本地缓存机制，导致异常调用的时候，对象也被缓存，随后直至本地缓存中该条目过期，后面的请求才会发起rpc请求更新缓存，所以对于rpc调用时获取的错误，应该不缓存。
（2）rpc调用成功但是返回了一个空对象，这个时候我直接返回的是null值，导致本地缓存没有存储这个空值，随后当流量走getData这个方法时，因为没有查到缓存，就会一直走rpc调用，造成cpu时间浪费，同时会延长响应时间，如果某一波大流量打进来，rpc服务甚至会挂掉，这个时候会发生缓存击穿。

3 解决

3.1 代码

@Cacheable(cacheManager = RedisKeyConstants.CACHE_MANAGER_LOCAL, value = RedisKeyConstants.Gpc.certificate.CACHE_NAME, key = RedisKeyConstants.Gpc.certificate.CACHE_KEY，unless = "#result==null")
public User getData(Object obj) {
	User user = new User();
	try {
		Response<User> res = aliyunClient.doRpcCall(obj);
		if (!resp.getCode().equals("success!")) {
        	log.error("error happening, code:{}, msg:{}", resp.getCode(), resp.getMsg());
            return user;
		}
		if (res.getData() == null) {
        	log.error("error happening. rpc return a Null Object, code:{}, msg:{}", resp.getCode(), resp.getMsg());
			return user;
		}
	} catch (Exception e) {
        log.error("rpc调用异常", e);
        return null;
    }
    user.setXXXX(res.getData().getXXXX());
    ....
    return user;
}