发表于: 2018-01-30 19:54:11
1 701
今天完成的事:
1、模拟缓存穿透
访问次数被10整除的时候不适用缓存,从数据库中获取数据,方法如下
public static int i =0;
public List<Head> getAll() {
i++;
System.out.println("第"+i+"次");
boolean b = i%10!=0;
List<Head> head;
if (redisUtil.get("head") != null&&b) {
head = (List<Head>) redisUtil.get("head");
logger.info("从redis里面取head");
return head;
} else {
head = dao.getAllHead();
redisUtil.set("head", head);
logger.info("从数据库里取head并存进缓存");
return head;
}
}
控制台结果显示
jmeter结果
没有模拟数据穿透
关于缓存的几个概念,目前仅仅是了解一下
缓存穿透
缓存穿透是指查询一个一定不存在的数据,由于缓存是不命中时被动写的,并且出于容错考虑,如果从存储层查不到数据则不写入缓存,这将导致这个不存在的数据每次请求都要到存储层去查询,失去了缓存的意义。在流量大时,可能DB就挂掉了,要是有人利用不存在的key频繁攻击我们的应用,这就是漏洞。
解决方案
有很多种方法可以有效地解决缓存穿透问题,最常见的则是采用布隆过滤器,将所有可能存在的数据哈希到一个足够大的bitmap中,一个一定不存在的数据会被 这个bitmap拦截掉,从而避免了对底层存储系统的查询压力。另外也有一个更为简单粗暴的方法(我们采用的就是这种),如果一个查询返回的数据为空(不管是数 据不存在,还是系统故障),我们仍然把这个空结果进行缓存,但它的过期时间会很短,最长不超过五分钟。
缓存雪崩
缓存雪崩是指在我们设置缓存时采用了相同的过期时间,导致缓存在某一时刻同时失效,请求全部转发到DB,DB瞬时压力过重雪崩。
解决方案
缓存失效时的雪崩效应对底层系统的冲击非常可怕。大多数系统设计者考虑用加锁或者队列的方式保证缓存的单线 程(进程)写,从而避免失效时大量的并发请求落到底层存储系统上。这里分享一个简单方案就时讲缓存失效时间分散开,比如我们可以在原有的失效时间基础上增加一个随机值,比如1-5分钟随机,这样每一个缓存的过期时间的重复率就会降低,就很难引发集体失效的事件。
缓存击穿
对于一些设置了过期时间的key,如果这些key可能会在某些时间点被超高并发地访问,是一种非常“热点”的数据。这个时候,需要考虑一个问题:缓存被“击穿”的问题,这个和缓存雪崩的区别在于这里针对某一key缓存,前者则是很多key。
缓存在某个时间点过期的时候,恰好在这个时间点对这个Key有大量的并发请求过来,这些请求发现缓存过期一般都会从后端DB加载数据并回设到缓存,这个时候大并发的请求可能会瞬间把后端DB压垮。
2、redis和memecache缓存测试效果(之前的日报)
http://www.jnshu.com/daily/48878?dailyType=others&total=68&page=4&uid=18143&sort=0&orderBy=3
3、500ms响应的tps
3、挂机,服务器20线程50循环
3、负载均衡
15线程50循环
只在一个服务器上结果
负载均衡后
当负载小的时候负载均衡后响应时间变长
加上负载均衡
一、学习ajax
1、什么是ajax?
AJAX=异步javascript和xml,
ajax是一种用于创建快速动态网页的技术,通过在后台与服务器进行少量的数据交换,ajax可以使网页实现异步更新,这意味着可以在不重载整个网页的情况下对网页局部进行更新。
传统网页如果需要更新内容,必须加载整个网页。
2、添加本地jar包到中央仓库
mvn install:install-file
其中4是jar包的路径
对应的pom文件
<dependency>
<groupId>com.ronglian</groupId>
<artifactId>sms</artifactId>
<version>1.1</version>
</dependency>
以下是任务总结:
任务六最主要的就是学习了缓存的知识,redis添加缓存,
1、redis是一个key-value存储系统。和Memcached类似,它支持存储的value类型相对更多,包括string(字符串)、list(链表)、set(集合)、zset(sorted set --有序集合)和hash(哈希类型)。
2、jmeter压测,badboy录制脚本。
遇到问题:
1、耗时最长的一个就是json接口,后台向前台传递json格式数据很容易实现,但是我一直在想如何实现官网首页,这个方向就跑偏了,解析json数据是前端的工作,我们只是负责将数据传个前端页面。
2、redis做缓存耗时很长,注解式坑太多,现在只能说可以用redis加缓存,这只是redis的冰山一角。
3、nginx负载均衡
nginx做负载均衡的时候也消耗资源,所以当负载比较小的时候负载均衡效果不增反降,负载超过一台服务器的极限时,负载均衡作用才会体现出来。
4、压测报告
这个目前不太确定,不知道压测标准是什么,之后请教师兄。
评论