查看原文
其他

缓存核心知识小抄,面试必备,赶紧收藏!

程序猿DD 2021-11-13

缓存是为了减少数据库和服务器压力而产生的,在应用层编程时需主要考虑以下几种情况:

  • 客户端缓存
  • 服务端缓存
  • 网络缓存(CDN缓存)

客户端缓存负责减轻服务端的存储和频繁的数据请求等压力。

例如,在QQ初始阶段,只有“会员”才可以把QQ表情存储在“云端”之上,因为腾讯内部并没有庞大的存储系统存储大量的QQ表情。

虽然现在腾讯已经取消了只有“会员”才可以存储QQ表情的限制,但是大部分QQ表情仍然默认存储在本地客户端。

客户端缓存大致可分为以下几种:

  • 客户端本地文件缓存,包括图片、.txt文件、.doc文件等。
  • 客户端本地HTTP、cookie等浏览器缓存。
  • 客户端注册表。
  • 客户端微型数据库(SQLite)。
  • 客户端本地计算机内存。

服务端缓存主要是为了减少数据库压力和外部服务接口的压力,这也是实际编程中最常用的手段。

除减少数据库的压力外,缓存返回数据的响应速度比数据库要快。另外,尽可能不调用外部接口,因为外部接口无论WebSocket、WebService,还是HTTP,其响应速度都是不可控的。如果外部接口响应时间过长,也会影响自身性能。

服务端缓存大致分为以下几种:

  • 容器缓存,如Tomcat、Nginx、JBoss、Servlet等。
  • 中间件缓存,如MongoDB、Elasticsearch、Redis、RocketMQ、Kafka、ZooKeeper等。
  • JDK缓存,如磁盘缓存、堆内缓存、堆外缓存等。
  • 页面静态化缓存,如FreeMaker、Thymeleaf等。
  • 文件管理,如FastDFS等。

01 缓存的命中率

缓存的命中率指的是“缓存查询的次数”与“总查询次数”的比值。

在多级缓存下,可以调研每一级缓存的命中率,以便调整代码。若某缓存命中率过低,则很可能是缓存穿透问题。

02 缓存回收方式

  • 基于时间:当某缓存超过生存时间时,则进行缓存回收。或者当某缓存最后被访问后超过某时间仍然没有被访问,则进行缓存回收。

  • 基于空间:当缓存超过某大小时,则进行缓存回收。

  • 基于容量:当缓存超过某存储条数时,则进行缓存回收。

  • 基于引用:软引用和弱引用缓存会在JVM堆内存不足时进行缓存回收。

03 缓存回收策略

  • 先进先出(First In First Out,FIFO):一种简单的淘汰策略,缓存对象以队列的形式存在,如果空间不足,就释放队列头部的(先缓存)对象,一般用链表实现。
  • 最近最久未使用(Least Recently Used,LRU):是根据访问的时间先后进行淘汰的,如果空间不足,就释放最久没有被访问的对象(上次访问时间最早的对象)。
  • 最近最少使用(Least Frequently Used,LFU):根据最近访问的频率进行淘汰,如果空间不足,就释放最近访问频率最低的对象。

04 缓存的设计模式

(1)Cache Aside模式: 首先读取缓存中的数据,若缓存没有命中,则读取DB。当DB需要更新时,直接删掉缓存中的数据。由于实现简单,因此是最常用的一种设计模式,适用于读操作多的情况。

(2)Read/Write through模式: 在读取时先到缓存中查询数据是否存在。如果存在,则直接返回。如果不存在,则由缓存组件负责从数据库中同步加载数据,此数据永不过期。在写入时,先查询要写入的数据在缓存中是否存在。如果存在。则更新缓存中的数据,并且由缓存组件把数据同步更新到数据库中。Read/Write through模式初步屏蔽了底层数据库操作,但是当把数据从缓存组件写入DB时,有可能出现异常无法正确写入的情况。因而需要谨慎记录时间戳,以便跟踪维护处理数据。该方案适合对持久性要求较低的业务场景。

(3)Write Behind Caching(Write Back)模式: Write Behind Caching模式属于Read/Write through模式的进阶版,完全不考虑DB,增删改查全部通过缓存进行处理。如果读取不到数据,则直接认为该数据不存在,服务器会定期把缓存中的数据存储到DB中。一般高并发应用程序最常用的是Write Behind Caching设计模式,它是性能最好的设计模式,但是实现较为复杂,一旦服务器宕机则有可能导致大量数据丢失。

05 缓存测试应涵盖的内容

(1) 当前程序是否有可能出现缓存穿透、缓存击穿、缓存雪崩等常见问题。

(2) 缓存是否设置了最大位数及时间等功能,是否会出现内存溢出的现象。

(3) 缓存能够节省各数据源多少比重的读取,例如进程内缓存节省了多少读取Redis的比重,Redis缓存节省了多少读取磁盘缓存的比重,磁盘缓存节省了多少读取MySQL的比重。

(4) App在无网或弱网环境下,是否可以正常打开及使用。例如网易云音乐在没有网络的情况下可以听一些本地缓存的歌曲。

(5) App在弱网转正常网络之后,缓存是否能被正常覆盖。

(6) 各级缓存与数据库是否能够保持数据一致性,是否包含脏读、不可重复读等相关问题。

(7) 缓存是否能够被手动删除或刷新,若遇到紧急状况是否能够进行可逆性操作。

(8) 缓存的回收策略、回收方式等内容是否正常生效。

本书摘自《高性能Java架构:核心原理与案例实战》 一书,欢迎阅读此书了解更多高性能Java架构的内容。

高性能Java架构:核心原理与案例实战

张方兴 著

本书是按照程序设计与架构的顺序编写的,共13章。

第1章介绍学习高性能Java应了解的核心知识,为前置内容。

第2章和第3章讲解在编写代码之前,如何高效地为MySQL填充亿级数据,并对MySQL进行基准测试,以便在之后编程时有所比较。

第4章讲解在编写代码的过程中如何优化代码,使代码更高效。

第5章和第6章讲解在写好代码之后如何测试并优化场景响应速度。

第7章和第8章讲解在程序上线执行一段时间之后如何对MySQL进行主从复制、分库分表。

第9章讲解如何通过Prometheus和Grafana监控MySQL节点。

第10章和第11章讲解如何通过堆内缓存、堆外缓存(MapDB)和磁盘缓存解决MySQL数据库性能不佳的问题。

第12章讲解如何使用分布式锁Redisson解决实际应用中常见的数据一致性问题。

第13章简要介绍Java中的常见架构与工具。

本书不仅适合Java初学者、刚入行的编程人员,也适合对高性能、高并发感兴趣的程序员。


抽奖赠书


截止时间:2021年9月20日 17:00

如何抽奖:点击下方卡片,关注并回复关键词 :20210916


下次你更希望我们送哪本书呢?

留言告诉我们!

: . Video Mini Program Like ,轻点两下取消赞 Wow ,轻点两下取消在看

您可能也对以下帖子感兴趣

文章有问题?点此查看未经处理的缓存