Redis内存管理——针对实习面试

news/2024/12/29 5:41:29/

目录

  • Redis内存管理
    • Redis的内存淘汰机制有哪些?
    • 说说过期的数据的删除策略?
    • Redis是如何判断数据是否过期的?
    • Redis如何处理大Key问题?

Redis内存管理

在这里插入图片描述

Redis的内存淘汰机制有哪些?

Redis的内存淘汰机制主要包括以下几种策略:

  1. noeviction:这是默认策略,当内存使用达到限制时,Redis会拒绝新的写入操作,并返回错误,但不会淘汰任何数据。

  2. allkeys-lru:在所有键中,基于最近最少使用(LRU)算法淘汰数据。Redis会维护一个近似的LRU列表,并不保证完全精确,但是对大多数使用场景来说是足够的。

  3. allkeys-lfu:在所有键中,基于最少频率使用(LFU)算法淘汰数据。LFU算法会跟踪每个键的访问频率,并淘汰访问频率最低的键。

  4. volatile-lru:仅在设置了过期时间的键中,基于LRU算法淘汰数据。

  5. volatile-lfu:仅在设置了过期时间的键中,基于LFU算法淘汰数据。

  6. volatile-random:在设置了过期时间的键随机选择淘汰。

  7. allkeys-random:在所有键中随机选择淘汰。

  8. volatile-ttl:在设置了过期时间的键中,淘汰那些TTL(Time To Live)值最小的键,也就是即将过期的键。

说说过期的数据的删除策略?

Redis处理过期数据的删除策略主要包括两种:惰性删除(Lazy Expiration)和定期删除(Active Expiration)。

  1. 惰性删除(Lazy Expiration)

    • 这种方式是在客户端尝试访问一个键时,Redis会检查该键是否已经过期。如果键已过期,Redis会立即删除该键并返回空值。这种方式确保了过期键不会返回给客户端,但并不保证立即从内存中删除。
  2. 定期删除(Active Expiration)

    • Redis还会使用定期删除来清除过期键。定期删除是通过每秒执行一定数量的随机键的过期检查和删除操作来实现的。Redis会在后台线程中执行这些操作,以确保过期键从内存中被及时清除。
    • Redis默认每秒进行10次过期扫描,每次从过期字典中随机选出20个key,删除这20个key中已经过期的key。如果过期的key的比例超过1/4,那就重复步骤(1)。这种定期的清理操作确保了即便某些Key长时间未被访问,也能在一定时间内被删除,防止内存过度占用。

这两种策略的结合使用,使得Redis能够在合理使用CPU时间和避免内存浪费之间取得平衡
惰性删除确保了过期键不会被访问而定期删除则确保了过期键能够及时从内存中清除
通过合理配置这两种策略,Redis能够有效地管理内存中的过期数据。

Redis是如何判断数据是否过期的?

Redis判断数据是否过期的主要机制是基于一个称为“过期字典”的数据结构。以下是具体的判断流程:

  1. 过期字典(expires dict):每当一个key被设置了一个过期时间,Redis就会将该key及其过期时间存储在一个专门的字典结构中,这个字典被称为过期字典。过期字典的键是指向数据库中的某个key对象的指针,而值是一个长整型整数,保存了该key的过期时间,这个时间是一个以毫秒为单位的UNIX时间戳。

  2. 查询时检查:当客户端尝试访问或修改一个key时,Redis会首先检查该key是否存在于过期字典中。如果存在,Redis会获取该key的过期时间,并与当前系统时间进行比较

  3. 过期时间对比:如果key的过期时间大于当前系统时间,那么Redis认为该key尚未过期,可以正常访问或修改。如果key的过期时间小于或等于当前系统时间,Redis则认为该key已经过期,需要进行删除处理

  4. 惰性删除与定期删除:Redis采用了惰性删除定期删除两种策略来处理过期的key。惰性删除是指在访问key时才检查是否过期,而定期删除则是Redis定期检查并删除过期的key

通过这种机制,Redis能够有效地管理带有过期时间的key,确保过期的数据不会被访问,并在适当的时候释放内存空间。

Redis如何处理大Key问题?

Redis处理大Key问题可以采取以下几种策略:

  1. 拆分大Key将一个大Key拆分成多个小Key,减少单个操作对性能的影响。例如,可以将一个大的列表拆分为多个小列表,或者将一个大的哈希表拆分为多个小哈希表。

  2. 使用Hash结构:对于具有多个属性的对象,使用Redis的Hash类型存储,将大Key拆分成多个Field(字段),有效减少内存使用并提高性能。

  3. 数据压缩对要存储的数据进行压缩,压缩之后再进行存储,以减少大Key的内存占用。

  4. 选择合适的数据结构根据数据的特性选择合适的Redis数据结构,比如一些用String存储的场景,可以考虑使用Hash、Set等结构进行优化。

  5. 限制大Key的大小:在应用层面,可以限制存储到Redis中的Key的最大大小,例如,在写入数据之前检查数据的大小,并进行必要的切分。

  6. 使用Redis集群:采用Redis集群方式进行部署,然后将大Key散落到不同的服务器上面,加快响应速度。

  7. 定期监控和清理:定期监控Redis实例中的大Key,并根据需要进行清理。可以使用定期的自动化脚本检查和处理大Key,以确保Redis实例的稳定性。

  8. 异步删除:使用Redis 4.0+版本的UNLINK命令异步删除大Key,减少对Redis性能的影响。

  9. 数据分页:对大集合进行分页读取,避免一次性加载大量数据。

  10. 监控和预警:通过监控工具及时发现大Key问题,并设置预警机制。

  11. 数据过期:对于大key中不经常使用的数据,可以利用Redis的过期特性,设置合理的过期时间,使其自动删除,从而降低内存占用。

  12. 数据压缩:对于大key中的数据,可以考虑使用压缩算法进行压缩存储,以减少其占用的内存空间。

这些策略可以帮助优化Redis中的大Key问题,提高Redis的性能和稳定性。


http://www.ppmy.cn/news/1545059.html

相关文章

【LeetCode热题100】哈希表

这篇博客记录了几道哈希表相关的题目&#xff0c;包括两数之和、判定是否互为字符串重排、存在重复元素II、字母异位词分组。 //解法1 class Solution { public:vector<int> twoSum(vector<int>& nums, int target) {vector<int> ret;for(int i 1 ; i &…

理解 WordPress | 第一篇:与内容管理系统的关系

初步了解 WordPress 在互联网世界里&#xff0c;WordPress 是一个家喻户晓的名字。它是一个开源的内容管理系统&#xff08;Content Management System&#xff0c;简称 CMS&#xff09;&#xff0c;帮助用户轻松创建和管理网站。WordPress 诞生于 2003 年&#xff0c;最初是一…

C02S11-Linux系统的安全与控制

一、Linux系统启动过程 1. 开机自检 计算机加电后&#xff0c;BIOS会检查计算机的硬件状态&#xff0c;包括CPU、内存、硬盘等&#xff0c;确保所有的硬件可以正常工作。 2. MBR引导或GPT引导 开机自检完成后&#xff0c;BIOS会根据设置的启动顺序来查找启动设备&#xff0…

模块化开发 webpack

模块化开发 & webpack 1、模块化开发 & webpack1.1 webpack 执行过程1.1.1 初始化1.1.2 编译1.1.3 输出 2.1 webpack 基础配置2.1.1 Entry2.1.1.1 context2.1.1.2 Entry类型 2.1.2 output2.1.2.1 filename2.1.2.2 publicPath2.1.2.3 path2.1.2.4 libraryTarget 和 libr…

Pytorch学习--神经网络--现有网络模型的使用及修改

一、VGG16 weights (Optional[VGG16_Weights]): 这个参数是可选的&#xff0c;指的是预训练的权重。用户可以选择使用不同的预训练权重&#xff0c;具体可参见 VGG16_Weights 的详细说明。默认情况下&#xff0c;如果不提供此参数&#xff0c;模型将不会使用任何预训练权重。 p…

Java学习路线:Maven(二)scope、optional和exclusions

目录 scope optional exclusions 我们知道&#xff0c;一般来说一个依赖由三个基本的属性作为定位坐标&#xff0c;即groupId、artifactId和version 除了这三个基本属性以外&#xff0c;依赖还可以添加其他的属性&#xff0c;例如scope、optional和exclusions等 这篇文章将…

轻量级Nacos来了!占用资源极低,性能炸裂!

Nacos作为一款非常流行的微服务注册中心&#xff0c;我们在构建微服务项目时往往会使用到它。最近发现一款轻量级的Nacos项目r-nacos&#xff0c;占用内存极低&#xff0c;性能也很强大&#xff0c;分享给大家。本文就以我的mall-swarm微服务电商实战项目为例&#xff0c;来聊聊…

Docker篇(registry私服)

目录 一、私有仓库搭建与配置 1. 拉取私有仓库镜像&#xff08;此步省略&#xff09; 2. 启动私有仓库容器 3. 打开浏览器访问 4. 修改daemon.json 5. 重启docker 服务 二、镜像上传至私有仓库 1. 标记此镜像为私有仓库的镜像 2. 再次启动私服容器 3. 上传标记的镜像 …