Python functools 模块的 @lru_cache 装饰器介绍

news/2025/3/22 6:35:22/

functools.lru_cache 是 Python 标准库 functools 模块中的一个装饰器,用于实现简单的缓存机制。它通过缓存函数的返回值来提高函数的执行效率,特别是对于那些被多次调用且参数相同的函数。

LRU 缓存机制

  • LRU 代表 Least Recently Used,即最近最少使用。

  • LRU 缓存机制会保存最近使用的缓存项,并在缓存满时丢弃最久未使用的项。

lru_cache 装饰器的参数

  • maxsize:指定缓存中可以存储的最大键值对数量,类型:intNone

    • 如果 maxsize=None,则缓存大小无限制。

    • 如果指定了 maxsize,则缓存会限制为该大小。当缓存满时,最久未使用的缓存项会被丢弃(LRU 策略)。

  • 默认值 128 表示缓存可以存储最多 128 个键值对。

  • 每个键值对包括:

    • :函数的参数(包括位置参数和关键字参数)。

    • :函数的返回值。

  • typed:

    • 类型:bool

    • 默认值:False

    • 描述:如果设置为 True,则会区分不同类型的参数。例如,f(3)f(3.0) 会被视为不同的调用。

使用示例

示例 1:缓存斐波那契数列
import functools
import time@functools.lru_cache(maxsize=None)
def fibonacci(n):if n < 2:return nreturn fibonacci(n - 1) + fibonacci(n - 2)# 记录开始时间
start_time = time.time()print(fibonacci(30))  # 计算斐波那契数列的第 30 项# 记录结束时间
end_time = time.time()# 计算运行时间
run_time = end_time - start_time
print(f"加了@lru_cache 装饰器的fibonacci 运行时间: {run_time} 秒")def fibonacci(n):if n < 2:return nreturn fibonacci(n - 1) + fibonacci(n - 2)print(fibonacci(30))  # 计算斐波那契数列的第 30 项# 记录开始时间
start_time = time.time()print(fibonacci(30))  # 计算斐波那契数列的第 30 项# 记录结束时间
end_time = time.time()# 计算运行时间
run_time = end_time - start_time
print(f"没有 @lru_cache 装饰器的fibonacci 运行时间: {run_time} 秒")

解释

  • 没有缓存时,计算斐波那契数列的第 30 项会非常慢,因为有大量的重复计算。

  • 使用 lru_cache 后,函数的返回值被缓存,重复调用时直接从缓存中获取结果,大大提高了效率。

示例 2:缓存单位四元数

Python复制

import functools
import torch@functools.lru_cache(maxsize=None)
def identity_quats(batch_dims, dtype=None, device=None, requires_grad=True):quat = torch.zeros((*batch_dims, 4), dtype=dtype, device=device, requires_grad=requires_grad)with torch.no_grad():quat[..., 0] = 1return quat# 调用函数
quats = identity_quats((2, 3), dtype=torch.float32, device=torch.device('cpu'), requires_grad=True)
print(quats)

输出

plaintext复制

tensor([[[1., 0., 0., 0.],[1., 0., 0., 0.],[1., 0., 0., 0.]],[[1., 0., 0., 0.],[1., 0., 0., 0.],[1., 0., 0., 0.]]], grad_fn=<CopySlices>)

解释

  • 第一次调用 identity_quats 时,函数会计算并缓存结果。

  • 后续调用时,如果参数相同,直接从缓存中返回结果,避免重复计算。

缓存内容和生命周期

缓存的内容
  • 最终返回值lru_cache 只缓存函数的最终返回值。它不会保存函数执行过程中的中间状态或中间值。

  • 键值对:缓存是以键值对的形式存储的,其中键是函数的参数(包括位置参数和关键字参数),值是函数的返回值。

缓存的生命周期
  • 内存中保存:缓存的值会一直保留在内存中,直到程序退出,或者缓存被手动清除。

  • 手动清除缓存:可以使用 cache_clear 方法手动清除缓存。例如:

    fibonacci.cache_clear()

    这将清除 fibonacci 函数的所有缓存值。

总结

functools.lru_cache 是一个非常有用的装饰器,用于缓存函数的返回值,从而提高函数的执行效率。它特别适用于那些被多次调用且参数相同的函数。通过合理使用 lru_cache,可以显著提高程序的性能。


http://www.ppmy.cn/news/1581079.html

相关文章

分布式中间件:基于 Redis 实现分布式锁

分布式中间件&#xff1a;基于 Redis 实现分布式锁 一、背景引入 在当今的互联网应用中&#xff0c;分布式系统变得越来越常见。在分布式环境下&#xff0c;多个服务实例可能会同时对共享资源进行读写操作&#xff0c;这就很容易引发数据不一致等问题。比如电商系统中的库存扣…

分布式容器技术是什么

‌分布式容器技术‌是一种将应用程序和其依赖的所有组件打包成一个可移植的容器&#xff0c;以便在任何支持容器化的平台上运行的技术。容器技术提供了一种轻量级、可移植、可扩展的应用程序部署和运行方法&#xff0c;解决了传统部署方法中的一系列问题&#xff0c;使得软件开…

Rust 入门之闭包(Closures)

Rust 入门之闭包&#xff08;Closures&#xff09; 本文已同步本人博客网站 本文相关源码已上传Github 前言 先说概念 Rust 的 闭包&#xff08;closures&#xff09;是可以保存在变量中或作为参数传递给其他函数的匿名函数。你可以在一个地方创建闭包&#xff0c;然后在不…

Python 视频爬取教程

文章目录 前言基本原理环境准备Python安装选择Python开发环境安装必要库 示例 1&#xff1a;爬取简单直链视频示例 2&#xff1a;爬取基于 HTML5 的视频&#xff08;以某简单视频网站为例&#xff09; 前言 以下是一个较为完整的 Python 视频爬取教程&#xff0c;包含基本原理…

群体智能优化算法-模拟退火优化算法(Simulated Annealing, SA,含Matlab源代码)

摘要 模拟退火&#xff08;SA&#xff09;算法是一种基于物理退火过程的全局优化算法&#xff0c;其核心思想来源于热力学中的退火过程&#xff1a;将材料加热到高温后再缓慢冷却&#xff0c;使其分子结构趋于最低能量状态&#xff0c;从而获得稳定结构。SA 算法利用 Metropol…

74HC04(反相器)和74HC14(反相器、施密特触发器)的区别

74HC04和74HC14的具体区别详解 同样具有反相器功能&#xff0c;你知道74HC04和74HC14的具体区别吗&#xff1f; 74HC04 对于74HC04很好理解&#xff0c;输入低电平&#xff0c;输出高电平&#xff1b;输入高电平&#xff0c;输出低电平。 建议操作条件&#xff1a; 下图是TI的…

Maven安装与环境配置

首先我们先介绍一些关于Maven的知识&#xff0c;如果着急直接看下面的安装教程。 目录 Maven介绍 Maven模型 Maven仓库 Maven安装 下载 安装步骤 Maven介绍 Apache Maven是一个项目管理和构建工具&#xff0c;它基于项目对象模型(Project Object Model , 简称: POM)的概念…

idea问题(三)pom文件显示删除线

一、问题 1、现象 2、原因 分析原因和出现的流程&#xff1a;创建子模块的时候因为名称错误了&#xff0c;并且通过修改模块模块名称后&#xff0c;又删除了模块&#xff0c;因删除不干净。再次建立了同名模块&#xff0c;会让IDEA认为你再次新建的项目是已经被删除的项目。 …