Python中的MetaPathFinder
MetaPathFinder 是 Python 导入系统中的一个关键组件,它与 sys.meta_path 列表紧密相关。sys.meta_path 是一个包含 MetaPathFinder 实例的列表,这些实例用于自定义模块的查找和加载逻辑。当使用 import 语句尝试导入一个模块时,Python 会遍历 sys.meta_path 中的每个 MetaPathFinder,尝试找到并加载该模块。
MetaPathFinder 的主要职责
-
模块查找:决定是否可以找到一个模块,并提供有关如何加载它的信息。
-
返回
ModuleSpec:ModuleSpec是新导入系统的核心,它包含有关模块的所有信息,如其名称、加载器、起源等。MetaPathFinder通过find_spec方法返回一个ModuleSpec实例。
MetaPathFinder 的关键方法
find_spec(fullname, path, target=None):fullname:要导入的模块的完全限定名称。path:对于包内模块或子包,这是包的__path__,否则为None。target:正在重新加载的模块对象(如果适用)。- 返回一个
ModuleSpec实例,该实例描述了如何加载模块,或者在无法找到模块时返回None。
为什么使用 MetaPathFinder?
MetaPathFinder 提供了一种强大的方法来扩展和自定义 Python 的导入逻辑。例如,您可以:
- 从非标准位置(如数据库或远程服务器)加载模块。
- 在模块导入时动态生成代码。
- 实现懒加载,只在实际需要时加载模块。
如何使用 MetaPathFinder?
为了使用 MetaPathFinder,你需要:
- 创建一个实现了
MetaPathFinder接口的类。 - 实现
find_spec方法,使其返回一个适当的ModuleSpec或None。 - 将你的
MetaPathFinder实例添加到sys.meta_path列表中。
这样,每当尝试导入一个模块时,你的自定义查找逻辑就会被调用。
总之,MetaPathFinder 提供了一种方法,使得开发人员可以插入和控制 Python 导入系统的核心部分,从而实现高度自定义的模块加载逻辑。
让我们通过两个例子来理解 MetaPathFinder。我们将创建一个自定义的 MetaPathFinder,它可以导入一个特定的模块,尽管该模块并不存在于文件系统中。
例1
当我们尝试导入一个名为 virtual_module 的模块时,我们的自定义导入器将返回一个包含 hello() 函数的模块,该函数打印 “Hello from virtual module!”。
实现
- 创建一个自定义的
Loader:
class VirtualModuleLoader:def create_module(self, spec):return Nonedef exec_module(self, module):code = """
def hello():print("Hello from virtual module!")
"""exec(code, module.__dict__)
- 创建
MetaPathFinder:
class VirtualModuleFinder:def find_spec(self, fullname, path, target=None):if fullname == "virtual_module":return ModuleSpec(fullname, VirtualModuleLoader())return None
- 将
VirtualModuleFinder添加到sys.meta_path:
import sys
sys.meta_path.insert(0, VirtualModuleFinder())
测试
import virtual_module
virtual_module.hello()
输出:
Hello from virtual module!
在上述代码中,我们首先定义了一个虚拟的模块加载器 (VirtualModuleLoader),该加载器知道如何加载 virtual_module。然后,我们创建了一个 MetaPathFinder (VirtualModuleFinder),它可以为 virtual_module 返回一个适当的 ModuleSpec。最后,我们将 VirtualModuleFinder 添加到 sys.meta_path 的开头,这样当我们尝试导入 virtual_module 时,Python 就会使用我们的自定义查找和加载逻辑。
接下来,让我们再举一个例子,这个例子将通过 MetaPathFinder 为所有尝试导入的模块自动添加一个 meta_loaded 属性,该属性标识该模块已被自定义导入器处理。
例2
我们的自定义导入器将检查每次导入请求,如果该模块可以被标准导入器导入,则在导入模块后向模块添加一个 meta_loaded 属性。
实现
- 创建一个自定义的
Loader:
class MetaAddedLoader:def __init__(self, spec):self.origin_loader = spec.loaderdef create_module(self, spec):return Nonedef exec_module(self, module):# 使用原始加载器加载模块self.origin_loader.exec_module(module)# 添加meta_loaded属性module.meta_loaded = True
- 创建
MetaPathFinder:
class MetaAddedFinder:def find_spec(self, fullname, path, target=None):# 使用标准方法找到specorigin_spec = Nonefor finder in sys.meta_path:if finder is not self and hasattr(finder, "find_spec"):origin_spec = finder.find_spec(fullname, path, target)if origin_spec:breakif origin_spec:# 使用我们的自定义加载器替换原始加载器origin_spec.loader = MetaAddedLoader(origin_spec)return origin_specreturn None
- 将
MetaAddedFinder添加到sys.meta_path:
import sys
sys.meta_path.insert(0, MetaAddedFinder())
测试
import math
print(hasattr(math, 'meta_loaded')) # 输出: Trueimport os
print(hasattr(os, 'meta_loaded')) # 输出: True
这个例子展示了如何扩展已经存在的导入逻辑,而不是替代它。我们首先查找原始的 ModuleSpec,然后使用自定义加载器替换原始加载器。这个自定义加载器仍然使用原始加载器来实际导入模块,但在导入后添加了一个额外的属性。
相关文章:
Python中的MetaPathFinder
MetaPathFinder 是 Python 导入系统中的一个关键组件,它与 sys.meta_path 列表紧密相关。sys.meta_path 是一个包含 MetaPathFinder 实例的列表,这些实例用于自定义模块的查找和加载逻辑。当使用 import 语句尝试导入一个模块时,Python 会遍历…...
工控机防病毒
2月3日,作为全球最大的半导体制造设备和服务供应商,美国应用材料公司(Applied Materials)表示,有一家上游供应商遭到勒索软件攻击,由此产生的关联影响预计将给下季度造成2.5亿美元(约合人民币17…...
LangChain手记 Question Answer 问答系统
整理并翻译自DeepLearning.AILangChain的官方课程:Question Answer(源代码可见) 本节介绍使用LangChian构建文档上的问答系统,可以实现给定一个PDF文档,询问关于文档上出现过的某个信息点,LLM可以给出关于该…...
如何优化css中的一些昂贵属性
如何优化css中的一些昂贵属性 就性能而言,某些 CSS 属性比其他属性的成本更高。如果使用不当,它们可能会减慢我们的网页速度并降低对用户的响应速度。在本文中,我们将探讨一些成本最高的 CSS 属性以及如何优化它们。 box-shadow box-shado…...
基于安防监控EasyCVR视频汇聚融合技术的运输管理系统的分析
一、项目背景 近年来,随着物流行业迅速发展,物流运输费用高、运输过程不透明、货损货差率高、供应链协同能力差等问题不断涌现,严重影响了物流作业效率,市场对于运输管理数字化需求愈发迫切。当前运输行业存在的难题如下…...
在WordPress站点中展示阅读量等流量分析数据(超详细实现)
这篇文章也可以在我的博客中查看 关于本文 专业的流量统计系统能够相对真实地反应网站的访问情况。 这些数据可以在后台很好地进行分析统计,但有时我们希望在网站前端展示一些数据 最常见的情景就是:展示页面的浏览量 这简单的操作当然也可以通过简单…...
学习 Iterator 迭代器
今天看到一个面试题, 让下面解构赋值成立。 let [a,b] {a:1,b:2} 如果我们直接在浏览器输出这行代码,会直接报错,说是 {a:1,b:2} 不能迭代。 看了es6文档后,具有迭代器的就一下几种类型,没有Object类型,…...
JVM---垃圾回收算法介绍
目录 分代收集理论 三种垃圾回收算法 标记-清除算法(最基础的、基本不用) 标记-复制算法 标记-整理算法 正式因为jvm有了垃圾回收机制,作为java开发者不会去特备关注内存,不像C和C。 优点:开发门槛低、安全 缺点…...
Ubuntu一直卡死的问题(20.04)
Ubuntu一直卡死的问题(18.04)_ubuntu频繁死机_Mr.Yi的博客-CSDN博客 我自己的解决方法: 1、首先强制关机重启后,直接打开命令行查看磁盘的使用: df -h发现/dev/loop都沾满了,我们能需要做的就是把他们清理干净 sud…...
自动化测试用例设计实例
在编写用例之间,笔者再次强调几点编写自动化测试用例的原则: 1、一个脚本是一个完整的场景,从用户登陆操作到用户退出系统关闭浏览器。 2、一个脚本脚本只验证一个功能点,不要试图用户登陆系统后把所有的功能都进行验证再退出系统…...
CSS3基础
CSS3在CSS2的基础上增加了很多功能,如圆角、多背景、透明度、阴影等,以帮助开发人员解决一些实际问题。 1、初次使用CSS 与HTML5一样,CSS3也是一种标识语言,可以使用任意文本编辑器编写代码。下面简单介绍CSS3的基本用法。 1.1…...
【栈】 735. 行星碰撞
735. 行星碰撞 解题思路 如果数组元素大于0 说明向右移动 那么不管 左边元素是不是大于0 都不会碰撞 如果数组元素小于0 说明想左边移动 那么判断左边元素 如果左边元素大于0 碰撞 那么遍历数组 当前元素大于0 直接入栈 如果当前元素小于0 判断栈顶元素是不是大于0 如果大…...
水库大坝安全监测MCU,提升大坝管理效率的利器!
水库大坝作为防洪度汛的重要设施,承担着防洪抗旱,节流发电的重要作用。大坝的安全直接关系到水库的安全和人民群众的生命财产安全。但因为水库大坝的隐患不易被察觉,发现时往往为时已晚。因此,必须加强对大坝的安全管理。其安全监…...
【vue2类型助手】vue2-cli 实现为 vue2 项目中的组件添加全局类型提示
实现 vue2 全局组件提示 vue2 项目全局注册组件直接使用没有提示 由于vue2中使用volar存在很大的性能问题,所以只能继续使用vetur,但是这样全局组件会没有提示,这对于开发来说,体验十分不友好,所以开发此cli并借助ve…...
mysql 索引 区分字符大小写
mysql 建立索引,特别是unique索引,是跟字符集、字符排序规则有关的。 对于utf8mb4_0900_ai_ci来说,0900代表Unicode 9.0的规范,ai表示accent insensitivity,也就是“不区分音调”,而ci表示case insensitiv…...
Stable Diffusion Webui源码剖析
1、关键python依赖 (1)xformers:优化加速方案。它可以对模型进行适当的优化来加速图片生成并降低显存占用。缺点是输出图像不稳定,有可能比不开Xformers略差。 (2)GFPGAN:它是腾讯开源的人脸修…...
为什么kafka 需要 subscribe 的 group.id?我们是否需要使用 commitSync 手动提交偏移量?
目录 一、为什么需要带有 subscribe 的 group.id二、我们需要使用commitSync手动提交偏移量吗?三、如果我想手动提交偏移量,该怎么做? 一、为什么需要带有 subscribe 的 group.id 消费概念: Kafka 使用消费者组的概念来实现主题的…...
什么是Web应用程序防火墙,WAF与其他网络安全工具差异在哪?
一、什么是Web 应用程序防火墙 (WAF) ? WAF软件产品被广泛应用于保护Web应用程序和网站免受威胁或攻击,它通过监控用户、应用程序和其他互联网来源之间的流量,有效防御跨站点伪造、跨站点脚本(XSS攻击)、SQL注入、DDo…...
打家劫舍 II——力扣213
动规 int robrange(vector<int>& nums, int start, int end){int first=nums[start]...
动手学深度学习—卷积神经网络LeNet(代码详解)
1. LeNet LeNet由两个部分组成: 卷积编码器:由两个卷积层组成;全连接层密集块:由三个全连接层组成。 每个卷积块中的基本单元是一个卷积层、一个sigmoid激活函数和平均汇聚层;每个卷积层使用55卷积核和一个sigmoid激…...
浅谈 React Hooks
React Hooks 是 React 16.8 引入的一组 API,用于在函数组件中使用 state 和其他 React 特性(例如生命周期方法、context 等)。Hooks 通过简洁的函数接口,解决了状态与 UI 的高度解耦,通过函数式编程范式实现更灵活 Rea…...
在软件开发中正确使用MySQL日期时间类型的深度解析
在日常软件开发场景中,时间信息的存储是底层且核心的需求。从金融交易的精确记账时间、用户操作的行为日志,到供应链系统的物流节点时间戳,时间数据的准确性直接决定业务逻辑的可靠性。MySQL作为主流关系型数据库,其日期时间类型的…...
C++:std::is_convertible
C++标志库中提供is_convertible,可以测试一种类型是否可以转换为另一只类型: template <class From, class To> struct is_convertible; 使用举例: #include <iostream> #include <string>using namespace std;struct A { }; struct B : A { };int main…...
DockerHub与私有镜像仓库在容器化中的应用与管理
哈喽,大家好,我是左手python! Docker Hub的应用与管理 Docker Hub的基本概念与使用方法 Docker Hub是Docker官方提供的一个公共镜像仓库,用户可以在其中找到各种操作系统、软件和应用的镜像。开发者可以通过Docker Hub轻松获取所…...
React Native在HarmonyOS 5.0阅读类应用开发中的实践
一、技术选型背景 随着HarmonyOS 5.0对Web兼容层的增强,React Native作为跨平台框架可通过重新编译ArkTS组件实现85%以上的代码复用率。阅读类应用具有UI复杂度低、数据流清晰的特点。 二、核心实现方案 1. 环境配置 (1)使用React Native…...
django filter 统计数量 按属性去重
在Django中,如果你想要根据某个属性对查询集进行去重并统计数量,你可以使用values()方法配合annotate()方法来实现。这里有两种常见的方法来完成这个需求: 方法1:使用annotate()和Count 假设你有一个模型Item,并且你想…...
均衡后的SNRSINR
本文主要摘自参考文献中的前两篇,相关文献中经常会出现MIMO检测后的SINR不过一直没有找到相关数学推到过程,其中文献[1]中给出了相关原理在此仅做记录。 1. 系统模型 复信道模型 n t n_t nt 根发送天线, n r n_r nr 根接收天线的 MIMO 系…...
用机器学习破解新能源领域的“弃风”难题
音乐发烧友深有体会,玩音乐的本质就是玩电网。火电声音偏暖,水电偏冷,风电偏空旷。至于太阳能发的电,则略显朦胧和单薄。 不知你是否有感觉,近两年家里的音响声音越来越冷,听起来越来越单薄? —…...
Golang——9、反射和文件操作
反射和文件操作 1、反射1.1、reflect.TypeOf()获取任意值的类型对象1.2、reflect.ValueOf()1.3、结构体反射 2、文件操作2.1、os.Open()打开文件2.2、方式一:使用Read()读取文件2.3、方式二:bufio读取文件2.4、方式三:os.ReadFile读取2.5、写…...
Web后端基础(基础知识)
BS架构:Browser/Server,浏览器/服务器架构模式。客户端只需要浏览器,应用程序的逻辑和数据都存储在服务端。 优点:维护方便缺点:体验一般 CS架构:Client/Server,客户端/服务器架构模式。需要单独…...
