当前位置： 首页 > news >正文

docker容器运行一段时间提示Failed to initialize NVML: Unknown Error

news 2026/2/7 16:13:27

情况描述

服务器使用docker启动容器。启动以后一切正常也能跑程序。但是，在运行一段时间（2天左右不等），会发现gpu掉了。输入nvidia-smi提示

Failed to initialize NVML: Unknown Error

主要发生条件是，docker启动的时候指定的部分卡。譬如4卡，指定2卡在容器中使用。

当前发现情况基本都是，代码运行完，准备下一次跑的时候，提示这个问题。

解决方案记录

1、如果是容器使用本机所有卡，在启动容器时候添加“--privileged”参数，能够避免上述问题。但是，如果只使用部分卡，则不能添加此参数。

2、【测试中】根据链接所述，发生原因如下，详情见链接。https://github.com/NVIDIA/nvidia-container-toolkit/issues/48

主要首先要确定docker是否使用systemd cgroup进行管理，如果不是这问题导致，大概率后续解决方案无效。运行docker info| grep Cgroup。确认一下。

 $ docker info  ...  Cgroup Driver: systemd  Cgroup Version: 1

如果如上图所示，在/etc/docker/daemon.json里面添加参数，重启docker。

"exec-opts": ["native.cgroupdriver=systemd"]

相关文章：

docker容器运行一段时间提示Failed to initialize NVML: Unknown Error

情况描述 服务器使用docker启动容器。启动以后一切正常也能跑程序。但是，在运行一段时间（2天左右不等），会发现gpu掉了。输入nvidia-smi提示 Failed to initialize NVML: Unknown Error 主要发生条件是，docker启动的…...

编程日记 2024/10/21 5:54:24

PPT自动化：快速更换PPT图片（如何保留原图片样式等参数更换图片）

文章目录 📖 介绍 📖🏡 演示环境 🏡📒 PPT更换图片 📒1. 安装 `python-pptx` 模块2. 加载PPT文件3. 查找并替换图片3.1 查找图片形状3.2 获取原图片的样式和位置3.3 替换图片4. 保存修改后的PPT文件5. 设置图片的相关参数5.1 设置透明度5.2 设置边框🚀 保留所有参…...

编程日记 2024/10/21 5:53:23

秒懂MVC, MVP, MVVM框架

框架的目标 关注点分离 (separation of concerns)低耦合 (Loose coupling)容易维护 (Maintainable)容易被测试 (Testable)...

编程日记 2024/10/21 5:52:22

IDEA社区版如何用tomcat运行war包

前言 我们在使用IDEA开发Java应用时，有时候需要运行的不是jar包，而是war包，但IDEA社区版默认是不支持tomcat容器的，无法直接运行war包。不过好在我们有一个强大的插件来支持我们使用tomcat，那么，我们应该如…...

编程日记 2024/10/21 5:51:21

如何使用 Git Cherry-Pick 和 Reset 处理误提交，并确保安全回滚

在开发过程中，偶尔会遇到不小心将功能开发提交到错误分支上的情况。假设我们计划在 10 月 24 号上线某些功能，但却不小心在 10 月 17 号的上线分支上进行了开发。为了解决这个问题并将误提交的内容移到正确的分支上，我们可以借助 Git 的一些功…...

编程日记 2024/10/21 5:50:18

Goland 搭建Gin脚手架

一、使用编辑器goland 搭建gin 打开编辑器 新建项目后 点击 create 二、获得Gin框架的代码 命令行安装 go get -u github.com/gin-gonic/gin 如果安装不上，配置一下环境 下载完成 官网git上下载 这样就下载完成了。、 不过这种方法需要设置一下GOPATH 然后再执…...

编程日记 2024/10/21 5:47:16

Java Spring的高级装配

1.profile与bean 1.1 profile 如果我们在配置类中装配一个bean，但是这个bean与环境相关怎么办？ 比如有一个类，它在开发环境采取一种模式，但是到了生产环境，有需要使用另一种环境。 当然，你可能会说&…...

编程日记 2024/10/21 5:45:14

分布式光伏发电系统电气一次部分设计（开题报告2）

毕业论文（设计）开题报告 题目 分布式光伏发电系统电气一次部分设计 题目类别 毕业设计 姓名 专业 班级 学号 一、选题背景及依据（简述国内外研究状况和相关领域中已有的研究成果（文献综述），选题目的、意义，列出主要参考文献） （一）选题背景与依据 选题背景与依据： …...

编程日记 2024/10/21 5:44:13

【设计模式-迪米特法则】

迪米特法则（Law of Demeter，LoD），也称为最少知识原则（Principle of Least Knowledge），是一种面向对象编程中的设计原则。它的核心思想是：一个对象应当尽可能少地了解其他对象&#x…...

编程日记 2024/10/21 5:42:11

Webpack安装

全局安装 npm install -g webpack webpack-cli安装后查看版本号： webpack -v初始化项目 npm init -yJS打包 webpack目录下创建配置文件webpack.config.js 以下配置的意思是：读取当前项目目录下src文件夹中的main.js（入口文件&#xff09…...

编程日记 2024/10/21 5:40:08

前端开发学习（一）VUE框架概述

一、MVC模式与MVVM模式 1.1mvc模式 MVC模式是移动端应用广泛的软件架构之一，MVC模式将应用程序划分为3部分:Model(数据模型)、View(用户界面视图)和Controller(控制器)。MVC模式的执行过程是将View层展示给用户，也就是通过 HTML页面接受用户动作&#…...

编程日记 2024/10/21 5:39:07

Linux操作系统的背景、发展历程及对比分析

1. UNIX发展历史 unix_百度百科 UNIX操作系统作为现代操作系统的奠基石，其发展历史可以追溯到20世纪60年代末。1969年，贝尔实验室的Ken Thompson、Dennis Ritchie以及他们的同事们为了实现一种多任务的、可移植的、简洁而高效的操作系统，开发…...

编程日记 2024/10/21 5:37:05

gaussdb 基础管理 数据库 表 用户 模式 权限 存储过程

数据库database #创建数据库，指定字符集UTF8，缺省情况下新数据库将通过复制标准系统数据库template0来创建，且仅支持使用template0来创建。 CREATE DATABASE devdb ENCODING UTF8 template template0; CREATE DATABASE testdb; 标识符的命名…...

编程日记 2024/10/21 5:36:03

i9-11900H+3070laptop+win10下的yolov5配置

参考博客：https://blog.csdn.net/qq_67105081/article/details/138232424 关键问题： 1、由之前装的CUDA11.6（有篇博客上可以换版本）CUDNN8.4.0Python3.9.13推后在指定的虚拟环境中装了Pytorch1.12.1(在AnnacondaPrompt下用pip命令…...

编程日记 2024/10/21 5:35:02

SpringBoot日常：封装redission starter组件

文章目录 逻辑实现POM.xmlRedissionConfigRedissionPropertiesRedissionUtilsspring.factories 功能测试application.yml配置POM.xmlTestController运行测试 本章内容主要介绍如何通过封装相关的redission连接配置和工具类，最终完成一个通用的redission starter。并…...

编程日记 2024/10/21 5:34:00

腾讯云技术深度解析：构建高效云原生应用与数据安全管理

腾讯云技术深度解析：构建高效云原生应用与数据安全管理 在当今快速发展的技术环境中，云计算已经成为企业数字化转型的关键驱动力。腾讯云作为中国领先的云服务提供商，凭借其卓越的技术和创新能力，为企业提供了高效、可扩展的云原…...

编程日记 2024/10/21 5:33:00

ACM与蓝桥杯竞赛指南 基本输入输出格式二

A B || 继续看第二个AB问题，A B || ，大家可以先自行读题，或者有经验直接看输入输出格式，发现依然是求AB，但它的输入数据为： 2 1 5 10 20 输出： 6 20 此题相比第一道而言，本…...

编程日记 2024/10/21 5:29:55

解决SolidWorks装配体无法更改透明度问题

这个问题是在零件上各个部件显示正常，且透明度可以更改，但是一到装配体上就出现问题都变成了灰色。更改透明度也不行。 解决方法： 1、因为该装配体里面存在过多的零部件层级的自定义外观（这些外观可能互相之前有了干扰&#xff0…...

编程日记 2024/10/21 5:27:53

2024_newstar_week1_crypto

baby_mod 题目 from Crypto.Util.number import * from enc import flagm bytes_to_long(flag) p getPrime(512) q getPrime(512) r getPrime(777) t getPrime(777) tmp getPrime(15) e 65537 n p*q print(f"c {pow(m,e,n)}") print(f"leak {p*r-q*…...

编程日记 2024/10/21 5:26:52

6.2 URDF集成Rviz基本流程

前面介绍过，URDF 不能单独使用，需要结合 Rviz 或 Gazebo，URDF 只是一个文件，需要在 Rviz 或 Gazebo 中渲染成图形化的机器人模型，当前，首先演示URDF与Rviz的集成使用，因为URDF与Rviz的集成较之于…...

编程日记 2024/10/21 5:25:50

UE5 学习系列（二）用户操作界面及介绍

这篇博客是 UE5 学习系列博客的第二篇，在第一篇的基础上展开这篇内容。博客参考的 B 站视频资料和第一篇的链接如下： 【Note】：如果你已经完成安装等操作，可以只执行第一篇博客中 2. 新建一个空白游戏项目 章节操作，重…...

编程新知 2026/2/5 3:29:08

业务系统对接大模型的基础方案：架构设计与关键步骤

业务系统对接大模型：架构设计与关键步骤 在当今数字化转型的浪潮中，大语言模型（LLM）已成为企业提升业务效率和创新能力的关键技术之一。将大模型集成到业务系统中，不仅可以优化用户体验，还能为业务决策提供…...

编程新知 2026/2/4 3:14:18

MongoDB学习和应用(高效的非关系型数据库)

一丶 MongoDB简介 对于社交类软件的功能，我们需要对它的功能特点进行分析： 数据量会随着用户数增大而增大读多写少价值较低非好友看不到其动态信息地理位置的查询… 针对以上特点进行分析各大存储工具： mysql：关系型数据库&am…...

编程新知 2026/1/23 10:24:30

可靠性+灵活性：电力载波技术在楼宇自控中的核心价值

可靠性灵活性：电力载波技术在楼宇自控中的核心价值 在智能楼宇的自动化控制中，电力载波技术（PLC）凭借其独特的优势，正成为构建高效、稳定、灵活系统的核心解决方案。它利用现有电力线路传输数据，无需额外布…...

编程新知 2025/9/27 2:43:26

渗透实战PortSwigger靶场-XSS Lab 14：大多数标签和属性被阻止

<script>标签被拦截 我们需要把全部可用的 tag 和 event 进行暴力破解 XSS cheat sheet&#xff1a; https://portswigger.net/web-security/cross-site-scripting/cheat-sheet 通过爆破发现body可以用 再把全部 events 放进去爆破 这些 event 全部可用 <body onres…...

编程新知 2026/1/24 13:05:24

汽车生产虚拟实训中的技能提升与生产优化​

在制造业蓬勃发展的大背景下&#xff0c;虚拟教学实训宛如一颗璀璨的新星&#xff0c;正发挥着不可或缺且日益凸显的关键作用&#xff0c;源源不断地为企业的稳健前行与创新发展注入磅礴强大的动力。就以汽车制造企业这一极具代表性的行业主体为例&#xff0c;汽车生产线上各类…...

编程新知 2026/1/27 7:46:36

【机器视觉】单目测距——运动结构恢复

ps&#xff1a;图是随便找的&#xff0c;为了凑个封面 前言 在前面对光流法进行进一步改进&#xff0c;希望将2D光流推广至3D场景流时&#xff0c;发现2D转3D过程中存在尺度歧义问题&#xff0c;需要补全摄像头拍摄图像中缺失的深度信息&#xff0c;否则解空间不收敛&#xf…...

编程新知 2026/1/24 20:17:55

ServerTrust 并非唯一

NSURLAuthenticationMethodServerTrust 只是 authenticationMethod 的冰山一角 要理解 NSURLAuthenticationMethodServerTrust, 首先要明白它只是 authenticationMethod 的选项之一, 并非唯一 1 先厘清概念 点说明authenticationMethodURLAuthenticationChallenge.protectionS…...

编程新知 2026/1/29 5:29:57

Spring Boot+Neo4j知识图谱实战：3步搭建智能关系网络！

一、引言 在数据驱动的背景下&#xff0c;知识图谱凭借其高效的信息组织能力&#xff0c;正逐步成为各行业应用的关键技术。本文聚焦 Spring Boot与Neo4j图数据库的技术结合&#xff0c;探讨知识图谱开发的实现细节&#xff0c;帮助读者掌握该技术栈在实际项目中的落地方法。 …...

编程新知 2025/9/17 21:39:04

【服务器压力测试】本地PC电脑作为服务器运行时出现卡顿和资源紧张（Windows/Linux）

要让本地PC电脑作为服务器运行时出现卡顿和资源紧张的情况&#xff0c;可以通过以下几种方式模拟或触发&#xff1a; 1. 增加CPU负载 运行大量计算密集型任务&#xff0c;例如&#xff1a; 使用多线程循环执行复杂计算&#xff08;如数学运算、加密解密等&#xff09;。运行图…...

编程新知 2025/11/30 10:30:15