当前位置：首页 > news >正文

AMD CPU下pytorch 多GPU运行卡死和死锁解决

news 2025/12/18 9:23:21

参考链接

https://medium.com/@amitparekh/solving-ddp-deadlock-with-multiple-gpus-and-amd-cpus-442186632034

简要说明

AMD的IOMMU和NVIDIA的NCCL不兼容问题导致
AMD的IOMMU是BIOS 级组件,它基本上充当将虚拟地址映射到 GPU 上的物理地址的接口,它的全部目的是让 CPU 和 GPU 的内存更好地协同工作
NVIDIA的NCCL是Nvidia的多卡通信库，用于深度学习中的多GPU并行训练

解决方案 (关闭IOMMU)

ubuntu

sudo bash -c'echo GRUB_CMDLINE_LINUX="amd_iommu=off" >> /etc/default/grub'
sudo grub-mkconfig -o /boot/efi/EFI/ubuntu/grub.cfg
sudo reboot

centos

sudo bash -c'echo GRUB_CMDLINE_LINUX="amd_iommu=off" >> /etc/default/grub'
sudo grub2-mkconfig -o /boot/efi/EFI/centos/grub.cfg 
sudo reboot

AMD CPU下pytorch 多GPU运行卡死和死锁解决

参考链接 https://medium.com/amitparekh/solving-ddp-deadlock-with-multiple-gpus-and-amd-cpus-442186632034 简要说明 AMD的IOMMU和NVIDIA的NCCL不兼容问题导致AMD的IOMMU是BIOS 级组件,它基本上充当将虚拟地址映射到 GPU 上的物理地址的接口,它的全部目的是让 CPU 和 G…...

编程日记 2024/11/13 23:39:06

Swift 开发教程系列 - 第12章：协议与协议扩展

协议（Protocol）是 Swift 的一种重要特性，它定义了实现特定功能的方法、属性或其他要求。通过协议，可以将行为定义从具体实现中分离，使代码更具可读性和扩展性。Swift 的协议支持协议扩展，这一特性允许我们为…...

编程日记 2024/11/13 23:37:03

麒麟V10，arm64，离线安装docker和docker-compose

文章目录一、下载1.1 docker1.2 docker-compose1.3 docker.service 二、安装三、验证安装成功3.1 docker3.2 docker-compose 需要在离线环境的系统了里面安装docker。目前国产化主推的是麒麟os和鲲鹏的cpu，这块的教程还比较少，记录一下。 # cat /etc/ky…...

编程日记 2024/11/13 23:27:54

NUXT3学习日记二（样式配置、引入组件库、区分在服务端还是在客户端渲染）

上一章已经给大家分享官网下载的nuxt3了，下面正式进入我所要说的内容吧一、初始化样式想必大家从我的git下载下来的nuxt3，能看到nuxt.config.ts这个文件了吧。这里我们有两种css配置方式 1、css:[~/assets/base.scss] 这种方式不能在scss文件中定义…...

编程日记 2024/11/13 23:26:53

FPGA/Verilog,Quartus环境下if-else语句和case语句RT视图对比/学习记录

基本概念 RTL（Register - Transfer - Level）视图：是一种硬件描述语言的抽象层次，用于描述数字电路中寄存器之间的数据传输和操作。在这个层次上，可以看到电路的基本结构，如寄存器、组合逻辑、多路复用器等…...

编程日记 2024/11/13 23:25:52

Javascript高级—闭包问题

闭包问题循环中赋值为引用的问题 for (var i 1; i < 5; i) {setTimeout(function timer() {console.log(i)}, i * 1000) }解决方法有3种第一种，使用立即执行函数方式 for (var i 1; i < 5; i) {(fuction(j){setTimeout(function timer() {console.log…...

编程日记 2024/11/13 23:24:51

C#入门 017 字段，属性，索引器，常量

字段，属性，索引器，常量都表示数据字段什么是字段字段(field)是一种表示与对象或类型(类与结构体)关联的变量字段是类型的成员，又称“成员变量，写在类体里面与对象关联的字段亦称“实例字段，表示某个对…...

编程日记 2024/11/13 23:23:50

磐石云语音助手拦截介绍

呼叫中心用户实际应用场景下最高会有超过30%的和语音助手；无声主要是进入了语音信箱;如：“听到滴声后留言”，”漏话提醒““发送请按1，重录请按2”以及拨打过程中客户主动拒接产生的”您拨打的用户正忙“，”关机“”停…...

编程日记 2024/11/13 23:22:47

JSP执行过程及其与Servlet执行效率的比较

JSP（Java Server Pages）和Servlet都是Java Web开发中常用的技术，它们都用于动态生成Web页面。然而，JSP和Servlet在执行过程和效率上存在一些差异。本文将详细探讨JSP的执行过程，并比较JSP与Servlet的执行效率。一、J…...

编程日记 2024/11/13 23:17:44

open3d

open3d open3d用于 3D 数据处理的现代库。简介 Open3D 是一个开源库，支持快速开发处理 3D 数据的软件。Open3D 前端公开了一组精心挑选的 C 和 Python 数据结构和算法。后端经过高度优化，并设置为并行化。Open3D 是从零开始开发的，具有一更…...

编程日记 2024/11/13 23:16:43

Vue中优雅的使用Echarts的三种方式

一、原始方法直接使用 1、安装ECharts： npm install echarts --save 2、创建一个Vue公共组件 EChart.vue： <template><div :style"{width: 100%, height: 300px}" ref"chart"></div> </template><scri…...

编程日记 2024/11/13 23:14:41

SpringBoot配置文件/日志

目录一,SpringBoot配置文件 1,配置文件的格式: 2,properties 3,yml 1,properties与yml的转换 2,读取配置选哪个中的内容 3,单双引号的差异: 4,配置对象: 5,配置集合/配置map 6,yml的优缺点: 二,验证码: 学习目的: 实现样例: 接口定义: 代码总结: 三,日志: 1,概…...

编程日记 2024/11/13 23:12:39

微服务架构面试内容整理-SpringCloud Netflix‌与Spring Cloud Alibaba比较

Spring Cloud Netflix 和 Spring Cloud Alibaba 都是用于构建微服务架构的解决方案，但它们在设计理念、组件和使用场景上存在一些差异。以下是它们的比较： 1. 服务注册与发现 ● Spring Cloud Netflix：使用 Eureka 作为服务注册和发现的组件。Eureka 是基于 REST 的，适合服…...

编程日记 2024/11/13 23:11:37

JDBC魔法：连接MySQL数据库与数据操作的秘籍

文章目录一. JDBC介绍二. 数据库驱动1.DriverManager2.Connection3.PreparedStatement4.ResultSet 三. JDBC连接MySQL1. 加载驱动2. 获得连接3. 关闭连接四. JDBC实现数据新增五. JDBC实现数据删除一. JDBC介绍 JDBC（Java Database Connectivity）是Ja…...

编程日记 2024/11/13 23:09:34

深入了解Scratch：引导初学者开启编程之旅

引言在当今数字化时代，编程已不再是成年人的专利，而是一项逐渐向低年龄段普及的技能。Scratch作为一款面向儿童和青少年的图形化编程语言，以其简单易用且充满趣味性的特点，成为了许多初学者学习编程的首选工具。本文将深入探讨S…...

编程日记 2024/11/13 23:08:33

js复制内容到剪切板

复制内容到剪切板最近预报一个需求需要点击按钮复制当前到行的内容到剪切板， 所以写了这个工具 export function copyText(text: string, prompt: string | null 已成功复制到剪切板!) {if (navigator.clipboard) {return navigator.clipboard.writeText(text).th…...

编程日记 2024/11/13 23:05:29

代码 RNN原理及手写复现

29、PyTorch RNN的原理及其手写复现_哔哩哔哩_bilibili 笔记连接: https://pan.baidu.com/s/1_Sm7ptEiJtTTq3vQWgOTNg?pwd2rei 提取码: 2rei import torch import torch.nn as nn bs,T2,3 # 批大小，输入序列长度 input_size,hidden_size 2,3 # 输入特征大小&a…...

编程日记 2024/11/13 23:00:23

企业官网的在线客服，如何提高效果？

企业官网的在线客服，如何提高效果？ 作者：开源呼叫中心系统 FreeIPCC，github地址：https://github.com/lihaiya/freeipcc 提高企业官网在线客服的效果，是提升客户体验、增强客户满意度和忠诚度的关键。一个…...

编程日记 2024/11/13 22:59:22

「实战应用」如何可视化 DHTMLX Scheduler 中的资源工作量？

DHTMLX Scheduler是一个全面的 UI 组件，用于处理面向业务的 Web 应用程序中复杂的调度和任务管理需求。但是，某些场景可能需要自定义解决方案。例如，如果项目的资源（即劳动力）有限，则需要确保以更高的精度分…...

编程日记 2024/11/13 22:56:18

论文阅读《BEVFormer》

BEVFormer: Learning Bird’s-Eye-View Representation from Multi-Camera Images via Spatiotemporal Transformers 目录摘要1 介绍2 相关工作2.1 基于Transformer的2D感知摘要 3D视觉感知任务对于自动驾驶系统至关重要，包括基于多相机图像的3D检测和地图分割。…...

编程日记 2024/11/13 22:54:16

使用docker在3台服务器上搭建基于redis 6.x的一主两从三台均是哨兵模式

一、环境及版本说明如果服务器已经安装了docker,则忽略此步骤,如果没有安装,则可以按照一下方式安装: 1. 在线安装(有互联网环境): 请看我这篇文章传送阵>> 点我查看 2. 离线安装(内网环境):请看我这篇文章传送阵>> 点我查看说明：假设每台服务器已…...

编程新知 2025/12/17 20:37:15

家政维修平台实战20：权限设计

目录 1 获取工人信息2 搭建工人入口3 权限判断总结目前我们已经搭建好了基础的用户体系，主要是分成几个表，用户表我们是记录用户的基础信息，包括手机、昵称、头像。而工人和员工各有各的表。那么就有一个问题，不同的角色&#xf…...

编程新知 2025/12/14 1:11:38

基础测试工具使用经验

背景 vtune，perf, nsight system等基础测试工具，都是用过的，但是没有记录，都逐渐忘了。所以写这篇博客总结记录一下，只要以后发现新的用法，就记得来编辑补充一下 perf 比较基础的用法： 先改这…...

编程新知 2025/11/22 7:38:58

【git】把本地更改提交远程新分支feature_g

创建并切换新分支 git checkout -b feature_g 添加并提交更改 git add . git commit -m “实现图片上传功能” 推送到远程 git push -u origin feature_g...

编程新知 2025/12/13 4:20:30

Java线上CPU飙高问题排查全指南

一、引言在Java应用的线上运行环境中，CPU飙高是一个常见且棘手的性能问题。当系统出现CPU飙高时，通常会导致应用响应缓慢，甚至服务不可用，严重影响用户体验和业务运行。因此，掌握一套科学有效的CPU飙高问题排查方法&…...

编程新知 2025/11/2 5:30:15

Java 二维码

Java 二维码 **技术：**谷歌 ZXing 实现首先添加依赖 <dependency><groupId>com.google.zxing</groupId><artifactId>core</artifactId><version>3.5.1</version></dependency><de…...

编程新知 2025/9/6 16:22:45

LINUX 69 FTP 客服管理系统 man 5 /etc/vsftpd/vsftpd.conf

FTP 客服管理系统实现kefu123登录，不允许匿名访问，kefu只能访问/data/kefu目录，不能查看其他目录创建账号密码 useradd kefu echo 123|passwd -stdin kefu [rootcode caozx26420]# echo 123|passwd --stdin kefu 更改用户 kefu 的密码…...

编程新知 2025/12/17 22:08:49