AMD CPU下pytorch 多GPU运行卡死和死锁解决
参考链接
https://medium.com/@amitparekh/solving-ddp-deadlock-with-multiple-gpus-and-amd-cpus-442186632034
简要说明
- AMD的IOMMU和NVIDIA的NCCL不兼容问题导致
- AMD的IOMMU是BIOS 级组件,它基本上充当将虚拟地址映射到 GPU 上的物理地址的接口,它的全部目的是让 CPU 和 GPU 的内存更好地协同工作
- NVIDIA的NCCL是Nvidia的多卡通信库，用于深度学习中的多GPU并行训练
解决方案 (关闭IOMMU)
- ubuntu
sudo bash -c'echo GRUB_CMDLINE_LINUX="amd_iommu=off" >> /etc/default/grub'
sudo grub-mkconfig -o /boot/efi/EFI/ubuntu/grub.cfg
sudo reboot
- centos
sudo bash -c'echo GRUB_CMDLINE_LINUX="amd_iommu=off" >> /etc/default/grub'
sudo grub2-mkconfig -o /boot/efi/EFI/centos/grub.cfg
sudo reboot
相关文章：
AMD CPU下pytorch 多GPU运行卡死和死锁解决
参考链接 https://medium.com/amitparekh/solving-ddp-deadlock-with-multiple-gpus-and-amd-cpus-442186632034 简要说明 AMD的IOMMU和NVIDIA的NCCL不兼容问题导致AMD的IOMMU是BIOS 级组件,它基本上充当将虚拟地址映射到 GPU 上的物理地址的接口,它的全部目的是让 CPU 和 G…...
Swift 开发教程系列 - 第12章：协议与协议扩展
协议（Protocol）是 Swift 的一种重要特性，它定义了实现特定功能的方法、属性或其他要求。通过协议，可以将行为定义从具体实现中分离，使代码更具可读性和扩展性。Swift 的协议支持协议扩展，这一特性允许我们为…...
麒麟V10，arm64，离线安装docker和docker-compose
文章目录 一、下载1.1 docker1.2 docker-compose1.3 docker.service 二、安装三、验证安装成功3.1 docker3.2 docker-compose 需要在离线环境的系统了里面安装docker。目前国产化主推的是麒麟os和鲲鹏的cpu，这块的教程还比较少，记录一下。 # cat /etc/ky…...
NUXT3学习日记二（样式配置、引入组件库、区分在服务端还是在客户端渲染）
上一章已经给大家分享官网下载的nuxt3了，下面正式进入我所要说的内容吧 一、初始化样式 想必大家从我的git下载下来的nuxt3，能看到nuxt.config.ts这个文件了吧。 这里我们有两种css配置方式 1、css:[~/assets/base.scss] 这种方式不能在scss文件中定义…...
FPGA/Verilog,Quartus环境下if-else语句和case语句RT视图对比/学习记录
基本概念 RTL（Register - Transfer - Level）视图：是一种硬件描述语言的抽象层次，用于描述数字电路中寄存器之间的数据传输和操作。在这个层次上，可以看到电路的基本结构，如寄存器、组合逻辑、多路复用器等…...
Javascript高级—闭包问题
闭包问题 循环中赋值为引用的问题 for (var i 1; i < 5; i) {setTimeout(function timer() {console.log(i)}, i * 1000) }解决方法有3种 第一种，使用立即执行函数方式 for (var i 1; i < 5; i) {(fuction(j){setTimeout(function timer() {console.log…...
C#入门 017 字段，属性，索引器，常量
字段，属性，索引器，常量都表示数据 字段 什么是字段 字段(field)是一种表示与对象或类型(类与结构体)关联的变量字段是类型的成员，又称“成员变量，写在类体里面与对象关联的字段亦称“实例字段，表示某个对…...
磐石云语音助手拦截介绍
呼叫中心用户实际应用场景下最高会有超过30%的和语音助手；无声主要是进入了语音信箱;如：“听到滴声后留言”，”漏话提醒““发送请按1，重录请按2”以及拨打过程中客户主动拒接产生的”您拨打的用户正忙“，”关机“”停…...
JSP执行过程及其与Servlet执行效率的比较
JSP（Java Server Pages）和Servlet都是Java Web开发中常用的技术，它们都用于动态生成Web页面。然而，JSP和Servlet在执行过程和效率上存在一些差异。本文将详细探讨JSP的执行过程，并比较JSP与Servlet的执行效率。 一、J…...
open3d
open3d open3d用于 3D 数据处理的现代库。 简介 Open3D 是一个开源库，支持快速开发处理 3D 数据的软件。Open3D 前端公开了一组精心挑选的 C 和 Python 数据结构和算法。后端经过高度优化，并设置为并行化。Open3D 是从零开始开发的，具有一更…...
Vue中优雅的使用Echarts的三种方式
一、原始方法直接使用 1、安装ECharts： npm install echarts --save 2、创建一个Vue公共组件 EChart.vue： <template><div :style"{width: 100%, height: 300px}" ref"chart"></div> </template><scri…...
SpringBoot配置文件/日志
目录 一,SpringBoot配置文件 1,配置文件的格式: 2,properties 3,yml 1,properties与yml的转换 2,读取配置选哪个中的内容 3,单双引号的差异: 4,配置对象: 5,配置集合/配置map 6,yml的优缺点: 二,验证码: 学习目的: 实现样例: 接口定义: 代码总结: 三,日志: 1,概…...
微服务架构面试内容整理-SpringCloud Netflix与Spring Cloud Alibaba比较
Spring Cloud Netflix 和 Spring Cloud Alibaba 都是用于构建微服务架构的解决方案，但它们在设计理念、组件和使用场景上存在一些差异。以下是它们的比较： 1. 服务注册与发现 ● Spring Cloud Netflix：使用 Eureka 作为服务注册和发现的组件。Eureka 是基于 REST 的，适合服…...
JDBC魔法：连接MySQL数据库与数据操作的秘籍
文章目录 一. JDBC介绍二. 数据库驱动1.DriverManager2.Connection3.PreparedStatement4.ResultSet 三. JDBC连接MySQL1. 加载驱动2. 获得连接3. 关闭连接 四. JDBC实现数据新增五. JDBC实现数据删除 一. JDBC介绍 JDBC（Java Database Connectivity）是Ja…...
深入了解Scratch：引导初学者开启编程之旅
引言 在当今数字化时代，编程已不再是成年人的专利，而是一项逐渐向低年龄段普及的技能。Scratch作为一款面向儿童和青少年的图形化编程语言，以其简单易用且充满趣味性的特点，成为了许多初学者学习编程的首选工具。本文将深入探讨S…...
js复制内容到剪切板
复制内容到剪切板 最近预报一个需求需要点击按钮复制当前到行的内容到剪切板， 所以写了这个工具 export function copyText(text: string, prompt: string | null 已成功复制到剪切板!) {if (navigator.clipboard) {return navigator.clipboard.writeText(text).th…...
代码 RNN原理及手写复现
29、PyTorch RNN的原理及其手写复现_哔哩哔哩_bilibili 笔记连接: https://pan.baidu.com/s/1_Sm7ptEiJtTTq3vQWgOTNg?pwd2rei 提取码: 2rei import torch import torch.nn as nn bs,T2,3 # 批大小，输入序列长度 input_size,hidden_size 2,3 # 输入特征大小&a…...
企业官网的在线客服，如何提高效果？
企业官网的在线客服，如何提高效果？ 作者：开源呼叫中心系统 FreeIPCC，github地址：https://github.com/lihaiya/freeipcc 提高企业官网在线客服的效果，是提升客户体验、增强客户满意度和忠诚度的关键。一个…...
「实战应用」如何可视化 DHTMLX Scheduler 中的资源工作量？
DHTMLX Scheduler是一个全面的 UI 组件，用于处理面向业务的 Web 应用程序中复杂的调度和任务管理需求。但是，某些场景可能需要自定义解决方案。例如，如果项目的资源（即劳动力）有限，则需要确保以更高的精度分…...
论文阅读《BEVFormer》
BEVFormer: Learning Bird’s-Eye-View Representation from Multi-Camera Images via Spatiotemporal Transformers 目录 摘要1 介绍2 相关工作2.1 基于Transformer的2D感知 摘要 3D视觉感知任务对于自动驾驶系统至关重要，包括基于多相机图像的3D检测和地图分割。…...
web vue 项目 Docker化部署
Web 项目 Docker 化部署详细教程 目录 Web 项目 Docker 化部署概述Dockerfile 详解 构建阶段生产阶段 构建和运行 Docker 镜像 1. Web 项目 Docker 化部署概述 Docker 化部署的主要步骤分为以下几个阶段： 构建阶段（Build Stage）：…...
JDK 17 新特性
#JDK 17 新特性 /**************** 文本块 *****************/ python/scala中早就支持，不稀奇 String json “”" { “name”: “Java”, “version”: 17 } “”"; /**************** Switch 语句 -> 表达式 *****************/ 挺好的ÿ…...
自然语言处理——Transformer
自然语言处理——Transformer 自注意力机制多头注意力机制Transformer 虽然循环神经网络可以对具有序列特性的数据非常有效，它能挖掘数据中的时序信息以及语义信息，但是它有一个很大的缺陷——很难并行化。 我们可以考虑用CNN来替代RNN，但是…...
全面解析各类VPN技术：GRE、IPsec、L2TP、SSL与MPLS VPN对比
目录 引言 VPN技术概述 GRE VPN 3.1 GRE封装结构 3.2 GRE的应用场景 GRE over IPsec 4.1 GRE over IPsec封装结构 4.2 为什么使用GRE over IPsec？ IPsec VPN 5.1 IPsec传输模式（Transport Mode） 5.2 IPsec隧道模式（Tunne…...
【学习笔记】erase 删除顺序迭代器后迭代器失效的解决方案
目录 使用 erase 返回值继续迭代使用索引进行遍历 我们知道类似 vector 的顺序迭代器被删除后，迭代器会失效，因为顺序迭代器在内存中是连续存储的，元素删除后，后续元素会前移。 但一些场景中，我们又需要在执行删除操作…...
React从基础入门到高级实战：React 实战项目 - 项目五：微前端与模块化架构
React 实战项目：微前端与模块化架构 欢迎来到 React 开发教程专栏 的第 30 篇！在前 29 篇文章中，我们从 React 的基础概念逐步深入到高级技巧，涵盖了组件设计、状态管理、路由配置、性能优化和企业级应用等核心内容。这一次&…...
Element-Plus：popconfirm与tooltip一起使用不生效？
你们好，我是金金金。 场景 我正在使用Element-plus组件库当中的el-popconfirm和el-tooltip，产品要求是两个需要结合一起使用，也就是鼠标悬浮上去有提示文字，并且点击之后需要出现气泡确认框 代码 <el-popconfirm title"是…...
LeetCode - 148. 排序链表
目录 题目 思路 基本情况检查 复杂度分析 执行示例 读者可能出的错误 正确的写法 题目 148. 排序链表 - 力扣（LeetCode） 思路 链表归并排序采用"分治"的策略，主要分为三个步骤： 分割：将链表从中间…...
大模型的LoRa通讯详解与实现教程
一、LoRa通讯技术概述 LoRa（Long Range）是一种低功耗广域网（LPWAN）通信技术，由Semtech公司开发，特别适合于物联网设备的长距离、低功耗通信需求。LoRa技术基于扩频调制技术，能够在保持低功耗的同时实现数公里甚至数十公里的通信距离。 LoRa的主要特点 长距离通信：在城…...
JavaScript性能优化实战大纲
性能优化的核心目标 降低页面加载时间，减少内存占用，提高代码执行效率，确保流畅的用户体验。 代码层面的优化 减少全局变量使用，避免内存泄漏 // 不好的实践 var globalVar I am global;// 好的实践 (function() {var localV…...