Linux学习笔记-应用层篇
1、Linux进程、线程概念/区别
Linux进程和线程是计算机系统中两种不同的资源分配和调度单位。
进程是计算机系统进行资源分配和调度的基本单位,也被认为是正在运行的程序。在面向线程的计算机结构中,进程是线程的容器。进程拥有独立的内存和系统资源,并且它的创建、销毁和切换等操作都需要付出较大的开销。进程间的数据共享需要操作系统的干预,同时进程的逻辑控制相对复杂,需要和主程序进行交互,以及需要跨进程边界。
线程是一种轻量级的进程,没有系统资源,可以被看作是进程中的一条执行路径。线程是操作系统调度的最小单位,它与进程相比,切换的开销较小。在一个进程内部,多个线程之间可以共享资源,并且线程间通信更简单,因为它们共享相同的地址空间和数据。线程的创建、销毁和切换等操作也相对于进程来说较简单。
总的来说,进程和线程在资源分配、工作效率和执行方式上有明显的区别。进程拥有独立的资源,而线程则是轻量级的进程,没有独立资源。进程切换时需要保留资源,而线程切换时不需要保留资源。此外,进程可以被操作系统直接调度,而线程则必须在进程中运行。
2、进程、线程的同步方式
Linux进程和线程的同步方式有多种,以下是一些常见的方式:
- 进程间的同步方式:
信号量(Semaphore):主要作为进程间以及同一进程不同线程之间的同步手段。
套接口(Socket):更为一般的进程间通信机制,可用于不同机器之间的进程间通信。
- 线程间的同步方式:
互斥锁(Mutex):通过锁机制实现线程间的同步。同一时刻只允许一个线程执行一个关键部分的代码。
条件变量(Condition Variable):与互斥锁结合使用,用于线程间的同步。当某个条件不满足时,线程可以等待,直到条件满足为止。
信号量(Semaphore):同样可以用于线程间的同步。
无锁互斥访问(Lock-Free Access):通过一些特殊的技术,使得多个线程在并发条件下对共享资源进行无锁访问的方式。例如,使用原子操作或CAS操作等。
需要注意的是,进程和线程的同步方式主要是为了解决并发访问共享资源时可能出现的冲突和竞争条件,保证数据的一致性和正确性。不同的同步方式具有不同的特点和适用场景,需要根据实际情况进行选择和设计。
3、锁的概念,互斥锁、自旋锁等
锁是计算机科学中用于实现并发控制的一种同步机制。在多线程编程中,锁被用来防止多个线程同时访问共享资源,避免数据竞争和状态不一致的问题。
互斥锁(Mutex)是一种常用的锁机制,其基本原理是当一个线程获取了互斥锁后,其他尝试获取该锁的线程将会被阻塞,直到原线程释放该锁。这样可以确保每个时刻只有一个线程可以访问共享资源。
自旋锁(spinlock)是一种非阻塞锁,当一个线程尝试获取锁而失败时,它不会像互斥锁那样进入阻塞状态,而是继续循环尝试获取锁,同时消耗CPU时间。自旋锁适合用于短时间内的资源保护,避免频繁的线程上下文切换带来的开销。
在使用这些锁时,需要注意避免死锁和饥饿问题。死锁是指多个线程相互等待对方释放锁,导致所有线程都无法继续执行的情况。饥饿问题是某些线程长时间无法获取到锁,从而使其他线程一直执行而无法获得机会获取锁的问题。
另外,还有读写锁(read-write lock)这种锁,允许多个线程同时读取共享资源,但在写入时需要独占式的访问。这样可以提高并发性能,适用于读操作远多于写操作的情况。
4、fork clone
在Linux下,fork和clone都是用于创建进程的技术。
- Fork(分叉):在Linux中,fork()系统调用用于创建一个新的进程,该进程是原始进程的副本。新进程(子进程)继承原始进程(父进程)的代码、数据、打开的文件描述符等。子进程有一个新的进程ID,并且其大部分状态与父进程相同,但也有一些状态(如PID、父PID等)是不同的。fork()调用返回两次:一次在父进程中返回子进程的PID,另一次在子进程中返回0。
- Clone(克隆):clone()系统调用是Linux 2.6.23版本引入的一种创建新进程的方法,它允许创建一个共享部分或全部地址空间的新进程。clone()调用创建一个新进程,并可以选择性地共享父进程的地址空间(例如堆、栈、代码段等)。这种共享使得新进程可以访问和修改共享地址空间的内容,从而实现更高效的进程间通信。clone()调用返回一个新的进程ID,该ID可以用于识别新创建的进程。
需要注意的是,fork和clone都是Linux系统调用,它们的使用需要遵循相应的系统调用规范和参数约定。在编写使用这些系统调用的程序时,需要确保正确地处理返回值和错误情况。
5、创建守护进程
在Linux中,创建一个守护进程通常需要以下步骤:
- 在父进程中创建子进程:使用fork()系统调用创建一个子进程。子进程是父进程的副本,并且继承父进程的代码、数据和打开的文件描述符。
- 在子进程中创建新的会话:使用setsid()系统调用在子进程中创建一个新的会话。这将使子进程成为新的会话的领导者,并脱离父进程的控制终端。
- 设置 umask 为 0:使用umask()函数将文件模式创建掩码设置为0,以确保守护进程创建的文件具有适当的权限。
- 更改当前工作目录:使用chdir()系统调用将当前工作目录更改为根目录(/),以确保守护进程不会保持对原始工作目录的引用。
- 关闭不再需要的文件描述符:使用close()系统调用关闭父进程和子进程之间共享的文件描述符,例如标准输入、标准输出和标准错误输出。
- 设置新的标准输入、标准输出和标准错误输出:使用open()系统调用将标准输入、标准输出和标准错误输出重定向到适当的文件或设备。
- 设置进程组ID和会话ID:使用setpgid()和setsid()系统调用设置进程组ID和会话ID,以确保守护进程正确地与其他进程隔离。
- 将文件创建掩码重置为0:再次使用umask()函数将文件模式创建掩码重置为0,以确保守护进程创建的文件具有适当的权限。
- 进入主循环:在守护进程中编写主循环逻辑,以便它可以执行所需的任务。
这些步骤可以帮助您创建一个基本的守护进程。请注意,这只是一个基本的框架,您可能需要根据您的具体需求进行修改和扩展。此外,还应注意处理错误和异常情况,并确保正确释放资源。
6、用户空间、内核空间
Linux操作系统将虚拟内存分为两部分:用户空间和内核空间。
用户空间供各个进程使用,包括用户应用程序和操作系统内核模块(例如Linux内核)。每个进程都有其独立的用户空间,它们之间相互隔离且不能互相访问。在用户空间中,每个进程都有其自己的虚拟地址空间,并且可以通过系统调用进入内核空间。
内核空间是Linux内核使用的虚拟内存区域。它包括操作系统内核模块、设备驱动程序、内存管理系统等关键组件。内核空间对所有进程都是共享的,即所有进程都可以访问内核空间中的代码和数据。内核空间具有更高的权限级别,可以执行诸如管理内存、控制硬件设备等敏感操作。
用户空间和内核空间之间的转换需要通过系统调用完成。系统调用是用户空间进程和内核空间之间的接口,它允许用户空间进程将请求传递给内核,并使内核执行相应的操作。例如,当用户空间进程需要访问文件系统时,它会通过系统调用将请求传递给内核,然后内核会加载适当的文件系统模块并执行所需的操作。
需要注意的是,内核空间和用户空间都是虚拟内存,它们并不直接对应于物理内存。虚拟内存是一种内存管理技术,它通过将进程的虚拟地址映射到物理内存来实现内存的独立管理。这样,每个进程都有自己的独立虚拟地址空间,可以保护不同进程之间的数据和代码不相互干扰。
相关文章:
Linux学习笔记-应用层篇
1、Linux进程、线程概念/区别 Linux进程和线程是计算机系统中两种不同的资源分配和调度单位。 进程是计算机系统进行资源分配和调度的基本单位,也被认为是正在运行的程序。在面向线程的计算机结构中,进程是线程的容器。进程拥有独立的内存和系统资源&am…...
MySQL数据库的存储引擎
目录 一、存储引擎概念 二、存储引擎 2.1MyISAM 2.11MyISAM的特点 2.12MyISAM表支持3种不同的存储格式: 2.2 InnoDB 2.21InnoDB特点介绍 三、InnoDB与MyISAM 区别 四、怎么样选择存储引擎 五、查看存储引擎 六、查看表使用的存储引擎 七、修改存储引擎 …...
Linux-多路转接-epoll
epoll 接口认识epoll_createepoll_ctlepoll_wait epoll工作原理在内核中创建的数据结构epoll模型的一个完整工作流程 epoll工作模式LT-水平触发ET-边缘触发两种方式的对比 epoll的使用场景对于poll的改进惊群效应什么是惊群效应如何解决惊群效应原子操作/mutex/spinlock如何选择…...
Java面试被问了几个简单的问题,却回答的不是很好
作者:逍遥Sean 简介:一个主修Java的Web网站\游戏服务器后端开发者 主页:https://blog.csdn.net/Ureliable 觉得博主文章不错的话,可以三连支持一下~ 如有需要我的支持,请私信或评论留言! 前言 前几天参加了…...
概率论几种易混淆的形式
正态分布标准型 x − μ σ \frac{x - \mu}{\sigma} σx−μ 大数定律形式 P { X ≤ ∑ i 1 n x i − n μ n σ 2 } ∫ − ∞ X 1 2 π e − x 2 2 d x P\{X \le \frac{\sum_{i 1}^{n}x_i -n\mu}{\sqrt{n\sigma^2}} \} \int _{-\infty}^{X}\frac{1}{\sqrt{2\pi}}e^{-\fr…...
PyTorch数据增强后的结果展示
from PIL import Image import torch from torchvision import transformstrans transforms.Compose([transforms.ToTensor(), transforms.RandomErasing(p0.9, value 120, inplaceTrue)]) # 这里Compose是所做的变换img_path 02-56-45-060-1454-camra1.bmp img Image.open…...
指定程序在哪个GPU上运行
摘要: 当本地(或服务器)有个多个GPU时,需要指定程序在指定GPU上运行,需要做以下设置。 目录 一、在终端上指定GPU二、在程序中指定GPU三、系统变量指定GPU四、pytorch中指定GPU 一、在终端上指定GPU 在终端运行程序时…...
Linux CentOS7 vim多文件编辑
使用vim编辑多个文件,十分常用的操作。本文从打开、显示、切换文件到退出,进行简单讨论。 一、打开文件 1.一次打开多个文件 vim还没有启动的时候,在终端里输入vim file1 file2 … filen便可以打开所有想要打开的文件。 执行命令 vim fil…...
PAT甲级真题1153: 解码PAT准考证
🕺作者: 主页 我的专栏C语言从0到1探秘C数据结构从0到1探秘Linux菜鸟刷题集 😘欢迎关注:👍点赞🙌收藏✍️留言 🏇码字不易,你的👍点赞🙌收藏❤️关注对我真的…...
linux信号
title: linux信号 createTime: 2020-10-29 18:05:52 updateTime: 2020-10-29 18:05:52 categories: linux tags: SIGHUP 终止进程 终端线路挂断[喝小酒的网摘]http://blog.hehehehehe.cn/a/16999.htm SIGINT 终止进程 中断进程 SIGQUIT 建立CORE文件终止进程,并且生…...
JavaWeb开发-05-SpringBootWeb请求响应
一.请求 1.Postman 2.简单参数 package com.wjh.controller;import org.springframework.web.bind.annotation.RequestMapping; import org.springframework.web.bind.annotation.RestController;import javax.servlet.http.HttpServletRequest;/** 测试请求参数接受*/ R…...
Ubuntu下载
参考文档: 镜像文件:VMware下安装ubuntu 16.04(全步骤)_vmwaubuntu-16.04.4-desktop-amd64.iso_ST0new的博客-CSDN博客 vmware tools使用安装:VMware——VMware Tools的介绍及安装方法_William.csj的博客-CSDN博客 …...
Vue 的组件加载顺序和渲染顺序
1、结论先行 组件的加载顺序是自上而下的,也就是先加载父组件,再递归地加载其所有的子组件。 而组件渲染顺序是按照深度优先遍历的方式,也就是先渲染最深层的子组件,再依次向上渲染其父组件。 2、案例 下面是一个简单的示例代…...
leetcode Top100(17)矩阵置零
给定一个 m x n 的矩阵,如果一个元素为 0 ,则将其所在行和列的所有元素都设为 0 。请使用 原地 算法。 示例 1: 输入:matrix [[1,1,1],[1,0,1],[1,1,1]] 输出:[[1,0,1],[0,0,0],[1,0,1]]示例 2: 输入&…...
论文精读(2)—基于稀疏奖励强化学习的机械臂运动规划算法设计与实现(内含实现机器人控制的方法)
目录 1.作者提出的问题及解决方向 2.延深-用如何用强化学习对机器人进行控制 2.1思路 2.2DQN和DDPG在机器人控制中的应用 3.解决方案 3.1思路 3.2实验 3.3创新点 4.展望 1.作者提出的问题及解决方向 目的:使机械臂在非结构化环境下实现端到端的自主学习控制…...
快速安装keepalive
快速安装keepalive #安装 yum install keepalived -y# 查看版本: rpm -q -a keepalived#修改配置文件 vim /etc/keepalived.conf虚拟 ip :随意选一个,不被占用的ip即可。...
nginx实现反向代理实例
1 前言 1.1 演示内容 在服务器上访问nginx端口然后跳转到tomcat服务器 1.2 前提条件 前提条件:利用docker安装好nginx、tomcat、jdk8(tomcat运行需要jdk环境) 只演示docker安装tomcat: 默认拉取最新版tomcat docker pull t…...
使用Freemarker填充模板导出复杂Excel,其实很简单哒!
文章目录 1. 需求分析2. 对象生成3. 列表插值4. 另存xml格式化5. ftl修改6. 程序转化7. 犯的错误8. 总结 1. 需求分析 类似这样的一个表格 我们需要从数据库中查询对应的数据,将其汇总进该表格,并且可能还需要复制表格项,我这个案例中没有&a…...
windows环境下安装logstash同步数据,注册系统服务
windows环境下安装logstash同步数据,注册系统服务 此方法适用于Windows环境,同一个配置文件配置多个管道,并且配置系统服务,防止程序被杀进程 一、安装logstash (1)下载压缩包,解压后修改con…...
java服务内存说明及配置详解
java进程内存 JVM内存分布图: 【java进程内存】【堆外内存】 【jvm堆内存】 【堆外内存】 【Metaspace】 【Direct Memory】【JNI Memory】【code_cache】 … 堆外内存泄漏的排查在于【本地内存(Native Memory)】【Direct Memory】【JNI Memory】 一般…...
ubuntu搭建nfs服务centos挂载访问
在Ubuntu上设置NFS服务器 在Ubuntu上,你可以使用apt包管理器来安装NFS服务器。打开终端并运行: sudo apt update sudo apt install nfs-kernel-server创建共享目录 创建一个目录用于共享,例如/shared: sudo mkdir /shared sud…...
DockerHub与私有镜像仓库在容器化中的应用与管理
哈喽,大家好,我是左手python! Docker Hub的应用与管理 Docker Hub的基本概念与使用方法 Docker Hub是Docker官方提供的一个公共镜像仓库,用户可以在其中找到各种操作系统、软件和应用的镜像。开发者可以通过Docker Hub轻松获取所…...
工程地质软件市场:发展现状、趋势与策略建议
一、引言 在工程建设领域,准确把握地质条件是确保项目顺利推进和安全运营的关键。工程地质软件作为处理、分析、模拟和展示工程地质数据的重要工具,正发挥着日益重要的作用。它凭借强大的数据处理能力、三维建模功能、空间分析工具和可视化展示手段&…...
mysql已经安装,但是通过rpm -q 没有找mysql相关的已安装包
文章目录 现象:mysql已经安装,但是通过rpm -q 没有找mysql相关的已安装包遇到 rpm 命令找不到已经安装的 MySQL 包时,可能是因为以下几个原因:1.MySQL 不是通过 RPM 包安装的2.RPM 数据库损坏3.使用了不同的包名或路径4.使用其他包…...
零基础在实践中学习网络安全-皮卡丘靶场(第九期-Unsafe Fileupload模块)(yakit方式)
本期内容并不是很难,相信大家会学的很愉快,当然对于有后端基础的朋友来说,本期内容更加容易了解,当然没有基础的也别担心,本期内容会详细解释有关内容 本期用到的软件:yakit(因为经过之前好多期…...
Springboot社区养老保险系统小程序
一、前言 随着我国经济迅速发展,人们对手机的需求越来越大,各种手机软件也都在被广泛应用,但是对于手机进行数据信息管理,对于手机的各种软件也是备受用户的喜爱,社区养老保险系统小程序被用户普遍使用,为方…...
技术栈RabbitMq的介绍和使用
目录 1. 什么是消息队列?2. 消息队列的优点3. RabbitMQ 消息队列概述4. RabbitMQ 安装5. Exchange 四种类型5.1 direct 精准匹配5.2 fanout 广播5.3 topic 正则匹配 6. RabbitMQ 队列模式6.1 简单队列模式6.2 工作队列模式6.3 发布/订阅模式6.4 路由模式6.5 主题模式…...
Mysql8 忘记密码重置,以及问题解决
1.使用免密登录 找到配置MySQL文件,我的文件路径是/etc/mysql/my.cnf,有的人的是/etc/mysql/mysql.cnf 在里最后加入 skip-grant-tables重启MySQL服务 service mysql restartShutting down MySQL… SUCCESS! Starting MySQL… SUCCESS! 重启成功 2.登…...
通过MicroSip配置自己的freeswitch服务器进行调试记录
之前用docker安装的freeswitch的,启动是正常的, 但用下面的Microsip连接不上 主要原因有可能一下几个 1、通过下面命令可以看 [rootlocalhost default]# docker exec -it freeswitch fs_cli -x "sofia status profile internal"Name …...
Python网页自动化Selenium中文文档
1. 安装 1.1. 安装 Selenium Python bindings 提供了一个简单的API,让你使用Selenium WebDriver来编写功能/校验测试。 通过Selenium Python的API,你可以非常直观的使用Selenium WebDriver的所有功能。 Selenium Python bindings 使用非常简洁方便的A…...
