当前位置: 首页 > news >正文

云计算——常见集群策略

  • 作者简介:一名云计算网络运维人员、每天分享网络与运维的技术与干货。 

  •  座右铭:低头赶路,敬事如仪

  • 个人主页:网络豆的主页​​​​​

目录

 前言

一.什么是集群

二.集群策略

1.虚拟机HA

实现虚拟机高可用性通常涉及以下关键组件和技术:

2.动态资源调度(DRS)

DRS的主要功能包括:

3.分布式电源管理

​编辑DPM的主要功能和原理包括:


 前言

本章将会讲解云计算中常见的集群策略,了解什么是集群。


一.什么是集群

集群是一种计算机系统,通过一组计算机或服务器的软硬件连接起来高度紧密地协作完成计算工作。在客户端看来为其提供服务的只有一台设备,实际上它是一群设备的集合,只不过这些设备提供的服务一样。

 集群系统中单个计算机通常称为节点,通过局域网连接,利用多个计算机进行并行计算获得很高计算速度,也可以用多个计算机做备份提高可靠性。


二.集群策略

1.虚拟机HA

HA(High Availability)高可用性,一种让服务中断尽可能少的技术。

将多台主机组建成一个故障转移集群,运行在集群上的服务(或VM)不会因为单台主机的故障而停止。

提升故障恢复速度,降低业务中断时间、保障业务连续性、实现一定的系统自维护。

实现虚拟机高可用性通常涉及以下关键组件和技术:

  1. 集群:一组物理或虚拟化的计算节点,通过集群技术协同工作,共同提供高可用性和负载均衡。

  2. 心跳检测:在集群中,每个宿主机都会监视其他宿主机的状态。这可以通过心跳检测机制实现,它定期发送心跳信号以确认宿主机的运行状态。

  3. 故障检测和故障转移:当一个宿主机被检测到发生故障或变得不可用时,集群中的其他宿主机会接管该宿主机上运行的虚拟机,实现虚拟机的故障转移。这需要快速检测宿主机故障的事件,并在较短的时间内将虚拟机迁移到可用的宿主机上。

  4. 共享存储:为了实现虚拟机的迁移,通常需要将虚拟机的磁盘映像文件存储在共享存储中,这样其他宿主机才能够访问这些虚拟机的磁盘数据。

  5. 虚拟机迁移:虚拟机迁移是将运行中的虚拟机从一个宿主机迁移到另一个宿主机的过程。这个过程可以是冷迁移(虚拟机关机状态下进行)或热迁移(虚拟机在运行状态下进行)。

  6. 自动化:虚拟机高可用性通常是自动进行的,即在检测到宿主机故障时,自动触发虚拟机的故障转移过程,而不需要管理员手动干预。

实现虚拟机高可用性需要使用虚拟化管理工具,如VMware vSphere的vSphere High Availability(vSphere HA)或Microsoft Hyper-V的Failover Clustering。这些工具提供了虚拟机故障检测、自动故障转移、资源调度等功能,以确保虚拟机的连续运行和可用性


2.动态资源调度(DRS)

DRS(Dynamic resource scheduling)动态资源调度,根据对资源池资源负载的动态监控,合理触发均匀分配规则,实现资源池中的物理服务器之间重新分配资源,达到负载均衡、消峰填谷

当物理服务器上负载过大时,通过DRS将虚拟机迁移到其他负载较轻的物理服务器上。

当虚拟机遇到负载增大时,DRS将为资源池中的物理服务器重新分配虚拟机可使用资源,在多个虚拟机之间智能地分配可用资源。

DRS的主要功能包括:

  1. 负载均衡:DRS会实时监视集群中宿主机的资源使用情况,包括CPU、内存、存储等,当某些宿主机负载较高时,它会自动将虚拟机迁移到资源利用较低的宿主机上,从而实现负载均衡。

  2. 预测性分析:DRS通过分析历史性能数据和趋势,来预测虚拟机资源需求的变化,从而更好地规划资源分配,防止资源瓶颈出现。

  3. 自动化:DRS是自动进行资源调度的,它根据预设的规则和策略,实时监控集群中的资源状况,并在需要时自动触发虚拟机的迁移,无需管理员手动干预。

  4. 基于策略的调度:管理员可以配置不同的调度策略,根据具体的需求和业务场景来优化资源调度。例如,可以基于CPU使用率、内存利用率、虚拟机优先级等指标来制定调度策略。

  5. 限制与优先级:DRS可以配置资源调度的限制和优先级,以确保关键虚拟机或特定虚拟机组获得优先处理,并避免过度迁移对性能造成影响。

DRS可以显著提高虚拟化环境的资源利用率,降低运维成本,提高性能和可用性。它是VMware vSphere平台中非常重要的功能之一,特别适用于大规模的虚拟化集群。


3.分布式电源管理

DPM(Distributed power management )分布式电源管理,用于业务较轻时,把虚拟机动态“集中”到集群中的少部分主机上,将其他主机待机,节省电力消耗,等业务量较大时,再重新唤醒之前待机的主机。

执行DPM策略的前提是开启DRS策略,即集群必须先设置好DRS策略,才能设置DPM策略。

DPM的主要功能和原理包括:

  1. 电源状态监控:DPM实时监测集群中每个宿主机的资源使用情况,包括CPU、内存、存储等。同时,它还可以监控宿主机的电源状态,包括开机、关机和待机。

  2. 资源负载平衡:DPM可以结合VMware DRS(动态资源调度)来进行资源负载平衡。如果在某些宿主机上资源利用率较低,DPM可以将虚拟机自动迁移到这些宿主机上,从而集中使用资源,使得其他宿主机可以进入省电模式。

  3. 自动电源管理:DPM可以根据预先定义的策略和阈值来自动控制宿主机的电源状态。当负载较低时,DPM可以选择关闭或进入待机状态,从而节约能源。而当负载增加时,DPM会自动唤醒宿主机,确保虚拟机的性能和可用性。

  4. 节能模式:在DPM中,可以定义不同的节能模式,例如“高性能”模式和“节能”模式。在高性能模式下,所有宿主机都保持开机状态以满足高负载需求。而在节能模式下,DPM会根据负载情况智能地控制宿主机的电源状态。

  5. 预测性分析:类似于VMware DRS,DPM也可以使用预测性分析来预测资源需求的变化,从而更加智能地进行电源管理。

通过使用分布式电源管理,企业可以最大限度地优化资源利用,减少能源消耗和运营成本,同时还可以对环境产生积极影响,减少碳排放和环境影响。


 

 创作不易,求关注,点赞,收藏,谢谢~ 

相关文章:

云计算——常见集群策略

作者简介:一名云计算网络运维人员、每天分享网络与运维的技术与干货。 座右铭:低头赶路,敬事如仪 个人主页:网络豆的主页​​​​​ 目录 前言 一.什么是集群 二.集群策略 1.虚拟机HA 实现虚拟机高可用性通常涉及以下关键…...

c语言locale.h简介

<locale.h>提供的函数用于控制c标准库中对于不同的地区行为不一样的部分。&#xff08;地区通常是国家或者某种特定语言的地理区域&#xff09; 一、locale.h简单介绍 在标准库里&#xff0c;依赖地区的部分通常包括以下几项&#xff1a; 数字量的格式 货币的格式 字符…...

C++运算符重载详解(赋值、流插入流提取、前置后置++、取地址)

C运算符重载详解 基本介绍运算符重载案列1. 赋值运算符重载2. 前置和后置重载3. cout&#xff0c;cin(流插入&#xff0c;流提取重载)4. 取地址重载 基本介绍 C为了增强代码的可读性引入了运算符重载&#xff0c;运算符重载是具有特殊函数名的函数&#xff0c;也具有其 返回值…...

sql的count函数优化

sql的count(1)函数会执行遍历表统计符合条件的数目&#xff0c;下面有两个sql 第一条&#xff1a; select count(1) from membership_call_detail_statistics a where a.repository_id f2a4ed6b3e074e33bd99998c1def26f8 and a.statistics_date between 2023-04-01 00:00:0…...

Ai创作系统ChatGPT源码搭建教程+附源码

系统使用Nestjs和Vue3框架技术&#xff0c;持续集成AI能力到本系统&#xff01; 更新内容&#xff1a; 同步官方图片重新生成指令 同步官方 Vary 指令 单张图片对比加强 Vary(Strong) | Vary(Subtle) 同步官方 Zoom 指令 单张图片无限缩放 Zoom out 2x | Zoom out 1.5x 新增GP…...

力扣 416. 分割等和子集

题目来源&#xff1a;https://leetcode.cn/problems/partition-equal-subset-sum/description/ C题解&#xff08;思路来源代码随想录&#xff09; &#xff1a; 背包问题有多种背包方式&#xff0c;常见的有&#xff1a;01背包、完全背包、多重背包、分组背包和混合背包等等。…...

sqlyog导出mysql数据字典

1.打开sqlyog执行sql获取字典数据 SELECTt.COLUMN_NAME AS 字段名,t.COLUMN_TYPE AS 数据类型,CASE IFNULL(t.COLUMN_DEFAULT,Null) WHEN THEN 空字符串 WHEN Null THEN NULL ELSE t.COLUMN_DEFAULT END AS 默认值,CASE t.IS_NULLABLE WHEN YES THEN 是 ELSE 否 END AS 是否…...

【C++】多态的实现及其底层原理

个人主页&#xff1a;&#x1f35d;在肯德基吃麻辣烫 我的gitee&#xff1a;gitee仓库 分享一句喜欢的话&#xff1a;热烈的火焰&#xff0c;冰封在最沉默的火山深处。 文章目录 前言一、什么是多态&#xff1f;二、多态的构成条件2.1什么是虚函数&#xff1f;2.2虚函数的重写2…...

【网络编程】TCP带外数据总结

文章目录 一、带外数据基本知识二、带外数据的读写三、检测带外数据是否到达3.1、select上的异常事件3.2、SIGURG信号 四、带外标记 一、带外数据基本知识 带外数据&#xff08;Out Of Band&#xff0c;OOB&#xff09;&#xff0c;用于迅速通告对方本端发生的重要事件&#xf…...

高薪程序员面试题精讲系列133之微服务里的网关有哪些实现方案?你熟悉Gateway网关吗?

一. 面试题及剖析 1. 今日面试题 微服务里的网关有哪些实现方案? Gateway网关是怎么实现的? 你用过Gateway网关吗? Gateway里有哪些路由规则? 2. 题目剖析 在上一篇文章中,壹哥给大家梳理了微服务里的远程调用、熔断等相关的面试题。今天这篇文章,壹哥会重点给大家梳理…...

计算机网络(4) --- 协议定制

计算机网络&#xff08;3&#xff09; --- 网络套接字TCP_哈里沃克的博客-CSDN博客https://blog.csdn.net/m0_63488627/article/details/132035757?spm1001.2014.3001.5501 目录 1. 协议的基础知识 TCP协议通讯流程 ​编辑 2.协议 1.介绍 2.手写协议 1.内容 2.接口 …...

【Mybatis】Mybatis架构简介

文章目录 1.整体架构图2. 基础支撑层2.1 类型转换模块2.2 日志模块2.3 反射工具模块2.4 Binding 模块2.5 数据源模块2.6缓存模块2.7 解析器模块2.8 事务管理模块 3. 核心处理层3.1 配置解析3.2 SQL 解析与 scripting 模块3.3 SQL 执行3.4 插件 4. 接口层 1.整体架构图 MyBatis…...

如何使用大模型处理生活繁琐的工作

如果每封电子邮件、每个带有订单、发票、投诉、录用请求或工作申请的 PDF 都可以翻译成机器可读的数据&#xff0c;会怎样&#xff1f;然后可以由 ERP / CRM / LMS / TMS 自动处理吗&#xff1f;无需编程特殊接口。 听起来很神奇&#xff1f;它确实有一些魔力。但最近已成为可…...

RpcController作用浅析

RpcController作用浅析 前面提到了RpcConsumer的实现思路&#xff0c;但是并没说明RpcController有什么作用&#xff0c;不妨看看google::protobuf::RpcController&#xff1a; class PROTOBUF_EXPORT RpcController {public:inline RpcController() {}virtual ~RpcControlle…...

Linux(三):Linux服务器下日常实操命令 (常年更新)

基础命令 cd命令&#xff1a;切换目录 cd &#xff1a;切换当前目录百至其它目录&#xff0c;比如进入/etc目录&#xff0c;则执行 cd /etccd / &#xff1a;在Linux 系统中斜杠“/”表示的是根目录。cd / ,即进入根目录.cd ~&#xff1a;进入用户在该系统的home目录&#…...

强大的截图软件--Snipaste

这里写目录标题 前言Snipaste贴图并置顶标注功能 下载 前言 在工作中&#xff0c;我们经常需要保存当前屏幕的图片&#xff0c;虽然系统总是会自带一些截图工具&#xff0c;但似乎用起来总是不那个顺手&#xff0c;例如我们需要对图片进行一些标注&#xff0c;或者将图片贴在屏…...

LeetCode·每日一题·722. 删除注释·模拟

题目 示例 思路 题意 -> 给定一段代码&#xff0c;将代码中的注释删除并返回。 由于注释只有两种类型&#xff1a; 字符串// 表示行注释&#xff0c;表示//和其右侧的其余字符应该被忽略。字符串/* 表示一个块注释&#xff0c;它表示直到下一个&#xff08;非重叠&#x…...

npm更新和管理已发布的包

目录 1、更改包的可见性 1.1 将公共包设为私有 ​编辑 使用网站 使用命令行 1.2 将私有包公开 使用网站 使用命令行 2、将协作者添加到用户帐户拥有的私有包 2.1 授予对Web上私有用户包的访问权限 2.2 从命令行界面授予私有包访问权限 2.3 授予对私有组织包的访问权限…...

如何高效使用Gherkin

背景 时间回到2022年&#xff0c;我参与了一个使用了Flutter技术构建的Web前端项目。在这个项目上&#xff0c;我们小组的目标是实施Flutter前端自动化测试。 彼时&#xff0c;Flutter 2.x刚在Web端发力不久&#xff0c;Flutter Web上的应用和生态才刚刚开始&#xff0c;而在…...

[CKA]考试之调度 pod 到指定节点

由于最新的CKA考试改版&#xff0c;不允许存储书签&#xff0c;本博客致力怎么一步步从官网把答案找到&#xff0c;如何修改把题做对&#xff0c;下面开始我们的 CKA之旅 题目为&#xff1a; Task 创建一个Pod&#xff0c;名字为nginx-kusc00401&#xff0c;镜像地址是nginx…...

synchronized 学习

学习源&#xff1a; https://www.bilibili.com/video/BV1aJ411V763?spm_id_from333.788.videopod.episodes&vd_source32e1c41a9370911ab06d12fbc36c4ebc 1.应用场景 不超卖&#xff0c;也要考虑性能问题&#xff08;场景&#xff09; 2.常见面试问题&#xff1a; sync出…...

【入坑系列】TiDB 强制索引在不同库下不生效问题

文章目录 背景SQL 优化情况线上SQL运行情况分析怀疑1:执行计划绑定问题?尝试:SHOW WARNINGS 查看警告探索 TiDB 的 USE_INDEX 写法Hint 不生效问题排查解决参考背景 项目中使用 TiDB 数据库,并对 SQL 进行优化了,添加了强制索引。 UAT 环境已经生效,但 PROD 环境强制索…...

HTML 列表、表格、表单

1 列表标签 作用&#xff1a;布局内容排列整齐的区域 列表分类&#xff1a;无序列表、有序列表、定义列表。 例如&#xff1a; 1.1 无序列表 标签&#xff1a;ul 嵌套 li&#xff0c;ul是无序列表&#xff0c;li是列表条目。 注意事项&#xff1a; ul 标签里面只能包裹 li…...

JVM垃圾回收机制全解析

Java虚拟机&#xff08;JVM&#xff09;中的垃圾收集器&#xff08;Garbage Collector&#xff0c;简称GC&#xff09;是用于自动管理内存的机制。它负责识别和清除不再被程序使用的对象&#xff0c;从而释放内存空间&#xff0c;避免内存泄漏和内存溢出等问题。垃圾收集器在Ja…...

基于当前项目通过npm包形式暴露公共组件

1.package.sjon文件配置 其中xh-flowable就是暴露出去的npm包名 2.创建tpyes文件夹&#xff0c;并新增内容 3.创建package文件夹...

【CSS position 属性】static、relative、fixed、absolute 、sticky详细介绍,多层嵌套定位示例

文章目录 ★ position 的五种类型及基本用法 ★ 一、position 属性概述 二、position 的五种类型详解(初学者版) 1. static(默认值) 2. relative(相对定位) 3. absolute(绝对定位) 4. fixed(固定定位) 5. sticky(粘性定位) 三、定位元素的层级关系(z-i…...

Qwen3-Embedding-0.6B深度解析:多语言语义检索的轻量级利器

第一章 引言&#xff1a;语义表示的新时代挑战与Qwen3的破局之路 1.1 文本嵌入的核心价值与技术演进 在人工智能领域&#xff0c;文本嵌入技术如同连接自然语言与机器理解的“神经突触”——它将人类语言转化为计算机可计算的语义向量&#xff0c;支撑着搜索引擎、推荐系统、…...

Robots.txt 文件

什么是robots.txt&#xff1f; robots.txt 是一个位于网站根目录下的文本文件&#xff08;如&#xff1a;https://example.com/robots.txt&#xff09;&#xff0c;它用于指导网络爬虫&#xff08;如搜索引擎的蜘蛛程序&#xff09;如何抓取该网站的内容。这个文件遵循 Robots…...

拉力测试cuda pytorch 把 4070显卡拉满

import torch import timedef stress_test_gpu(matrix_size16384, duration300):"""对GPU进行压力测试&#xff0c;通过持续的矩阵乘法来最大化GPU利用率参数:matrix_size: 矩阵维度大小&#xff0c;增大可提高计算复杂度duration: 测试持续时间&#xff08;秒&…...

06 Deep learning神经网络编程基础 激活函数 --吴恩达

深度学习激活函数详解 一、核心作用 引入非线性:使神经网络可学习复杂模式控制输出范围:如Sigmoid将输出限制在(0,1)梯度传递:影响反向传播的稳定性二、常见类型及数学表达 Sigmoid σ ( x ) = 1 1 +...