当前位置: 首页 > news >正文

每日一博 - 三高系统架构设计:高性能、高并发、高可用性解析

文章目录

  • 引言
  • 一、高性能篇
      • 1.1 高性能的核心意义
    • 1.2 影响系统性能的因素
    • 1.3 高性能优化方法论
      • 1.3.1 读优化:缓存与数据库的结合
      • 1.3.2 写优化:异步化处理
    • 1.4 高性能优化实践
      • 1.4.1 本地缓存 vs 分布式缓存
      • 1.4.2 数据库优化
  • 二、高并发篇
    • 2.1 高并发的核心意义
    • 2.2 高并发优化方法论
      • 2.2.1 水平扩展(X轴扩展)
      • 2.2.2 纵向扩展(Y轴扩展)
      • 2.2.3 垂直扩展(Z轴扩展)
    • 2.3 高并发优化实践
      • 2.3.1 DDD实践
      • 2.3.2 热Key处理
  • 三、高可用篇
    • 3.1 高可用的核心意义
    • 3.2 高可用优化方法论
      • 3.2.1 应用层高可用
      • 3.2.2 存储层高可用
      • 3.2.3 部署层高可用
    • 3.3 高可用优化实践
      • 3.3.1 Redis高可用
      • 3.3.2 Elasticsearch高可用
      • 3.3.3 Kafka高可用
  • 四、总结

在这里插入图片描述


引言

随着用户规模的不断扩大和业务复杂性的增加,系统的性能、并发能力和可用性成为了技术团队必须面对的核心挑战。无论是C端的高流量场景,还是B端/M端的复杂业务逻辑,系统的“三高”(高性能、高并发、高可用性)设计都是确保业务稳定运行的关键。

接下来我们将深入探讨三高系统架构设计的方法论和实践, 从高性能、高并发、高可用性三个维度展开,理解如何设计和优化一个高可用、高性能、高并发的系统。


一、高性能篇

1.1 高性能的核心意义

高性能是系统设计的基石。一个高性能的系统能够快速处理请求,提供低延迟的服务,从而提升用户体验。高性能不仅直接影响系统的吞吐量,还间接决定了系统的并发能力和可用性。因此,优化系统性能是三高系统设计的首要任务。

1.2 影响系统性能的因素

系统性能的优化需要从多个维度入手,主要包括以下三个方面:

  1. 计算(Computation)

    • 系统内部的计算逻辑复杂度。
    • 频繁的Full GC(垃圾回收)会导致系统停顿,影响性能。
  2. 通信(Communication)

    • 系统与外部依赖(如数据库、缓存、第三方服务)的通信耗时。
    • 网络延迟、带宽限制等问题。
  3. 存储(Storage)

    • 数据库的读写性能,尤其是大库大表、慢SQL问题。
    • 缓存的使用效率,如Redis、Memcached等。
    • 搜索引擎(如Elasticsearch)的索引设计、分片大小等。

1.3 高性能优化方法论

在这里插入图片描述

1.3.1 读优化:缓存与数据库的结合

缓存是提升系统性能的利器,但缓存的使用需要与数据库结合,以确保数据的一致性和可靠性。根据系统的读写特点,缓存的使用可以分为以下两种场景:

  1. 读多写少的系统

    • 方案:同步更新数据库,后删除缓存。
    • 优点:以数据库为主,缓存为辅,确保数据一致性。
    • 适用场景:电商的商品详情页、新闻资讯等。
  2. 写多读少的系统

    • 方案:同步更新缓存,异步更新数据库。
    • 优点:以缓存为主,数据库为辅,提升写性能。
    • 适用场景:物流订单系统、秒杀场景等。

1.3.2 写优化:异步化处理

在高并发场景下,写操作往往成为系统的瓶颈。通过异步化处理,可以将耗时的写操作从主流程中剥离,提升系统的响应速度。

  • 秒杀场景
    • 用户下单后,系统异步处理订单,返回成功响应。
    • 通过消息队列(如Kafka、RocketMQ)削峰填谷,避免系统过载。
    • 缓存库存信息,异步扣减库存,确保数据一致性。

1.4 高性能优化实践

1.4.1 本地缓存 vs 分布式缓存

  • 本地缓存:适用于数据量小、访问频率高的场景,如Guava Cache、Caffeine。
  • 分布式缓存:适用于数据量大、需要跨节点共享的场景,如Redis、Memcached。

1.4.2 数据库优化

  • 索引优化:为高频查询字段添加索引,避免全表扫描。
  • 分库分表:将大表拆分为多个小表,提升查询性能。
  • 读写分离:主库负责写操作,从库负责读操作,分担主库压力。

二、高并发篇

2.1 高并发的核心意义

高并发是指系统能够同时处理大量请求的能力。随着用户规模的增加,系统的并发能力直接决定了其能否支撑业务的快速发展。高并发设计的目标是通过水平扩展、垂直扩展等手段,提升系统的吞吐量和响应速度。

2.2 高并发优化方法论

在这里插入图片描述

2.2.1 水平扩展(X轴扩展)

水平扩展是通过增加机器数量来提升系统的并发能力。常见的水平扩展方式包括:

  • 应用层扩展:通过负载均衡(如Nginx、HAProxy)将流量分发到多台服务器。
  • 存储层扩展:通过分库分表将数据分散到多个数据库实例。

2.2.2 纵向扩展(Y轴扩展)

纵向扩展是通过拆分单体应用为多个微服务,提升系统的可扩展性和可维护性。常见的纵向扩展方式包括:

  • 微服务架构:将系统按照业务领域拆分为多个独立的服务。
  • 领域驱动设计(DDD):通过领域划分指导微服务的设计。

2.2.3 垂直扩展(Z轴扩展)

垂直扩展是通过分片和单元化设计,提升系统的并发能力和可用性。常见的垂直扩展方式包括:

  • 分库分表:将数据按照一定规则分散到多个数据库实例。
  • 单元化设计:将系统流量和数据闭环在一个单元内,避免单点故障。

2.3 高并发优化实践

2.3.1 DDD实践

  • 业务流程:从商家下单到用户签收,涵盖正向和逆向流程。
  • 领域划分:将系统划分为商品服务域、订单域、支付结算域、履约域等。

2.3.2 热Key处理

  • 本地缓存:在应用层增加本地缓存,减少对分布式缓存的依赖。
  • 随机数法:在Key后增加随机数,将热点数据分散到多个分片。

三、高可用篇

3.1 高可用的核心意义

高可用是指系统在面对故障时仍能持续提供服务的能力。高可用设计的目标是通过冗余、容错等手段,确保系统在出现故障时能够快速恢复,避免业务中断。

3.2 高可用优化方法论

在这里插入图片描述

3.2.1 应用层高可用

  • 限流:通过限流算法(如令牌桶、漏桶)保护系统不被流量打垮。
  • 熔断降级:通过熔断器(如Hystrix)避免下游故障拖垮系统。
  • 超时设置:设置合理的超时时间,避免无限等待下游响应。
  • 重试机制:通过有限次数的重试提高请求成功率。
  • 隔离:通过线程池隔离、数据隔离等手段,控制故障影响范围。

3.2.2 存储层高可用

  • 复制:通过主从复制、多主复制等手段,确保数据的高可用。
  • 分区:通过分片将数据分散到多个节点,避免单点故障。

3.2.3 部署层高可用

  • 多机房部署:将系统部署在多个机房,避免单机房故障导致业务中断。
  • 容器化部署:通过Docker、Kubernetes等工具,实现快速扩容和故障恢复。

3.3 高可用优化实践

3.3.1 Redis高可用

  • 主从复制:主节点负责写操作,从节点负责读操作。
  • 集群模式:通过分片将数据分散到多个节点,提升并发能力。

3.3.2 Elasticsearch高可用

  • 分片与副本:通过分片和副本设计,确保数据的高可用和高性能。
  • 数据节点:将索引数据分散到多个数据节点,避免单点故障。

3.3.3 Kafka高可用

  • 分区与副本:通过分区和副本设计,提升消息队列的吞吐量和可用性。
  • Leader选举:在Leader节点故障时,自动选举新的Leader节点。

四、总结

三高系统架构设计是一场与复杂性对抗的持久战。通过高性能、高并发、高可用性的优化,我们可以构建出稳定、可靠、高效的系统,支撑业务的快速发展。

参考这里

在这里插入图片描述

相关文章:

每日一博 - 三高系统架构设计:高性能、高并发、高可用性解析

文章目录 引言一、高性能篇1.1 高性能的核心意义 1.2 影响系统性能的因素1.3 高性能优化方法论1.3.1 读优化:缓存与数据库的结合1.3.2 写优化:异步化处理 1.4 高性能优化实践1.4.1 本地缓存 vs 分布式缓存1.4.2 数据库优化 二、高并发篇2.1 高并发的核心…...

C++ 中的引用(Reference)

在 C 中,引用(Reference)是一种特殊的变量类型,它提供了一个已存在变量的别名。引用在很多场景下都非常有用,比如函数参数传递、返回值等。下面将详细介绍 C 引用的相关知识。 1. 引用的基本概念和语法 引用是已存在…...

负荷预测算法模型

1. 时间序列分析方法 时间序列分析方法是最早被用来进行电力负荷预测的方法之一,它基于历史数据来构建数学模型,以描述时间与负荷值之间的关系。这种方法通常只考虑时间变量,不需要大量的输入数据,因此计算速度快。然而&#xff…...

【C语言】内存管理

【C语言】内存管理 文章目录 【C语言】内存管理1.概念2.库函数3.动态分配内存malloccalloc 4.重新调整内存的大小和释放内存reallocfree 1.概念 C 语言为内存的分配和管理提供了几个函数。这些函数可以在 <stdlib.h> 头文件中找到。 在 C 语言中&#xff0c;内存是通过…...

deepseek大模型本机部署

2024年1月20日晚&#xff0c;中国DeepSeek发布了最新推理模型DeepSeek-R1&#xff0c;引发广泛关注。这款模型不仅在性能上与OpenAI的GPT-4相媲美&#xff0c;更以开源和创新训练方法&#xff0c;为AI发展带来了新的可能性。 本文讲解如何在本地部署deepseek r1模型。deepseek官…...

动态规划DP 最长上升子序列模型 拦截导弹(题目分析+C++完整代码)

概览检索 动态规划DP 最长上升子序列模型 拦截导弹 原题链接 AcWiing 1010. 拦截导弹 题目描述 某国为了防御敌国的导弹袭击&#xff0c;发展出一种导弹拦截系统。 但是这种导弹拦截系统有一个缺陷&#xff1a;虽然它的第一发炮弹能够到达任意的高度&#xff0c;但是以后每…...

缩位求和——蓝桥杯

1.题目描述 在电子计算机普及以前&#xff0c;人们经常用一个粗略的方法来验算四则运算是否正确。 比如&#xff1a;248153720248153720 把乘数和被乘数分别逐位求和&#xff0c;如果是多位数再逐位求和&#xff0c;直到是 1 位数&#xff0c;得 24814>145 156 56 而…...

Baklib赋能企业实现高效数字化内容管理提升竞争力

内容概要 在数字经济的浪潮下&#xff0c;企业面临着前所未有的机遇与挑战。随着信息技术的迅猛发展&#xff0c;各行业都在加速推进数字化转型&#xff0c;以保持竞争力。在这个过程中&#xff0c;数字化内容管理成为不可或缺的一环。高效的内容管理不仅能够优化内部流程&…...

【视频+图文讲解】HTML基础2-html骨架与基本语法

图文教程 基本骨架 举个例子&#xff0c;下图所展示的为html的源代码 -!DOCTYPE&#xff1a;表示文档类型&#xff08;后边写的html表示文档类型是html&#xff09;&#xff1b;其中“&#xff01;”表示声明 只要是加这个声明标签的&#xff0c;浏览器就会把下边的源代码当…...

消息队列篇--原理篇--常见消息队列总结(RabbitMQ,Kafka,ActiveMQ,RocketMQ,Pulsar)

1、RabbitMQ 特点&#xff1a; AMQP协议&#xff1a;RabbitMQ是基于AMQP&#xff08;高级消息队列协议&#xff09;构建的&#xff0c;支持多种消息传递模式&#xff0c;如发布/订阅、路由、RPC等。多语言支持&#xff1a;支持多种编程语言的客户端库&#xff0c;包括Java、P…...

【力扣每日一题】存在重复元素 II 解题思路

219. 存在重复元素 II 解题思路 问题描述 给定一个整数数组 nums 和一个整数 k&#xff0c;要求判断数组中是否存在两个 不同的索引 i 和 j&#xff0c;使得&#xff1a; nums[i] nums[j]且满足 abs(i - j) < k 如果满足上述条件&#xff0c;返回 true&#xff0c;否则…...

React第二十八章(css modules)

css modules 什么是 css modules 因为 React 没有Vue的Scoped&#xff0c;但是React又是SPA(单页面应用)&#xff0c;所以需要一种方式来解决css的样式冲突问题&#xff0c;也就是把每个组件的样式做成单独的作用域&#xff0c;实现样式隔离&#xff0c;而css modules就是一种…...

本地运行大模型效果及配置展示

电脑上用ollama安装了qwen2.5:32b&#xff0c;deepseek-r1:32b&#xff0c;deepseek-r1:14b&#xff0c;llama3.1:8b四个模型&#xff0c;都是Q4_K_M量化版。 运行过程中主要是cpu和内存负载比较大&#xff0c;qwen2.5:32b大概需要22g&#xff0c;deepseek-r1&#xff1a;32b类…...

愿景:做机器视觉行业的颠覆者

一个愿景&#xff0c;两场战斗&#xff0c;专注制胜。 一个愿景&#xff1a;做机器视觉行业的颠覆者。 我给自己创业&#xff0c;立一个大的愿景&#xff1a;做机器视觉行业的颠覆者。 两场战斗&#xff1a;无监督-大模型 上半场&#xff0c;无监督。2025-2030&#xff0c;共五…...

arm-linux-gnueabihf安装

Linaro Releases windows下打开wsl2中的ubuntu&#xff0c;资源管理器中输入&#xff1a; \\wsl$gcc-linaro-4.9.4-2017.01-x86_64_arm-linux-gnueabihf.tar.xz 复制到/home/ark01/tool 在 Ubuntu 中创建目录&#xff1a; /usr/local/arm&#xff0c;命令如下&#xff1a; …...

力扣动态规划-16【算法学习day.110】

前言 ###我做这类文章一个重要的目的还是给正在学习的大家提供方向&#xff08;例如想要掌握基础用法&#xff0c;该刷哪些题&#xff1f;建议灵神的题单和代码随想录&#xff09;和记录自己的学习过程&#xff0c;我的解析也不会做的非常详细&#xff0c;只会提供思路和一些关…...

Java基础知识总结(三十四)--java.util.Date

月份从0-11&#xff1b; /* 日期对象和毫秒值之间的转换。 1&#xff0c;日期对象转成毫秒值。Date类中的getTime方法。 2&#xff0c;如何将获取到的毫秒值转成具体的日期呢&#xff1f; Date类中的setTime方法。也可以通过构造方法。 */ //日期对象转成毫秒值 Date …...

零售EDI:Costco EDI 项目须知

Costco 是全球领先的会员制仓储式零售商&#xff0c;致力于为会员提供高品质且价格实惠的商品。其经营范围涵盖食品、电子产品、家居用品、服装和办公设备等多个领域。 Costco 的 EDI 对接需求分析 为了更高效地管理其复杂的全球供应链&#xff0c;Costco 采用了先进的 EDI&am…...

最近最少使用算法(LRU最近最少使用)缓存替换算法

含义 最近最少使用算法&#xff08;LRU&#xff09;是一种缓存替换算法&#xff0c;用于在缓存空间有限的情况下&#xff0c;选择最少使用的数据项进行替换。该算法的核心思想是基于时间局部性原理&#xff0c;即刚被访问的数据在未来也很有可能被再次访问。 实现 LRU算法的…...

sublime_text的快捷键

sublime_text的快捷键 向下复制, 复制光标所在整行并插入到下一行&#xff1a;通过 CtrlShiftD 实现快速复制当前行的功能。 可选多行, 不选则复制当前行 ctrl Shift D 删除当前行&#xff1a;通过 CtrlShiftK 实现快速删除当前行的功能。 可选多行, 不选则删当前行 ctrl S…...

web vue 项目 Docker化部署

Web 项目 Docker 化部署详细教程 目录 Web 项目 Docker 化部署概述Dockerfile 详解 构建阶段生产阶段 构建和运行 Docker 镜像 1. Web 项目 Docker 化部署概述 Docker 化部署的主要步骤分为以下几个阶段&#xff1a; 构建阶段&#xff08;Build Stage&#xff09;&#xff1a…...

Qt Widget类解析与代码注释

#include "widget.h" #include "ui_widget.h"Widget::Widget(QWidget *parent): QWidget(parent), ui(new Ui::Widget) {ui->setupUi(this); }Widget::~Widget() {delete ui; }//解释这串代码&#xff0c;写上注释 当然可以&#xff01;这段代码是 Qt …...

【Oracle】分区表

个人主页&#xff1a;Guiat 归属专栏&#xff1a;Oracle 文章目录 1. 分区表基础概述1.1 分区表的概念与优势1.2 分区类型概览1.3 分区表的工作原理 2. 范围分区 (RANGE Partitioning)2.1 基础范围分区2.1.1 按日期范围分区2.1.2 按数值范围分区 2.2 间隔分区 (INTERVAL Partit…...

算法笔记2

1.字符串拼接最好用StringBuilder&#xff0c;不用String 2.创建List<>类型的数组并创建内存 List arr[] new ArrayList[26]; Arrays.setAll(arr, i -> new ArrayList<>()); 3.去掉首尾空格...

深度学习习题2

1.如果增加神经网络的宽度&#xff0c;精确度会增加到一个特定阈值后&#xff0c;便开始降低。造成这一现象的可能原因是什么&#xff1f; A、即使增加卷积核的数量&#xff0c;只有少部分的核会被用作预测 B、当卷积核数量增加时&#xff0c;神经网络的预测能力会降低 C、当卷…...

SiFli 52把Imagie图片,Font字体资源放在指定位置,编译成指定img.bin和font.bin的问题

分区配置 (ptab.json) img 属性介绍&#xff1a; img 属性指定分区存放的 image 名称&#xff0c;指定的 image 名称必须是当前工程生成的 binary 。 如果 binary 有多个文件&#xff0c;则以 proj_name:binary_name 格式指定文件名&#xff0c; proj_name 为工程 名&…...

JS设计模式(4):观察者模式

JS设计模式(4):观察者模式 一、引入 在开发中&#xff0c;我们经常会遇到这样的场景&#xff1a;一个对象的状态变化需要自动通知其他对象&#xff0c;比如&#xff1a; 电商平台中&#xff0c;商品库存变化时需要通知所有订阅该商品的用户&#xff1b;新闻网站中&#xff0…...

逻辑回归暴力训练预测金融欺诈

简述 「使用逻辑回归暴力预测金融欺诈&#xff0c;并不断增加特征维度持续测试」的做法&#xff0c;体现了一种逐步建模与迭代验证的实验思路&#xff0c;在金融欺诈检测中非常有价值&#xff0c;本文作为一篇回顾性记录了早年间公司给某行做反欺诈预测用到的技术和思路。百度…...

在golang中如何将已安装的依赖降级处理,比如:将 go-ansible/v2@v2.2.0 更换为 go-ansible/@v1.1.7

在 Go 项目中降级 go-ansible 从 v2.2.0 到 v1.1.7 具体步骤&#xff1a; 第一步&#xff1a; 修改 go.mod 文件 // 原 v2 版本声明 require github.com/apenella/go-ansible/v2 v2.2.0 替换为&#xff1a; // 改为 v…...

【1】跨越技术栈鸿沟:字节跳动开源TRAE AI编程IDE的实战体验

2024年初&#xff0c;人工智能编程工具领域发生了一次静默的变革。当字节跳动宣布退出其TRAE项目&#xff08;一款融合大型语言模型能力的云端AI编程IDE&#xff09;时&#xff0c;技术社区曾短暂叹息。然而这一退场并非终点——通过开源社区的接力&#xff0c;TRAE在WayToAGI等…...