MongoDB Shard 集群 Docker 部署
MongoDB Shard Docker 部署
部署环境
| 主机地址 | 主机配置 | 主机系统 |
|---|---|---|
| Mongodb1/192.168.31.135 | 2CPU 4GB | Debian12 |
| Mongodb2/192.168.31.109 | 2CPU 4GB | Debian12 |
| Mongodb3/192.168.31.165 | 2CPU 4GB | Debian12 |
镜像版本
mongodb/mongodb-community-server:5.0.27-ubuntu2004
部署集群
部署 Config Server 集群
分别在三台上启动 Config Server 容器
# mongodb1
docker run -d --name configsvr1 \--log-opt max-size=100m --log-opt max-file=3 --restart=unless-stopped \-v configsvr1_data:/data/configdb \-p 27019:27019 \mongodb/mongodb-community-server:5.0.27-ubuntu2004 \mongod --configsvr --replSet configReplSet --bind_ip_all
# mongodb2
docker run -d --name configsvr2 \--log-opt max-size=100m --log-opt max-file=3 --restart=unless-stopped \-v configsvr2_data:/data/configdb \-p 27019:27019 \mongodb/mongodb-community-server:5.0.27-ubuntu2004 \mongod --configsvr --replSet configReplSet --bind_ip_all
# mongodb3
docker run -d --name configsvr3 \--log-opt max-size=100m --log-opt max-file=3 --restart=unless-stopped \-v configsvr3_data:/data/configdb \-p 27019:27019 \mongodb/mongodb-community-server:5.0.27-ubuntu2004 \mongod --configsvr --replSet configReplSet --bind_ip_all
初始化 Config Server 复制集
- 登录 configsvr1 容器
docker exec -it configsvr1 mongo --port 27019
- 执行初始化脚本
rs.initiate({_id: "configReplSet",configsvr: true,members: [{ _id: 0, host: "192.168.31.135:27019" },{ _id: 1, host: "192.168.31.109:27019" },{ _id: 2, host: "192.168.31.165:27019" }]
})
- 验证状态
rs.status()
部署 Shard Server 集群
在 mongo1 上部署容器
docker run -d --name shard1_node1 \--log-opt max-size=100m --log-opt max-file=3 --restart=unless-stopped \-v shard1_node1_data:/data/db \-p 27018:27018 \mongodb/mongodb-community-server:5.0.27-ubuntu2004 \mongod --shardsvr --replSet shard1ReplSet --bind_ip_alldocker run -d --name shard2_node1 \--log-opt max-size=100m --log-opt max-file=3 --restart=unless-stopped \-v shard2_node1_data:/data/db \-p 27017:27018 \mongodb/mongodb-community-server:5.0.27-ubuntu2004 \mongod --shardsvr --replSet shard2ReplSet --bind_ip_alldocker run -d --name shard3_node1 \--log-opt max-size=100m --log-opt max-file=3 --restart=unless-stopped \-v shard3_node1_data:/data/db \-p 27016:27018 \mongodb/mongodb-community-server:5.0.27-ubuntu2004 \mongod --shardsvr --replSet shard3ReplSet --bind_ip_all
在 mongo2 上部署容器
docker run -d --name shard1_node2 \--log-opt max-size=100m --log-opt max-file=3 --restart=unless-stopped \-v shard1_node2_data:/data/db \-p 27018:27018 \mongodb/mongodb-community-server:5.0.27-ubuntu2004 \mongod --shardsvr --replSet shard1ReplSet --bind_ip_alldocker run -d --name shard2_node2 \--log-opt max-size=100m --log-opt max-file=3 --restart=unless-stopped \-v shard2_node2_data:/data/db \-p 27017:27018 \mongodb/mongodb-community-server:5.0.27-ubuntu2004 \mongod --shardsvr --replSet shard2ReplSet --bind_ip_alldocker run -d --name shard3_node2 \--log-opt max-size=100m --log-opt max-file=3 --restart=unless-stopped \-v shard3_node2_data:/data/db \-p 27016:27018 \mongodb/mongodb-community-server:5.0.27-ubuntu2004 \mongod --shardsvr --replSet shard3ReplSet --bind_ip_all
在 mongo3 上部署容器
docker run -d --name shard1_node3 \--log-opt max-size=100m --log-opt max-file=3 --restart=unless-stopped \-v shard1_node3_data:/data/db \-p 27018:27018 \mongodb/mongodb-community-server:5.0.27-ubuntu2004 \mongod --shardsvr --replSet shard1ReplSet --bind_ip_alldocker run -d --name shard2_node3 \--log-opt max-size=100m --log-opt max-file=3 --restart=unless-stopped \-v shard2_node3_data:/data/db \-p 27017:27018 \mongodb/mongodb-community-server:5.0.27-ubuntu2004 \mongod --shardsvr --replSet shard2ReplSet --bind_ip_alldocker run -d --name shard3_node3 \--log-opt max-size=100m --log-opt max-file=3 --restart=unless-stopped \-v shard3_node3_data:/data/db \-p 27016:27018 \mongodb/mongodb-community-server:5.0.27-ubuntu2004 \mongod --shardsvr --replSet shard3ReplSet --bind_ip_all
将 shard1 shard2 shard3 容器初始化并验证
docker exec -it shard1_node1 mongo --port 27018
rs.initiate({_id: "shard1ReplSet",members: [{ _id: 0, host: "192.168.31.135:27018" },{ _id: 1, host: "192.168.31.109:27018" },{ _id: 2, host: "192.168.31.165:27018" }]
})rs.status()
docker exec -it shard2_node1 mongo --port 27018
rs.initiate({_id: "shard2ReplSet",members: [{ _id: 0, host: "192.168.31.135:27017" },{ _id: 1, host: "192.168.31.109:27017" },{ _id: 2, host: "192.168.31.165:27017" }]
})rs.status()
docker exec -it shard3_node1 mongo --port 27018
rs.initiate({_id: "shard3ReplSet",members: [{ _id: 0, host: "192.168.31.135:27016" },{ _id: 1, host: "192.168.31.109:27016" },{ _id: 2, host: "192.168.31.165:27016" }]
})rs.status()
部署 Mongos 路由器
docker run -d --name mongos -p 27015:27017 \--log-opt max-size=100m --log-opt max-file=3 --restart=unless-stopped \mongodb/mongodb-community-server:5.0.27-ubuntu2004 mongos --bind_ip_all --configdb configReplSet/192.168.31.135:27019,192.168.31.109:27019,192.168.31.165:27019
关联 Shard 集群至 Config 集群
docker exec -it mongos mongo
sh.addShard("shard1ReplSet/192.168.31.135:27018,192.168.31.109:27018,192.168.31.165:27018")
sh.addShard("shard2ReplSet/192.168.31.135:27017,192.168.31.109:27017,192.168.31.165:27017")
sh.addShard("shard3ReplSet/192.168.31.135:27016,192.168.31.109:27016,192.168.31.165:27016")
数据库手动指定分片
使能分片数据库
sh.enableSharding("metadata")
指定分片集合
# sh.shardCollection("mydatabase.mycollection", { myfield: 1 })
sh.shardCollection("metadata.file-10-million", { key: 1 })
查看分片分布
# db.collection.getShardDistribution()
db['file-10-million'].getShardDistribution()
相关文章:
MongoDB Shard 集群 Docker 部署
MongoDB Shard Docker 部署 部署环境 主机地址主机配置主机系统Mongodb1/192.168.31.1352CPU 4GBDebian12Mongodb2/192.168.31.1092CPU 4GBDebian12Mongodb3/192.168.31.1652CPU 4GBDebian12 镜像版本 mongodb/mongodb-community-server:5.0.27-ubuntu2004 部署集群 部署…...
MacOS 开发 — Packages 程序 macOS新版本 演示选项卡无法显示
MacOS 开发 — Packages 程序 macOS新版本 演示选项卡无法显示 问题描述 : 之前写过 Packages 的使用以及如何打包macOS程序。最近更新了新的macOS系统,发现Packages的演示选项卡无法显示,我尝试从新安转了Packages 也是没作用,…...
Hive的分区表分桶表
1.分区表: 是Hive中的一种表类型,通过将表中的数据划分为多个子集(分区),每个分区对应表中的某个特定的列值,可以提高查询性能和管理数据的效率。分区表的每个分区存储在单独的目录中,分区的定义…...
PostgreSQL17索引优化之支持并行创建BRIN索引
PostgreSQL17索引优化之支持并行创建BRIN索引 最近连续写了几篇关于PostgreSQL17优化器改进的文章,其实感觉还是挺有压力的。对于原理性的知识点,一方面是对这些新功能也不熟悉,为了尽可能对于知识点表述或总结做到准确,因此需要…...
在Vue中,子组件向父组件传递数据
在Vue中,子组件向父组件传递数据通常通过两种方式实现:事件和回调函数。这两种方式允许子组件与其父组件进行通信,传递数据或触发特定的行为。 1. 通过事件传递数据 子组件可以通过触发自定义事件,并将数据作为事件的参数来向父组…...
数据结构(顺序表)
谈起顺序表,那我们就不得不先来了解一下它的上级概念---线性表 线性表 线性表(linear list)是n个具有相同特性的数据元素的有限序列。 线性表是⼀种在实际中⼴泛使⽤的数据结构,常⻅的线性表:顺序表、链表、栈、队列…...
MySQL之基本查询(上)-表的增删查改
目录 Create(创建) 案例建表 插入 单行数据 指定列插入 单行数据 全列插入 多行数据 全列插入 插入是否更新 插入时更新 替换 Retrieve(读取) 建表插入 select列 全列查询 指定列查询 查询字段为表达式 为查询结果指定别名 结果去重 where条件 比较运算符 逻辑运…...
RocketMQ源码学习笔记:Producer发送消息流程
这是本人学习的总结,主要学习资料如下 马士兵教育rocketMq官方文档 目录 1、Overview2、验证消息3、查找路由4、选择消息发送队列4.1、选择队列的策略4.2、源码阅读4.2.1、轮询规避4.2.2、故障延迟规避4.2.2.1、计算规避时间4.2.2.2、选择队列 4.2.3、ThreadLocal的…...
kotlin flow collect collectLatest 区别
在 Kotlin 协程库中,collect 和 collectLatest 都是用于收集 Flow 中发射的数据的方法,但它们在处理数据和响应新数据的方式上有所不同。 collect collect 是一个挂起函数,用于收集 Flow 中发射的所有数据。它会按顺序处理每一个发射的数据…...
ELK集群搭建
ELK集群搭建 文章目录 ELK集群搭建1.环境准备2.Elasticsearch环境搭建1.创建es账户并设置密码2.选择对应版本进行下载3.编辑配置文件4.设置JVM堆大小 #7.0默认为4G5.创建es数据及日志存储目录6.修改安装目录和存储目录权限 3.系统优化1.增加最大文件打开数2.增加最大进程数3.增…...
zookeeper+kafka消息队列集群部署
一.消息队列 1、什么是消息队列 消息(Message)是指在应用间传送的数据。消息可以非常简单,比如只包含文本字符串,也可以更复杂,可能包含嵌入对象。 消息队列(MessageQueue)是一种在软件系统中用…...
LLM_入门指南(零基础搭建大模型)
本文主要介绍大模型的prompt,并且给出实战教程。即使零基础也可以实现大模型的搭建。 内容:初级阶段的修炼心法,帮助凝聚和提升内力,为后续修炼打下基础。 1、prompt 1.1含义和作用 prompt就是提示工程的意思。在大型语言模型中…...
Element Plus 与 Vue 3:构建现代化 Web 应用的完美搭档
引言 Element Plus是基于Vue 3的组件库,它继承了Element UI的优秀基因,为Vue 3应用提供了丰富的界面组件。Element Plus不仅拥有与Element UI相同的高质量组件,还针对Vue 3进行了优化和更新,确保了与Vue 3的无缝集成。 环境准备…...
线程间通信与变量修改感知:几种常用方法
线程间通信与变量修改感知:几种常用方法 1. 使用volatile关键字2. 使用synchronized关键字3. 使用wait/notify/notifyAll机制4. 使用轮询(Polling) 💖The Begin💖点点关注,收藏不迷路💖 在Java…...
前后端通信 —— HTTP/HTTPS
目录 一、HTTP/HTTPS 简介 1、HTTP 2、HTTPS 二、HTTP 工作过程 三、HTTP 消息 1、HTTP消息结构 2、HTTP消息示例 四、HTTP 方法(常用) 1、GET 2、POST 3、PUT 4、DELETE 5、GET与POST对比 五、HTTP 状态码(常用) …...
人工智能 (AI) 应用:一个高精度ASD 诊断和照护支持系统
自闭症谱系障碍(ASD)是一种多方面的神经发育状况,影响全球大约1/100的儿童,而在中国,这一比例高达1.8%(引用自《中国0~6岁儿童孤独症谱系障碍筛查患病现状》),男童为2.6%…...
C# 1.方法
方法组成: 1.修饰符:public一般定义共有的 2.方法返回值:void 无返回值; 非void,可以写成其他类型例如int,float,string,string[]等 3.方法名:Add 大驼峰命名法,每一个首字符大写。…...
【C++进阶学习】第七弹——AVL树——树形结构存储数据的经典模块
二叉搜索树:【C进阶学习】第五弹——二叉搜索树——二叉树进阶及set和map的铺垫-CSDN博客 目录 一、AVL树的概念 二、AVL树的原理与实现 AVL树的节点 AVL树的插入 AVL树的旋转 AVL树的打印 AVL树的检查 三、实现AVL树的完整代码 四、总结 前言:…...
px,em,rem之间的关系换算
px,em,rem之间的换算 px:普通大小 em:相对单位,相对于父元素的字体大小 rem:相对单位,相对于根元素(html)的字体大小 <!DOCTYPE html> <html lang"en"> <head>…...
HTTP——POST请求详情
POST请求 【传输实体文本】向指定资源提交数据进行处理请求(例如提交表单或者上传文件)。数据被包含在POST请求体中。POST 请求可能会导致新的资源的建立或已有资源的修改。 场景: 1. 提交用户注册信息。 2. 提交修改的用户信息。 常见的…...
内存分配函数malloc kmalloc vmalloc
内存分配函数malloc kmalloc vmalloc malloc实现步骤: 1)请求大小调整:首先,malloc 需要调整用户请求的大小,以适应内部数据结构(例如,可能需要存储额外的元数据)。通常,这包括对齐调整,确保分配的内存地址满足特定硬件要求(如对齐到8字节或16字节边界)。 2)空闲…...
基于服务器使用 apt 安装、配置 Nginx
🧾 一、查看可安装的 Nginx 版本 首先,你可以运行以下命令查看可用版本: apt-cache madison nginx-core输出示例: nginx-core | 1.18.0-6ubuntu14.6 | http://archive.ubuntu.com/ubuntu focal-updates/main amd64 Packages ng…...
UDP(Echoserver)
网络命令 Ping 命令 检测网络是否连通 使用方法: ping -c 次数 网址ping -c 3 www.baidu.comnetstat 命令 netstat 是一个用来查看网络状态的重要工具. 语法:netstat [选项] 功能:查看网络状态 常用选项: n 拒绝显示别名&#…...
如何为服务器生成TLS证书
TLS(Transport Layer Security)证书是确保网络通信安全的重要手段,它通过加密技术保护传输的数据不被窃听和篡改。在服务器上配置TLS证书,可以使用户通过HTTPS协议安全地访问您的网站。本文将详细介绍如何在服务器上生成一个TLS证…...
sqlserver 根据指定字符 解析拼接字符串
DECLARE LotNo NVARCHAR(50)A,B,C DECLARE xml XML ( SELECT <x> REPLACE(LotNo, ,, </x><x>) </x> ) DECLARE ErrorCode NVARCHAR(50) -- 提取 XML 中的值 SELECT value x.value(., VARCHAR(MAX))…...
RNN避坑指南:从数学推导到LSTM/GRU工业级部署实战流程
本文较长,建议点赞收藏,以免遗失。更多AI大模型应用开发学习视频及资料,尽在聚客AI学院。 本文全面剖析RNN核心原理,深入讲解梯度消失/爆炸问题,并通过LSTM/GRU结构实现解决方案,提供时间序列预测和文本生成…...
Web 架构之 CDN 加速原理与落地实践
文章目录 一、思维导图二、正文内容(一)CDN 基础概念1. 定义2. 组成部分 (二)CDN 加速原理1. 请求路由2. 内容缓存3. 内容更新 (三)CDN 落地实践1. 选择 CDN 服务商2. 配置 CDN3. 集成到 Web 架构 …...
技术栈RabbitMq的介绍和使用
目录 1. 什么是消息队列?2. 消息队列的优点3. RabbitMQ 消息队列概述4. RabbitMQ 安装5. Exchange 四种类型5.1 direct 精准匹配5.2 fanout 广播5.3 topic 正则匹配 6. RabbitMQ 队列模式6.1 简单队列模式6.2 工作队列模式6.3 发布/订阅模式6.4 路由模式6.5 主题模式…...
代码随想录刷题day30
1、零钱兑换II 给你一个整数数组 coins 表示不同面额的硬币,另给一个整数 amount 表示总金额。 请你计算并返回可以凑成总金额的硬币组合数。如果任何硬币组合都无法凑出总金额,返回 0 。 假设每一种面额的硬币有无限个。 题目数据保证结果符合 32 位带…...
DingDing机器人群消息推送
文章目录 1 新建机器人2 API文档说明3 代码编写 1 新建机器人 点击群设置 下滑到群管理的机器人,点击进入 添加机器人 选择自定义Webhook服务 点击添加 设置安全设置,详见说明文档 成功后,记录Webhook 2 API文档说明 点击设置说明 查看自…...
