传统开发读写优化与HBase
目录:
一、传统开发数据读写性能优化
1. Mysql 分表、主从复制与读写分离
2. Redis(缓存型数据库)主从复制与读写分离
二、HBase
一、传统开发数据读写性能优化
1、Mysql 分表、主从复制与读写分离
-
mysql分库分表方案
一种分表方案：设置表A 表B
- 表A 自增列从1开始 步长2
- 表B 自增列从2开始 步长2
- 配置文件my.ini(window) 主键为奇数进表A 偶数进表B
-
Mycat+MySql 主从复制-读写分离
通过Mycat
- 增删改：写 => 主表 强一致性：InnoDB
- 查询：读 => 从表 弱一致性：MyIsam
- 主从表之间 => 通过二进制日志binlog实现主从表的数据同步
具体主从复制的工作过程请参考：MySQL主从复制与读写分离（附配置实例）
2、Redis(缓存型数据库)主从复制与读写分离
缓存数据库：哨兵【主从复制】，集群
后端查询都从Redis走
【定期】将关系型数据库数据【同步】到Redis：实时性(一致性)
具体过程参考：Redis主从复制、哨兵、Cluster三种模式摸透
主从复制存在一定的数据延迟，大数据不强调一致性，只需最终一致性
Redis 集群 + 哨兵的主从复制解决数据的分布式存储但也只是解决了读的问题，写还是面向数据库，写的慢主从复制同步的慢读的数据有问题或写的太频繁数据库崩了，对于写的数据慢可以采用批处理的方式
多主多从都解决不了问题就可以考虑使用HBase
二、HBase
HBase是一个建立在HDFS之上的分布式，提供高可靠性，高性能，列存储，可伸缩，实时读写NoSQL的数据库系统。
Hbase 本身就是集群 主要优点之一：吞(写)吐(读)量大
HBase介绍、特点、应用场景、生态圈
相关文章：
传统开发读写优化与HBase
目录: 一、传统开发数据读写性能优化 1. Mysql 分表、主从复制与读写分离 2. Redis(缓存型数据库)主从复制与读写分离 二、HBase 一、传统开发数据读写性能优化 1、Mysql 分表、主从复制与读写分离 mysql分库分表方案 一种分表方案：设置表A 表B 表A 自增列从1开始…...
【OpenGL实现 03】纹理贴图原理和实现
目录 一、说明二、纹理贴图原理2.1 纹理融合原理2.2 UV坐标原理 三、生成纹理对象3.1 需要在VAO上绑定纹理坐标3.2 纹理传递3.3 纹理buffer生成 四、代码实现：五、着色器4.1 片段4.2 顶点 五、后记 一、说明 本篇叙述在画出图元的时候，如何贴图纹理图片…...
FDU 2021 | 二叉树关键节点的个数
文章目录 1. 题目描述2. 我的尝试 1. 题目描述 给定一颗二叉树，树的每个节点的值为一个正整数。如果从根节点到节点 N 的路径上不存在比节点 N 的值大的节点，那么节点 N 被认为是树上的关键节点。求树上所有的关键节点的个数。请写出程序，并…...
精读《React Conf 2019 - Day2》
1 引言 这是继 精读《React Conf 2019 - Day1》 之后的第二篇，补充了 React Conf 2019 第二天的内容。 2 概述 & 精读 第二天的内容更为精彩，笔者会重点介绍比较干货的部分。 Fast refresh Fast refresh 是更好的 react-hot-loader 替代方案&am…...
向ChatGPT高效提问模板
PS: ChatGPT无限次数，无需魔法，登录即可使用,网页打开下面 tj4.mnsfdx.net [点击跳转链接](http://tj4.mnsfdx.net/) 我想请你XXXX，请问我应该如何向你提问才能得到最满意的答案，请提供全面、详细的建议，针对每一个建…...
android metaRTC编译
参考文章： metaRTC3.0稳定版本编译指南_metartc 编译-CSDN博客 源码下载： Releases metartc/metaRTC GitHub 版本v6.0-b4即可...
HDFS面试重点
文章目录 1. HDFS的架构2. HDFS的读写流程3.HDFS中，文件为什么以block块的方式存储？ 1. HDFS的架构 HDFS的架构可以分为以下几个主要组件： NameNode（名称节点）： NameNode是HDFS的关键组件之一，…...
Java中的IO流是什么？
Java中的IO流（Input/Output Stream）是Java编程语言中用于处理输入和输出操作的一种重要机制。在Java中，IO流被用来读取和写入数据，这些数据可以来自各种来源，如文件、网络连接、内存缓冲区等。Java的IO流提供了丰富的类…...
Spring boot 集成netty实现websocket通信
一、netty介绍 Netty 是一个基于NIO的客户、服务器端的编程框架，使用Netty 可以确保你快速和简单的开发出一个网络应用，例如实现了某种协议的客户、服务端应用。Netty相当于简化和流线化了网络应用的编程开发过程，例如：基于TCP和U…...
数码管的动态显示（二）
1.原理 这个十六进制是右边的dp为高位。 数码管的动态显示，在第一个计数周期显示个位，在第二个周期显示十位，在第三个周期显示百位由于人眼的视觉和数码管的特性，感觉就是显示了234，每个数码管的显示需要从输入的数据里…...
【JavaScript】数据类型转换 ① ( 隐式转换 和 显式转换 | 常用的 数据类型转换 | 转为 字符串类型 方法 )
文章目录 一、 JavaScript 数据类型转换1、数据类型转换2、隐式转换 和 显式转换3、常用的 数据类型转换4、转为 字符串类型 方法 一、 JavaScript 数据类型转换 1、数据类型转换 在 网页端 使用 HTML 表单 和 浏览器输入框 prompt 函数 , 接收的数据 是 字符串类型 变量 , 该…...
git学习（创建项目提交代码）
操作步骤如下 git init //初始化git remote add origin https://gitee.com/aydvvs.git //建立连接git remote -v //查看git add . //添加到暂存区git push 返送到暂存区git status // 查看提交代码git commit -m初次提交git push -u origin "master"//提交远程分支 …...
Day36：安全开发-JavaEE应用第三方组件Log4j日志FastJson序列化JNDI注入
目录 Java-项目管理-工具配置 Java-三方组件-Log4J&JNDI Java-三方组件-FastJson&反射 思维导图 Java知识点： 功能：数据库操作，文件操作，序列化数据，身份验证，框架开发，第三方库使用…...
HTML5+CSS3+JS小实例：全屏范围滑块
实例：全屏范围滑块 技术栈：HTML+CSS+JS 效果： 源码： 【HTML】 <!DOCTYPE html> <html lang="zh-CN"> <head><meta charset="UTF-8"><meta name="viewport" content="width=device-width, initial-scale…...
ctf杂项总结
1.文件无法打开 1.1.文件拓展名损坏/错误导致 方法： 1.使用kali当中的file命令查看，之后修改为正确的后缀即可 2.通过16进制编辑器打开查看文件头 3.文件头残缺/错误，可以先使用kail当中的file命令查看它的类型，之后再通过 16…...
openAI key 与ChatGPTPlus的关系，如何升级ChatGPTPLus
一、前言 先详细介绍一下Plus会员和Open API之间的区别： 实际上，这两者是相互独立的。举例来说，虽然您开通了Plus会员，并不意味着您就可以使用4.0版本的API。尽管这两个账户可以是同一个，但它们是完全独立的平台。 …...
KB5034441 0x80070643 reagentc.exe 无法更新引导配置数据
微软2024年1月的更新补丁正常更新会出现0x80070643错误，原因是正常安装系统默认的恢复分区留小了，通过压缩系统盘空间然后在diskgenius扩容恢复分区空间可以解决这个问题，但是笔者在进行上述操作时依旧出现了报错，按照网上的说法可…...
全网最最最详细“Jupyter command ‘jupyter-notebook‘ not found.“的解决方案
"Jupyter command jupyter-notebook not found."。这通常意味着 jupyter-notebook 命令在当前的虚拟环境中未安装或未正确安装，因此系统无法识别此命令。 原因分析 未安装 Jupyter Notebook: 可能你的虚拟环境中还没有安装 Jupyter Notebook。虽然 Jupyt…...
Java中常用的集合及方法（2）
在Java（JDK8）中，集合（Collection）是数据结构的实现，用于存储和操作对象集合。 集合（Collection）中包含的一般类或接口： 在这其中呢，我们经常使用的其实就是L…...
如何轻松打造属于自己的水印相机小程序？
水印相机小程序源码 描述：微信小程序。本文将为您详细介绍小程序水印相机源码的搭建过程，教您如何轻松打造属于自己的水印相机小程序。无论您是初学者还是有一定基础的开发者，都能轻松掌握这个教程。 一：水印相机搭建教程 1 隐…...
铭豹扩展坞 USB转网口 突然无法识别解决方法
当 USB 转网口扩展坞在一台笔记本上无法识别，但在其他电脑上正常工作时，问题通常出在笔记本自身或其与扩展坞的兼容性上。以下是系统化的定位思路和排查步骤，帮助你快速找到故障原因： 背景： 一个M-pard（铭豹）扩展坞的网卡突然无法识别了，扩展出来的三个USB接口正常。…...
XCTF-web-easyupload
试了试php，php7，pht，phtml等，都没有用 尝试.user.ini 抓包修改将.user.ini修改为jpg图片 在上传一个123.jpg 用蚁剑连接，得到flag...
【Python】 -- 趣味代码 - 小恐龙游戏
文章目录 文章目录 00 小恐龙游戏程序设计框架代码结构和功能游戏流程总结01 小恐龙游戏程序设计02 百度网盘地址00 小恐龙游戏程序设计框架 这段代码是一个基于 Pygame 的简易跑酷游戏的完整实现，玩家控制一个角色（龙）躲避障碍物（仙人掌和乌鸦）。以下是代码的详细介绍：…...
docker详细操作--未完待续
docker介绍 docker官网: Docker：加速容器应用程序开发 harbor官网：Harbor - Harbor 中文 使用docker加速器: Docker镜像极速下载服务 - 毫秒镜像 是什么 Docker 是一种开源的容器化平台，用于将应用程序及其依赖项（如库、运行时环…...
ubuntu搭建nfs服务centos挂载访问
在Ubuntu上设置NFS服务器 在Ubuntu上，你可以使用apt包管理器来安装NFS服务器。打开终端并运行： sudo apt update sudo apt install nfs-kernel-server创建共享目录 创建一个目录用于共享，例如/shared： sudo mkdir /shared sud…...
华为OD机试-食堂供餐-二分法
import java.util.Arrays; import java.util.Scanner;public class DemoTest3 {public static void main(String[] args) {Scanner in new Scanner(System.in);// 注意 hasNext 和 hasNextLine 的区别while (in.hasNextLine()) { // 注意 while 处理多个 caseint a in.nextIn…...
如何为服务器生成TLS证书
TLS（Transport Layer Security）证书是确保网络通信安全的重要手段，它通过加密技术保护传输的数据不被窃听和篡改。在服务器上配置TLS证书，可以使用户通过HTTPS协议安全地访问您的网站。本文将详细介绍如何在服务器上生成一个TLS证…...
Python如何给视频添加音频和字幕
在Python中，给视频添加音频和字幕可以使用电影文件处理库MoviePy和字幕处理库Subtitles。下面将详细介绍如何使用这些库来实现视频的音频和字幕添加，包括必要的代码示例和详细解释。 环境准备 在开始之前，需要安装以下Python库：…...
力扣-35.搜索插入位置
题目描述 给定一个排序数组和一个目标值，在数组中找到目标值，并返回其索引。如果目标值不存在于数组中，返回它将会被按顺序插入的位置。 请必须使用时间复杂度为 O(log n) 的算法。 class Solution {public int searchInsert(int[] nums, …...
AI+无人机如何守护濒危物种？YOLOv8实现95%精准识别
【导读】 野生动物监测在理解和保护生态系统中发挥着至关重要的作用。然而，传统的野生动物观察方法往往耗时耗力、成本高昂且范围有限。无人机的出现为野生动物监测提供了有前景的替代方案，能够实现大范围覆盖并远程采集数据。尽管具备这些优势…...