传统开发读写优化与HBase
目录:
一、传统开发数据读写性能优化
1. Mysql 分表、主从复制与读写分离
2. Redis(缓存型数据库)主从复制与读写分离
二、HBase
一、传统开发数据读写性能优化
1、Mysql 分表、主从复制与读写分离
-
mysql分库分表方案
一种分表方案：设置表A 表B
- 表A 自增列从1开始 步长2
- 表B 自增列从2开始 步长2
- 配置文件my.ini(window) 主键为奇数进表A 偶数进表B
-
Mycat+MySql 主从复制-读写分离
通过Mycat
- 增删改：写 => 主表 强一致性：InnoDB
- 查询：读 => 从表 弱一致性：MyIsam
- 主从表之间 => 通过二进制日志binlog实现主从表的数据同步
具体主从复制的工作过程请参考：MySQL主从复制与读写分离（附配置实例）
2、Redis(缓存型数据库)主从复制与读写分离
缓存数据库：哨兵【主从复制】，集群
后端查询都从Redis走
【定期】将关系型数据库数据【同步】到Redis：实时性(一致性)
具体过程参考：Redis主从复制、哨兵、Cluster三种模式摸透
主从复制存在一定的数据延迟，大数据不强调一致性，只需最终一致性
Redis 集群 + 哨兵的主从复制解决数据的分布式存储但也只是解决了读的问题，写还是面向数据库，写的慢主从复制同步的慢读的数据有问题或写的太频繁数据库崩了，对于写的数据慢可以采用批处理的方式
多主多从都解决不了问题就可以考虑使用HBase
二、HBase
HBase是一个建立在HDFS之上的分布式，提供高可靠性，高性能，列存储，可伸缩，实时读写NoSQL的数据库系统。
Hbase 本身就是集群 主要优点之一：吞(写)吐(读)量大
HBase介绍、特点、应用场景、生态圈
相关文章：
传统开发读写优化与HBase
目录: 一、传统开发数据读写性能优化 1. Mysql 分表、主从复制与读写分离 2. Redis(缓存型数据库)主从复制与读写分离 二、HBase 一、传统开发数据读写性能优化 1、Mysql 分表、主从复制与读写分离 mysql分库分表方案 一种分表方案：设置表A 表B 表A 自增列从1开始…...
【OpenGL实现 03】纹理贴图原理和实现
目录 一、说明二、纹理贴图原理2.1 纹理融合原理2.2 UV坐标原理 三、生成纹理对象3.1 需要在VAO上绑定纹理坐标3.2 纹理传递3.3 纹理buffer生成 四、代码实现：五、着色器4.1 片段4.2 顶点 五、后记 一、说明 本篇叙述在画出图元的时候，如何贴图纹理图片…...
FDU 2021 | 二叉树关键节点的个数
文章目录 1. 题目描述2. 我的尝试 1. 题目描述 给定一颗二叉树，树的每个节点的值为一个正整数。如果从根节点到节点 N 的路径上不存在比节点 N 的值大的节点，那么节点 N 被认为是树上的关键节点。求树上所有的关键节点的个数。请写出程序，并…...
精读《React Conf 2019 - Day2》
1 引言 这是继 精读《React Conf 2019 - Day1》 之后的第二篇，补充了 React Conf 2019 第二天的内容。 2 概述 & 精读 第二天的内容更为精彩，笔者会重点介绍比较干货的部分。 Fast refresh Fast refresh 是更好的 react-hot-loader 替代方案&am…...
向ChatGPT高效提问模板
PS: ChatGPT无限次数，无需魔法，登录即可使用,网页打开下面 tj4.mnsfdx.net [点击跳转链接](http://tj4.mnsfdx.net/) 我想请你XXXX，请问我应该如何向你提问才能得到最满意的答案，请提供全面、详细的建议，针对每一个建…...
android metaRTC编译
参考文章： metaRTC3.0稳定版本编译指南_metartc 编译-CSDN博客 源码下载： Releases metartc/metaRTC GitHub 版本v6.0-b4即可...
HDFS面试重点
文章目录 1. HDFS的架构2. HDFS的读写流程3.HDFS中，文件为什么以block块的方式存储？ 1. HDFS的架构 HDFS的架构可以分为以下几个主要组件： NameNode（名称节点）： NameNode是HDFS的关键组件之一，…...
Java中的IO流是什么？
Java中的IO流（Input/Output Stream）是Java编程语言中用于处理输入和输出操作的一种重要机制。在Java中，IO流被用来读取和写入数据，这些数据可以来自各种来源，如文件、网络连接、内存缓冲区等。Java的IO流提供了丰富的类…...
Spring boot 集成netty实现websocket通信
一、netty介绍 Netty 是一个基于NIO的客户、服务器端的编程框架，使用Netty 可以确保你快速和简单的开发出一个网络应用，例如实现了某种协议的客户、服务端应用。Netty相当于简化和流线化了网络应用的编程开发过程，例如：基于TCP和U…...
数码管的动态显示（二）
1.原理 这个十六进制是右边的dp为高位。 数码管的动态显示，在第一个计数周期显示个位，在第二个周期显示十位，在第三个周期显示百位由于人眼的视觉和数码管的特性，感觉就是显示了234，每个数码管的显示需要从输入的数据里…...
【JavaScript】数据类型转换 ① ( 隐式转换 和 显式转换 | 常用的 数据类型转换 | 转为 字符串类型 方法 )
文章目录 一、 JavaScript 数据类型转换1、数据类型转换2、隐式转换 和 显式转换3、常用的 数据类型转换4、转为 字符串类型 方法 一、 JavaScript 数据类型转换 1、数据类型转换 在 网页端 使用 HTML 表单 和 浏览器输入框 prompt 函数 , 接收的数据 是 字符串类型 变量 , 该…...
git学习（创建项目提交代码）
操作步骤如下 git init //初始化git remote add origin https://gitee.com/aydvvs.git //建立连接git remote -v //查看git add . //添加到暂存区git push 返送到暂存区git status // 查看提交代码git commit -m初次提交git push -u origin "master"//提交远程分支 …...
Day36：安全开发-JavaEE应用第三方组件Log4j日志FastJson序列化JNDI注入
目录 Java-项目管理-工具配置 Java-三方组件-Log4J&JNDI Java-三方组件-FastJson&反射 思维导图 Java知识点： 功能：数据库操作，文件操作，序列化数据，身份验证，框架开发，第三方库使用…...
HTML5+CSS3+JS小实例：全屏范围滑块
实例：全屏范围滑块 技术栈：HTML+CSS+JS 效果： 源码： 【HTML】 <!DOCTYPE html> <html lang="zh-CN"> <head><meta charset="UTF-8"><meta name="viewport" content="width=device-width, initial-scale…...
ctf杂项总结
1.文件无法打开 1.1.文件拓展名损坏/错误导致 方法： 1.使用kali当中的file命令查看，之后修改为正确的后缀即可 2.通过16进制编辑器打开查看文件头 3.文件头残缺/错误，可以先使用kail当中的file命令查看它的类型，之后再通过 16…...
openAI key 与ChatGPTPlus的关系，如何升级ChatGPTPLus
一、前言 先详细介绍一下Plus会员和Open API之间的区别： 实际上，这两者是相互独立的。举例来说，虽然您开通了Plus会员，并不意味着您就可以使用4.0版本的API。尽管这两个账户可以是同一个，但它们是完全独立的平台。 …...
KB5034441 0x80070643 reagentc.exe 无法更新引导配置数据
微软2024年1月的更新补丁正常更新会出现0x80070643错误，原因是正常安装系统默认的恢复分区留小了，通过压缩系统盘空间然后在diskgenius扩容恢复分区空间可以解决这个问题，但是笔者在进行上述操作时依旧出现了报错，按照网上的说法可…...
全网最最最详细“Jupyter command ‘jupyter-notebook‘ not found.“的解决方案
"Jupyter command jupyter-notebook not found."。这通常意味着 jupyter-notebook 命令在当前的虚拟环境中未安装或未正确安装，因此系统无法识别此命令。 原因分析 未安装 Jupyter Notebook: 可能你的虚拟环境中还没有安装 Jupyter Notebook。虽然 Jupyt…...
Java中常用的集合及方法（2）
在Java（JDK8）中，集合（Collection）是数据结构的实现，用于存储和操作对象集合。 集合（Collection）中包含的一般类或接口： 在这其中呢，我们经常使用的其实就是L…...
如何轻松打造属于自己的水印相机小程序？
水印相机小程序源码 描述：微信小程序。本文将为您详细介绍小程序水印相机源码的搭建过程，教您如何轻松打造属于自己的水印相机小程序。无论您是初学者还是有一定基础的开发者，都能轻松掌握这个教程。 一：水印相机搭建教程 1 隐…...
浅谈 React Hooks
React Hooks 是 React 16.8 引入的一组 API，用于在函数组件中使用 state 和其他 React 特性（例如生命周期方法、context 等）。Hooks 通过简洁的函数接口，解决了状态与 UI 的高度解耦，通过函数式编程范式实现更灵活 Rea…...
java_网络服务相关_gateway_nacos_feign区别联系
1. spring-cloud-starter-gateway 作用：作为微服务架构的网关，统一入口，处理所有外部请求。 核心能力： 路由转发（基于路径、服务名等）过滤器（鉴权、限流、日志、Header 处理）支持负…...
【机器视觉】单目测距——运动结构恢复
ps：图是随便找的，为了凑个封面 前言 在前面对光流法进行进一步改进，希望将2D光流推广至3D场景流时，发现2D转3D过程中存在尺度歧义问题，需要补全摄像头拍摄图像中缺失的深度信息，否则解空间不收敛…...
MVC 数据库
MVC 数据库 引言 在软件开发领域，Model-View-Controller（MVC）是一种流行的软件架构模式，它将应用程序分为三个核心组件：模型（Model）、视图（View）和控制器（Controller）。这种模式有助于提高代码的可维护性和可扩展性。本文将深入探讨MVC架构与数据库之间的关系，以…...
RNN避坑指南：从数学推导到LSTM/GRU工业级部署实战流程
本文较长，建议点赞收藏，以免遗失。更多AI大模型应用开发学习视频及资料，尽在聚客AI学院。 本文全面剖析RNN核心原理，深入讲解梯度消失/爆炸问题，并通过LSTM/GRU结构实现解决方案，提供时间序列预测和文本生成…...
3-11单元格区域边界定位(End属性)学习笔记
返回一个Range 对象，只读。该对象代表包含源区域的区域上端下端左端右端的最后一个单元格。等同于按键 End 向上键(End(xlUp))、End向下键(End(xlDown))、End向左键(End(xlToLeft)End向右键(End(xlToRight)) 注意：它移动的位置必须是相连的有内容的单元格…...
dify打造数据可视化图表
一、概述 在日常工作和学习中，我们经常需要和数据打交道。无论是分析报告、项目展示，还是简单的数据洞察，一个清晰直观的图表，往往能胜过千言万语。 一款能让数据可视化变得超级简单的 MCP Server，由蚂蚁集团 AntV 团队…...
docker 部署发现spring.profiles.active 问题
报错： org.springframework.boot.context.config.InvalidConfigDataPropertyException: Property spring.profiles.active imported from location class path resource [application-test.yml] is invalid in a profile specific resource [origin: class path re…...
安宝特方案丨船舶智造的“AR+AI+作业标准化管理解决方案”（装配）
船舶制造装配管理现状：装配工作依赖人工经验，装配工人凭借长期实践积累的操作技巧完成零部件组装。企业通常制定了装配作业指导书，但在实际执行中，工人对指导书的理解和遵循程度参差不齐。 船舶装配过程中的挑战与需求 挑战 (1…...
NXP S32K146 T-Box 携手 SD NAND（贴片式TF卡）：驱动汽车智能革新的黄金组合
在汽车智能化的汹涌浪潮中，车辆不再仅仅是传统的交通工具，而是逐步演变为高度智能的移动终端。这一转变的核心支撑，来自于车内关键技术的深度融合与协同创新。车载远程信息处理盒（T-Box）方案：NXP S32K146 与…...