传统开发读写优化与HBase
目录:
一、传统开发数据读写性能优化
1. Mysql 分表、主从复制与读写分离
2. Redis(缓存型数据库)主从复制与读写分离
二、HBase
一、传统开发数据读写性能优化
1、Mysql 分表、主从复制与读写分离
-
mysql分库分表方案
一种分表方案：设置表A 表B
- 表A 自增列从1开始 步长2
- 表B 自增列从2开始 步长2
- 配置文件my.ini(window) 主键为奇数进表A 偶数进表B
-
Mycat+MySql 主从复制-读写分离
通过Mycat
- 增删改：写 => 主表 强一致性：InnoDB
- 查询：读 => 从表 弱一致性：MyIsam
- 主从表之间 => 通过二进制日志binlog实现主从表的数据同步
具体主从复制的工作过程请参考：MySQL主从复制与读写分离（附配置实例）
2、Redis(缓存型数据库)主从复制与读写分离
缓存数据库：哨兵【主从复制】，集群
后端查询都从Redis走
【定期】将关系型数据库数据【同步】到Redis：实时性(一致性)
具体过程参考：Redis主从复制、哨兵、Cluster三种模式摸透
主从复制存在一定的数据延迟，大数据不强调一致性，只需最终一致性
Redis 集群 + 哨兵的主从复制解决数据的分布式存储但也只是解决了读的问题，写还是面向数据库，写的慢主从复制同步的慢读的数据有问题或写的太频繁数据库崩了，对于写的数据慢可以采用批处理的方式
多主多从都解决不了问题就可以考虑使用HBase
二、HBase
HBase是一个建立在HDFS之上的分布式，提供高可靠性，高性能，列存储，可伸缩，实时读写NoSQL的数据库系统。
Hbase 本身就是集群 主要优点之一：吞(写)吐(读)量大
HBase介绍、特点、应用场景、生态圈
相关文章：
传统开发读写优化与HBase
目录: 一、传统开发数据读写性能优化 1. Mysql 分表、主从复制与读写分离 2. Redis(缓存型数据库)主从复制与读写分离 二、HBase 一、传统开发数据读写性能优化 1、Mysql 分表、主从复制与读写分离 mysql分库分表方案 一种分表方案：设置表A 表B 表A 自增列从1开始…...
【OpenGL实现 03】纹理贴图原理和实现
目录 一、说明二、纹理贴图原理2.1 纹理融合原理2.2 UV坐标原理 三、生成纹理对象3.1 需要在VAO上绑定纹理坐标3.2 纹理传递3.3 纹理buffer生成 四、代码实现：五、着色器4.1 片段4.2 顶点 五、后记 一、说明 本篇叙述在画出图元的时候，如何贴图纹理图片…...
FDU 2021 | 二叉树关键节点的个数
文章目录 1. 题目描述2. 我的尝试 1. 题目描述 给定一颗二叉树，树的每个节点的值为一个正整数。如果从根节点到节点 N 的路径上不存在比节点 N 的值大的节点，那么节点 N 被认为是树上的关键节点。求树上所有的关键节点的个数。请写出程序，并…...
精读《React Conf 2019 - Day2》
1 引言 这是继 精读《React Conf 2019 - Day1》 之后的第二篇，补充了 React Conf 2019 第二天的内容。 2 概述 & 精读 第二天的内容更为精彩，笔者会重点介绍比较干货的部分。 Fast refresh Fast refresh 是更好的 react-hot-loader 替代方案&am…...
向ChatGPT高效提问模板
PS: ChatGPT无限次数，无需魔法，登录即可使用,网页打开下面 tj4.mnsfdx.net [点击跳转链接](http://tj4.mnsfdx.net/) 我想请你XXXX，请问我应该如何向你提问才能得到最满意的答案，请提供全面、详细的建议，针对每一个建…...
android metaRTC编译
参考文章： metaRTC3.0稳定版本编译指南_metartc 编译-CSDN博客 源码下载： Releases metartc/metaRTC GitHub 版本v6.0-b4即可...
HDFS面试重点
文章目录 1. HDFS的架构2. HDFS的读写流程3.HDFS中，文件为什么以block块的方式存储？ 1. HDFS的架构 HDFS的架构可以分为以下几个主要组件： NameNode（名称节点）： NameNode是HDFS的关键组件之一，…...
Java中的IO流是什么？
Java中的IO流（Input/Output Stream）是Java编程语言中用于处理输入和输出操作的一种重要机制。在Java中，IO流被用来读取和写入数据，这些数据可以来自各种来源，如文件、网络连接、内存缓冲区等。Java的IO流提供了丰富的类…...
Spring boot 集成netty实现websocket通信
一、netty介绍 Netty 是一个基于NIO的客户、服务器端的编程框架，使用Netty 可以确保你快速和简单的开发出一个网络应用，例如实现了某种协议的客户、服务端应用。Netty相当于简化和流线化了网络应用的编程开发过程，例如：基于TCP和U…...
数码管的动态显示（二）
1.原理 这个十六进制是右边的dp为高位。 数码管的动态显示，在第一个计数周期显示个位，在第二个周期显示十位，在第三个周期显示百位由于人眼的视觉和数码管的特性，感觉就是显示了234，每个数码管的显示需要从输入的数据里…...
【JavaScript】数据类型转换 ① ( 隐式转换 和 显式转换 | 常用的 数据类型转换 | 转为 字符串类型 方法 )
文章目录 一、 JavaScript 数据类型转换1、数据类型转换2、隐式转换 和 显式转换3、常用的 数据类型转换4、转为 字符串类型 方法 一、 JavaScript 数据类型转换 1、数据类型转换 在 网页端 使用 HTML 表单 和 浏览器输入框 prompt 函数 , 接收的数据 是 字符串类型 变量 , 该…...
git学习（创建项目提交代码）
操作步骤如下 git init //初始化git remote add origin https://gitee.com/aydvvs.git //建立连接git remote -v //查看git add . //添加到暂存区git push 返送到暂存区git status // 查看提交代码git commit -m初次提交git push -u origin "master"//提交远程分支 …...
Day36：安全开发-JavaEE应用第三方组件Log4j日志FastJson序列化JNDI注入
目录 Java-项目管理-工具配置 Java-三方组件-Log4J&JNDI Java-三方组件-FastJson&反射 思维导图 Java知识点： 功能：数据库操作，文件操作，序列化数据，身份验证，框架开发，第三方库使用…...
HTML5+CSS3+JS小实例：全屏范围滑块
实例：全屏范围滑块 技术栈：HTML+CSS+JS 效果： 源码： 【HTML】 <!DOCTYPE html> <html lang="zh-CN"> <head><meta charset="UTF-8"><meta name="viewport" content="width=device-width, initial-scale…...
ctf杂项总结
1.文件无法打开 1.1.文件拓展名损坏/错误导致 方法： 1.使用kali当中的file命令查看，之后修改为正确的后缀即可 2.通过16进制编辑器打开查看文件头 3.文件头残缺/错误，可以先使用kail当中的file命令查看它的类型，之后再通过 16…...
openAI key 与ChatGPTPlus的关系，如何升级ChatGPTPLus
一、前言 先详细介绍一下Plus会员和Open API之间的区别： 实际上，这两者是相互独立的。举例来说，虽然您开通了Plus会员，并不意味着您就可以使用4.0版本的API。尽管这两个账户可以是同一个，但它们是完全独立的平台。 …...
KB5034441 0x80070643 reagentc.exe 无法更新引导配置数据
微软2024年1月的更新补丁正常更新会出现0x80070643错误，原因是正常安装系统默认的恢复分区留小了，通过压缩系统盘空间然后在diskgenius扩容恢复分区空间可以解决这个问题，但是笔者在进行上述操作时依旧出现了报错，按照网上的说法可…...
全网最最最详细“Jupyter command ‘jupyter-notebook‘ not found.“的解决方案
"Jupyter command jupyter-notebook not found."。这通常意味着 jupyter-notebook 命令在当前的虚拟环境中未安装或未正确安装，因此系统无法识别此命令。 原因分析 未安装 Jupyter Notebook: 可能你的虚拟环境中还没有安装 Jupyter Notebook。虽然 Jupyt…...
Java中常用的集合及方法（2）
在Java（JDK8）中，集合（Collection）是数据结构的实现，用于存储和操作对象集合。 集合（Collection）中包含的一般类或接口： 在这其中呢，我们经常使用的其实就是L…...
如何轻松打造属于自己的水印相机小程序？
水印相机小程序源码 描述：微信小程序。本文将为您详细介绍小程序水印相机源码的搭建过程，教您如何轻松打造属于自己的水印相机小程序。无论您是初学者还是有一定基础的开发者，都能轻松掌握这个教程。 一：水印相机搭建教程 1 隐…...
Zustand 状态管理库：极简而强大的解决方案
Zustand 是一个轻量级、快速和可扩展的状态管理库，特别适合 React 应用。它以简洁的 API 和高效的性能解决了 Redux 等状态管理方案中的繁琐问题。 核心优势对比 基本使用指南 1. 创建 Store // store.js import create from zustandconst useStore create((set)…...
【入坑系列】TiDB 强制索引在不同库下不生效问题
文章目录 背景SQL 优化情况线上SQL运行情况分析怀疑1：执行计划绑定问题？尝试：SHOW WARNINGS 查看警告探索 TiDB 的 USE_INDEX 写法Hint 不生效问题排查解决参考背景 项目中使用 TiDB 数据库，并对 SQL 进行优化了，添加了强制索引。 UAT 环境已经生效，但 PROD 环境强制索…...
【Redis技术进阶之路】「原理分析系列开篇」分析客户端和服务端网络诵信交互实现（服务端执行命令请求的过程 - 初始化服务器）
服务端执行命令请求的过程 【专栏简介】【技术大纲】【专栏目标】【目标人群】1. Redis爱好者与社区成员2. 后端开发和系统架构师3. 计算机专业的本科生及研究生 初始化服务器1. 初始化服务器状态结构初始化RedisServer变量 2. 加载相关系统配置和用户配置参数定制化配置参数案…...
鸿蒙中用HarmonyOS SDK应用服务 HarmonyOS5开发一个生活电费的缴纳和查询小程序
一、项目初始化与配置 1. 创建项目 ohpm init harmony/utility-payment-app 2. 配置权限 // module.json5 {"requestPermissions": [{"name": "ohos.permission.INTERNET"},{"name": "ohos.permission.GET_NETWORK_INFO"…...
Rust 异步编程
Rust 异步编程 引言 Rust 是一种系统编程语言，以其高性能、安全性以及零成本抽象而著称。在多核处理器成为主流的今天，异步编程成为了一种提高应用性能、优化资源利用的有效手段。本文将深入探讨 Rust 异步编程的核心概念、常用库以及最佳实践。 异步编程基础 什么是异步…...
rnn判断string中第一次出现a的下标
# coding:utf8 import torch import torch.nn as nn import numpy as np import random import json""" 基于pytorch的网络编写 实现一个RNN网络完成多分类任务 判断字符 a 第一次出现在字符串中的位置 """class TorchModel(nn.Module):def __in…...
基于Java+MySQL实现（GUI）客户管理系统
客户资料管理系统的设计与实现 第一章 需求分析 1.1 需求总体介绍 本项目为了方便维护客户信息为了方便维护客户信息，对客户进行统一管理，可以把所有客户信息录入系统，进行维护和统计功能。可通过文件的方式保存相关录入数据，对…...
uniapp手机号一键登录保姆级教程（包含前端和后端）
目录 前置条件创建uniapp项目并关联uniClound云空间开启一键登录模块并开通一键登录服务编写云函数并上传部署获取手机号流程(第一种) 前端直接调用云函数获取手机号（第三种）后台调用云函数获取手机号 错误码常见问题 前置条件 手机安装有sim卡手机开启…...
【网络安全】开源系统getshell漏洞挖掘
审计过程： 在入口文件admin/index.php中： 用户可以通过m,c,a等参数控制加载的文件和方法，在app/system/entrance.php中存在重点代码： 当M_TYPE system并且M_MODULE include时，会设置常量PATH_OWN_FILE为PATH_APP.M_T…...
论文阅读：LLM4Drive: A Survey of Large Language Models for Autonomous Driving
地址：LLM4Drive: A Survey of Large Language Models for Autonomous Driving 摘要翻译 自动驾驶技术作为推动交通和城市出行变革的催化剂，正从基于规则的系统向数据驱动策略转变。传统的模块化系统受限于级联模块间的累积误差和缺乏灵活性的预设规则。…...