当前位置: 首页 > news >正文

【MySQL精通之路】InnoDB(9)-表和页压缩(1)-表压缩

目录

1.表压缩概述

2.创建压缩表

2.1 在FPT表空间中创建压缩表

2.2 在通用表空间中创建压缩表

2.3 压缩表的限制

3.优化InnoDB表的压缩

4.运行时监控InnoDB表压缩

5.InnoDB表的压缩工作原理

5.1 压缩算法

5.2 InnoDB数据存储和压缩

5.3 B树页面的压缩

5.4 压缩BLOB、VARCHAR和TEXT列

6.OLTP工作负载的压缩

7.SQL压缩语法警告和错误

7.1 file-per-table表空间的SQL压缩语法警告和错误

7.2 通用空间的SQL压缩语法警告和错误



1.表压缩概述

        由于处理器和高速缓冲存储器的速度比磁盘存储设备更快,因此许多工作负载都是磁盘有关的。数据压缩能够以提高CPU利用率的小成本实现更小的数据库大小减少I/O提高吞吐量

        压缩对于读密集型应用程序尤其有价值,因为在具有足够RAM以将频繁使用的数据保存在内存中的系统上。

        使用ROW_FORMAT=COMPRESED创建的InnoDB表可以在磁盘上使用比配置的innodb_page_size值更小的页面大小。

        较小的页面需要较少的I/O读取写入磁盘,这对SSD设备尤其有价值。

        压缩页面大小是通过CREATE TABLEALTER TABLE KEY_BLOCK_SIZE参数指定的。不同的页面大小要求将表放在FPT表空间通用表空间文件中,而不是放在系统表空间中,因为系统表空间无法存储压缩的表

有关更多信息,请参阅“FPT表空间”和“通用表空间”。

        无论KEY_BLOCK_SIZE值如何,压缩级别都是相同的。

        当您为KEY_BLOCK_SIZE指定更小的值时,您可以获得越来越小的页面带来的I/O好处。

        但是,如果指定的值太小,当数据值无法压缩到足以容纳每页中的多行时,则会有额外的开销来重新组织页面。根据表中每个索引的键列长度,KEY_BLOCK_SIZE的大小有一个严格的限制。指定的值太小,CREATE TABLE或ALTER TABLE语句将失败。

        在缓冲池中,压缩数据保存在小页面中,页面大小基于KEY_BLOCK_SIZE值。为了查询或更新列值,MySQL还使用未压缩的数据在缓冲池中创建一个未压缩的页面。在缓冲池中,对未压缩页面的任何更新也会被重新写回等效的压缩页面。您可能需要调整缓冲池的大小以容纳压缩页未压缩页额外数据,尽管在需要空间时会将未压缩页从缓冲池中移出,然后在下次访问时再次进行压缩。


2.创建压缩表

压缩表可以在FPT表空间通用表空间中创建。表压缩不适用于InnoDB系统表空间

系统表空间(space0,.ibdata文件)可以包含用户创建的表,但也包含从不压缩的内部系统数据。因此,压缩仅适用于FPT表空间通用表空间中的表(和索引)。

2.1 在FPT表空间中创建压缩表

要在FPT表空间中创建压缩表,必须启用innodb_file_per_table(默认设置)。

您可以在MySQL配置文件(my.cnf或my.ini)中设置此参数,也可以使用set语句动态设置此参数。

配置innodb_file_per_table选项后,在CREATE TABLE或ALTER TABLE语句中指定ROW_FORMAT=COMRESSED子句KEY_BLOCK_SIZE子句,或同时指定这两个子句,以在FPT表空间中创建压缩表。

例如,您可以使用以下语句:

SET GLOBAL innodb_file_per_table=1;
CREATE TABLE t1(c1 INT PRIMARY KEY)ROW_FORMAT=COMPRESSEDKEY_BLOCK_SIZE=8;

2.2 在通用表空间中创建压缩表

        要在通用表空间中创建压缩表,必须为创建表空间时指定的通用表空间定义FILE_BLOCK_SIZE

FILE_BLOCK_SIZE值必须是相对于innodb_page_size值的有效压缩页大小,并且由CREATE TABLEALTER TABLE KEY_BLOCK_IZE子句定义的压缩表的页大小必须等于FILE_BLOCC_SIZE/1024

例如,如果innodb_page_size=16384FILE_BLOCK_SIZE=8192,则表的KEY_BLOCK_IZE必须为8。

有关更多信息,请参阅下面博客的第三章:“通用表空间”

【MySQL精通之路】InnoDB(6)-磁盘结构(3)-表空间-CSDN博客

以下示例演示了创建一个通用表空间和添加一个压缩表

该示例假设默认的innodb_page_size16K8192FILE_BLOCK_SIZE要求压缩表的KEY_BLOCK_IZE为8

mysql> CREATE TABLESPACE `ts2` ADD DATAFILE 'ts2.ibd' FILE_BLOCK_SIZE = 8192 Engine=InnoDB;mysql> CREATE TABLE t4 (c1 INT PRIMARY KEY) TABLESPACE ts2 ROW_FORMAT=COMPRESSED KEY_BLOCK_SIZE=8;


注意: 

从MySQL 8.0开始,压缩表的表空间文件是使用物理页面大小而不是InnoDB页面大小创建的,这使得空压缩表的初始表空间文件大小小于以前的MySQL版本。

如果指定ROW_FORMAT=COMPRESSED,则可以省略KEY_BLOCK_SIZE

KEY_BLOCK_SIZE 设置默认为innodb_page_size一半的值。

如果指定了有效的KEY_BLOCK_SIZE值,则可以省略ROW_FORMAT=COMPRESSED;

自动启用压缩。要确定KEY_BLOCK_SIZE的最佳值,通常需要为该子句创建具有不同值的同一表的多个副本,然后查看生成的.ibd文件的大小,并查看每个文件在实际工作负载下的性能。

对于通用表空间,请记住,删除表不会减少常规表空间.ibd文件的大小,也不会将磁盘空间返回给操作系统。

有关更多信息,请参阅"通用表空间”。

【MySQL精通之路】InnoDB(6)-磁盘结构(3)-表空间-CSDN博客

KEY_BLOCK_SIZE值被视为建议值;如果需要,InnoDB可以使用不同的大小。

对于每个表的文件表空间,KEY_BLOCK_SIZE只能小于或等于innodb_page_SIZE值。

如果指定的值大于innodb_page_size值,则会忽略指定的值,发出警告,

并将KEY_BLOCK_SIZE设置为innodb_page _size值的一半。

如果innodb_strict_mode=ON,则指定无效的KEY_BLOCK_SIZE值将返回错误。

对于通用表空间,有效的KEY_BLOCK_SIZE值取决于表空间的FILE_BLOCK_IZE设置。

有关更多信息,请“通用表空间”。

【MySQL精通之路】InnoDB(6)-磁盘结构(3)-表空间-CSDN博客

InnoDB支持32KB和64KB的页面大小,但这些页面大小不支持压缩。

有关更多信息,请参阅innodb_page_size文档

InnoDB数据页的默认未压缩大小为16KB

根据选项值的组合,MySQL对表空间数据文件(.ibd文件)使用1KB、2KB、4KB、8KB或16KB的页面大小。

实际压缩算法不受KEY_BLOCK_SIZE值的影响;该值决定每个压缩块的大小,进而影响每个压缩页中可以压缩的行数。

当在每个表空间的文件中创建压缩表时,将KEY_BLOCK_SIZE设置为等于InnoDB页面大小通常不会导致太多压缩。

例如,设置KEY_BLOCK_SIZE=16通常不会导致太多压缩,因为正常的InnoDB页面大小是16KB。

此设置可能仍然适用于具有许多长BLOB、VARCHAR或TEXT列的表,因为这些值通常可以很好地压缩,因此可能需要较少的溢出页

如“压缩如何适用于InnoDB表”所述。

对于通用表空间,不允许KEY_BLOCK_SIZE值等于InnoDB页面大小。

有关更多信息,请参阅“通用表空间”。

【MySQL精通之路】InnoDB(6)-磁盘结构(3)-表空间-CSDN博客

根据CREATE TABLE或ALTER TABLE语句中的指定,表的所有索引(包括聚集索引)都使用相同的页大小进行压缩。

ROW_FORMAT和KEY_BLOCK_SIZE等表属性不是InnoDB表的CREATE INDEX语法的一部分,如果指定了它们,则会被忽略(尽管如果指定了,它们会出现在SHOW CREATE Table语句的输出中)。

有关性能相关的配置选项,请参阅“InnoDB表的调整压缩”。

2.3 压缩表的限制

压缩表不能存储在InnoDB系统表空间中。

通用表空间可以包含多个表,但压缩表未压缩表不能共存于同一个通用表空间中

压缩应用于整个表及其所有相关索引,而不是单独的行,尽管子句名称为ROW_FORMAT

InnoDB不支持压缩的临时表

启用innodb_strict_mode(默认值)时,如果指定了ROW_FORMAT=COMPRESSED或KEY_BLOCK_SIZE,CREATE TEMPORARY TABLE将返回错误。

如果innodb_strict_mode被禁用,则会发出警告,并使用非压缩行格式创建临时表。

同样的限制也适用于临时表上的ALTER TABLE操作

3.优化InnoDB表的压缩

待补充


4.运行时监控InnoDB表压缩

        应用程序的总体性能CPUI/O利用率及磁盘文件的大小都很好地指示了压缩对应用程序的有效性。本节基于“InnoDB表的调优压缩”中的性能调优建议,并展示了如何查找初始测试过程中可能不会出现的问题。

        为了深入了解压缩表的性能注意事项,可以使用示例“使用压缩Information Schema表”中描述的Information Schema表在运行时监视压缩性能。这些表反映了内存的内部使用情况总体使用的压缩率

        INNODB_CMP表报告有关正在使用的每个压缩页面大小(KEY_BLOCK_SIZE)的压缩活动的信息。这些表中的信息是全系统的:它总结了数据库中所有压缩表压缩统计信息。当没有其他压缩表被访问时,您可以通过检查这些表来使用这些数据来帮助决定是否压缩表。它在服务器上的开销相对较低,因此您可以在生产服务器定期查询它,以检查压缩功能的总体效率

        INNODB_CMP_PER_INDEX表报告有关各个表索引压缩活动的信息。这些信息更有针对性,对于评估压缩效率和诊断性能问题更有用,每次一个表索引。(因为每个InnoDB表都表示为聚集索引,MySQL在这种情况下不会对索引进行太大区分。)InnoDB_CMP_PER_INDEX表确实涉及大量开销,因此它更适合开发服务器,在那里可以单独比较不同工作负载、数据和压缩设置的效果。为了防止意外施加这种监视开销,必须先启用innodb_cp_per_index_enabled配置选项,然后才能查询innodb_cmp_per_index表

        要考虑的关键统计数据是执行压缩解压缩操作的次数以及所花费的时间。由于MySQL在B树节点太满无法包含修改后的压缩数据会对其进行拆分,因此请将“成功”压缩操作的数量与此类操作的总体数量进行比较。根据INNODB_CMPINNODB_CMP_PER_INDEX表中的信息以及整体应用程序性能硬件资源利用率,您可以更改硬件配置、调整缓冲池的大小、选择不同的页面大小或选择不同的表集进行压缩。

        如果压缩解压缩所需的CPU时间很长,那么在相同的数据、应用程序工作负载和一组压缩表的情况下,改用更快多核CPU可以帮助提高性能增加缓冲池的大小也可能有助于提高性能,使更多未压缩的页面可以留在内存中,从而减少仅以压缩形式存在于内存中的页面进行解压缩的需要。

        总体而言,大量的压缩操作(与应用程序中的INSERT、UPDATE和DELETE操作的数量以及数据库的大小相比)可能表明某些压缩表的更新过多无法进行有效的压缩。如果是这样,请选择更大的页面大小,或者对压缩的表更有选择性。

        如果“成功”压缩操作(COMPRESS_OPS_OK)的数量占压缩操作总数(COMPREST_OPS)的百分比很高,则系统可能运行良好。如果比率较低,那么MySQL重组重新压缩拆分B树节点频率高于预期。在这种情况下,请避免压缩某些表,或增加某些压缩表的KEY_BLOCK_SIZE。对于导致应用程序中“压缩失败”的数量超过总数的1%或2%的表,您可能会关闭压缩。(在诸如数据加载之类的临时操作期间,这样的故障率可能是可接受的)。

5.InnoDB表的压缩工作原理

本节描述了一些关于InnoDB表压缩的内部实现细节。这里提供的信息可能有助于调整性能,但对于压缩的基本用途来说,这不是必须的。

5.1 压缩算法

        一些操作系统在文件系统级别实现压缩。

        文件通常被划分固定大小的块,这些块被压缩为可变大小的块。这很容易导致碎片化。每次修改块中的某个内容时,都会在将整个块写入磁盘之前对其进行重新压缩。这些特性使得这种压缩技术不适合在更新密集型数据库系统中使用

        MySQL借助著名的zlib库实现压缩,该库实现了LZ77压缩算法

        这种压缩算法在CPU利用率减少数据大小方面都是成熟稳健高效的。

        该算法是“无损”的,因此原始的未压缩数据总是可以从压缩的形式中重建。

        LZ77压缩的工作原理是找到要压缩的数据中重复的数据序列。数据中的值模式决定了它的压缩效果,但典型的用户数据通常压缩50%或更多。

        与应用程序执行的压缩或其他一些数据库管理系统的压缩功能不同,InnoDB压缩既适用于用户数据,也适用于索引。在许多情况下,索引可能占数据库总大小的40-50%或更多,因此这种差异是显著的。

        当数据集的压缩工作正常时,InnoDB数据文件的大小(每个表空间或通用表空间.ibd文件的文件)是未压缩大小的25%到50%,或者可能更小。根据工作负载的不同,这个较小的数据库反过来可以减少I/O提高吞吐量,而在提高CPU利用率方面的成本并不高。

您可以通过修改innodb_compression_level配置选项来调整压缩级别CPU开销之间的平衡。

5.2 InnoDB数据存储和压缩

InnoDB表中的所有用户数据都存储在包含B树索引(聚集索引)的中。

在其他一些数据库系统中,这种类型的索引被称为“索引组织表”。索引节点中的每一行都包含(用户指定或系统生成的)主键表中所有其他列的值

InnoDB表中的二级索引也是B树,包含成对的值:索引键指向聚集索引中一行的指针

指针实际上是表主键的值,如果需要索引键和主键以外的列,则用于访问聚集索引。辅助索引记录必须始终匹配单个B树页。

B树节点(包括聚集索引二级索引)的压缩用于存储长VARCHARBLOBTEXT列的溢出页的压缩处理方式不同,如下节所述。

5.3 B树页面的压缩

由于B树页面经常更新,因此需要进行特殊处理。重要的是要尽量减少B树节点的拆分次数

博主PS:回忆一下页分裂和页合并

并尽量减少解压缩重新压缩其内容的需要。

        MySQL使用的一种技术是以未压缩的形式维护B树节点中的一些系统信息,从而促进某些即时更新。例如,这允许在不进行任何压缩操作的情况下对行进行标记删除(标记为删除但未删除)和删除。

        此外,MySQL试图避免在索引页更改时对其进行不必要的解压缩和重新压缩

在每个B树页面中,系统都会保存一个未压缩的“修改日志(modification log)”,以记录对页面所做的更改。可以将小记录的更新和插入写入此修改日志,而不需要完全重建整个页面

        当修改日志的空间用完时,InnoDB会解压缩页面应用更改并重新压缩页面。如果重新压缩失败(这种情况被称为压缩失败),B树节点将被拆分,并重复该过程,直到更新或插入成功。

        为了避免在写密集型工作负载(如OLTP应用程序)中频繁出现压缩故障,MySQL有时会在页面中保留一些空白空间(填充),以便修改日志更快地填满,并在仍有足够空间避免拆分的情况下重新压缩页面。随着系统跟踪页面拆分的频率,每个页面中剩余的填充空间量会有所不同。在频繁写入压缩表的繁忙服务器上,可以调整innodb_compression_failure_threshold_pctinnodb_impression_pad_pct_max配置选项来微调此机制


        通常,MySQL要求InnoDB表中的每个B树页面至少可以容纳两条记录。对于压缩表,这一要求已经放宽

        B树节点的叶页(无论是主键还是辅助索引)只需要容纳一条记录,但该记录必须以未压缩的形式放入每页修改日志中。

        如果innodb_strict_mode为ON,MySQL将在CREATE TABLE或CREATE INDEX期间检查最大行大小。如果行不适合,则会发出以下错误消息:ERROR HY000: Too big row.


        如果在innodb_strict_mode为OFF时创建表,并且随后的INSERT或UPDATE语句试图创建

不适合压缩页大小的索引项,则操作将失败,并返回错误42000:Row size too large.

(此错误消息没有命名记录过大的索引,也没有提及索引记录的长度或该特定索引页上的最大记录大小。)

要解决此问题,请使用ALTER table重建表,然后选择更大的压缩页大小KEY_BLOCK_SIZE,缩短任何列前缀索引,或使用ROW_FORMAT=DYNAMIC或ROW_FORMAT=COMPACT完全禁用压缩。

        innodb_strict_mode不适用于同样支持压缩表的通用表空间一般表空间的表空间管理规则是独立于innodb_strict_mode严格执行的。

有关更多信息,请参阅“CREATE TABLESPACE语句”。

5.4 压缩BLOB、VARCHAR和TEXT列

        在InnoDB表中,不属于主键的BLOB、VARCHARTEXT列可以存储在单独分配的溢出页上。我们将这些列称为页外列。它们的值存储在溢出页单链接列表中。

        对于在ROW_FORMAT=DYNAMICROW_FORMAT=COMPRESED中创建的表,BLOB、TEXT或VARCHAR列的值可以完全页外存储,这取决于它们的长度整行的长度

        对于页外存储的列,聚集索引记录只包含指向溢出页的20字节指针,每列一个。

        是否有任何列存储在页外取决于页大小行的总大小。当该行太长而无法完全容纳在聚集索引的页面中时,MySQL会选择最长的列作为页外存储,直到该行适合聚集索引页面。如上所述,如果一行本身不适合压缩页面,则会发生错误。

注意:

对于在ROW_FORMAT=DYNAMICROW_FORMAT=COMPRESED中创建的表,小于或等于40字节的TEXT和BLOB列始终存储在一行中。

        使用ROW_FORMAT=REDUNDANTROW_FORMT=COMPACT的表将BLOB、VARCHAR和TEXT列前768个字节主键一起存储在聚集索引记录中。

768字节的前缀后面跟着一个20字节的指针,指向包含列值其余部分的溢出页

        当表为COMPRESSED格式时,所有写入溢出页的数据都会“按原样”压缩;也就是说,MySQL将zlib压缩算法应用于整个数据项

        除了数据之外,压缩的溢出页还包含未压缩的报头尾部,该报头尾部包括页校验和到下一个溢出页的指针等。因此,如果数据是高度可压缩的,那么对于较长的BLOB、TEXT或VARCHAR列,可以获得非常显著的存储节省,文本数据通常就是这样。

        图像数据,例如JPEG,通常已经被压缩,因此存储在压缩表中没有太大好处;双重压缩会浪费CPU周期,而且节省很少的空间或根本不节省空间。

        溢出页面的大小与其他页面相同。即使列的总长度只有8K字节,一个包含十列的行也会占用十个溢出页。在未压缩的表中,10个未压缩的溢出页占用160K字节在8K页面大小的压缩表中,它们只占用80K字节。因此,对于具有长列值的表,使用压缩表格式通常更有效。

        对于每个表的文件表空间,使用16K压缩的页面大小可以降低BLOB、VARCHAR或TEXT列的存储和I/O成本,因为这些数据通常压缩得很好,因此可能需要更少的溢出页面,即使B树节点本身占用的页面与未压缩形式的页面一样多。一般表空间不支持16K压缩页面大小(KEY_BLOCK_SIZE)。

有关更多信息,请参阅下面博客的第三节。“通用表空间”。

【MySQL精通之路】InnoDB(6)-磁盘结构(3)-表空间-CSDN博客

6.OLTP工作负载的压缩

        传统上,InnoDB压缩功能主要推荐用于只读以读取为主的工作负载,例如在数据仓库配置中。

        SSD存储设备速度快但相对较小且价格昂贵,这使得压缩对OLTP工作负载也很有吸引力:高流量交互式网站可以通过将压缩表频繁执行INSERTUPDATEDELETE操作的应用程序一起使用,来降低其存储要求每秒I/O操作(IOPS)。

        通过这些配置选项,您可以调整特定MySQL实例的压缩工作方式,重点关注写密集型操作的性能和可扩展性:

innodb_compression_level允许您提高或降低压缩程度。更高的值可以将更多的数据放入存储设备,而在压缩过程中会消耗更多的CPU开销。当存储空间不是关键的,或者您认为数据不是特别可压缩时,使用较低的值可以减少CPU开销。

innodb_compression_failure_threshold_pct指定了更新压缩表期间压缩失败的截止点

当超过该阈值时,MySQL开始在每个新的压缩页面中留下额外的可用空间,动态调整可用空间量,使其达到innodb_compression_pad_pct_max指定的页面大小的百分比

innodb_compression_pad_pct_max允许您调整每个页面中保留的最大空间量,以记录对压缩行的更改,而无需再次压缩整个页面。值越高,在不重新压缩页面的情况下可以记录的更改越多。

MySQL为每个压缩表中的页面使用可变的可用空间,只有当指定百分比的压缩操作在运行时“失败”时,才需要昂贵的操作来拆分压缩页面

innodb_log_compressed_pages允许您禁用将重新压缩的页面的图像写入重做日志。当对压缩数据进行更改时,可能会发生重新压缩。默认情况下会启用此选项,以防止在恢复过程中使用不同版本的zlib压缩算法时可能发生的损坏。如果您确信zlib版本不会更改,请禁用innodb_log_compressed_pages,以减少修改压缩数据的工作负载的redolog生成。

因为处理压缩数据有时需要同时将页面的压缩版本和未压缩版本保存在内存中,所以在OLTP风格的工作负载中使用压缩时,请准备增加innodb_buffer_pool_size配置选项的值。


7.SQL压缩语法警告和错误

本节介绍将表压缩功能用于file-per-table表空间通用表空间时可能遇到的语法警告错误

7.1 file-per-table表空间的SQL压缩语法警告和错误

7.2 通用空间的SQL压缩语法警告和错误

如果在创建表空间时没有为通用表空间定义FILE_BLOCK_SIZE,则表空间不能包含压缩表。如果尝试添加压缩表,则会返回一个错误,如以下示例所示:

mysql> CREATE TABLESPACE `ts1` ADD DATAFILE 'ts1.ibd' Engine=InnoDB;mysql> CREATE TABLE t1 (c1 INT PRIMARY KEY) TABLESPACE ts1 ROW_FORMAT=COMPRESSEDKEY_BLOCK_SIZE=8;
ERROR 1478 (HY000): InnoDB: Tablespace `ts1` cannot contain a COMPRESSED table

 尝试将KEY_BLOCK_SIZE无效的表添加到通用表空间会返回错误,如以下示例所示:

mysql> CREATE TABLESPACE `ts2` ADD DATAFILE 'ts2.ibd' FILE_BLOCK_SIZE = 8192 Engine=InnoDB;mysql> CREATE TABLE t2 (c1 INT PRIMARY KEY) TABLESPACE ts2 ROW_FORMAT=COMPRESSEDKEY_BLOCK_SIZE=4;
ERROR 1478 (HY000): InnoDB: Tablespace `ts2` uses block size 8192 and cannot
contain a table with physical page size 4096

对于通用表空间,表的KEY_BLOCK_SIZE必须等于表空间的FILE_BLOCK_IZE除以1024。例如,如果表空间的FILE_BLOCK_SIZE为8192,则表的KEY_BLOCK_IZE必须为8。


 试图将未压缩行格式的表添加到配置为存储压缩表的通用表空间中会返回错误,如以下示例所示:

mysql> CREATE TABLESPACE `ts3` ADD DATAFILE 'ts3.ibd' FILE_BLOCK_SIZE = 8192 Engine=InnoDB;mysql> CREATE TABLE t3 (c1 INT PRIMARY KEY) TABLESPACE ts3 ROW_FORMAT=COMPACT;
ERROR 1478 (HY000): InnoDB: Tablespace `ts3` uses block size 8192 and cannot
contain a table with physical page size 16384

innodb_strict_mode不适用于通用表空间通用表空间的表空间管理规则是独立于innodb_strict_mode严格执行的。

有关更多信息,请参阅“CREATE TABLESPACE语句”。

有关将压缩表通用表空间一起使用的更多信息,请参阅“通用表空间”的第三节。

【MySQL精通之路】InnoDB(6)-磁盘结构(3)-表空间-CSDN博客

下一篇:

【MySQL精通之路】InnoDB(9)-表和页压缩(2)-页压缩-CSDN博客

相关文章:

【MySQL精通之路】InnoDB(9)-表和页压缩(1)-表压缩

目录 1.表压缩概述 2.创建压缩表 2.1 在FPT表空间中创建压缩表 2.2 在通用表空间中创建压缩表 2.3 压缩表的限制 3.优化InnoDB表的压缩 4.运行时监控InnoDB表压缩 5.InnoDB表的压缩工作原理 5.1 压缩算法 5.2 InnoDB数据存储和压缩 5.3 B树页面的压缩 5.4 压缩BLOB、…...

【前端】vue+element项目中select下拉框label想要显示多个值多个字段

Vue Element项目中select下拉框label想要显示多个值 <el-selectv-model"form.plantId"collapse-tagsfilterableplaceholder"请选择品种种类"style"width: 270px;"><el-optionv-for"item in plantIdArray":key"item.id&…...

橙派探险记:开箱香橙派 AIpro 与疲劳驾驶检测的奇幻之旅

目录 引子&#xff1a;神秘包裹的到来 第一章&#xff1a;香橙派AIpro初体验 资源与性能介绍 系统烧录 Linux 镜像&#xff08;TF 卡&#xff09; 调试模式 登录模式 第二章&#xff1a;大胆的项目构想 系统架构设计 香橙派 AIpro 在项目中的重要作用 第三章&#xf…...

云计算期末复习(1)

云计算基础 作业&#xff08;问答题&#xff09; &#xff08;1&#xff09;总结云计算的特点。 透明的云端计算服务 “无限”多的计算资源&#xff0c;提供强大的计算能力 按需分配&#xff0c;弹性伸缩&#xff0c;取用方便&#xff0c;成本低廉资源共享&#xff0c;降低企…...

frp转发服务

将内网服务转发到外网&#xff0c;我准备了一台阿里云ubuntu22.04服务器&#xff0c;两台内网ubuntu22.04服务器 下载frpc和frps以及配置文件 链接: https://pan.baidu.com/s/1auvcWWnyfpYPYatYhHFYag?pwdqkgh 提取码: qkgh 复制这段内容后打开百度网盘手机App&#xff0c;操作…...

【主流分布式算法总结】

文章目录 分布式常见的问题常见的分布式算法Raft算法概念Raft的实现 ZAB算法Paxos算法 分布式常见的问题 分布式场景下困扰我们的3个核心问题&#xff08;CAP&#xff09;&#xff1a;一致性、可用性、分区容错性。 1、一致性&#xff08;Consistency&#xff09;&#xff1a;…...

spring cloud config server源码学习(一)

文章目录 1. 注解EnableConfigServer2. ConfigServerAutoConfiguration2.1 ConditionalOnBean和ConditionalOnProperty2.2 Import注解2.2.1. EnvironmentRepositoryConfiguration.class2.2.2. CompositeConfiguration.class2.2.3. ResourceRepositoryConfiguration.class2.2.4.…...

人脸识别——探索戴口罩对人脸识别算法的影响

1. 概述 人脸识别是一种机器学习技术&#xff0c;广泛应用于各种领域&#xff0c;包括出入境管制、电子设备安全登录、社区监控、学校考勤管理、工作场所考勤管理和刑事调查。然而&#xff0c;当 COVID-19 引发全球大流行时&#xff0c;戴口罩就成了日常生活中的必需品。广泛使…...

磁盘管理后续——盘符漂移问题解决

之前格式化磁盘安装了文件系统&#xff0c;且对磁盘做了相应的挂载&#xff0c;但是服务器重启后挂载信息可能有问题&#xff0c;或者出现盘符漂移、盘符变化、盘符错乱等故障&#xff0c;具体是dev/sda, sdb, sdc 等等在某些情况下会混乱掉 比如sda变成了sdb或者sdc变成了sdb等…...

基于GO 写的一款 GUI 工具,M3u8视频下载播放器-飞鸟视频助手

M3u8视频下载播放器-飞鸟视频助手 M3u8视频飞鸟视频助手使用m3u8下载m3u8 本地播放 软件下载地址m3u8嗅探 M3u8视频 M3u8视频格式是为网络视频播放设计&#xff0c;视频网站多数采用 m3u8格式。如腾讯&#xff0c;爱奇艺等网站。 m3u8和 mp4的区别&#xff1a; 一个 mp4是一个…...

关于EasyExcel导入数据时表格日期格式识别为数字问题

参考官方地址 自定义日期转字符串转换器 /*** 自定义excel日期转换器** author li* date 2024-05-29*/ public class CustomStringDateConverter implements Converter<String> {Overridepublic Class<?> supportJavaTypeKey() {return String.class;}Overridep…...

高通Android 12/13打开省电模式宏开关

1、添加到SettingsProvider配置项宏开关 默认节电助手自动开启百分比battery saver frameworks\base\packages\SettingsProvider\src\com\android\providers\settings\DatabaseHelper.java private void loadGlobalSettings(SQLiteDatabase db) {在该方法中添加 ......final i…...

2023年西安交通大学校赛(E-雪中楼)

E.雪中楼 如果算出按南北的序列&#xff0c;再转成从低到高的编号序列&#xff0c;岂不是太麻烦了&#xff0c;幸好&#xff0c;没有在这方面费长时间&#xff0c;而是意识到&#xff0c;本质就是要从低到高的编号序列&#xff0c;所以我就按样例模拟了一下&#xff0c;当a[i]0…...

如何在vue2中使用tailwind

查看官方文档&#xff0c;不要去看过时的文章&#xff01; 使用官网推荐的第一个安装方法 Installation - Tailwind CSS vue版本&#xff1a;2.6.10 1. 安装tailwind的包 npm install -D tailwindcss npx tailwindcss init 2. tailwind.config.js 文件中的content是你需要…...

【OrangePi AIpro】开箱初体验以及OAK深度相机测试

1. 简介 Orangepi AIPRO 是一款采用昇腾AI技术路线&#xff0c;集成4核64位处理器AI处理器的单板计算机&#xff0c;集成图形处理器&#xff0c;支持8TOPS AI算力&#xff0c;拥有8GB/16GB LPDDR4X&#xff0c;可以外接eMMC模块&#xff0c;支持双4K高清输出。 Orange Pi AIpr…...

滑动窗口模板(Java)

题目描述 有一个长为 &#x1d45b; 的序列 &#x1d44e;&#xff0c;以及一个大小为 &#x1d458; 的窗口。现在这个从左边开始向右滑动&#xff0c;每次滑动一个单位&#xff0c;求出每次滑动后窗口中的最大值和最小值。 例如&#xff0c;对于序列 [1,3,−1,−3,5,3,6,7] …...

transformers.BertTokenizer入门使用

教程link 示例代码 from transformers import OpenAIGPTLMHeadModel, GPT2LMHeadModel, BertTokenizer import torch tokenizer BertTokenizer.from_pretrained("thu-coai/CDial-GPT_LCCC-large") model OpenAIGPTLMHeadModel.from_pretrained("thu-coai/CD…...

快乐数-力扣

使用一个set来存储遇到的每个数&#xff0c;如果遇到的数在set中&#xff0c;那么说明这个数不是快乐数&#xff0c;否则一直循环下去&#xff0c;直到n 1结束循环&#xff0c;表示这个数是个快乐数。 需要注意的是&#xff0c;给定一个数 n, 怎样对这个数 n 进行每一位求和。…...

Git标签的使用

天行健&#xff0c;君子以自强不息&#xff1b;地势坤&#xff0c;君子以厚德载物。 每个人都有惰性&#xff0c;但不断学习是好好生活的根本&#xff0c;共勉&#xff01; 文章均为学习整理笔记&#xff0c;分享记录为主&#xff0c;如有错误请指正&#xff0c;共同学习进步。…...

【uni-app】Pinia 持久化

小程序端 Pinia 持久化 说明&#xff1a;Pinia 用法与 Vue3 项目完全一致&#xff0c;uni-app 项目仅需解决持久化插件兼容性问题。 持久化存储插件 安装持久化存储插件&#xff1a; pinia-plugin-persistedstate pnpm i pinia-plugin-persistedstate插件默认使用 localStor…...

C++实现分布式网络通信框架RPC(3)--rpc调用端

目录 一、前言 二、UserServiceRpc_Stub 三、 CallMethod方法的重写 头文件 实现 四、rpc调用端的调用 实现 五、 google::protobuf::RpcController *controller 头文件 实现 六、总结 一、前言 在前边的文章中&#xff0c;我们已经大致实现了rpc服务端的各项功能代…...

Lombok 的 @Data 注解失效,未生成 getter/setter 方法引发的HTTP 406 错误

HTTP 状态码 406 (Not Acceptable) 和 500 (Internal Server Error) 是两类完全不同的错误&#xff0c;它们的含义、原因和解决方法都有显著区别。以下是详细对比&#xff1a; 1. HTTP 406 (Not Acceptable) 含义&#xff1a; 客户端请求的内容类型与服务器支持的内容类型不匹…...

day52 ResNet18 CBAM

在深度学习的旅程中&#xff0c;我们不断探索如何提升模型的性能。今天&#xff0c;我将分享我在 ResNet18 模型中插入 CBAM&#xff08;Convolutional Block Attention Module&#xff09;模块&#xff0c;并采用分阶段微调策略的实践过程。通过这个过程&#xff0c;我不仅提升…...

【Redis技术进阶之路】「原理分析系列开篇」分析客户端和服务端网络诵信交互实现(服务端执行命令请求的过程 - 初始化服务器)

服务端执行命令请求的过程 【专栏简介】【技术大纲】【专栏目标】【目标人群】1. Redis爱好者与社区成员2. 后端开发和系统架构师3. 计算机专业的本科生及研究生 初始化服务器1. 初始化服务器状态结构初始化RedisServer变量 2. 加载相关系统配置和用户配置参数定制化配置参数案…...

ETLCloud可能遇到的问题有哪些?常见坑位解析

数据集成平台ETLCloud&#xff0c;主要用于支持数据的抽取&#xff08;Extract&#xff09;、转换&#xff08;Transform&#xff09;和加载&#xff08;Load&#xff09;过程。提供了一个简洁直观的界面&#xff0c;以便用户可以在不同的数据源之间轻松地进行数据迁移和转换。…...

Linux云原生安全:零信任架构与机密计算

Linux云原生安全&#xff1a;零信任架构与机密计算 构建坚不可摧的云原生防御体系 引言&#xff1a;云原生安全的范式革命 随着云原生技术的普及&#xff0c;安全边界正在从传统的网络边界向工作负载内部转移。Gartner预测&#xff0c;到2025年&#xff0c;零信任架构将成为超…...

WordPress插件:AI多语言写作与智能配图、免费AI模型、SEO文章生成

厌倦手动写WordPress文章&#xff1f;AI自动生成&#xff0c;效率提升10倍&#xff01; 支持多语言、自动配图、定时发布&#xff0c;让内容创作更轻松&#xff01; AI内容生成 → 不想每天写文章&#xff1f;AI一键生成高质量内容&#xff01;多语言支持 → 跨境电商必备&am…...

Java求职者面试指南:计算机基础与源码原理深度解析

Java求职者面试指南&#xff1a;计算机基础与源码原理深度解析 第一轮提问&#xff1a;基础概念问题 1. 请解释什么是进程和线程的区别&#xff1f; 面试官&#xff1a;进程是程序的一次执行过程&#xff0c;是系统进行资源分配和调度的基本单位&#xff1b;而线程是进程中的…...

Redis:现代应用开发的高效内存数据存储利器

一、Redis的起源与发展 Redis最初由意大利程序员Salvatore Sanfilippo在2009年开发&#xff0c;其初衷是为了满足他自己的一个项目需求&#xff0c;即需要一个高性能的键值存储系统来解决传统数据库在高并发场景下的性能瓶颈。随着项目的开源&#xff0c;Redis凭借其简单易用、…...

【Linux】Linux安装并配置RabbitMQ

目录 1. 安装 Erlang 2. 安装 RabbitMQ 2.1.添加 RabbitMQ 仓库 2.2.安装 RabbitMQ 3.配置 3.1.启动和管理服务 4. 访问管理界面 5.安装问题 6.修改密码 7.修改端口 7.1.找到文件 7.2.修改文件 1. 安装 Erlang 由于 RabbitMQ 是用 Erlang 编写的&#xff0c;需要先安…...