大家好，今天为大家分享一次 ES 的填坑经验。主要是关于集群恢复过程中，分片恢复并发数调整过大导致集群 hang 住的问题。

86 Technology lddgo Shared on 2022-09-07

数据字典(Data Dictionary)中存储了诸多数据库的元数据信息如图1所示，包括基本Database, table, index, column, function, trigger, procedure，privilege等；以及与存储引擎相关的元数据，如InnoDB的tablespace, table_id, index_id等。MySQL-8.0在数据字典上进行了诸多优化，本文将对其进行逐一介绍。

89 Technology lddgo Shared on 2022-09-07

redo_log的作用设计初衷为了提高写入性能同时解决ACID中Duration。MySQL 8.0对redo_log进行了无锁化设计，去除了redo_log性能的瓶颈，从而在数据库整体性能上有了较大提升。本文将结合已有资料和最新MySQL release代码，介绍MySQL redo log优化，主要设计模块包括redo_log、mtr和一部分buffer/flush lists。

209 Technology lddgo Shared on 2022-09-07

MySQL的执行过程包括多个子阶段：语法分析、语义检查、逻辑优化、物理优化和执行。其中逻辑优化和物理优化统称为查询优化。一个查询优化器的输入是查询树，输出是查询执行计划。

86 Technology lddgo Shared on 2022-09-07

数据库领域存在很多优化措施（例如 group commit），它们很早就被提出来了，ELR 也不例外[1]。在多核处理器的时代，ELR 又被人发掘出来评估对系统性能的影响，例如[2]和[3]评估了包括 ELR 在内的多种性能优化措施。

80 Technology lddgo Shared on 2022-09-07

SQL标准简介

74 Technology lddgo Shared on 2022-09-07

最近，腾讯云某内部系统不定期出现数据库访问行更新慢，数据库用户线程大量堆积的现象。从slow log中观察，大量update执行时间超过10秒，甚至个别update执行时间超过百秒，这已经严重影响该系统的正常运行。运维同学不得不采取杀死运行session的方式解决该问题，由于访问数据库的任务是离线后台批处理任务，因此会选择业务压力小的时候运行该任务，比如半夜12点，因此，运维同学必须半夜采取紧急措施，这给线上运行造成极大的负担。

243 Technology lddgo Shared on 2022-09-07

数据库管理系统中，最重要的模块包括SQL优化器、SQL执行器、事务管理器等。SQL语句处理流程为：SQL输入->语法分析->语义检查->逻辑优化->物理优化->执行。其中SQL执行器就是按照SQL优化器生成的执行计划，有机的调用存储、索引、并发等模块，实现各种计划结点算法来完成数据的读取或者修改过程。在MySQL8.0中执行器部分代码发生了较大改变，新的执行器向经典的Iterator模型更接近了一步，我们暂时叫它iterator执行器。接下来我们分析一下这个新的执行器。

79 Technology lddgo Shared on 2022-09-07

innodb的物理文件包括系统表空间文件ibdata，用户表空间文件ibd，日志文件ib_logfile，临时表空间文件ibtmp，undo独立表空间等。

231 Technology lddgo Shared on 2022-09-07

InnoDB支持MVCC（Multi-Version Concurrency Control), undo日志中保存了多版本的记录，undo支持事务回滚的同时，也支持数据的一致性读。undo日志保存在回滚段中，undo日志的回收由purge操作进行。

81 Technology lddgo Shared on 2022-09-07