当前位置: 首页 > ds >正文

binlog日志以及MySQL的数据同步

binlog

binlog是什么

  • 记录所有数据库表结构,表数据的修改,但是不会记录Select和Show这类操作

binlog有几种记录模式

三种记录模式

  • statement: 基于SQL语句的复制

  • row: 基于行的复制,记录每行数据的变更(保证了数据的一致性)

  • mixed: 混合使用statement和row的模式

binlog的应用

  • 系统级应用:主从复制,数据恢复

  • 业务级应用:数据收集

读多写少的场景

  • 可以使用MySQL主从架构来应对

如果读的流量进一步增大,我们是否可以多增加几个从库来应对高并发的读请求

:不可以,MySQL为了将binlog同步给每一个从库,都需要有单独的线程来处理,数据传输多份就要消耗更多的带宽,这会给主库的性能造成很大的压力,不仅不能提升系统性能,反而适得其反,对于生产环境来说,一般都是两到三个从库

MySQL是如何通过Binlog实现数据同步的

数据同步的模式

  • 同步模式:MySQL提交事务的线程会等待所有从库binlog去同步成功的响应(优点:不存在丢数据的情况)(缺点:效率低)

  • 异步模式(默认):MySQL提交事务的线程完全不关心binlog是否已经同步到从库,事务执行完成就会返回给客户端响应结果(缺点:如果主库宕机,数据存在丢失的风险)(优点:效率高)

  • 半同步模式:MySQL提交事务的线程不会等待所有从库binlog同步成功的响应,只要有一部分从库binlog同步成功就会返回给客户端响应结果

数据同步的阶段

  • 数据同步通过三个阶段实现(异步模式)

    • 一阶段:binlog的写入:主库数据写入binlog,再去提交事务,更新存储引擎的数据,事务提交完成后返回给客户端

    • 二阶段:binlog的同步:MySQL的从库创建的IO线程会连接到主库的binlog,主库会为每一个从库创建一个binlog-dump线程,然后从库的IO线程从binlog-dump中接收到主库的文件,把binlog文件写入到本地的relay-log中,最后返回成功的响应给主库

    • 三阶段: binlog重放:从库会创建一个SQL线程,会读取relay-log中的终极日志,重放binlog,从而更新从库中的数据,其实就是把binlog重新执行了一遍,加载到从库的DB中,完成主从的复制

http://www.xdnf.cn/news/6047.html

相关文章:

  • 项目三 - 任务5:清洗网址中垃圾字符
  • 电池自动点焊机:多领域电池制造的核心设备
  • UE5中制作动态数字Decal
  • ES6 语法
  • Rust 环境变量管理秘籍:从菜鸟到老鸟都爱的 dotenv 教程
  • Visual studio 打包方法
  • 计算机系统----软考中级软件设计师(自用学习笔记)
  • Biba安全模型详解:守护信息系统完整性的基石
  • 加速度策略思路
  • SwarmUI 基于.NET开发的开源AI图像生成WEB用户界面系统
  • git-gui界面汉化
  • 【3-2】HDLC
  • 详解注意力机制
  • Linux文件编程——读写结构体、链表等其他类型的数据
  • 9.9 Ollama私有化部署Mistral 7B全指南:命令行交互到API集成全流程解析
  • 格雷希尔G10和G15系列自动化快速密封连接器,适用于哪些管件的密封,以及它们相关的特性有哪些?
  • 参考UTD的上市公司供应链信息数据库(2017-2022)
  • 深度学习模型在目标检测任务中的前向传播(forward)和反向传播(backward)过程
  • 基于STM32、HAL库的TLV320AIC3101IRHBR音频接口芯片驱动程序设计
  • NovaMSS v1.40音乐源分离工具,一键提取伴奏人声贝斯鼓点分离音轨等
  • 交流充电桩IEC 61851-1和IEC 61851-21-2标准测试项目
  • Deno、Bun、Node.js 性能对比与选型指南
  • C++23 ranges::range_adaptor_closure:程序定义的范围适配器闭包的辅助类
  • flutter Stream 有哪两种订阅模式。
  • 从新手到高手:全面解析 AI 时代的「魔法咒语」——Prompt
  • Hue面试内容整理-后端框架
  • C++11异步编程 --- async
  • 多目应用:三目相机在汽车智能驾驶领域的应用与技术创新
  • Generative Diffusion Prior for Unified Image Restoration and Enhancement论文阅读
  • Kafka原理深度剖析