当前位置: 首页 > ds >正文

Kafka Producer的acks参数对消息可靠性有何影响?

1. acks=0

  • 可靠性最低
  • 生产者发送消息后不等待任何Broker确认
  • 可能丢失消息(Broker处理失败/网络丢失时无法感知)
  • 吞吐量最高,适用于允许数据丢失的场景(如日志收集)

2. acks=1 (默认值)

  • Leader副本确认模式
  • 生产者等待Leader副本写入本地log后确认
  • 可能丢失数据(Leader写入后但其他副本未同步时Leader宕机)
  • 在可靠性和吞吐量之间取得平衡

3. acks=all (或 -1)

  • 最高可靠性
  • 生产者等待所有ISR(In-Sync Replicas)副本确认
  • 需要配合min.insync.replicas参数使用(建议 >=2)
  • 确保消息被所有ISR副本持久化后才返回确认
  • 吞吐量最低,但可防止任何副本故障导致的数据丢失

可靠性补充建议:

  1. 当使用acks=all时,建议设置retries > 0启用重试机制
  2. 配置max.in.flight.requests.per.connection=1保证消息顺序
  3. 监控ISR集合大小,避免因副本掉线导致生产阻塞
// 典型可靠性配置示例
// ... existing code ...
props.put(ProducerConfig.ACKS_CONFIG, "all");  // <mcsymbol name="ACKS_CONFIG" filename="KafkaConfig.java" path="src/main/java/com/example/kafka/KafkaConfig.java" startline="5" type="field"></mcsymbol>
// 要求所有ISR副本确认写入(最高可靠性保证)
// 需配合min.insync.replicas=2使用,防止单点故障props.put(ProducerConfig.RETRIES_CONFIG, Integer.MAX_VALUE);  // <mcsymbol name="RETRIES_CONFIG" filename="KafkaConfig.java" path="src/main/java/com/example/kafka/KafkaConfig.java" startline="6" type="field"></mcsymbol>
// 设置无限次重试(需配合delivery.timeout.ms参数)
// 当遇到可恢复错误时(如Leader选举、网络抖动)持续重试props.put(ProducerConfig.ENABLE_IDEMPOTENCE_CONFIG, true);  // <mcsymbol name="ENABLE_IDEMPOTENCE_CONFIG" filename="KafkaConfig.java" path="src/main/java/com/example/kafka/KafkaConfig.java" startline="7" type="field"></mcsymbol>
// 启用幂等性生产(自动去重机制)
// 通过producerId+sequenceNumber实现精确一次语义(EOS)props.put(ProducerConfig.MAX_IN_FLIGHT_REQUESTS_PER_CONNECTION, 1);  // <mcsymbol name="MAX_IN_FLIGHT_REQUESTS_PER_CONNECTION" filename="KafkaConfig.java" path="src/main/java/com/example/kafka/KafkaConfig.java" startline="8" type="field"></mcsymbol>
// 限制单个连接未确认请求数为1(保证消息顺序)
// 可能降低吞吐量但避免消息乱序
// ... existing code ...
http://www.xdnf.cn/news/3263.html

相关文章:

  • 阿里云服务器技术纵览:从底层架构到行业赋能​
  • PostgreSQL数据库操作基本命令
  • JAVA SE 反射,枚举与lambda表达式
  • 制作一款打飞机游戏36:调度编辑器
  • K8S - 命名空间实战 - 从资源隔离到多环境管理
  • 系统升级姿势解锁:绞杀、并行与隐藏开关
  • 拥抱 Kotlin Flow
  • 虚幻商城 Quixel 免费资产自动化入库(2025年版)
  • ArcGIS Pro几个小知识点分享
  • WebRtc09:网络基础P2P/STUN/TURN/ICE
  • 「动态规划::背包」01背包 / AcWing 2(C++)
  • OpenCV 图形API(75)图像与通道拼接函数-----将 4 个单通道图像矩阵 (GMat) 合并为一个 4 通道的多通道图像矩阵函数merge4()
  • 章越科技赋能消防训练体征监测与安全保障,从传统模式到智能跃迁的实践探索
  • Hbuilder 开发鸿蒙应用,打包成 hap 格式(并没有上架应用商店,只安装调试用)
  • 【Vue2】4-开发者工具安装
  • HOW - 经典详情页表单内容数据填充(基于 Antd 组件库)
  • 数据库服务器备份,数据库服备份到另一台服务器的方法有哪些?
  • 普通IT的股票交易成长史--20250430晚
  • python爬虫基础:requests库详解与案例
  • ESP32开发-作为TCP客户端发送数据到网络调试助手
  • 记录idea可以运行但是maven install打包却找不到问题
  • 【网络原理】从零开始深入理解HTTP的报文格式(二)
  • 第四节:权限管理
  • Vue3 Echarts 3D圆柱体柱状图实现教程以及封装一个可复用的组件
  • 仿腾信会议——密码MD5
  • 软件设计师-软考知识复习(1)
  • Deepseek应用技巧-批量生成读书金句
  • SAP 归档 自定义字段目录及归档信息结构
  • 〇 开篇序言
  • 写一个 Java 程序,用于将字符串中的指定子串替换为另一个子串