运维.售后
论坛
潜水/灌水快乐,沉淀知识,认识更多同行。
ToB圈子
加入IT圈,遇到更多同好之人。
朋友圈
看朋友圈动态,了解ToB世界。
博客
Blog
ToB门户
了解全球最新的ToB事件
排行榜
Ranklist
文库
业界最专业的IT文库,上传资料也可以赚钱
下载
分享
Share
导读
Guide
相册
Album
记录
Doing
搜索
本版
文章
帖子
ToB圈子
用户
免费入驻
产品入驻
解决方案入驻
公司入驻
案例入驻
登录
·
注册
只需一步,快速开始
账号登录
立即注册
找回密码
用户名
Email
自动登录
找回密码
密码
登录
立即注册
首页
找靠谱产品
找解决方案
找靠谱公司
找案例
找对的人
专家智库
悬赏任务
圈子
SAAS
ToB企服应用市场:ToB评测及商务社交产业平台
»
论坛
›
软件与程序人生
›
后端开发
›
Java
›
kafka~消费群组如何重新消费
kafka~消费群组如何重新消费
知者何南
金牌会员
|
2022-9-5 09:59:49
|
显示全部楼层
|
阅读模式
楼主
主题
902
|
帖子
902
|
积分
2706
今天遇到一个问题,由于代码问题导致了很多kafka消息入到备用库,偏移量已经变成了最新;如何将偏移量重设到某个时间点,但消费群组重新去消费一次,是解决问题的关键,于是,使用了kafka/bin的sh程序,以下是解决问题的步骤:
查看某个组的topic偏移量,这步只是查看,没什么配置作用,只是作到心中有数,时间戳可以使用在线工具去生成
kafka-run-class.sh kafka.tools.GetOffsetShell --broker-list localhost:9092 -topic order_new -time 1659087120000
复制代码
直接修改原消费组的topic的偏移量
kafka-consumer-groups.sh --bootstrap-server localhost:9092 --group group1 --topic order_new --reset-offsets --to-datetime 2022-07-29T18:00:00.000 --execute
复制代码
你将到得到一个错误,这个错误是说,本消费组是活动的,你不能修改
我们需要弃旧图新,建立新组group2,并且绑定原因的topic,再修改新组的offset偏移量,再把代码里的消费群组改成新组,就可以了
./kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic order_new --group group2
复制代码
修改group2对于order_new的偏移量,偏移量对应的时间节点是2022-07-29T18:00:00.000
kafka-consumer-groups.sh --bootstrap-server localhost:9092 --group group2 --topic order_new --reset-offsets --to-datetime 2022-07-29T18:00:00.000 --execute
复制代码
查看修改后的状态,也可以通过kafka客户端去查看
kafka-consumer-groups.sh --describe --group group2 --state --bootstrap-server localhost:9092
复制代码
免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!
本帖子中包含更多资源
您需要
登录
才可以下载或查看,没有账号?
立即注册
x
回复
使用道具
举报
0 个回复
倒序浏览
返回列表
快速回复
高级模式
B
Color
Image
Link
Quote
Code
Smilies
您需要登录后才可以回帖
登录
or
立即注册
本版积分规则
发表回复
回帖并转播
回帖后跳转到最后一页
发新帖
回复
知者何南
金牌会员
这个人很懒什么都没写!
楼主热帖
SQLServer数据库基础教程
开源二三事|ShardingSphere 与 Databa ...
Sqlserver创建用户并授权
Oracle调度器Scheduler
「笔记」某移动SRE运维体系交流 ...
华为再次登上央视!鸿蒙系统3.0今年上 ...
Kubernetes(K8S) Controller - Statefu ...
这个简单的小功能,半年为我们产研团队 ...
ESP32-C3 学习测试 蓝牙 篇(六、添加 ...
我眼中的大数据(三)——MapReduce ...
标签云
存储
服务器
快速回复
返回顶部
返回列表