didi / KnowStreaming

一站式云原生实时流数据平台,通过0侵入、插件化构建企业级Kafka服务,极大降低操作、存储和管理实时流数据门槛
https://knowstreaming.com
GNU Affero General Public License v3.0
6.84k stars 1.26k forks source link

数据采样异常 #460

Closed Huyueeer closed 1 year ago

Huyueeer commented 2 years ago

先说背景:

Topic是自动创建的没有通过LogiKM,在集群接入LogiKM后,进行数据采样,发现不是空就是报错: image 但是我通过命令kafka-console-consumer & kafka-run-class kafka.tools.GetOffsetShell是可以消费到数据的: image image

ZQKC commented 2 years ago

辛苦提供一下Kafka的版本信息,我们也验证一下

Huyueeer commented 2 years ago

@ZQKC kafka-5.5.2-ccs

ZQKC commented 2 years ago

@ZQKC kafka-5.5.2-ccs

这个是confluent发布的kafka是吧?我们看一下啊

Huyueeer commented 2 years ago

@ZQKC hi,最近的错误修复会有新版本发布吗?

ZQKC commented 2 years ago

@ZQKC hi,最近的错误修复会有新版本发布吗?

近期重点会在3.0版本的开发,2.x版本迭代近期暂无太多人力支持,采样这个问题,等3.0迭代完成后,我们看一下原因。近期老哥要是有空的话,也欢迎帮忙定位看一下原因,感谢。

ZQKC commented 1 year ago

3.x版本已对该问题做了优化处理,欢迎尝鲜使用,看是否还存在该问题~

Huyueeer commented 1 year ago

3.x版本已对该问题做了优化处理,欢迎尝鲜使用,看是否还存在该问题~

是的,已经得到解决