clickhouse_sinker容器每日重启

[w3z4y4]

容器化部署的sinker，每日凌晨开始停机，差不多半小时后被k8s启动。 想问下这个是不是日志切换有问题导致容器挂掉

[yuzhichang]

• sinker的版本？
• 分析一下sinker的日志
• 有可能容器遭遇了段错误。想办法让容器生成coredump。参考https://danishpraka.sh/2021/05/10/core-pattern-k8s.html

[w3z4y4]

• sinker的版本？ 2.3.0
• 分析一下sinker的日志 学习了一下如何找到了容器尸体的日志，经分析是太多次连不上kafka，最后产生了一条fatal错误，想咨询下这个最大重试次数是否可以调整？
• 有可能容器遭遇了段错误。想办法让容器生成coredump。参考https://danishpraka.sh/2021/05/10/core-pattern-k8s.html 好的，已收藏

[yuzhichang]

需要调查为什么clickhouse_sinker连接不上kafka。有详细日志吗?

[w3z4y4]

需要调查为什么clickhouse_sinker连接不上kafka。有详细日志吗?

• 这个我排查了，是我们公司kafka的问题，他们宕机了，所以连不上kafka。
• 这几天还发现了个别task一直请求超时也会导致sinker出现fatal错误然后停机 是不是sinker那里写了最大错误数，我们一个sinker上大概有20个任务，一个任务失败导致全部挂掉是不是有优化空间 报错是 request_timed_out

[yuzhichang]

"task一直请求超时也会导致sinker出现fatal错误"的日志贴一下

[w3z4y4]

"task一直请求超时也会导致sinker出现fatal错误"的日志贴一下

[yuzhichang]

这个日志是sinker提交offset给kafka超时。