moiot / gravity

A Data Replication Center
Apache License 2.0
912 stars 173 forks source link

采用K8s部署,突然不可以新增任务了 #350

Closed zhanjianS closed 9 months ago

zhanjianS commented 1 year ago

请教下 新增任务一直卡在如图这个,没有相关的错误日志,对应pod 没拉起来, 图片

gravity-operator的相关日志

图片

另外之前新增的任务还是可以运行 这个怎么排查

Ryan-Git commented 1 year ago

看下 operator 的栈,看下 crd 建了没

zhanjianS commented 1 year ago

crd是指什么, 上面的截图就是operator的日志,目前只看到这种日志,在重复打,

图片

当时看 k8s后台的pod没有拉起来,今天看pod是有了,看pod的启动时间 比我从页面创建要晚好几个小时 图片

但是页面上 还是这样,没有显示运行正常,时间过了很长时间,之前是有分钟级别的延迟 图片

Ryan-Git commented 12 months ago

crd 是CustomResourceDefinition,每个任务对应一个Pipeline CRD 的实例。要运维的话还是得了解一下 k8s。 grep 一下任务名(t5-assistant01-tidb-1)所有的日志看看。 光这样看不出啥,重启 operator,删了重建都试试。。。