medcl / esm

An simple Elasticsearch migration tool.
862 stars 260 forks source link

集群数据迁移后数据大小不同 #65

Closed chengjino1 closed 2 years ago

chengjino1 commented 2 years ago

使用0.6.1版本做数据迁移 源数据 文档数18990 store.size 27.7mb pri.store.si 13.8 目标数据 文档数18990 store.size 17.4mb pri.store.si 9.8

这个情况正常么,还是说有数据没迁移? 还是需要添加别的参数? 我使用的命令是migrator -s http://xxx:9200 -d http://xxx:9200 -x test -y test -w=5 -b=10 -c=10000 --copy_mappings --force --refresh 对了 分区及副本数 都是 3 1 image 上图是源数据 image 这个是数据迁移后的

medcl commented 2 years ago

旧集群包含删除的数据,所以存储空间是不一样的。 建议在迁移完成之后,对两个集群之间的数据进行一次 diff 来确认数据是否一致,链接: https://gateway.infinilabs.com/zh/docs/tutorial/index_diff/

lianmeng0 commented 7 months ago

旧集群包含删除的数据,所以存储空间是不一样的。 建议在迁移完成之后,对两个集群之间的数据进行一次 diff 来确认数据是否一致,链接: https://gateway.infinilabs.com/zh/docs/tutorial/index_diff/

你好!极限网关含有可跨集群迁移数据的功能吗?又该如何使用?

medcl commented 7 months ago

@lianmeng0 使用这个配置就行了,改改其中的集群地址和和索引名称