search

fluid-cloudnative / community

Information about the Fluid community.
Apache License 2.0
4 stars 10 forks source link

metadata save and load #15

Closed yangyuliufeng closed 3 years ago

yangyuliufeng commented 3 years ago

关于如何保存metadata、再次启动时如何进行加载，我的一些设想。

cheyang commented 3 years ago
  1. backup
    1. 保存数据的时候是不要指定hostname， 默认保存到master所在节点即可
    2. Pvc path的规则是否可以保持一致, 不建议引入subpath
  2. restore
    1. 不建议在master pod中加入restore pvc或者hostpath，而是加到init container中，通过empty dir拷贝：https://github.com/cheyang/mpi-operator/blob/optimize_launcher_2020/pkg/controllers/mpi_job_controller.go#L980-L984 ，这样的好处是alluxio避免从分布式存储执行load时候的不确定性