Open isEdwardTang opened 3 years ago
数据 包含输入数据 / 中间结果数据 等,目前都是无组织存放的,比如输入数据很多时候大家都是存放到nfs的路径下,而中间文件由于历史遗留问题一直都是存放到nfs下面的,需要统一迁移到一个存储服务上(比如alluxio)
用 alluxio 就完事了
数据 包含输入数据 / 中间结果数据 等,目前都是无组织存放的,比如输入数据很多时候大家都是存放到nfs的路径下,而中间文件由于历史遗留问题一直都是存放到nfs下面的,需要统一迁移到一个存储服务上(比如alluxio)