juicedata / juicesync

A tool to move your data between any clouds or regions.
Apache License 2.0
593 stars 56 forks source link

3P 数据跨云传多久? #74

Closed JoeShi closed 4 years ago

JoeShi commented 4 years ago

Q1. 3P 数据跨云传多久?

Q2. 拷贝的时候会拷贝metadata 么?

Q3. 支持集群拷贝么?

Q4. 有流量统计或者进度统计么?

davies commented 4 years ago

Q1: 主要取决于可用的带宽,如果用 10Gb 带宽,24 小时能够拷贝 100T,30 天就够了。

Q2: 这是哪种 metadata?目前可能不支持,可以考虑增加这个功能。

Q3: 目前不支持,只能手动按目录做下拆分,不同节点同步不同目录的数据。

Q4: 有的。

JoeShi commented 4 years ago

Q1. 单机器 10Gb 还是有些困难的吧,毕竟还要跨地域。有benchmark 指标么?

davies commented 4 years ago

之前内网拷贝时能够跑满 10Gb。juicesync 是多线程的,公网慢时可以多开一些线程尽量把带宽跑满,然后再多开几个节点并行做。

JoeShi commented 4 years ago

好的,谢谢。

davies commented 4 years ago

@JoeShi 正在加上 多机分布式支持: https://github.com/juicedata/juicesync/pull/75