search

cherishman2005 / rtc_tools

rtc ffmpeg
3 stars 0 forks source link

bcecmd下载不稳定：connection time out #43

Open cherishman2005 opened 2 years ago

cherishman2005 commented 2 years ago

E58BA9629BEA15D34B0B5D330FA19ECD

cherishman2005 commented 2 years ago

1，目前咱们属于通过公网传输数据到bos，这种错误很常见。我们可以看下你们IDC在那个地区，看看是否有就近入口到bos。 2，调用bce_cmd加个重试的shell控制，比如for循环来做重试

你们看能不能接受哈，shell脚本需要你们自己搞一下。其实shell来重试效率不高的，要把前面的遍历一遍，上次上传时重来一次遍历都要很久

cherishman2005 commented 2 years ago

（1）1，目前咱们属于通过公网传输数据到bos，这种错误很常见。我们可以看下你们IDC在那个地区，看看是否有就近入口到bos。 （I）10.28.131.12 -> 220.181.33.44 这种是不是 百度容器 或者bos-sdk的 不稳定问题； --出现了内网ip去请求外网ip，这种应该建链 会失败吧？ 2个AI同事的报障 都是 内网ip与外网ip的 timeout。 (II) 现在AI算法同事 上传下载 就是百度的GPU机器；不是YY的IDC。

（2）调用bce_cmd加个重试的shell控制，比如for循环来做重试 --- 重试机制不是在bce_cmd命令外围重试，因为是在下载途中失败，http请求异常；-- 应该是在sdk内部 或http请求时做重试；

cherishman2005 commented 2 years ago
  1. 在北京专区
  2. 这个工具要完善需要有2点。 1是做进度条显示，便于了解下载进度； 2是重试机制应该集成在工具中交付给AI侧使用，用多线程等方式进行高效的遍历，这块看看是boscmd原生工具这边能否支持