10TB数据上传方案。

0

我有10TB图片扫描数据需要上传到北京/宁夏服务器上后续做识别分析,但实验室上传速度只有10MB/s,这种情况下最佳的传输方案怎么推荐呢?

profile picture
EXPERT
demandé il y a 2 mois28 vues
1 réponse
0

理论上: 10MB/s * 3600s = 36GB 36GB/h * 24h = 864GB 10TB / 864GB = 11.6 days 专线施工周期长,snowball 来回流程也不快。就10MB/s慢慢传吧。或者,把数据 拷到硬盘里。在带宽较好的情况下,先对数据的文件夹进行分散,启用S3上传加速,使用脚本并行上传。

profile picture
EXPERT
répondu il y a 2 mois

Vous n'êtes pas connecté. Se connecter pour publier une réponse.

Une bonne réponse répond clairement à la question, contient des commentaires constructifs et encourage le développement professionnel de la personne qui pose la question.

Instructions pour répondre aux questions