如何解决从美国下载数 TB 的数据的难题?

2018-02-01 19:29:41 +08:00
 qiuai
前提:
1.服务器是 windows 系统.而且不能重装 linux.
2.文件总量以 TB 级,单文件最大 50GB.
3.服务器在美国.
问题(主要集中在怎么提供稳定的下载服务):
1.HFS 不知道是为什么,下载一段时间,32G 内存就占满了,服务器就死机了.
2.APACHE 和 NGINX 我都装过,不知道为什么,在 windows 下,并发不是很好.如果有优化方案也可以.
3.文件名里有中文.nginx 搞了好久都没解决中文文件名的文件,在下载时自动转义了中文的问题.
4.有什么其他的方案能以 10MB/s 左右的速度来同步文件么?目前 HTTP 半小时重启一次服务器,可以达到 10MB/s 的速度.
10034 次点击
所在节点    问与答
101 条回复
cxbig
2018-02-02 15:25:50 +08:00
买硬盘,让人加密拷贝了寄回来。
shadownet
2018-02-02 15:36:37 +08:00
服务器上传 google drive, 然后国内下载,应该快的
defunct9
2018-02-02 17:33:38 +08:00
简单。装个 apache,断点续传就好
defunct9
2018-02-02 17:34:40 +08:00
忘记标准语了。开 RDP,我来搞
rssf
2018-02-02 19:29:24 +08:00
如果没有墙,楼上说的各种技术都没问题,可现实是有墙,还是越来越高的墙,加上你这么大数据量,老老实实想办法在墙外拷到硬盘上,再寄或者带回来吧
liuyin
2018-02-02 19:49:17 +08:00
dropbox 是的不错的方案,最贵的套餐也就 25 刀一个月,足够拖回来了。
zingl
2018-02-03 00:16:00 +08:00
切小块,任何方法都能弄回来
yibei
2018-02-03 02:15:19 +08:00
试试 raysync,使用 ftp 协议,内部集成可靠 udp 加速,只要两端带宽够,跑满 10M 非常容易
t43p
2018-02-03 03:23:47 +08:00
服务器用 ISCSI 软件,PC 机 直接出盘,用命令拷贝。
解决了
qiuai
2018-02-03 09:42:17 +08:00
@yibei 软件不错.不过联系不到人..
Izual_Yang
2018-02-03 10:46:40 +08:00
迅雷离线。
yibei
2018-02-03 11:23:08 +08:00
@qiuai dnNiZXJtQGdtYWlsLmNvbQ== ( base64 )
qiuai
2018-02-03 11:24:05 +08:00
@yibei 已经开始用了...轻轻松松跑满速.不错不错~~
cfcboy
2018-02-04 08:07:08 +08:00
你一直强调的稳定性,raysync,怎么样?
qiuai
2018-02-04 08:51:27 +08:00
@cfcboy 速度稳定性非常不错,白天轻松跑满速,晚上都可以保证不错的速度.
还在持续测试
cfcboy
2018-02-04 09:03:38 +08:00
@qiuai 我的意思是,软件运行的稳定性怎么,速度的话,有很多种方法。打洞,跳板,转存,等等,前提是软件要稳定。
qiuai
2018-02-04 09:09:40 +08:00
@cfcboy 昨天开始用,昨天用了一晚上.测试时间不长,但是没出什么 BUG.运行稳定.
cfcboy
2018-02-04 11:21:42 +08:00
@qiuai 感谢回复。我也刚试了,速度确实不错。
qiuai
2018-02-04 11:23:56 +08:00
@cfcboy 嗯.我已经拖了快 1T 回来了..
wkl17
2018-08-03 21:59:37 +08:00
最后怎么拖回来的?

Filezilla server 50G 拉不动?上面评论里有说 300G 也搞过...

而且可以断点续传,正常应该是可行的才对,

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/427807

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX