全球主机交流论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

IP归属甄别会员请立即修改密码
查看: 3208|回复: 24
打印 上一主题 下一主题

[美国VPS] 拉一个50G的压缩包,wget老是中断,断点续传会造成无法解压

[复制链接]
跳转到指定楼层
1#
发表于 2017-8-14 17:53:35 | 只看该作者 回帖奖励 |倒序浏览 |阅读模式
一台国内,一台国外,国外那台速度极慢,在国外那台拉国内服务器上的文件,平均速度30K/S。


拉了几次都是这样,每次都中途断掉,需要再断点续传,辛苦拉了几天才拉完,到最后解压的时候出错,估计是断点续传有问题造成的,请教下技术帝,要怎么操作才行?


两台都是linux,直接从一台FTP传另外一台?但linux下怎么用FTP不知道,另外如果FTP不能多线程,估计会传1年,因为都是碎片小文件,总体数量巨大。


打包拉感觉比较靠谱,可wget总是不能一次性解决,断点续传后最后完成下载的文件不是比原包大就是比原包小。
推荐
发表于 2017-8-14 19:14:37 | 只看该作者
多大的事儿,我200G的数据库文件,aria2c本地跑满
2#
发表于 2017-8-14 17:54:32 来自手机 | 只看该作者
试试rsync,专业同步工具
4#
发表于 2017-8-14 17:56:10 | 只看该作者
本帖最后由 dvbhack 于 2017-8-14 17:57 编辑

打包然后:axel 多线程下载

或者,先通过一个带宽足的国内服务器(或网盘)中转一下。

楼上有人提到rsync,这个对大量小文件确实更好一些。
5#
发表于 2017-8-14 17:58:32 | 只看该作者
安装mwget,5线程下载,支持断点续传

  1. yum install intltool gcc gcc-c++ gcc-g77 gcc++ openssl-devel -y
  2. cd /usr/local/src/
  3. wget http://soft.shaobing.ru/Tools/mwget_0.1.0.orig.tar.bz2
  4. tar -xjvf mwget_0.1.0.orig.tar.bz2
  5. chown root. mwget_0.1.0.orig -R
  6. cd mwget_0.1.0.orig
  7. ./configure
  8. make
  9. make install
  10. rm /usr/local/src/mwget_0.1.0.orig.tar.bz2 -rf
复制代码
6#
发表于 2017-8-14 17:59:11 来自手机 | 只看该作者
有ssh权限么,用ssh边打包边传,然后走udp tunnel。
7#
发表于 2017-8-14 17:59:18 来自手机 | 只看该作者
上传到对象存储
8#
发表于 2017-8-14 17:59:56 | 只看该作者
网络决定的,没办法的事情。
9#
发表于 2017-8-14 18:00:48 来自手机 | 只看该作者
其实走https应该比http可靠些。
10#
发表于 2017-8-14 18:01:11 | 只看该作者
axel 多线程,或者先存网盘,再下载
您需要登录后才可以回帖 登录 | 注册

本版积分规则

Archiver|手机版|小黑屋|全球主机交流论坛

GMT+8, 2025-12-14 20:18 , Processed in 0.065038 second(s), 11 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表