技巧 | 30Mb/s-高速-生信大数据-跨地域-传输
写在前面
最近需要紧急跑一批数据,然而手上的计算资源着实有限。唯一想得到的解决办法就是蹭一下老铁的数据平台(PB级存储)。于是问题出现了,手上接近 1T 的数据,如何快速传输到距离太远的省份?
面临的问题场景
更复杂的是,问题不仅仅是简单的数据传输:
数据在学校的服务器上,学校服务器中间有堡垒机,直接从学校服务器 scp 则需要在远程服务器上挂代理....问题出现了,Linux 下挂学校的代理,似乎不可行。
老铁的数据平台,访问也需要挂 VPN,于是直接 scp 可行性似乎不高。
测试了从本地直接上传到老铁的服务器,速度不到 2Mb/s。
想来想起,想起了奶牛快传
使用奶牛快传命令行版本
下载奶牛快传
https://github.com/Mikubill/cowtransfer-uploader/releases
wget https://github.com/Mikubill/cowtransfer-uploader/releases/download/v0.4.17/cowtransfer-uploader_0.4.17_linux_amd64.tar.gz
tar -zxvf cowtransfer-uploader_0.4.17_linux_amd64.tar.gz
从本地服务器上传数据到奶牛快传
cowtransfer-uploader 108.log
注意到,数据上传时,可以拿到文件对应的链接,如
登录远程服务器,下载数据
cowtransfer-uploader https://cowtransfer.com/s/b9488e43a3bb40
上传时速度不会太快,但是下载时速度则超快....
屡试不爽....(于是我又买了奶牛快传的会员)
注意到,如果是高校师生,奶牛快传似乎也有教育版优惠,当然我等不及了....感兴趣的朋友可以看看。
写在最后
Emmm,目前来说,我买过的正版软件不多,还有印象的包括:
install4j,为了方便 TBtools 用户安装,这个花了我 1.5w RMB(两三年前买的吧,自己买单)
滴答清单,用了下确实好用,这个教育版优惠,印象是 99 块钱,还是很便宜
奶牛快传,事实上,这应该是赵飞推荐过的,或许还提过之前的优惠,最近要涨价云云,当然,我就一直停留在看看。这次先买了一个月,好像是 39块钱?按年付费更便宜。如果有时间,或许我确实会折腾一下教育版优惠,毕竟....
赞 (0)