使用Aspera高速上传文件到ncbi

有同事反馈ftp上传ncbi非常慢,远程测试下2个进程上行共在600KB-1MB/S,给开到最大10个线程,上行有30Mbps/s。看了下防火墙日志一小时能上传10GB左右,170GB十七小时左右可以传完。

但是有更快的上传方式就是使用Aspera工具,于是注册了个帐号,建个sra上传任务,测试了下发现需要下载ssh key。一时找不到在哪下载,给[email protected]发了份邮件咨询怎么下载。下面是回复内容。

复制代码
The ssh key is now available for download from submission portal. Click the "key file" link on this page:
https://submit.ncbi.nlm.nih.gov/subs/sra/#files_upload_aspera_cmd
 
There are more upload instructions here: http://www.ncbi.nlm.nih.gov/sra/docs/submitfiles .

The SRA Team
National Center for Biotechnology Information | National Library of Medicine
National Institutes of Health, Bethesda, Maryland 20892

打开链接https://submit.ncbi.nlm.nih.gov/subs/sra/#files_upload_aspera_cmd

展开"Upload via Aspera command line or FTP"

看到这个keyfile点击下载,还有下页会自动生成一个专用目录

下面是我测试上传的命令

复制代码
"C:\Program Files (x86)\Aspera\Aspera Connect\bin\ascp.exe" -i "d:\aspera.openssh" -QT -l400m -k1 -d "d:\bioproject.xml" [email protected]:uploads/邮箱前缀_邮箱域名_生成的随机码

3163MB的文件9分钟多上传完。

相关推荐
nuc-12716 分钟前
sqli-labs学习笔记3
数据库·笔记·学习·sqli-labs
大小科圣1 小时前
基于redis实现会话保持
数据库·redis·git
LCY1332 小时前
数据库与其所用数据结构
数据结构·数据库
dblens 数据库管理和开发工具2 小时前
精挑20题:MySQL 8.0高频面试题深度解析——掌握核心知识点、新特性和优化技巧
数据库·mysql·面试
Psycho_MrZhang2 小时前
Docker DockerFile和Django最佳实践
数据库·docker·django
李匠20244 小时前
C++学习之redis
数据库·redis·缓存
患得患失9494 小时前
【后端】【djanog】【进阶】【models】自定义模型方法 (`Model Methods`)——封装业务逻辑
数据库·django·优化·进阶·models·业务逻辑封装·model methods
明月看潮生7 小时前
青少年编程与数学 02-011 MySQL数据库应用 08课题、索引的操作
数据库·mysql·青少年编程·编程与数学
明月看潮生7 小时前
青少年编程与数学 02-011 MySQL数据库应用 07课题、表的操作
数据库·mysql·青少年编程·编程与数学
崖山数据库系统YashanDB7 小时前
YashanDB SQL命令备份恢复
数据库