数据资源工具断点续传及下载重试功能

我们可以利用数据资源工具下载各类卫星及矢量数据,具体方法见:Sentinel-2 下载(其它数据操作方式类似),但在使用资源工具下载数据时可能会出现由于网络不稳定,网站关闭连接而造成下载的错误或中断。尤其是下载国外遥感数据时,网络很不稳定,有时候网站或防火墙会主动关闭您的下载链接!这时候其它下载方式可能就需要您重新下载数据了,非常浪费时间。

  • 如果您使用 数据资源工具的话可以有两种方式:一种是使用【继续下载】功能做断点续传!
  • 还有一种更简单直接的功能,就是下载是勾选【下载重试】,这样在错误发生时会自动重新下载,无需人工干预,让工具自动完成下载工作。
  • 下载重试功能有三个设置,要注意:

下载间隔时间:就是批量下载时,两个下载启动的间隔时间,防止由于频次太快,下载被网站封掉或关闭!这点在下载错误自动重试时可以设置大点,因为网络可能等一段时间才能恢复对您的正常下载,你如果一个下载错误后马上启动另一个下载也还是会不成功的!

重试次数:对一个资源下载的错误重试次数,这个根据您的需要设置!

重试间隔:就是下载错误后的等待时间,防止错误下载后在网络没有恢复前立即重试,也防止重试频率过快被识别为恶意攻击!

相关推荐
soso196816 分钟前
DataWorks快速入门
大数据·数据仓库·信息可视化
The_Ticker21 分钟前
CFD平台如何接入实时行情源
java·大数据·数据库·人工智能·算法·区块链·软件工程
java1234_小锋27 分钟前
Elasticsearch中的节点(比如共20个),其中的10个选了一个master,另外10个选了另一个master,怎么办?
大数据·elasticsearch·jenkins
Elastic 中国社区官方博客28 分钟前
Elasticsearch 开放推理 API 增加了对 IBM watsonx.ai Slate 嵌入模型的支持
大数据·数据库·人工智能·elasticsearch·搜索引擎·ai·全文检索
我的运维人生28 分钟前
Elasticsearch实战应用:构建高效搜索与分析平台
大数据·elasticsearch·jenkins·运维开发·技术共享
大数据编程之光44 分钟前
Flink Standalone集群模式安装部署全攻略
java·大数据·开发语言·面试·flink
B站计算机毕业设计超人1 小时前
计算机毕业设计SparkStreaming+Kafka旅游推荐系统 旅游景点客流量预测 旅游可视化 旅游大数据 Hive数据仓库 机器学习 深度学习
大数据·数据仓库·hadoop·python·kafka·课程设计·数据可视化
在下不上天2 小时前
Flume日志采集系统的部署,实现flume负载均衡,flume故障恢复
大数据·开发语言·python
智慧化智能化数字化方案3 小时前
华为IPD流程管理体系L1至L5最佳实践-解读
大数据·华为
PersistJiao4 小时前
在 Spark RDD 中,sortBy 和 top 算子的各自适用场景
大数据·spark·top·sortby