数据资源工具断点续传及下载重试功能

我们可以利用数据资源工具下载各类卫星及矢量数据,具体方法见:Sentinel-2 下载(其它数据操作方式类似),但在使用资源工具下载数据时可能会出现由于网络不稳定,网站关闭连接而造成下载的错误或中断。尤其是下载国外遥感数据时,网络很不稳定,有时候网站或防火墙会主动关闭您的下载链接!这时候其它下载方式可能就需要您重新下载数据了,非常浪费时间。

  • 如果您使用 数据资源工具的话可以有两种方式:一种是使用【继续下载】功能做断点续传!
  • 还有一种更简单直接的功能,就是下载是勾选【下载重试】,这样在错误发生时会自动重新下载,无需人工干预,让工具自动完成下载工作。
  • 下载重试功能有三个设置,要注意:

下载间隔时间:就是批量下载时,两个下载启动的间隔时间,防止由于频次太快,下载被网站封掉或关闭!这点在下载错误自动重试时可以设置大点,因为网络可能等一段时间才能恢复对您的正常下载,你如果一个下载错误后马上启动另一个下载也还是会不成功的!

重试次数:对一个资源下载的错误重试次数,这个根据您的需要设置!

重试间隔:就是下载错误后的等待时间,防止错误下载后在网络没有恢复前立即重试,也防止重试频率过快被识别为恶意攻击!

相关推荐
szxinmai主板定制专家1 小时前
【国产NI替代】基于FPGA的32通道(24bits)高精度终端采集核心板卡
大数据·人工智能·fpga开发
TGB-Earnest3 小时前
【py脚本+logstash+es实现自动化检测工具】
大数据·elasticsearch·自动化
大圣数据星球5 小时前
Fluss 写入数据湖实战
大数据·设计模式·flink
suweijie7685 小时前
SpringCloudAlibaba | Sentinel从基础到进阶
java·大数据·sentinel
Data跳动10 小时前
Spark内存都消耗在哪里了?
大数据·分布式·spark
woshiabc11111 小时前
windows安装Elasticsearch及增删改查操作
大数据·elasticsearch·搜索引擎
lucky_syq12 小时前
Saprk和Flink的区别
大数据·flink
lucky_syq12 小时前
流式处理,为什么Flink比Spark Streaming好?
大数据·flink·spark
袋鼠云数栈12 小时前
深入浅出Flink CEP丨如何通过Flink SQL作业动态更新Flink CEP作业
大数据