数据资源工具断点续传及下载重试功能

我们可以利用数据资源工具下载各类卫星及矢量数据,具体方法见:Sentinel-2 下载(其它数据操作方式类似),但在使用资源工具下载数据时可能会出现由于网络不稳定,网站关闭连接而造成下载的错误或中断。尤其是下载国外遥感数据时,网络很不稳定,有时候网站或防火墙会主动关闭您的下载链接!这时候其它下载方式可能就需要您重新下载数据了,非常浪费时间。

  • 如果您使用 数据资源工具的话可以有两种方式:一种是使用【继续下载】功能做断点续传!
  • 还有一种更简单直接的功能,就是下载是勾选【下载重试】,这样在错误发生时会自动重新下载,无需人工干预,让工具自动完成下载工作。
  • 下载重试功能有三个设置,要注意:

下载间隔时间:就是批量下载时,两个下载启动的间隔时间,防止由于频次太快,下载被网站封掉或关闭!这点在下载错误自动重试时可以设置大点,因为网络可能等一段时间才能恢复对您的正常下载,你如果一个下载错误后马上启动另一个下载也还是会不成功的!

重试次数:对一个资源下载的错误重试次数,这个根据您的需要设置!

重试间隔:就是下载错误后的等待时间,防止错误下载后在网络没有恢复前立即重试,也防止重试频率过快被识别为恶意攻击!

相关推荐
wudl55663 小时前
Flink 1.20 flink-config.yml 配置详解
大数据·flink
华东数交4 小时前
企业与国有数据资产:入表全流程管理及资产化闭环理论解析
大数据·人工智能
B站_计算机毕业设计之家9 小时前
计算机毕业设计:Python农业数据可视化分析系统 气象数据 农业生产 粮食数据 播种数据 爬虫 Django框架 天气数据 降水量(源码+文档)✅
大数据·爬虫·python·机器学习·信息可视化·课程设计·农业
Apache Flink11 小时前
Flink Agents 0.1.0 发布公告
大数据·flink
潘达斯奈基~12 小时前
在使用spark的applyInPandas方法过程中,遇到类型冲突问题如何解决
大数据·笔记
火星资讯13 小时前
腾多多数字零售模式:从成本转嫁到全生态共赢的破局实践
大数据
望获linux14 小时前
【实时Linux实战系列】实时 Linux 的自动化基准测试框架
java·大数据·linux·运维·网络·elasticsearch·搜索引擎
金宗汉15 小时前
《宇宙递归拓扑学:基于自指性与拓扑流形的无限逼近模型》
大数据·人工智能·笔记·算法·观察者模式
直有两条腿15 小时前
【数据迁移】HBase Bulkload批量加载原理
大数据·数据库·hbase
Joy T15 小时前
海南蓝碳:生态财富与科技驱动的新未来
大数据·人工智能·红树林·海南省·生态区建设