数据资源工具断点续传及下载重试功能

我们可以利用数据资源工具下载各类卫星及矢量数据,具体方法见:Sentinel-2 下载(其它数据操作方式类似),但在使用资源工具下载数据时可能会出现由于网络不稳定,网站关闭连接而造成下载的错误或中断。尤其是下载国外遥感数据时,网络很不稳定,有时候网站或防火墙会主动关闭您的下载链接!这时候其它下载方式可能就需要您重新下载数据了,非常浪费时间。

  • 如果您使用 数据资源工具的话可以有两种方式:一种是使用【继续下载】功能做断点续传!
  • 还有一种更简单直接的功能,就是下载是勾选【下载重试】,这样在错误发生时会自动重新下载,无需人工干预,让工具自动完成下载工作。
  • 下载重试功能有三个设置,要注意:

下载间隔时间:就是批量下载时,两个下载启动的间隔时间,防止由于频次太快,下载被网站封掉或关闭!这点在下载错误自动重试时可以设置大点,因为网络可能等一段时间才能恢复对您的正常下载,你如果一个下载错误后马上启动另一个下载也还是会不成功的!

重试次数:对一个资源下载的错误重试次数,这个根据您的需要设置!

重试间隔:就是下载错误后的等待时间,防止错误下载后在网络没有恢复前立即重试,也防止重试频率过快被识别为恶意攻击!

相关推荐
Apache Flink4 分钟前
Dinky 和 Flink CDC 在实时整库同步的探索之路
大数据·flink
成长之路5141 小时前
【实证分析】数智化转型对制造企业全要素生产率的影响及机制探究(1999-2023年)
大数据
黑眼圈的小熊猫2 小时前
Git开发
大数据·git·elasticsearch
涛思数据(TDengine)2 小时前
虚拟表、TDgpt、JDBC 异步写入…TDengine 3.3.6.0 版本 8 大升级亮点
大数据·数据库·tdengine
goTsHgo3 小时前
Flink的 RecordWriter 数据通道 详解
大数据·flink
Romantic Rose4 小时前
你所拨打的电话是空号?手机状态查询API
大数据·人工智能
随缘而动,随遇而安5 小时前
第四十六篇 人力资源管理数据仓库架构设计与高阶实践
大数据·数据库·数据仓库·sql·数据库架构
小宋10215 小时前
Linux安装Elasticsearch详细教程
大数据·elasticsearch·搜索引擎
程序员老周6665 小时前
数据仓库标准库模型架构相关概念浅讲
大数据·数据仓库·hive·数仓·拉链抽取·增量抽取·数据仓库架构
Made in Program7 小时前
从数据格式转换的角度 flink cdc 如何写入paimon?
大数据·flink·paimon