tensorflow-dataset 内网下载 指定目录

内网下载报错

解决办法是设置环境变量,指向你的代理服务器TFDS_HTTP_PROXY=http://xxxTFDS_HTTPS_PROXY=http://xxx

留意到,赋值的是你的代理服务器,且最好协议都使用http(即使TFDS_HTTPS_PROXY也要使用http协议连服务器)。如果不这么做,可能会遇到ProxyError

指定目录

如果你的数据集创建是通过tfds.builder创建的,可以使用以下参数,指定数据集下载到指定目录:

py 复制代码
dataset_builder = tfds.builder(config.dataset, data_dir='/home/xxx/dataset/tensorflow-datasets')
dataset_builder.download_and_prepare(download_dir='/home/xxx/dataset/tensorflow-datasets/downloads')
相关推荐
学点程序几秒前
Manifest:帮个人 AI Agent 降低模型成本的开源路由器
人工智能·开源
可观测性用观测云8 分钟前
观测云 x AI Agent:运维智能化的范式跃迁实践
人工智能
数数科技的数据干货10 分钟前
ThinkingAI携手华为云,共建企业级AI Agent平台Agentic Engine
人工智能·ai·华为云·agent
人工智能AI技术12 分钟前
春招急救:7天面试突击方案
人工智能
Polar__Star15 分钟前
如何在 AWS Lambda 中正确使用临时凭证生成 S3 预签名 URL
jvm·数据库·python
2603_9547083122 分钟前
如何确保微电网标准化架构设计流程的完整性?
网络·人工智能·物联网·架构·系统架构
小小AK29 分钟前
钉钉与金蝶云星空无缝集成方案
大数据·人工智能·钉钉
不停喝水33 分钟前
【AI+Cursor】 告别切图仔,拥抱Vibe Coding: AI + Cursor 开启多模态全栈新纪元 (1)
前端·人工智能·后端·ai·ai编程·cursor
m0_7436239241 分钟前
React 自定义 Hook 的命名规范与调用规则详解
jvm·数据库·python
水如烟1 小时前
孤能子视角:AI智能原理,“所有智能,都是茧房里的耦合“,以及人的主场
人工智能