deepsdata

数聚天成DeepSData14 天前
人工智能·深度学习·机器学习·数据集·deepsdata
两份名录里的同名机构,主键该怎么合并手上有两份带机构名称的名录,要合成一张能分析的表,最先遇到的往往不是技术问题,而是一个判断:这两个名字一样的条目,到底是不是同一个观测对象。同名不等于同一家。同一个名字可能对应不同地区的两个独立实体;同一家机构也可能以全称、简称、曾用名、外文译名或带括号说明的形式出现。合并要判断的是两条记录是否指向同一个对象,而不是名字像不像。名称相似只能提示这里值得比较,不能作为自动合并的理由,确认关系最终要落到具体字段和可回溯的依据上。
数聚天成DeepSData18 天前
人工智能·深度学习·机器学习·数据集·deepsdata
第三方地图工具导出的 Landsat 影像,使用条件和 USGS 官方下载的一样吗同一景 Landsat 影像,从 USGS 官方工具下载和从第三方地图工具导出,能沿用的使用条件与责任范围并不完全一样。差别不在“底层数据是不是 Landsat”,而在你手里这份文件经过了谁、由谁负责、交付时要向谁交代。
数聚天成DeepSData19 天前
人工智能·深度学习·机器学习·数据集·deepsdata
验收一批标注数据时,一致性到底在比谁和谁拿到外部标注结果,想判断“一致性够不够用”,先别急着找一个数。一致性本身不是孤立指标,它取决于三件事:谁和谁比、在哪个集合上比、分歧最后怎么处理。这三件事没定,算出来的高低都说明不了太多。
数聚天成DeepSData20 天前
人工智能·深度学习·机器学习·数据集·deepsdata
两批标注数据合并前要核对什么标签名一样、字段能对上,只说明两批数据“看起来像同一个任务”,不说明它们能直接拼成一个训练集。合并前真正要核对的,是标签定义、标注单元、字段语义、跨批重复、来源群组与时间边界、采样口径,以及来源和许可能不能逐行保留。这几项里任何一项没弄清,合并后出的问题往往不会在训练脚本里报错,而是悄悄进入模型和评估结果。
数聚天成DeepSData20 天前
人工智能·深度学习·机器学习·数据集·deepsdata
外部标注需求里该写清哪几项,样例包才验收得动样例包被放行,常见理由不是它真的可验收,而是“看起来像那么回事”。要让它变成可检查的东西,得先把判定规则和交付格式写进需求说明。需求里没写的部分,执行者会替你决定;等到样例出来再讨论,讨论就没有落点。
数聚天成DeepSData20 天前
人工智能·深度学习·机器学习·数据集·deepsdata
Landsat 影像去哪里下载:选景、批量与脚本检索怎么选如果你要做地表变化、遥感识别或影像训练,真正要定的不是“Landsat 能不能免费用”,而是两件事:从哪个入口拿影像,以及拿到之后按什么标准判断它能不能进入你的产品流程。USGS 的 Landsat Data Access 页面把获取方式拆成了几条路径,每条路径对应的准备工作和适用场景并不一样。
数聚天成DeepSData1 个月前
人工智能·深度学习·机器学习·数据集·deepsdata
夜间灯光可以代表经济活动吗?先处理年际一致性打开一个数据说明页时,很容易先被“年度合成”“多版本格式”“约 500 米”这些描述吸引,觉得把 2012 年至今的夜光产品拉下来就能做趋势。但真正动手后,第一道坎往往不是计算,而是各年份之间能不能比。年际一致性没有建立,趋势里就可能同时混着真实变化和产品变化。
数聚天成DeepSData1 个月前
人工智能·深度学习·机器学习·数据集·deepsdata
教育年限数据库跨版本对齐:年龄组、性别与五年间隔怎么处理教育成就面板看起来像一张“国家—年份—教育年限”表,但公开页面展示的结构远比这复杂。DeepSData 的 Barro-Lee 资料描述其覆盖 146 个经济体、1950—2015 年、五年间隔,并按性别和年龄组组织受教育程度信息;内容还涉及教育层级占比、平均受教育年限及用于估算的相关信息。若跨版本拼接时只保留国家和年份,年龄组、性别、间隔和教育层级很可能在无声中被混在一起。
数聚天成DeepSData1 个月前
人工智能·深度学习·机器学习·数据集·deepsdata
OPUS 不是一份统一许可证的语料:子语料许可如何逐项管理?打开一个数据说明页时,最容易出现的误判,是把 OPUS 当成“一份语料库”来管理。DeepSData 的公开页面将 OPUS 描述为包含大量多语平行子语料的集合,时间上由各子语料滚动更新,来源、版本、对齐口径、格式和授权各不相同,许可须依各子语料判断。“来自 OPUS”只能说明集合入口,不能替代每个子语料的来源与许可记录。
数聚天成DeepSData1 个月前
人工智能·深度学习·机器学习·数据集·deepsdata
公开数据怎么找才可用?DeepSData 从需求到验收的实操流程做数据项目时,真正影响进度的往往不是“有没有一个下载链接”,而是拿到的数据是否满足用途、字段、时间范围、格式、许可和获取条件。
我是有底线的