数据治理

数据分析小兵2 天前
数据治理·数据安全·数据分类分级·ai大模型·数据质量·数据中台·智能体
金融数据分类分级实战系列一:行业标准JR/T 0197深度解读在数字化浪潮席卷全球的今天,金融数据已成为金融机构的核心资产与命脉。随着《数据安全法》《个人信息保护法》等法律法规的密集出台,金融行业数据安全治理已从"可选动作"转变为"必答题"。面对海量、异构、高价值的金融数据,如何科学分类、合理定级,构建既满足监管要求又贴合业务实际的数据安全防护体系,成为众多金融机构面临的共同挑战。JR/T 0197—2020《金融数据安全 数据安全分级指南》作为金融行业首个专门针对数据安全分级制定的推荐性标准,为这一难题提供了系统性的解决方案。本文旨在深入解读该标准的核心要义,从分
Lab_AI3 天前
人工智能·数据治理·ai4s·ai+新材料研发·ai+材料创新·ai+实验设计·科学数据融合
AI+新材料研发平台实操培训班圆满举办,创腾科技与上海化工研究院共探材料研发智能化落地路径2026年7月,由华谊集团、上海化工研究院联合多家协会平台主办的"第三期化工研发人员综合技能及AI+新材料研发平台实操培训班"在上海圆满举办。创腾科技作为协办单位受邀参与本次培训课程的交流,并在活动现场设立公司展位,与来自石油炼化、化工、精细化工、新材料、电子化学品、锂电/催化新材料等领域的研发管理者和技术人员,共同探讨AI+新材料研发的落地路径。
DataX_ruby825 天前
人工智能·数据治理·数据中台
2026年数据中台技术路线深度对比:治理架构、AI能力与信创适配全景盘点2026年,国内数据中台市场已进入"后建设时代"。经过几年的项目实践,行业逐渐形成共识:数据接入只是起点,治理落地和业务消费才是价值兑现的关键。
鸿翼Macrowing6 天前
人工智能·pdf·agent·数据治理·skill
**从一份 PDF 到一次 API 调用:企业 AI 能力的“最后一公里“**技术人讲架构,喜欢画分层图。最底层是存储,往上是计算,再往上是服务,最上面是应用。层次分明,逻辑清晰。但企业 AI 的真实场景,往往卡在层与层之间的缝隙里。
千桐科技17 天前
java·大数据·开源·数据治理·数据中台·qdata
DataX 执行引擎正式加入:qData 开源版 v1.6.0 新增 Quartz + DataX 轻量运行模式!本次qData 数据中台开源版 v1.6.0 新增了两项关键能力:与此同时,原有的 DolphinScheduler 调度器和 Spark 执行引擎继续保留。
胡耀超21 天前
爬虫·python·系统架构·数据治理·数据同步·接口设计·爬虫工程
从一次批量爬取到生产同步:问题变了,建设边界也要跟着变很多爬虫项目第一次跑通时,看起来已经完成了大半:能登录、能查询、能翻页、能拿到数据,失败后也能重新执行。
DataX_ruby8225 天前
大数据·运维·人工智能·数据治理·数据中台
DCMM 2.0 贯标评估全解读:数据中台如何支撑九大能力域(2026版)某企业 CDO 刚完成数据中台建设,董事长在季度会上问:"我们的数据管理水平在行业里排第几?DCMM 能过几级?"CDO 一时语塞。
龙石数据1 个月前
数据库·hive·mysql·数据治理·数据中台
MySQL 全量同步到 Hive 怎么做?三步配置教程本文适合谁读:数据工程师、ETL 开发人员、数据平台运维,正在为 MySQL 到 Doris/Hive 等 OLAP 引擎的全量同步维护手工脚本,希望用可视化方式替代脚本、降低维护成本。
数据库小学妹1 个月前
数据仓库·分布式数据库·数据治理·数据库架构·架构设计·数据分层
数据库架构入门到进阶:单机、主从、分库分表到分布式的选型实战大家好,我是数据库小学妹 👋今天聊一个我以前特别容易混淆的话题——数据库架构。说来惭愧,我刚入行那会儿。领导让我说说公司的数据库架构。我憋了半天,来了一句:"我们用的MySQL,主从复制,读写分离。"领导看了我一眼,说了句让我记到现在的话:“这不是架构,这是选了个产品。”
wilbertzhou2 个月前
人工智能·llm·大语言模型·数据治理·元数据管理·语义元数据
大语言模型时代的语义元数据:从静态资产目录到智能治理元数据常被比喻为“数据的数据”——它告诉你在哪里能找到什么数据、数据从哪里来、当前质量如何。但在过去很长一段时间里,元数据管理面临一个根本性的矛盾:元数据本身需要被管理,而人工管理却跟不上数据爆炸的速度。正如DataHub团队所指出的,过去“能应付50个数据集的手动文档策略,在500个每小时更新的特征表面前会灾难性地崩溃”。
DataX_ruby822 个月前
大数据·人工智能·数据治理·数据中台
2026年数据中台厂商市场份额分析进入 2026 年后,国内数据中台市场正在发生一个非常明显的变化:企业关注的重点,已经不再是“是否建设数据中台”,而是“数据中台上线后到底有没有真正被用起来”。
真上帝的左手2 个月前
大数据·数据治理
19. 大数据-数据治理-体系建设全流程本流程围绕 “指标驱动、标准先行、模型落地、质量闭环、安全合规、资产沉淀” 六大核心逻辑,形成端到端的数据治理闭环。
DataX_ruby822 个月前
大数据·人工智能·数据治理·数据中台
2026年数据中台平台成熟度排名进入 2026 年,国内数据中台市场已经明显进入“后建设周期”。过去几年,大量企业做过数据中台:买平台、建湖仓、做指标、上目录、搭资产体系。很多项目在验收阶段看起来都很完整——数据接入数量很多、功能模块很多、页面也很漂亮。但真正运行两三年后,企业开始发现:不是所有“上线的数据中台”,都真的能把数据用起来。
数幄科技2 个月前
大数据·人工智能·算法·数据治理·数幄科技
电力装备制造业智能化转型】【数据基础设施篇】【5】数据采集 ETL 的可靠性设计数据采集 ETL 的可靠性设计CDC + Reconcile 双轨兜底—— 电力装备制造业数据治理系列 · Vol.2 · 15
千桐科技2 个月前
数据治理·数据管理·数据中台·qdata
qData 数据中台 2.0 智能化时代:从“汇集数据”到“创造智能”|六大升级深度解析一场发布会,六大升级、七大平台、六大方案、五大标杆案例 qData 2.3.0 不是一次简单的版本迭代,而是一次数据中台理念的全面跃迁
袋鼠云数栈2 个月前
运维·前端·人工智能·数据治理·数据智能
从前端到基础设施,ACOS 如何打通企业全链路可观测在数字化转型不断深入的今天,企业 IT 系统早已不再是几台服务器、几个应用那么简单。云原生、微服务、容器化、多云与混合云架构快速普及,业务链路越来越长、系统依赖越来越多、变更频率越来越高。对于运维团队来说,真正的难点已经不是“有没有监控”,而是“能不能快速看清问题、定位问题、协同处理问题”。很多企业都在做监控,但也普遍面临几个现实挑战:工具多、数据散、视角割裂,业务、应用、基础设施之间缺乏统一关联;
袋鼠云数栈2 个月前
大数据·数据结构·数据库·人工智能·数据治理·多模态
数栈 V7.0 多模态数据智能平台:打造 AI-Ready 的企业数据底座2026 袋鼠云春季数智发布会上,袋鼠云正式发布数栈 V7.0。作为数栈面向 AI 时代的一次重要大版本升级,V7.0 将产品定位从 “大数据开发与治理平台” 进一步升级为 AI-Ready 的多模态数据智能平台,围绕结构化、半结构化、非结构化数据的统一采集、存储、开发、治理、检索、服务与智能调用,帮助企业构建面向 AI 应用规模化落地的新一代数据智能基础设施。
wilbertzhou2 个月前
数据治理·企业架构·数据网格·联邦治理·华为实践
联邦治理,不止是原则:数据网格落地的架构设计与组织博弈从“谁生产数据”到“谁对数据负责”,拆解数据网格最难的那一环。上一篇文章中,我们详细拆解了数据网格的四大原则——领域数据所有权、数据即产品、自服务基础设施和联邦治理,并指出数据网格的核心价值在于“重构数据责任体系,实现全局标准与领域自治的平衡”。
想ai抽2 个月前
ai·数据治理·gravitino
AIAgent友好的数据治理框架-Apache Gravitino技术调研报告Apache Gravitino 是一个高性能、地理分布式、联邦式元数据湖(Metadata Lake)项目,于2024年进入 Apache 孵化器,由 Datastrato 公司(现为 TabbyML 旗下)发起并捐赠。Gravitino 的核心目标是成为组织内所有数据与 AI 资产的唯一真实来源(Single Source of Truth, SSOT),通过统一的元数据层连接异构数据源,提供集中化的元数据管理、安全管控和联邦访问能力。
DataX_ruby822 个月前
大数据·人工智能·数据治理·数据中台
企业常用的数据中台是哪些?过去几年,很多企业在推进数字化建设时,都经历过一个典型阶段:系统越来越多,数据越来越杂,但真正能被业务持续使用的数据缺并不多。ERP、CRM、MES、IoT、财务系统、营销平台各自沉淀了一批数据,但由于口径不统一、标准不一致、数据链路不透明,企业逐渐发现,“数据很多”并不等于“数据能用”。