大数据

阿里云大数据AI技术24 分钟前
大数据·人工智能·agent
孩子王基于阿里云Data Agent的智能体实践:300+Agent 覆盖400+业务场景孩子王是一家全国性母婴企业,在全国300多个城市拥有近4000家连锁门店,线上线下服务近9000万用户。近一年,孩子王与阿里云合作,依托 DataWorks Data Agent 产品能力搭建数据智能体平台,构建 300 多个业务智能体,渗透全业务全链路400多个业务场景。
武子康3 小时前
大数据·人工智能·算法
H3-World 扩展跳跃与开门:新动作怎样进入训练数据?作者机制示意或待执行语义对齐安排;没有游戏、模型或训练实测。你给自采集器加上了 Space 键,录到角色跳起,也在 提示词 里写了“the man jumps”。如果仍把这批数据交给原来的 H3-World 动作标注脚本,训练真的能看到这次跳跃吗?
软件技术NINI4 小时前
大数据·人工智能
DeepSeek 大模型落地应用实战指南在企业日常运营中,我们常常面临这样的困境:海量的内部文档沉睡在服务器角落,新员工入职一周还在反复询问基础流程;营销团队为了赶热点,熬夜撰写几十版文案却难以统一品牌语调;开发人员在排查复杂 Bug 时,花费数小时翻阅日志却找不到根源。这些场景不仅消耗了大量宝贵的人力成本,更拖慢了企业的响应速度与创新节奏。随着大语言模型技术的成熟,将这些痛点转化为自动化、智能化的解决方案已不再是遥不可及的构想,而是触手可及的现实生产力。
wuyk5556 小时前
大数据·爬虫·elasticsearch·搜索引擎
Spider-第11讲-工程化改造与可维护性本讲目标:把「跑演示能用」的脚本,变成「敢让它无人值守跑一整晚」的工程。 四件套:日志、重试、限速、断点续爬。它们不是优化,是及格线。
墨林陌7 小时前
大数据
AI 热点日报(2026-11-16):黄仁勋或重返英伟达,华为发具身世界模型,ChatGPT Wallet打通支付今日AI领域核心焦点:英伟达暗盘股价直线拉升超4%,英国金融时报报道黄仁勋正考虑重返英伟达担任CEO,马斯克等硅谷盟友游说董事会'让黄仁勋回来'。国内,华为云今日发布首款昇腾原生具身世界模型CloudRobo WM1.2;阿里拟分拆平头哥赴港独立上市。模型端,谷歌上线新一代高速代理模型Gemini 4 Hydrogen、DeepSeek开放全栈App能力API。应用端,OpenAI推出ChatGPT Wallet打通智能体支付,Meta Muse可代拨商家电话,Anthropic IPO在即。
starzy19908 小时前
大数据·spark
Structured Streaming 结构化流概述:把流数据当作一张无限增长的表摘要:Structured Streaming 是 Spark 2.x 之后官方主推的流计算引擎,它把"流"抽象成一张无限追加的表,让你用写批处理 SQL 的方式写实时任务,还顺带解决了事件时间、迟到数据和端到端 Exactly-Once 这三座大山。本文从编程模型、输出模式、水位线、状态管理和容错语义五个维度把它的核心设计讲透,最后给出与 DStream 的对比和选型建议。
wuyk5558 小时前
大数据·爬虫·elasticsearch·搜索引擎
Spider-第12讲-asyncio异步并发爬取本讲目标:把串行爬虫的「等待」,用 asyncio + aiohttp 重叠起来。 讲清串行 vs 并发的真实差距、Semaphore 怎么管并发上限、以及三个新手必踩的坑。
筑梦之人9 小时前
大数据·elasticsearch·jenkins
Elasticsearch 9.x 从入门到精通(4/7):聚合分析与文本分析系列文章:《Elasticsearch 9.x 从入门到精通》共 7 篇,本篇为第 4 篇,覆盖第 17~20 章。 基线:Elasticsearch 9.x 源码 main 分支(34eafb4ac58d,Version.CURRENT = V_9_7_0)与官方全量文档。 写作纪律:每个知识点标注官方文档出处,涉及实现原理均给出源码锚点 路径:行号,禁止编造 API。
数字新视界19 小时前
大数据·人工智能·物联网·信息与通信·动环监控系统
信创动环监控在机房环境管理中的智能化应用与实践分析信创动环监控技术是机房环境管理中不可或缺的工具,近些年来在智能化应用方面取得了显著进展。该技术结合了传感器、数据分析和人工智能,实现了对机房内部环境的实时监测与管理。随着物联网和云计算的快速发展,信创动环监控不仅提高了数据获取的准确性,还能够迅速对异常情况作出反应,从而增强机房管理的安全性与效率。 通过智能报警系统,管理人员可以在设备出现故障或环境条件异常时,及时接收到警报并采取相关措施。这项技术的发展趋势涵盖了更加灵活的操作界面、智能的数据分析能力以及依托大数据支持的多维度决策机制。此外,该领域还将进一
大大大大晴天1 天前
大数据
数仓分层架构设计:ODS、DWD、DWS、ADS、DIM 如何各司其职电商业务每天都会产生订单、支付、退款、商品、库存、用户行为等数据。如果直接在业务数据库或原始日志上开发指标,同一个“成交金额”可能出现多种口径,重复计算、链路混乱和数据不可追溯也会随之而来。
东鸿电子Eastron1 天前
大数据·人工智能·能源·智能电表·能耗管理
工厂节能降本落地指南:从精准能源计量搭建数字化管理基础随着智能制造的持续推进,自动化产线、智能设备在工厂中的应用越来越广泛。生产效率提升的同时,能源消耗结构也日趋复杂,传统粗放式的能源管理模式,已经难以满足企业精细化管理的需求。
吾AI科技1 天前
大数据·hive·性能优化·tez
基于Tez引擎的 Hive SQL 性能优化 —— 为什么脚本运行越来越慢一年前为业务部门分析离线数据开发了一个 Hive SQL 脚本,脚本早期运行耗时也就10分钟左右,但最近用户反馈脚本性能变慢每次都要一个多小时才能计算完,甚至会超时报错,Hive 脚本运行时间超过2小时实例就会被杀掉回收集群资源,防止集群资源被长期占用。于是便有本篇优化记录。
P1Browser2 天前
大数据·人工智能·安全·多账号管理·指纹浏览器·账户安全·运营合规
账号触发平台安全审核?拆解标准申诉流程与材料清单当平台的特征分析系统识别到多个账号之间存在异常的资产绑定关系时,会触发审核流程。这不一定意味着账号立即被限制,而是进入了一个调查-举证-裁定的标准流程。
云南新人和数采集团2 天前
大数据·人工智能·科技
云南靠谱软件开发公司选型指南:以昆明新腾科技为例摘要:在云南寻找靠谱的软件开发公司,关键不在于看谁报价最低,而在于从技术能力、行业经验、交付流程、售后服务和合同条款五个维度做系统评估。本文以昆明新腾科技为例,拆解一套可复用的选型方法,帮助企业在本地市场里筛出真正能长期合作的软件服务商。
AllData公司负责人2 天前
大数据·数据库·人工智能·gpt·数据采集·数据接入·模态解析
AI大模型数据开发底座系列说明书:AllData集成DB-GPT开源项目建设 AI 多模态分析底座,涵盖模态解析/智能大屏/MCP 扩展!►点击下方链接一键预约,AI 数据中台1.6.4版本发布会 https://mp.weixin.qq.com/s/qR6JUQ5XLxgSECMDDQG9Mg
wno7042 天前
大数据·git·elasticsearch
常用的Git命令清单一般来说,日常使用只要记住下图6个命令,就可以了。但是熟练使用,恐怕要记住60~100个命令。下面是我整理的常用 Git 命令清单。几个专用名词的译名如下: Workspace:工作区 Index / Stage:暂存区 Repository:仓库区(或本地仓库) Remote:远程仓库
YIN_尹3 天前
大数据·git·elasticsearch
【git原理与使用】git基本操作及底层原理(二)Git 跟踪并管理的是修改的内容,而非文件本身,这是 Git 区别于 SVN 等其他版本控制系统的根本:
武子康3 天前
大数据·人工智能·深度学习
H3-World 写了 CPU offload,为什么还不能保证塞进 48GB?作者机制示意或待执行记录;未运行A6000,不代表实测结果。准备在单张 A6000 上试 H3-World,先看官方推理脚本,会发现四个组件都配置了 offload_device="cpu"。这似乎已经回答了最难的问题:权重放不下,就让它们待在 CPU,需要时搬过来。
演艺大赏3 天前
大数据
Doris 数据导出实战:SeaTunnel、EXPORT 与 OUTFILE 性能对比及 9.5 亿行写入故障复盘核心结论同表同分区、约 2100 万行:SeaTunnel 70 分钟以上,EXPORT 约 5 分钟。 2.5 亿行导出:EXPORT 从 50 分钟优化到 4 分钟(Parquet + Tablet 级拆分)。 2.1 亿行 OUTFILE:原分桶 42 分钟,改成 128 桶反而 53 分钟。 9.5 亿行回写:任务被取消,直接触发原因是 Segment 数量超限。
isfox3 天前
大数据
MapReduce 作业慢?别乱调参数,先找到瓶颈在哪MapReduce 作业跑得慢,原因可能出在任何地方——CPU、内存、磁盘、网络、数据倾斜、小文件、参数配置……每个环节都可能拖后腿。