大数据

starzy199041 分钟前
大数据·flink
Flink高级之富函数类深度剖析:执行时序、状态注册与序列化陷阱摘要:上一篇讲函数类全景时,RichFunction 只是"第二家族";这篇把它单独挖到底。文章从四个维度拆解富函数:接口与继承结构、从实例化到 close 的完整生命周期时序(状态恢复先于 open、链内上游先 open)、RuntimeContext 六类能力(状态/指标/分布式缓存/算子状态/配置/累加器),以及一组真实的序列化与执行陷阱——含非静态匿名类隐式捕获外部 this 导致序列化爆炸、异步 I/O 必须用连接池等。看完能回答"为什么构造器拿不到 RuntimeContext"“open 里
一切如来心秘密1 小时前
大数据·智驾数据闭环
智驾数据闭环湖仓实战: Apache Paimon 分层建模实践系列一我们用七篇文章走完了智驾数据闭环的全景——从 8 环节模型、厂商对标、架构蓝图、全局 ID、11 张 ADS 表、闭环度量到存储治理。但有一个关键问题始终没有展开:这 79+ 张 Paimon 表到底是怎么设计出来的?
tedcloud1238 小时前
大数据·服务器·人工智能·开源·音视频
Wand-Enhancer 怎么搭建?开源 Wand 客户端增强与远程控制工具介绍如果你经常使用 Wand(WeMod),又希望对客户端的界面、布局、主题以及部分本地功能进行扩展,那么 k1tbyte/Wand-Enhancer 是一个比较有意思的开源项目。
大大大大晴天10 小时前
大数据
每天认识一个组件:分布式缓存Alluxio过去的大数据架构常常把计算和存储放在同一套集群里,例如 Hadoop 时代的 HDFS + MapReduce/Spark。随着云上对象存储、湖仓架构、弹性计算、AI 训练集群的发展,数据和计算越来越分离:数据可能在 S3、HDFS、OSS、Azure Blob 或多个数据中心,计算则可能运行在 Kubernetes、YARN、独立 GPU 集群或临时弹性集群中。
AI_Auto11 小时前
大数据·人工智能·架构·制造
架构视角看数字化转型|核心架构:大共享平台+小应用,从按需走向适变最核心的架构理念只有一句话:“大的共享平台+小的应用”。从"管理一个个烟囱式应用"变成"管理一个全局平台"。区分了两种IT建设模式:被动响应的按需模式 vs 主动应变的适变模式,并完整定义了从战略层到基础设施层的11层企业架构全貌。
小蒋观天下11 小时前
大数据·人工智能·安全·计算机视觉·语音识别·ai大模型
社区AI智能摄像头完整选型指南住宅小区、老旧小区、安置房小区、高端洋房社区的监控环境,覆盖出入口、单元楼道、小区道路、停车场、绿化带、围墙周界、高空俯瞰全场景,聚焦社区安防核心痛点:高空抛物、电动车进梯、陌生人徘徊、消防通道占用、周界翻越、人车乱象。我们观芯从统一规范AI算法、硬件参数、夜视防护、供电传输、设备选型标准,选适配物业改造、智慧社区招投标、老旧小区智能化升级、全新小区的安防建设落地使用。
AI 思录11 小时前
大数据·人工智能·算法·prompt·用户体验·ai合规
Prompt 事故档案(八):日常表达被标为“待校准”,AI 的爹味语法从哪里来(本篇为「Prompt 事故档案」系列第(八)篇。没看过前几篇也没关系——这个系列的核心只有一句话:Prompt 是「自然语言编写的代码」,却在绝大多数团队里被允许「裸奔」上线,没有 Code Review、没有三审三校。本文换一批全新的案例,继续拆解「人眼看着正常、AI 执行却出事」的风险。)
2601_9657422213 小时前
大数据·数据结构·人工智能·算法·ai·媒体
全媒体运营与短视频代运营,两者有什么区别?很多企业在做线上推广时,常分不清短视频代运营和全媒体运营的差异,导致推广效果未达预期。简单聊聊两者的区别,供大家参考。 一、服务渠道不同 短视频代运营通常聚焦单一短视频平台(如抖音、视频号),核心工作以内容发布和账号维护为主。全媒体运营则同步覆盖短视频、资讯平台、问答社区等多个渠道,布局更广。 二、流量来源不同 短视频代运营的流量主要依赖平台算法推荐,流量波动较大。全媒体运营兼顾推荐流量与搜索流量,内容可长期沉淀,持续带来访问。 三、运营目标不同 短视频代运营更适合以曝光和粉丝增长为主要目标的场景。全媒体
anxiao_m14 小时前
大数据·网络·数据库
2026企业AI数字孪生选型攻略,不同场景对应不同解决方案当下AI数字孪生技术广泛应用于工业、园区、城市治理、水利等多个领域,成为企业数字化升级的核心工具。但市面上孪生产品功能参差不齐,多数需求方难以区分纯可视化工具与搭载AI算力、实时联动的智能化孪生系统。很多企业落地项目时,常因选型偏差出现场景卡顿、数据无法联动、系统无法兼容、落地成本过高等问题。
SelectDB14 小时前
大数据·数据库·数据分析
从 ClickHouse 迁移到 Doris:SQL 兼容、同步与验证清单(实战笔记)掘金开发者实战笔记。摘要:随着团队对标准 SQL、多表关联和高并发在线查询的需求增加,不少同学开始评估从 ClickHouse 迁移到 Apache Doris。Doris 由 Apache 软件基金会管理(Apache 顶级项目),其企业级支持由 SelectDB 提供。本文给出一条可落地的迁移路径:SQL 方言如何映射、Schema 如何对应、数据如何同步,以及上线前的验证清单。
SelectDB14 小时前
大数据·数据库·数据分析
Doris 还是 ClickHouse?一张表说清 6 个关键差异(实战笔记)掘金开发者实战笔记。摘要:Apache Doris 与 ClickHouse 都是当下主流的开源 OLAP 引擎。Doris 由 Apache 软件基金会管理(Apache 顶级项目),其企业级支持与商业化服务由 SelectDB 提供;ClickHouse 核心同样基于 Apache 2.0 开源,由 ClickHouse, Inc. 提供云服务。两者定位不同:ClickHouse 擅长单表宽表聚合,Doris 在标准 SQL、多表关联、高并发点查与湖仓一体上更完整。本文用一张对照表帮你在选型时快速决策
DolphinScheduler社区14 小时前
大数据·安全·开源·apache·任务调度·海豚调度
Apache DolphinScheduler 8 月报:权限安全加固,调度补火上线,性能与稳定性持续提升Apache DolphinScheduler 8 月月报来啦!过去一个月,社区持续推进项目迭代,在功能优化、性能提升和生态建设等方面不断取得新进展。让我们一起看看 8 月 DolphinScheduler 又有哪些值得关注的更新,也感谢每一位参与贡献、积极反馈和支持社区的小伙伴,正是大家的共同努力,让 DolphinScheduler 持续成长!
动恰客流统计15 小时前
大数据·前端·人工智能
传统红外对射客流统计为何逐步淡出主流?准确率与场景限制深度分析客流统计是实体空间运营的核心数据底座。从早年的人工计数到红外对射,再到如今的视觉智能方案,技术迭代的背后是实体行业从粗放运营向精细化管理的转型。过去很长一段时间里,红外对射凭借成本低、安装简单的优势,成为很多中小场景的首选。但近几年行业数据显示,红外对射在新建项目中的占比持续下滑,存量项目改造也大多转向视觉类方案。这背后并非单一因素导致,而是准确率瓶颈与场景适配性不足共同作用的结果。本文结合行业实测数据与项目运维经验,客观拆解这一技术路线的兴衰逻辑,以及当前客流统计技术的发展方向。
IT毕设梦工厂15 小时前
大数据·hadoop·python·信息可视化·spark·课程设计·大数据毕设项目
计算机毕业设计选题推荐:基于大数据的印度上市公司财务指标数据可视化分析|毕业设计选题|计算机毕设|选题推荐|毕设指导|项目定制|源码|高质量项目✨作者主页:IT毕设梦工厂✨ 个人简介:曾从事计算机专业培训教学,擅长Java、Python、PHP、.NET、Node.js、GO、微信小程序、安卓Android等项目实战。接项目定制开发、代码讲解、答辩教学、文档编写、降重等。 ☑文末获取源码☑ 精彩专栏推荐⬇⬇⬇ Java项目 Python项目 安卓项目 微信小程序项目
SelectDB15 小时前
大数据·数据库·数据分析
Doris 直查 Paimon 索引:快手湖上向量检索的共建与落地导读:Apache Doris 5.0 多模湖仓预告(3)|生产实践篇:快手在生产环境用 Apache Doris 直接查询 Apache Paimon 表上的向量索引。向量与业务数据留在 Paimon 表中,检索由 Doris SQL 发起并下推到湖上执行,原有的入湖链路和 OLAP 读取方式不变。本文介绍 Paimon 2.0 的索引底座和 Doris 与 Paimon 两个社区共建的读取链路,并用千万级与亿级向量的实测结果说明实际表现。
龙亘川16 小时前
大数据·科技·ai·信息可视化·智慧城市
科技决策分析报表平台:科技服务・项目・成果转化・政策四维报表全链路业务建模科技决策分析报表,是科技主管部门 "用数据说话、用数据决策" 的核心支撑,覆盖科技服务综合运行、科技项目全生命周期、成果转化全链路、科技政策实施效果四大维度,需要解决 "报表种类多、口径杂、时效要求高、钻取溯源难" 等典型问题,还要兼顾领导驾驶舱、分析专员工作台、移动端查阅多端场景。最近研读一份完整的科技决策分析报表平台需求文档,整套系统采用 "自定义报表 + 自动生成时间尺度报表(日 / 周 / 月 / 季 / 半年 / 年)" 统一架构,本文聚焦四大核心报表单元:科技服务综合报表、科技项目报表、成果转
四季豆3317 小时前
大数据
工业大数据不只是“大”,更是制造业突围的“导航仪”中国制造业三十年高速奔跑,如今已是全球体量最大的制造力量,但“大而不强”的隐忧同样真实——自主创新、信息化水平、资源效率,仍与国际领先存在差距。从德国工业4.0到美国工业互联网,再到“中国制造2025”,方向高度一致:用数据重新定义制造。
newsxun18 小时前
大数据·人工智能
光智融合,空间新生|Jupiter SR 亮相光博会CIOE 20269月9日至11日,第二十七届中国国际光电博览会(CIOE 2026)在深圳国际会展中心举行。其中,空间现实显示成为本届展会现场备受关注的话题。Jupiter SR 携旗下空间现实显示产品矩阵集中亮相2号馆2D170展位,凭借立体显示体验吸引众多参展观众驻足。22英寸3D显示屏也在本届展会上首次发布,为空间现实显示带来全新形态。
大树8818 小时前
大数据·运维·服务器·人工智能·ai
液冷系统的真正瓶颈,藏在那层不到1毫米的材料里AI与液冷 2026-09-10上周,一家做导热界面材料的企业启动创业板招股,路演材料里有一组数据很有意思:2025年,他们的热管理材料收入从2亿直接跳到5.7亿,毛利率干到了65%。同一时间,液冷系统集成商的毛利率普遍在20%出头。一个上游材料商,利润空间是下游集成商的三倍。
Vicky_time18 小时前
大数据·系统架构
2026美国海外仓TOP5技术评测:FBA中转海外仓系统对接与操作方案针对中大件出海FBA中转海外仓的操作痛点,本文从技术实操角度评测2026美国海外仓TOP5服务商。重点解析强基供应链等头部企业的系统对接能力、24h一件代发SOP及仓网可视化方案,为卖家提供技术选型参考。