大数据

Fluxproxy33 分钟前
大数据·人工智能·自动化
大模型批量数据采集:AI 自动化工作流搭建实战现在很多做 AI 应用、数据集整理、行业调研的小伙伴,都需要批量获取公开网页信息,喂给大模型做摘要、分类、打标签。很多人直接用大模型自带的联网搜索,不仅速度慢、并发受限,还容易触发网站访问限制,拿到的数据残缺不全。
sun1536902757234 分钟前
大数据
超声波风速风向传感器:测量原理、通讯协议与应用场景详解超声波风速风向传感器是一款无机械转动部件的气象监测设备,依靠超声波时差法完成风参数采集,具备高可靠性、低维护成本、全天候工作的优势,广泛应用于智慧气象、边坡地质灾害监测、智慧农业、园区环境监测、海洋水文、光伏风电等场景。本文从核心测量原理、主流通讯协议、典型应用场景、产品优势几个维度完整讲解,方便物联网开发者、系统集成工程师快速选型与对接开发。
国科安芯1 小时前
大数据·网络·嵌入式硬件·平面·卫星·商业航天·抗辐射
商业光学遥感载荷焦平面供电链的低噪声稳压器研究综述——以国科安芯ASP7A84AS型3A低压差线性稳压器为器件级参照摘要:商业光学遥感卫星的分辨率与辐射质量,最终取决于焦平面探测器将光子转换为电荷、读出电路将电荷转换为数字码字的全过程信噪比。在这一信号链中,供电噪声是少数能够同时影响暗电流、读出噪声与量化精度的共因误差源,而其治理窗口又被压缩在载荷电子舱有限的面积、质量与热耗预算之内。本文采用文献综述方法,围绕商业光学遥感载荷的供电完整性需求,梳理探测器偏置与读出链噪声研究、星载电源完整性与电磁兼容研究、抗辐射加固与降额设计研究三条脉络,并以3A输出、4μV(有效值)低噪声、高电源抑制比的国科安芯ASP7A84AS低压
米软科技1 小时前
大数据·人工智能
数字化转型:多元化集团如何构建高效的AI数字化中台?在数字经济与实体经济深度融合的今天,多元化集团正站在数字化转型的关键十字路口。面对横跨多个产业、容纳众多经营主体、系统林立的复杂格局,传统的单点系统建设已难以满足组织级敏捷响应的需求。当AI技术全面进入生产链路,企业亟需一层能够沉淀能力、复用资产、持续生长的统一基础设施。米缀AI数字化中台(米软科技自主研发的企业AI数字化底座),秉持“一个底座,长出一个组织的数字化”的核心理念,通过AI原生Agent架构与双模型智能引擎,全面践行从“建系统”到“长能力”的范式跃迁,为多元化集团构建起高效的数字化能力中枢。
Leo.yuan2 小时前
大数据·人工智能
Dora企业级Data Agent应用指南:存量BI复用、私有化部署与权限管理DORA(朵拉)是帆软推出的企业级数据智能体平台,面向已经使用 FineBI、FineReport 的企业,让它们无需迁移、无需重建,就能在已有的数据资产之上直接获得 Agent 能力。
千里念行客2403 小时前
大数据·科技·能源
南都电源在甘肃玉门的200MW/800MWh独立共享储能电站建成日前,由南都电源参建的玉门200MW/800MWh独立共享储能电站,站内部分已全部建成,其中一期100MW/400MWh项目已成功并网。
程序员梅雨4 小时前
大数据·数据仓库·学习
【从零开始学习数据仓库 | 第二篇】: 拉链表 & 数仓分层拉链表就是一张记录数据历史变化状态的表。它不保存每天的全量快照,而是用两个时间字段(通常叫 start_date 和 end_date)来标记每一条记录的生命周期:某条数据从哪天开始生效,到哪天失效。
GlobalInfo5 小时前
大数据·人工智能·机器人
机器人线缆用无卤TPU料市场分析报告深度版:产业洞察、技术演进与路径机器人线缆用无卤TPU料主要以热塑性聚氨酯(TPU)为基础,通过无卤阻燃体系以及耐水解、耐油、耐磨、抗UV、抗老化和加工稳定等功能助剂进行改性,最终以挤出级颗粒形式供应给线缆制造企业。产品主要应用于工业机器人、协作机器人以及柔性自动化设备中的高频弯折、扭转线缆绝缘层或护套层。随着工业机器人、协作机器人、自动化生产线以及高柔性设备持续增加,加之上游无卤阻燃体系和动态寿命验证技术迭代升级,机器人线缆用无卤TPU料的应用需求持续变化。作为保障机器人线缆长期动态使用寿命的关键材料,机器人线缆用无卤TPU料广泛应用
MARSERERER6 小时前
大数据
Flink将Hive数据导入StarRocks中任务重跑如何避免数据重复?Hive表中其实没有主键的概念,但是设计StarRocks表时可以增加concat_id这个逻辑主键。我们可以将所有的字段都添加到主键中,变成一个联合主键:
电子科技圈6 小时前
大数据·人工智能·设计模式·软件工程·软件构建·代码规范·risc-v
2026 RISC-V中国峰会观察:编译调试工具链的“在场节奏”,释放了什么信号?2026年RISC-V中国峰会在深圳举行,现场有3600多位专业观众,450多家参展商与演讲企业。从低功耗MCU到汽车电子再到AI,各个方向都很热闹。
紧固件情报站6 小时前
大数据·人工智能·重构
紧固件报价逻辑重构:成本、合规与智能博弈近年来,紧固件行业的报价已远非简单的‘材料+加工+利润’线性叠加。作为工业基础件中的‘毛细血管’,其价格敏感度高、议价链条长、区域差异显著,正经历一场由内而外的逻辑重构。 钢材价格波动仍是主因,但权重正在下降
辛迪聊物业数字化6 小时前
大数据·嵌入式硬件·百度·系统架构
智慧社区小程序落地避坑指南:3类物业方案选型+成本测算,线上服务零翻车最近3个月接了6家中小物业的咨询,都是之前做的智慧社区小程序用不下去来找救场的:有花了8万定制结果和收费系统不通的,有贪多搞了十几个功能业主使用率不到10%的,还有买了模板小程序每年交2万运维费啥都不管的。今天就把我做了12个智慧社区小程序项目的落地经验、选型对比、踩坑案例全捋清楚,帮你少花冤枉钱,真的做到线上服务一步到位。 点击蓝字咨询立即咨询
Leo.yuan7 小时前
大数据·数据库·人工智能
企业业务人员如何独立完成数据分析?2026年自助BI工具选型与应用指南摘要:业务人员想自己分析数据,却总卡在提需求给 IT、等排期这个死循环里。自助 BI 工具的出现,本意就是让业务人员绕过这个瓶颈。但工具很多,选错了反而更依赖 IT。这篇指南从业务人员独立分析这个维度出发,对比主流自助 BI 工具,并给出从选型到用起来的完整路径。
@小匠7 小时前
大数据·hive·flink
Flink + Iceberg 批量失败复盘:一次超时如何变成 Hive Metastore 锁泄漏日期:2026-10-30本文是一次脱敏后的技术复盘,不包含业务名称、环境地址、凭据、库表名、作业名或数据内容。
小海测评7 小时前
大数据·人工智能·语言模型·geo·企业获客
生成式引擎优化技术解析:大语言模型外部内容采信机制与工程实践大语言模型的广泛普及,使 AI 问答逐步成为公众获取信息的重要途径。与之相伴,一个技术议题开始受到开发者和内容工程从业者的关注 —— 生成式引擎优化,即 GEO。其研究的问题可以概括为:外部内容如何被大模型识别、收录,并在用户提问时被优先采信与引用。这一问题涉及语义理解、信息架构、信源治理与持续监测等多个层面,具有较高的工程复杂度。本文以技术视角对其底层机制、关键环节与落地难点作系统梳理,以供相关从业者参考与探讨。
yyzc111117 小时前
大数据·运维·人工智能
合规稳定资金结算收款系统助力门店发展合规稳定资金结算收款系统为门店提供了安全、高效的资金处理方案。首先,系统确保了交易的合规性,这样可以降低法律风险,增强消费者的信任感。其次,系统具备快速结算功能,使得门店每日交易资金能够迅速到账,从而维持现金流的稳定。此外,该系统支持多种支付方式,提升了客户支付的便利性。与传统收款方式相比,节省的人力资源和时间成本显著,有助于提高门店运营效率。这些优势共同发挥作用,助力门店在竞争激烈的市场环境中实现长期稳定发展。
IT研究室8 小时前
大数据·人工智能·课程设计
最新大数据毕业设计选题推荐-基于大数据的AI助手系统性软件缺陷评论挖掘与可视化-大数据-Spark-Hadoop-Bigdata✨作者主页:IT研究室✨ 个人简介:曾从事计算机专业培训教学,擅长Java、Python、微信小程序、Golang、安卓Android等项目实战。接项目定制开发、代码讲解、答辩教学、文档编写、降重等。 ☑文末获取源码☑ 精彩专栏推荐⬇⬇⬇ Java项目 Python项目 安卓项目 微信小程序项目
Sayai8 小时前
java·大数据·性能优化·flink·实时计算
Flink 日志解析任务性能优化实战:正则/Grok 预编译、Guava 缓存权重陷阱与 ES 写入隔离做过日志平台的人都懂:日志解析任务是整个链路里最"重"的一环——上游 Kafka 灌进来的是单条 KB 级的原始文本,中间要过正则/Grok/分隔符解析、字段丰富、时间补齐,最后同时写 ES、数仓和回写 Kafka。这类任务一旦吞吐掉队,表现是全家桶式的:GC 频繁甚至 OOM、Checkpoint 超时、Kafka Lag 一路飙红、ES 写入延迟堆积。
Elastic 中国社区官方博客8 小时前
大数据·数据库·elasticsearch·搜索引擎·ocr·jina
基于 Jina OCR v1 与 Elasticsearch 的 PDF 智能混合检索与 RAG 系统实战指南在企业级知识库、智能文档处理(IDP)和生成式 AI(RAG)应用场景中,如何高效、精准地解析 PDF 文档始终是一个核心痛点。传统的 PDF 文本提取工具(如 PyPDF、PDFMiner 等)在面对扫描件、多栏排版、嵌入式表格或复杂图表时,往往会出现文本乱码、排版错乱或表格结构丢失等问题。
渣渣盟8 小时前
大数据·sql·flink
Flink SQL 流批一体:从 SQL 到执行计划,优化器如何工作?Flink SQL 的“流批一体”经常被误解为“同一套 SQL 在流和批上跑出相同的结果”。这个理解只对了一半:语义统一不等于执行统一。这篇文章拆解 Blink Planner 的编译链路,用两个理论锚点(增量视图维护、Exchange 算子)解释流和批为什么必然在物理层分叉,并用四个带完整 EXPLAIN 输出的对照实验回答三个问题:同一条聚合 SQL 的执行计划如何分叉、COUNT(DISTINCT) 在倾斜负载下慢一个数量级的结构性根源到底是什么(本文给出可代入参数的状态基数模型与推演对比表)、以及