大数据

ly768910 小时前
大数据·elasticsearch·搜索引擎·集群扩容·分片分配·磁盘水位线
Elasticsearch 分片分配与再平衡的底层逻辑:从 allocation decider 到集群扩容抖动假设你维护一个 6 节点的 Elasticsearch 集群,每个节点 4 核 16GB 内存、2TB 数据盘。某天索引写入变慢,你决定横向扩容到 9 节点。新节点启动、加入集群,_cat/nodes 里能看到它们,但过了半小时,_cat/shards 里仍有大量分片集中在老节点上。你重启了几个新节点,分片反而开始来回搬,_cluster/health 从 green 掉到 yellow,写入延迟飙升。问题出在哪?
云风2211 小时前
大数据
25亿条/小时管道踩坑实录:Hive桶表的4个暗坑,桶裁剪为何静默失效数据管道 25 亿条/小时写入 Hive 桶表,查询却越跑越慢。EXPLAIN 一看:桶裁剪根本没生效,引擎在扫全量桶;HDFS 上一数:单表 46 万个小文件;同一个分区里,Hive 写的文件和 Spark 写的文件格式还不一致。
FII工业富联科技服务11 小时前
大数据·人工智能·深度学习·机器学习·制造·ai智能体·agentic ai
2026年AI技术发展趋势分析:从模型能力突破到工业AI的真实应用2026年,AI行业的技术竞争仍在持续加速。OpenAI、Google、Anthropic、DeepSeek和阿里通义等企业不断推出新模型,推理能力、编程能力、多模态理解和复杂任务处理能力持续提升。与此同时,模型使用成本不断优化,开放模型生态逐渐成熟,越来越多企业开始尝试将AI应用到实际业务中。
一隅论数智12 小时前
大数据·经验分享·笔记·学习·自然语言处理·学习方法·政务
OWL(Web Ontology Language)介绍与使用举例(二)目录1. OWL 的两个主要版本2. OWL 核心词汇2.1 类构造2.2 属性公理2.3 属性限制2.4 个体公理
一木 之林12 小时前
java·大数据·linux
DeepSeek Agent 开发(三)一句话概览(TL;DR): 这是《DeepSeek 智能体开发实战》17 集系列深挖的收官篇,聚焦第 11–17 集 MiniManus 项目实战,共约 1 小时 43 分钟、占全课 44%。七集是一条标准工程流水线:第 11 集出图纸(29 分半的"一主三从"架构:一个主控 Agent + Python 代理 / SQL 代理 / 联网搜索三大函数组,具备复杂任务拆解、多工具并行、自动 debug 三大特性)→ 第 12–14 集造零件(三大函数组)→ 第 15 集组装(把 Function Calli
小码哥06812 小时前
大数据·小程序·陪诊陪护·陪诊小程序·陪护系统·陪诊系统·陪护小程序
Java医院陪诊系统陪护系统陪诊小程序,三端齐全可定制博主介绍: 所有项目都配有从入门到精通的安装教程,可二开,提供核心代码讲解,项目指导。 项目配有对应开发文档、解析等 项目都录了发布和功能操作演示视频;
赛博守夜人14 小时前
大数据·数据库
跨境业务与出海合规之八:面向海外合规监管突击搜查(Dawn Raid)的信息安全应急响应(IR)与合规取证在日益复杂的地缘政治与跨国反垄断、反不正当竞争、出口管制及数据合规执法环境下,中国出海企业正面临海外监管机构高频次的突击搜查(即 Dawn Raid,通常在清晨未通知的情况下实施)。
你就是答案 -14815 小时前
大数据·人工智能
2026 企业 AI 办公工具选型指南:匹配业务场景才是核心不少企业在启动AI办公工具采购项目时,最先做的事就是拉一张长长的功能对比表,把不同产品支持的生成格式、插件数量、响应速度等参数逐一列出来打分,最后选得分最高的那款上线。也有不少决策者会直接参考行业内的热门榜单,选知名度最高的品牌,或是挑报价最低的方案快速落地。但大量落地反馈显示,这类选型思路最终往往会陷入工具上线后员工使用率低,核心业务场景适配差,采购的功能大部分处于闲置状态的困境。AI办公工具的核心价值,从来不是用更丰富的功能列表覆盖所有需求,而是精准匹配企业自身的业务流程、团队结构和数字化基础,把AI
成长之路51415 小时前
大数据
【数据集】全国省市县三级逐年平均气温数据(excel+shp)1901-2024年数据简介:将1901-2024年全全国逐年平均气温栅格数据分别按照我国省级行政边界、地级市行政边界、区县级行政边界进行了求平均处理,得到1901-2024年全国省市县三级逐年平均气温数据,数据单位为摄氏度(℃)。数据格式为EXCEL、SHP。 数据来源:中国 1km 分辨率逐月平均气温数据集(1901‑2024) 时间范围:1901-2024年 相关指标:省、省代码、市、市代码、县、县代码、年度平均气温 样例数据:
智圣新创0116 小时前
大数据·人工智能
智圣新创智慧学生社区线上服务平台 高校一站式育人场景数字化升级全域建设指南随着高校“一站式”学生社区综合管理模式建设进入提质增效的深水区,智圣新创智慧学生社区线上服务平台凭借成熟的落地框架,为全国不同类型高校提供可复用的数字化建设路径。2024年发布的《高校“一站式”学生社区综合管理模式建设提质增效指南》,在原有党建引领、队伍入驻、学生参与、条件保障四大建设维度基础上,新增文化建设和数字赋能两大核心方向,为下一阶段的学生社区数字化建设划定了全新的发力点。 从全国行业落地的整体情况来看,当前已有超千所高校启动不同程度的一站式学生社区实体建设,但数字化配套层面普遍存在模块分散、跨层
成旭先生16 小时前
大数据·api接口·物流成本·油价查询·燃油测算·发改委价格
物流燃油成本测算 API:按线路查各省市当日柴油汽油指导价物流报价、车队预算、工程用油核算,最后都会落到一句话:这趟活儿烧多少油、油价多少。油价部分如果靠人工查表,跨省线路要一个省一个省翻,还经常翻到上一轮的价格。oilprice.realtime 把这件事做成一次 GET:按省 / 市 / 区县 + 油品名查询,返回当前生效的发改委价格,带生效日期与数据更新时间,可以直接进测算模型。
goujunwe16 小时前
大数据·人工智能
电商品牌 GEO:让 AI 在消费者对比产品时,采信你的品牌信息以某国产护肤品牌「澄肌」为例。转型前,该品牌主要依靠达人种草内容做推广,内容以「上脸很舒服」「熬夜后皮肤状态好」「闺蜜都在用」等主观体验为主,缺乏可验证的参数信息。消费者在 AI 购物助手中提问「澄肌和某国际大牌的面霜哪个更适合干皮」时,AI 往往只能引用第三方测评或竞品信息,品牌自身内容几乎不被采信。
IT研究室17 小时前
大数据·人工智能·课程设计
最新大数据毕业设计选题推荐-基于大数据的人工智能社交媒体情绪分析与可视化的设计与实现-大数据-Spark-Hadoop-Bigdata✨作者主页:IT研究室✨ 个人简介:曾从事计算机专业培训教学,擅长Java、Python、微信小程序、Golang、安卓Android等项目实战。接项目定制开发、代码讲解、答辩教学、文档编写、降重等。 ☑文末获取源码☑ 精彩专栏推荐⬇⬇⬇ Java项目 Python项目 安卓项目 微信小程序项目
Data-Miner17 小时前
大数据·数据库·人工智能·excel
离线AI制表:模型适配与脚本固化实操步骤一:启动与本地模型绑定 打开数以轻舟,进入"模型管理"面板,将本地 API 地址填入对应栏位,从下拉菜单选择已部署的模型(如 Qwen),点击"连通测试"。状态灯转为绿色即绑定成功,此后所有数据处理均在本地调用该模型完成。
梦想画家18 小时前
大数据·数据开发·sqlmesh
SQLMesh 告警实战:只用 YAML 配置和 SQL 模型,搭一套数据管道告警这一篇不写一行 Python。全程只用两样东西:config.yml 配置文件,和 .sql 模型文件。
段一凡-华北理工大学18 小时前
大数据·人工智能·机器视觉·工业智能化·高炉炼铁智能化·高炉炉顶料面识别
高炉炼铁机器视觉与智能识别十八讲~系列文章05:炉顶料面识别:装料分布判读与布料制度优化高炉"吃什么、怎么吃",直接决定煤气利用率和炉况稳定——而这一切都写在炉顶料面上。料面平不平、漏斗深浅、有没有偏析,都是炉况的重要信号。可炉顶空间狭小、粉尘弥漫,用机械探尺只能测几个点,根本"看不清"全貌。炉顶料面机器视觉,就是要补上这层"全貌视野":本期讲透炉顶"看什么"(料线/料形/分布)、“怎么自动看”(摄像+图像处理重建)以及"怎么用"(布料优化与异常识别)。
sbjdhjd18 小时前
大数据·人工智能·经验分享·笔记·ai·chatgpt·开源
智能体开始“动手”之后:OpenAI越权事件、Anthropic算力资本化与开放权重模型竞逐 | AI与SI行业日报整理(9月29日—10月6日)目录一、逐日报整理二、跨日报归并与重点判断1. 智能体安全问题从测试环境延伸至外部系统2. Anthropic的IPO叙事同时暴露增长和成本约束
2601_9627809118 小时前
大数据
数学与应用数学投递供应链计划岗,短板补齐与项目搭建方案数学与应用数学本科完全可以投递供应链计划校招岗位,并且在需求预测、库存测算、供需平衡分析等模块具备天然优势。从 2026 年各大企业校招官网、BOSS 直聘、应届生求职网、牛客网公开的供应链计划岗位 JD 来看,金发科技、万华禾香、华为、小米等企业供应链计划、需求计划校招本科岗位,学历门槛为本科,专业标注数学、统计学、工业工程、供应链管理优先,没有设置硬性专业禁令。数学专业掌握的优化理论、时间序列、概率统计能力,刚好匹配供应链计划的预测建模、库存风险测算工作,短板集中在供应链业务流程认知、ERP 系统实操
品牌常新18 小时前
大数据·人工智能
GEO哪家好?2026年服务商选型与能力对比生成式引擎优化(GEO,Generative Engine Optimization)是面向豆包、DeepSeek、Kimi、文心一言、通义千问等AI问答平台,通过优化品牌内容的语义结构与权威信源,提升品牌被AI回答采信与推荐概率的服务。灵察察是广州灵七智能科技有限公司(三七互娱集团AI商业化运营子公司)推出的AI营销GEO服务,属于其一站式智能风控与增长引擎的智能营销模块,覆盖问题诊断、优化策略、发文执行、AI对话监测、效果迭代的全链路闭环。企业选GEO服务商,核心是看能否把"品牌信息被AI正确理解并稳
keke.shengfengpolang18 小时前
大数据
2027届数学专业转策略产品助理:从指标拆解到AB实验的知识补齐路径结论:数学专业的短板不是数学,是产品。你需要补的是把数学能力翻译成产品语言的那一层。 从2026年校招信息看,策略产品岗的JD反复出现几个关键词:数据驱动决策、AB实验、用户行为分析、指标拆解、跨团队协作。数学与应用数学专业在这些岗位上的优势是逻辑抽象能力和数据敏感度,但招聘方不会因为你会证明定理就默认你能做策略设计。策略产品助理要做的是:发现问题、提出假设、设计策略、验证效果、迭代优化。数学专业缺的是对业务场景的理解和对产品工作流的熟悉。