大数据

电商API_180079052473 小时前
大数据·运维·人工智能·网络爬虫
京东商品详情API技术文章在电商数据驱动的时代,商品详情数据是电商运营、价格监控、竞品分析等业务的核心基础数据。京东作为国内头部电商平台,其商品详情API能够帮助开发者高效获取京东商品的完整信息,包括价格、库存、图片、规格参数、促销活动等关键字段。
Lumistory3 小时前
大数据·数据库·中间件·光照贴图
城市建筑照明的落地与长效运营观察城市商业建筑的照明系统早已脱离单纯的亮化功能,成为传递品牌气质、构建城市夜间风貌的重要载体。不少运营方在改造或新建外立面照明时,往往更关注设计方案的视觉效果,却对后续落地偏差、长期运维的复杂性准备不足。
lvts_cs4 小时前
大数据·人工智能
淄博高新区绿天使数智创新港:高标准产研厂房全维度详解淄博高新区数字智造、文创研发产业持续扩容,大量科创企业面临传统写字楼无法生产、老旧厂房硬件落后、空间格局固定难以改造等痛点。绿天使数智创新港总投资 6 亿元,打造集研发、试制、办公、展示、培训于一体的现代化产业载体,本文从地块规划、建筑单体、空间硬件、园区配套、产业适配等方面完整介绍园区厂房载体。
大大大大晴天5 小时前
大数据
实时数仓怎么建:基于StarRocks的宽表、指标层与主题建模StarRocks 进入实时数仓场景后,很多团队都会遇到同一个问题:到底是建大宽表、建主题域模型、建指标层,还是继续沿用传统数仓分层?答案不是四选一,而是把它们放在不同层次里各司其职。
AC赳赳老秦6 小时前
java·大数据·前端·数据库·python·php·openclaw
公开图片 OCR 数据提取:OpenClaw 合规采集公开信息图,识别文字与表格并转化为结构化数据在数字化转型的浪潮中,数据早已成为驱动企业决策、学术研究和行业洞察的核心燃料。除了传统的结构化数据库和半结构化网页,大量高价值信息正以图片形式散布在公开网络空间——政府公报中的统计图表、学术论文里的实验表格、企业财报中的关键指标截图、行业报告中的趋势图、电商平台上的商品详情图,甚至社交媒体上的信息长图。这些图片承载着丰富的信息,却因为无法直接检索、复制或分析,长期处于“数据孤岛”的状态。
只说证事14 小时前
大数据
大数据专业不考证能找到工作吗大数据专业这些年热度一直不低,但每到求职季,总能看到这样的困惑:不考几本证书,是不是连简历关都过不去?其实,证书从来不是决定项,但在技术同质化严重的背景下,一份有分量的认证,确实能帮你更快被看见。关键不在于“考不考”,而在于“选什么”。 下面按照国内就业市场的实用程度,把大数据相关证书分成几个梯队,每张证书都标明了难度、适合人群和真实用途,供你理性参考。
倒流时光三十年2 天前
大数据
第六阶段 60 · Transform 数据透视(把明细汇总成实体索引阶段:第六阶段 / 进阶专题 ES:Transform(pivot / latest) | PostgreSQL:物化视图(MATERIALIZED VIEW)+ 定时刷新
bransyin7 小时前
大数据·sql·ai·血缘
一个 SQL 字段到底是怎么算出来的?我做了一个能给出“证据”的血缘工具我最近开源了一个 Spark/Hive SQL 静态分析工具:Scope Lineage。现在已经有了一些SQL的解析工具,为什么还要做一个 SQL Lineage?先看仓库里的一个真实例子。
AC赳赳老秦8 小时前
大数据·c语言·数据库·人工智能·python·php·openclaw
风控岗应用:OpenClaw 采集公开司法与经营异常数据,自动生成企业风险评估报告在企业经营过程中,风险控制岗位承担着一项非常基础但又极其关键的工作,就是在合作、投标、授信、采购、投资、招聘高管、渠道准入等场景下,快速判断一家企业是否值得信任、是否存在潜在法律风险、是否可能给本方带来连带损失。传统上,风控人员需要人工打开多个网站,分别查询工商信息、司法案件、被执行人、行政处罚、经营异常、股权冻结、环保处罚、税务违法、知识产权纠纷等信息,再把这些零散数据整理成一份可供业务部门阅读的风险评估报告。这个过程不仅耗时,而且高度依赖个人经验,容易出现遗漏、版本不一致、信息滞后等问题。
龙亘川14 小时前
大数据·人工智能·安全·智慧城市
综合执法一体化数字管控平台介绍统筹执法人员、车辆、物资装备、法规库等基础资源,实现全生命周期线上建档、调度、维保、报废管理。内置到期预警机制,支持人员跨区域调度、车辆定位轨迹回溯、法规法条快速调取,配套多维度资源统计报表,强化执法基础资源管控能力。
Elastic 中国社区官方博客2 天前
大数据·人工智能·elasticsearch·重构·全文检索
我们如何重构 APM 服务地图以应对事件响应:Observability 9.5 背后的设计故事作者:来自 Elastic Karolina Kurstak14 次企业访谈、两轮原型设计、一次重构的 APM 服务地图。Elastic Observability 9.5 背后的设计故事。
constCpp2 天前
大数据·人工智能
AI 编程的后半场:越过生成幻觉,重建验收防线AI 会写错代码这件事本身并不新鲜,毕竟,软件工程里演进了几十年的测试、审查、CI 乃至灰度回滚,本就是建立在承认人类会犯错的底层假设之上的防御系统。如果仅仅归咎于 AI 不够可靠、需要人工多加盯防,其实就有些流于表面了。
starzy199010 小时前
大数据·分布式·架构·spark
SparkSQL 数据源与底层架构深度剖析摘要:SparkSQL 作为 Apache Spark 生态中最核心的模块之一,不仅提供了统一的 SQL 查询入口,更承载了 DataFrame/Dataset API 的全部执行能力。本文从数据源接入机制入手,深入 Catalyst 优化器四阶段流水线、WholeStageCodegen 代码生成、Tungsten 执行引擎等核心组件,结合源码级追踪,全面剖析 SparkSQL 底层架构设计。无论你是日常写 SQL 的数据工程师,还是需要调优 Spark 作业的架构师,这篇文章都会让你对 SparkSQ
jikemaoshiyanshi1 天前
大数据·人工智能
如何观看 2026 亚马逊云科技中国峰会全程演讲回放?2026亚马逊云科技中国峰会所有主题演讲、技术专题分论坛回放已正式上线官方专属页面。无需跳转多个视频平台检索资源,用户可直接访问亚马逊云科技官方回放专题,按照主题演讲、七大技术分论坛、单场演讲标题分层筛选点播,一站式获取全套峰会学习资料(Amazon Cloud Events)。
Elastic 中国社区官方博客11 小时前
大数据·运维·人工智能·elasticsearch·搜索引擎·全文检索
你的 AI agent 不需要你的 API 密钥:使用 OAuth 2.1 对 Elasticsearch MCP 服务器进行身份验证作者:来自 Elastic Alex ChalkiasOAuth 2.1 让你可以通过浏览器登录,而不是使用 API 密钥,将 AI agent 连接到 Elasticsearch MCP 服务器。你的 agent 会获得一个与你的权限绑定的短期令牌,你可以随时撤销该令牌。
互联网中的一颗神经元17 小时前
大数据·git·elasticsearch
ZZ — Git 速查表速查卡片,一图胜千言 —— 忘了命令怎么用?翻这里。三棵树操作对照reset 三种模式rebase vs merge
Json____14 小时前
java·大数据·数据库·企业站·wwwoop.com
五金制品行业-企业官网源码点头像–个人简介–获取一套源码,快速打造专业五金企业官网在传统五金行业中,优质的产品和强大的制造能力,往往隐藏在工厂背后。客户想了解企业实力,需要反复沟通;采购寻找供应商,需要花费大量时间筛选;企业想拓展市场,也难以突破地域和信息传播的限制。
大东(AIP内容运营专员)16 小时前
大数据·人工智能
我用 OPC 模式运营一年多的AI产品这两年是 2025 到 2026,我在南宁运营 ToB 的 AI 产品。所谓 OPC,One Person Company,一个人公司,这里指的是一个人运营产品。这只是一个概念,在没有这个概念出来之前,就已经是考虑这样的运营方式。涉及到ToB业务及合作伙伴的业务,这里不提及费用和具体项目名称。
roman_日积跬步-终至千里17 小时前
大数据·sql·spark
【Spark与SQL网关(1)】Spark 提交模式与 Spark Thrift Server:到底在“提交”什么很多 Spark 使用者对两件事一直模糊: 一是 client / cluster 到底差在哪; 二是 STS(Spark Thrift Server)算不算一种提交模式。