大数据

Elastic 中国社区官方博客5 分钟前
大数据·运维·开发语言·人工智能·elasticsearch·搜索引擎
更少的位数,相同的召回率:DiskBBQ 更保守的自动校准扫描作者:来自 Elastic Tommaso TeofiliElasticsearch 现在在成本模型中将文档位数的权重提高至原来的三倍,因此 DiskBBQ 会先尝试预处理和更深层的重排序,再增加一个比特,使量化向量在保持相同召回率的同时维持较小的体积。
MyBili41 分钟前
大数据·chrome·谷歌浏览器·隐私安全·浏览器防护·cookie管理·上网痕迹清理
Chrome隐私安全配置:完整防护指南很多人以为开启隐身模式就等于完全匿名上网,实际上默认配置下Chrome依然会向网站泄露大量设备信息、浏览习惯甚至位置数据,广告商和恶意脚本可以轻松追踪你的全网行为。
真上帝的左手1 小时前
大数据·数据同步
19. 大数据-数据同步-工具DataX 已经把“从 A 搬到 B”这件事做得很成熟了。Reader 负责读,Writer 负责写,再配上并发、限速、脏数据处理和调度,一条离线同步链路就能跑起来。
数字孪生视频孪生1 小时前
大数据·人工智能·重构·架构·空间计算
在线重构,实时同步:视频动态三维重建打造 “常更常新” 的数字底座传统数字孪生项目普遍存在一个痛点:场景建模大多依靠前期人工测绘、离线建模,交付之后模型就进入静态状态。厂区改扩建、设备移位、管线调整、现场临时作业场景变化,数字模型很难同步更新,久而久之,数字场景和真实现场脱节,数字孪生慢慢变成“一次性沙盘”,难以支撑常态化安全管控、巡检、应急指挥等业务。视频动态三维重建技术,正是为破解场景更新滞后难题而生,构建能够跟随现场变化、常更常新的数字底座。
Aloudata2 小时前
大数据·数据库·人工智能·数据挖掘·数据分析·dataagent
Claude 做数据分析的这两年:一份复盘与发展线索2026 年 6 月,Anthropic 的数据团队在一篇文章里讲了一次不太成功的尝试。他们把大量历史 SQL 开放给 Agent,希望它从分析师过去的工作中找到答案。团队还检查了执行记录,确认 Agent 确实读了这些材料。然而,准确率提高还不到一个百分点[6]。
云上工程笔记2 小时前
大数据·开发语言·javascript·人工智能·机器学习
SRT字幕一键转手绘动画:srt-whiteboard-animation的复刻实录srt-whiteboard-animation 是一个把 SRT 字幕自动转成手绘动画的本地工具,核心机制是「字幕驱动区域、区域驱动笔顺」。在 UCloud 优刻得星图平台上复刻它,环境侧只需要补一个 av 包,真正的工时集中在两处:出图接线和预览台降级。旁白这一版尚未接入。实测从装环境到出片 9 分 42 秒,成片 30 秒、1080x600,1801 帧渲染一分多钟,全程走 PyAV 未用系统 ffmpeg。
isNotNullX12 小时前
大数据·人工智能
仓储管理最全框架:6大流程、8项指标、10个管理动作、12个常见问题仓储管理最怕一种情况:流程天天跑,问题却一直在。每天收发、盘点,库存数据不断更新,可生产依然缺料,账实依然对不上。
国科安芯13 小时前
大数据·人工智能·物联网·卫星·抗辐射·通信芯片·载荷
把接口变成观测量:CANFD收发器状态可观测性驱动的星上故障检测隔离与恢复方法摘要:巨型星座的自主运维需求使故障检测、隔离与恢复(FDIR)从地面支持活动上移至星上,而总线接口因其处于各分系统信息流的必经之地,天然具备成为健康监测观测点的潜力。本文以文献综述方式,梳理星上FDIR体系对可观测状态量的需求、总线层可观测信号的分类,以及地面辐照试验的在线监测方法向在轨健康管理迁移的路径,并以国科安芯ASM1042S系列抗辐射CANFD收发器(型号ASM1042S2S)为样本展开分析。器件试验采用的"工作电流实时监测+CANFD数据回读比对+错误计数输出"组合方法,与星上健康管理所需的观
玩美数据15 小时前
大数据·人工智能
海外市场数据服务常用术语与名词解释权威指南在海外市场数据服务领域,我们需要了解一些核心术语,以便更好地进行数据分析和决策。首先,“市场调研”(Market Research)指的是通过收集和分析市场信息,以了解消费者偏好和市场动态的过程。其次,“数据采集”(Data Collection)是指通过各种手段收集所需信息的活动,这些手段可能包括问卷调查、访谈、在线追踪等。此外,“竞品监测”(Competitive Monitoring)涉及对竞争对手的产品、定价策略和营销活动进行系统性观察与分析,以帮助企业制定相应策略。“行业报告”(Industry
武子康17 小时前
大数据·人工智能·agent
Qwen-Drive 的 91.4 分,究竟选中了什么?一张成绩表里,Qwen-Drive-1.0-RL 的 NAVSIM 分数既是 90.7,也可以是 91.4。区别藏在后者旁边的 best-of-6:每个场景生成六条候选,再用该场景的 PDMS 评测分数选最高的一条。91.4 如实描述了这次评测,却没有证明车辆在当时可用的信息下,已经知道该选择哪条轨迹。1
演艺大赏18 小时前
大数据
NiFi 集群长期运维:并发线程、content 仓库、日志与漏洞面这是「NiFi 生产集群」系列的第 6 篇。前五篇在讲怎么搭、怎么扩、怎么授权、怎么写数据流、怎么排错;这一篇讲几年里真正让集群"稳住"的那些日常动作。
freejackman1 天前
大数据·数据库·hive·sql·测试工具·设计模式·架构
【工程化】从“单兵作战”到“多引擎架构”:基于门面模式的重构实战经过前六篇的鏖战,我的 Hive SQL 解析器终于完美跑通了。但当我在真实场景中准备大展拳脚时,业务方问了一个致命的问题: ‘我们的系统要把 Hive 迁移到 Spark,你的引擎能解析 Spark 的 SQL 吗?
字节跳动数据平台1 天前
大数据
火山引擎知识引擎VeKnow进化之路(上):从“人有数可用”到“AI有智可循”本文源自火山引擎知识引擎 VeKnow 业务实践思考,火山引擎知识引擎 VeKnow 作为企业级 AI 知识底座,依托大模型与大数据技术,提供从知识接入、加工处理、知识建模到智能问答的全链路知识管理与应用能力,让企业知识真正流动起来,在业务中持续创造价值。
Flynn Liang1 天前
大数据·clickhouse·数据可视化·架构设计·superset·数据分析平台
Apache Superset 重要特性详解(三):语义层 / 权限 / 缓存 / 嵌入的实战最佳实践(2026 版)本文是「Apache Superset 深度解析」系列的第 3 篇。前两篇讲了"是什么 + 核心概念"和"架构 + 一次查询的完整旅程";这一篇把架构落到可复制粘贴的配置,讲透四个最值钱、也最容易踩坑的特性:语义层建模、RLS 行级安全、缓存调优、仪表盘嵌入。
小田学Python2 天前
大数据·大模型·agent·ai工具·deepseek
工具调用:让 Agent 从“说”到“做”聊天机器人只能告诉你“怎么订机票”;Agent 能真的去查、去比价。让 Agent 从“说”跨越到“做”的关键技术,叫工具调用。
GrowingIO技术社区2 天前
大数据·数据挖掘·数据分析
用户行为分析怎么做?从业务目标到改进验证的完整流程用户行为分析可以从一次具体决策开始。咨询变少时,先确认少的是目标访客、提交成功的人,还是能够被销售跟进的客户。接下来用可复算的指标定位变化,在真实流程里核对原因,最后用同一套口径评价改动。
瑞克-桑切斯2 天前
大数据·运维·elasticsearch·docker·容器
docker Harbor 单机部署手册适用对象:只有一台服务器(或一台测试虚拟机),想把私有镜像仓库跑起来。 环境约定:单台机器 192.168.28.100(CentOS 7),Docker CE 20.10.18 + docker compose v2 + Harbor v2.9.0(HTTP)。 仓库地址 192.168.28.100,账号 admin / Harbor12345。 预计耗时:装 Docker 10 分钟;装 Harbor 15 分钟 + 下载 750MB 安装包。 版本:v1.0,整理日期:2026-11-07(配套脚
演艺大赏2 天前
大数据
NiFi 起不来、登不上、节点被挤掉:一份按日志定位的排错清单这是「NiFi 生产集群」系列的第 5 篇,也是这套环境从 2022 年上线到 2026 年,所有"救火"记录的汇总。
freejackman2 天前
大数据·数据库·sql
【实战三】撕开脱敏盲区:深度解析 CASE WHEN 与窗口函数血缘在数据安全测试中,你是不是以为只要在 SELECT 层面对敏感字段加了 MASK() 函数,就万事大吉了?