数据库

adinnet20261 小时前
大数据·数据库
为什么 RAG 需要 Milvus?向量数据库到底存了什么向量数据库解决的是大模型"的核心问题之一:"记不住、检索不准。RAG(检索增强生成)要让模型在回答前先找到相关材料,而相关材料靠语义相似度匹配,关系型数据库和关键词搜索框可能难以胜任这件事。Milvus 这类向量引擎存的是文本经过 Embedding 之后的高维向量,外加原始文本片段与元数据,查询时做近似最近邻搜索。本文从定义、存储结构、工程边界、系统分工、常见误区五个层面,讲清楚向量数据库在 RAG 里到底承担什么角色。
Elastic 中国社区官方博客1 小时前
大数据·数据库·人工智能·elasticsearch·搜索引擎·ai·全文检索
使用 Elasticsearch 和 Jina 进行 AI 视频搜索:精准找到你需要的视频片段秒数作者:来自 Elastic JD Armada在每个镜头边界处剪切每个片段,并将每个场景嵌入为向量,然后通过一个纯文本查询返回文件以及可以放置到时间线上的精确秒数。
Omics Pro1 小时前
数据库·人工智能·算法·机器学习·自然语言处理
新型条件传输模型!虚拟细胞扰动预测虚拟细胞模型旨在预测细胞群体对扰动的应答;但对照组与处理组细胞为非配对群体样本,这给学习扰动特异性效应带来很大困难。本文提出条件传输模型SCALE。该模型将细胞视作无序集合,无需细胞层面一一匹配即可预测处理后的细胞群体。模型采用集合感知共享编码器与条件DiT主干网络学习隐空间传输,直接以终点作为监督信号,无需辅助的差值损失函数。在遗传扰动、化学扰动、发育扰动、免疫扰动多类任务中,SCALE可以还原基因表达变化、应答方向以及群体结构。在存在强烈细胞系效应的CRISPR数据集上,SCALE在7项评价指标上均优
实验室管理云平台1 小时前
大数据·数据库·科技
环境检测实验室管理系统:提升效率与数据准确性的关键工具随着环保意识的不断增强和政府对环境保护要求的日益严格,环境监测工作在国家和社会发展中占据了举足轻重的地位。为了保障环境质量,各级环保部门需要对空气、水质、土壤等进行持续监控,及时发现并处理各类污染问题。在这一过程中,环境检测实验室扮演着至关重要的角色。而环境检测实验室管理系统则成为了提高实验室工作效率、确保数据准确性的关键工具。本文将深入探讨环境检测实验室管理系统的重要性及其实施策略。
SelectDB技术团队2 小时前
数据库·数据分析·全文检索·快手·apache doris·向量索引·多模态检索
快手基于 Apache Doris 千亿多模态检索的实践作者:温佳豪,快手数据引擎技术中心架构师导读:大模型和 AI Agent 落地之后,多模态内容向量化与相似度检索逐渐成为大数据分析的基础能力。在快手,基于 Apache Doris 深度定制的 Bleem 分析引擎在承载标量分析的同时,将向量检索扩展到了千亿级规模。本文系统梳理 Bleem 引擎在存算分离架构下的演进过程,重点介绍在千亿规模、高维向量与成本约束下,结合 IVF-ON-DISK、RaBitQ 量化与全局两层索引的设计方案与实测收益,并总结生产环境沉淀的工程经验。
政企项目老覃2 小时前
数据库·程序人生·性能优化·数据分析·系统架构
金融转账“幽灵失败“排查实录:从本地消息表到 Seata TCC 的选型与权衡2024 年 Q3,我们负责的某城商行互联网核心系统上线了 II 类户跨行转账功能。业务量不大,日均交易约 12 万笔,峰值 QPS 约 800。上线两周后,运营反馈一个异常现象:用户收到扣款短信,但收款方迟迟不到账,客服工单日均 40+ 起,投诉率环比上升 0.3 个百分点。 排查发现,问题集中在转账链路的"记账 + 通知"环节。我们的转账服务调用链是:账户服务(扣款)→ 账务流水落库 → 消息服务(发通知)。最初实现是本地事务 + 异步消息:扣款和流水在同一个本地事务里提交,然后通过 MQ 异步通知下
TLA技术2 小时前
数据库·oracle·flink·dba·迁移学习
LogMiner vs 裸日志解析(三):Oracle日志解析中的“前镜像”和“后镜像”,到底怎么用?聊Oracle日志解析,绕不开两个词:前镜像(Before Image) 和后镜像(After Image) 。
IT邦德2 小时前
运维·数据库
BIC-QA如何重新定义数据库知识服务📢📢📢📣📣📣 哈喽!大家好,我是【IT邦德】,江湖人称jeames007,10余年DBA及大数据工作经验 一位上进心十足的【大数据领域博主】!😜😜😜 中国DBA联盟(ACDU)成员,目前服务于工业互联网 擅长主流Oracle、MySQL、PG、高斯及GP 运维开发,备份恢复,安装迁移,性能优化、故障应急处理等。 ✨ 如果有对【数据库】感兴趣的【小可爱】,欢迎关注【IT邦德】💞💞💞 ❤️❤️❤️感谢各位大可爱小可爱!❤️❤️❤️
逐米时代2 小时前
大数据·数据库·人工智能
BOM智能构建:全链路一致性自动校验BOM构建通常从历史项目复制结构再人工修改。但替代料、选型约束、编码规范和层级一致性靠人工检查极易遗漏。一个编码错误、一个替代关系未更新,错误就从BOM传递到采购和制造环节,代价远大于设计阶段修正。更深层的问题在于BOM的"隐藏一致性"——物料是否满足环保法规、替代料在当前交期下是否可用、设计层级与制造层级是否对齐——这些维度人工几乎无法逐一核查。而且随着产品变型增多,BOM版本管理复杂度指数级上升,传统手工方式已经触及效率天花板。
SelectDB技术团队3 小时前
数据库·人工智能·sql·clickhouse·apache doris·selectdb·湖仓架构升级
StarRocks 迁移至 Apache Doris 完整指南:三步完成结构、数据与业务平滑切换StarRocks 怎么迁移到 Apache Doris?SR 迁移 Doris 是否需要重新建表?几亿、几十亿数据怎么搬?DataX、Flink、Parquet 应该怎么选?全量迁移之后又如何保证增量数据不丢?
Gauss松鼠会3 小时前
运维·服务器·网络·数据库·gaussdb·经验总结
GaussDB 系统表与系统视图详解(内网运维版)pg_ :继承自开源内核的系统表和视图,存储最基础的数据库元数据(如对象 OID、表结构、依赖关系等)。
倔强的石头_3 小时前
数据库
OceanBaseVS金仓:同一条复杂 SQL,为什么架构选择会改变延迟曲线讨论 OceanBaseVS金仓的时候,最容易掉进去的坑是什么?就是“谁的性能更高”这种问法。为什么说它有问题呢?因为它没有前提条件啊。数据库的性能本来就不是个固定数值,架构、数据分布、事务大小、索引、网络距离,还有运维方式,这些都会改变最终的结果。所以与其给一个脱离环境的排行榜,不如先从两个具体的问题入手:
+VX:Fegn08953 小时前
数据库·vue.js·spring boot·后端·课程设计
计算机毕业设计|基于springboot + vue图书借阅管理系统(源码+数据库+文档)图书借阅管理系统目录基于springboot + vue图书借阅管理系统一、前言二、系统功能演示三、技术选型
李金虎_3 小时前
数据库·机器学习
大模型搜索时代的 GEO 工程实践:从零搭建仿真环境到可控变量的完整复盘大模型搜索正在改变流量入口。Perplexity、ChatGPT Search、Google AI Overview 让用户不再点链接,而是直接看 AI 生成的答案。传统 SEO 优化"排名和点击",GEO(Generative Engine Optimization)优化的是"内容被 AI 引用的概率"。
YangYang9YangYan3 小时前
数据库·人工智能·数据分析
商业分析师校招拆解|2026 秋招 Python 要求、工具栈与面试考点应届生投递商业分析师岗位,普通业务向商业分析岗不强制要求 Python,SQL、Excel、PPT 是硬性基础门槛;偏数据建模、量化分析方向的商业分析师岗位,Python 属于硬性要求。
imDwAaY3 小时前
数据库·sql·mysql
MySQL MVCC 详解:原理、版本链、Read View 与可见性判断事务的隔离级别里要解决脏读、不可重复读、幻读这三个问题,最直接的办法是加锁,让读和写互斥,但加锁的代价很大,一个事务在读某行数据的时候会把写操作挡住,写的时候也会把读挡住,而实际的业务里读操作远远多于写操作,并发性能会被压得很低。
foolishlee3 小时前
数据库·算法·postgresql
SCRAM-SHA-256SCRAM-SHA-256(Salted Challenge Response Authentication Mechanism)是 PostgreSQL 10+ 默认推荐的密码认证方式,本质是基于挑战-响应(challenge-response)的 SASL 认证协议。它不会在网络上传输明文密码,也不会传输可以直接重放的密码哈希。
BJ_Bonree4 小时前
大数据·运维·数据库·人工智能·可观测性
博睿数据加入ITSS分会,成为国家级信息技术服务标准化体系单位成员!近日,博睿数据正式加入中国电子工业标准化技术协会信息技术服务分会(ITSS分会),成为国家级信息技术服务标准化体系单位成员。此次入选,标志着博睿数据在智能可观测技术创新、产品合规体系、项目交付能力及行业服务规范性方面获得国家标准化权威机构的充分认可,企业整体能力全面接轨国家级信息技术服务标准。
自传.6 小时前
数据库·软考高级·系统架构师·索引·案例分析·2026软考·软考系统架构师
B 站更新|软考架构师案例篇・数据库篇第 1-2 集上线|数据库规范化|索引视图物化视图真题精讲软考高级系统架构师案例分析,数据库板块是每年必考大题,分值稳定、考点套路清晰,把基础概念吃透,拿分性价比极高。
jnrjian6 小时前
数据库
Oracle 没有drop any job 只需要create any job Session_PrivsOracle里删除Job并不是用 DROP ANY JOB,而是通过 ‌DBMS_SCHEDULER.DROP_JOB‌ 这个包过程来完成的,你不需要那个系统权限。