数据监测

东莞市云毅网络有限公司11 天前
python·sqlite·自动化运维·geo·数据监测
客服记录里的问句怎么变成知识库条目:意图聚类的 Python 实现上千条客户问句摊在表格里,看着每条都不一样,去掉说法差异之后往往只剩一百多个意思。「质保期多久」「这个保修几年」「出问题能免费换吗」说的是同一件事。知识库需要的不是原始问句,而是意图:一个意图配一条标准问、一条答案、一组别名说法。原始问句直接入库,检索时同一条答复会被三种表述各自命中,答案还不一定一致。
东莞市云毅网络有限公司16 天前
python·sqlite·自动化运维·geo·数据监测
结构化标注缺失怎么查:JSON-LD抽取与每日巡检脚本实现页面正文之外还有一层机器可读的声明:主体名称、地址、营业时间、产品参数、资质有效期。这一层通常由 JSON-LD、Microdata 与 Open Graph 三套写法承载,其中 JSON-LD 因为不改视觉结构、可以独立放在
东莞市云毅网络有限公司19 天前
python·sqlite·自动化运维·geo·数据监测
企业资料时效性判定:Last-Modified、正文日期与版本字段三路交叉做企业文档库时,"内容过期"是比"内容缺失"更难处理的一类问题。缺失能被查出,过期看起来完全正常——页面在、文字通顺、参数齐全,只是说的是三年前的情况。
东莞市云毅网络有限公司1 个月前
python·sqlite·自动化运维·geo·数据监测
PDF 表格抽取的三条技术路线对比:规则、库解析与版面识别企业文档处理绕不开 PDF 表格。参数表、报价单、检测报告、对账单,多数以 PDF 形式留存,而下游系统需要的是结构化字段。这篇文章把实际用过的三条路线摊开对比:规则/文本坐标法、PDF 库解析法、版面识别法,并给出选型判据与可运行的最小实现。
东莞市云毅网络有限公司1 个月前
python·sqlite·自动化运维·geo·数据监测
用标准库做网页正文抽取:从 HTML 到结构化字段的轻量实现把公开网页整理成结构化语料,是知识库、检索和问答类项目的前置步骤。可用的方案很多:成熟的正文抽取库、无头浏览器、第三方解析服务。但在内网、离线或需要审计的场景里,引入外部依赖往往比写一份小实现更麻烦。
东莞市云毅网络有限公司1 个月前
python·sqlite·自动化运维·geo·数据监测
用 SQLite FTS5 给企业知识库做问答检索原型:中文二元切分与 BM25 排序企业知识库的检索效果,往往决定了整套系统能不能被真正用起来。上线前想验证"资料这么切、这么搜,能不能找到对的内容",不需要先搭一套向量库,用 Python 自带的 sqlite3 加 FTS5 就能跑出一个可量化评测的原型。本文给出完整实现:建表、中文切分、索引、查询排序,以及一个最小评测集的命中率测算。
我是有底线的