【boost_search搜索引擎】1.获取数据源

boost搜索引擎

1、项目介绍

boost_search项目和百度那种不一样,百度是全站搜索,而boost_search是一个站内搜索。而项目的宏观上实现思路就如同图上的思路。

2、获取数据源

我们要实现一个站内搜索,我们就要有这个网站的数据源,我们可以从boost.org官网获取它的数据源

我们点击下载,进入到这个界面,直接下载它的压缩包

下载后之后,我们将它存到我们的Linux服务器上,这里我们可以通过
rz -E 命令将我们Windows上的文件传输到Xshell上,这里我选择创建一个data目录,将我们的boost压缩包解压的内容放进去。

这里如果出现乱码,我们就只用rz 命令,

  • 然后我们使用: tar -xzf boost_1_84_0.tar.gz 命令进行解压
  • 然后我们进入boost目录/doc/html,
    这里面的就是我们要的数据源,(因为我们最终搜索出来的是个网站,所以我们只需要它的html即可)我们将这个目录下的文件拷贝进我们的data目录下即可
  • 我们用cp -rf boost_1_84_0/doc/html/* html/拷贝进我的html目录下
    (html是我在data目录下提前创建好的目录)
    这样我们就拿到了我们制作搜索引擎 需要的数据源
相关推荐
三水不滴6 小时前
Elasticsearch 生产环境全栈最佳实践:从架构设计到故障排查一站式落地指南
后端·elasticsearch·搜索引擎
weixin_448119946 小时前
Datawhale Obsidian智能体 202603作业1
大数据·elasticsearch·搜索引擎
达之云*驭影1 天前
告别“大龙虾”式内卷:LangGraph+PlayWright自动化玩转新媒体营销
搜索引擎·自动化·媒体
不想看见4041 天前
Git的工作原理和基本使用
大数据·elasticsearch·搜索引擎
爱敲代码的菜菜1 天前
【项目】基于正倒排索引的Java文档搜索引擎
java·开发语言·前端·javascript·搜索引擎·servlet
德育处主任Pro1 天前
『NAS』在群晖部署无广聚合搜索引擎-SearXNG
搜索引擎·nas
ℒℴѵℯ陆·离ꦿ໊ོﻬ°1 天前
Git误操作急救手册
大数据·elasticsearch·搜索引擎
放下华子我只抽RuiKe51 天前
数据炼金术:机器学习背后的“脏活”与特征工程
人工智能·深度学习·elasticsearch·机器学习·搜索引擎·自然语言处理·数据挖掘
Elastic 中国社区官方博客1 天前
使用 Azure SRE Agent 和 Elasticsearch 提升 SRE 生产力
大数据·人工智能·elasticsearch·microsoft·搜索引擎·云原生·azure
marteker2 天前
阳狮集团收购AI创意分析公司AdgeAI,用数据预测“什么内容会火”
人工智能·搜索引擎·百度