【boost_search搜索引擎】1.获取数据源

boost搜索引擎

1、项目介绍

boost_search项目和百度那种不一样,百度是全站搜索,而boost_search是一个站内搜索。而项目的宏观上实现思路就如同图上的思路。

2、获取数据源

我们要实现一个站内搜索,我们就要有这个网站的数据源,我们可以从boost.org官网获取它的数据源

我们点击下载,进入到这个界面,直接下载它的压缩包

下载后之后,我们将它存到我们的Linux服务器上,这里我们可以通过
rz -E 命令将我们Windows上的文件传输到Xshell上,这里我选择创建一个data目录,将我们的boost压缩包解压的内容放进去。

这里如果出现乱码,我们就只用rz 命令,

  • 然后我们使用: tar -xzf boost_1_84_0.tar.gz 命令进行解压
  • 然后我们进入boost目录/doc/html,
    这里面的就是我们要的数据源,(因为我们最终搜索出来的是个网站,所以我们只需要它的html即可)我们将这个目录下的文件拷贝进我们的data目录下即可
  • 我们用cp -rf boost_1_84_0/doc/html/* html/拷贝进我的html目录下
    (html是我在data目录下提前创建好的目录)
    这样我们就拿到了我们制作搜索引擎 需要的数据源
相关推荐
坐吃山猪17 小时前
ES08-ES使用IK分词器
大数据·elasticsearch·搜索引擎
Hazenix1 天前
推荐系统如何从海量内容中找到候选?从漏斗架构到多路召回
搜索引擎·推荐算法
Elastic 中国社区官方博客1 天前
一条 ES|QL 查询,涵盖365天的审计日志:在热数据和可搜索快照上执行相同的搜索
大数据·运维·服务器·elasticsearch·搜索引擎·全文检索
LB9678162 天前
AI获客与GEO优化实战:GEO生成式AI搜索如何提升AI搜索引擎排名
搜索引擎·ai搜索引擎·geo优化·ai推荐·ai获客·geo生成式ai搜索
zyseo82 天前
谷歌SEO 站点地图优化实战:sitemap 是索引候选清单的运营工具
网络·数据库·经验分享·笔记·搜索引擎
沐曦股份MetaX2 天前
沐曦股份携手FlagOS完成面壁智能MiniCPM-V4.7端侧模型Day 0适配
科技·搜索引擎·自然语言处理·开源·开源软件·gpu算力
Aoiner2 天前
模型部署笔记
大数据·elasticsearch·搜索引擎
数据皮皮侠2 天前
中国产品级二氧化碳排放数据集
大数据·人工智能·搜索引擎·智慧城市·制造
SelectDB技术团队2 天前
冷热分层从建到验:Storage Policy 创建、表级与分区级绑定、SHOW TABLETS 验证的完整命令
大数据·数据库·elasticsearch·搜索引擎·数据分析·apache doris·冷热分层
Elastic 中国社区官方博客3 天前
Kibana:创建包含时间序列图表的仪表板
大数据·elasticsearch·搜索引擎·信息可视化·全文检索·kibana