开源数据发现平台：Amundsen Search Service 搜索服务

Amundsen 是一个数据发现和元数据引擎，旨在提高数据分析师、数据科学家和工程师与数据交互时的生产力。目前，它通过索引数据资源（表格、仪表板、数据流等）并基于使用模式（例如，查询频率高的表格会优先于查询频率低的表格）提供页面排名式的搜索功能来实现这一目标。您可以将其视为数据版的 Google 搜索。该项目以挪威探险家罗尔德·阿蒙森 (Roald Amundsen) 的名字命名，他是第一个发现南极的人。

Amundsen Search Service

Amundsen 搜索服务

搜索和文档更新的最新端点是 /v2/search 和 /v2/document。此 API 仅可与代理类 ElaticsearchProxyV2_1 配合使用。请参考此搜索服务更新文档了解最新变更。

Amundsen 搜索服务提供 RESTful API，负责元数据搜索功能。该服务主要利用 Elasticsearch 实现搜索能力。

默认搜索以下四个索引：

table_search_index_v2_1
user_search_index_v2_1
dashboard_search_index_v2_1
feature_search_index_v2_1

有关 Amundsen 及其他服务的信息，请参阅README.md。另请查看我们的快速入门指南（含虚拟数据设置）和架构概览。

要求

Python >= 3.8
Elasticsearch 支持版本：
- 7.x
- 8.0.0

文档

https://www.amundsen.io/amundsen

从发行版启动搜索服务

bash 复制代码

$ venv_path=[虚拟环境路径]
$ python3 -m venv $venv_path
$ source $venv_path/bin/activate
$ python3 setup.py install
$ python3 search_service/search_wsgi.py

# 另启终端验证服务状态：
$ curl -v http://localhost:5001/healthcheck

从源码启动搜索服务

bash 复制代码

$ git clone https://github.com/amundsen-io/amundsen.git
$ cd search
$ venv_path=[虚拟环境路径]
$ python3 -m venv $venv_path
$ source $venv_path/bin/activate
$ pip3 install -e ".[all]" .
$ python3 search_service/search_wsgi.py

# 另启终端验证服务状态：
$ curl -v http://localhost:5001/healthcheck

通过 Docker 启动服务

bash 复制代码

$ docker pull amundsendev/amundsen-search:latest
$ docker run -p 5001:5001 amundsendev/amundsen-search
# 生产环境替代方案（使用 Gunicorn）：
$ ## docker run -p 5001:5001 amundsendev/amundsen-search gunicorn --bind 0.0.0.0:5001 search_service.search_wsgi

# 另启终端验证服务状态：
$ curl -v http://localhost:5001/healthcheck

生产环境

默认 Flask 使用 Werkzeug 开发服务器，生产环境应使用 Gunicorn 等生产级服务器。

bash 复制代码

$ pip3 install gunicorn
$ gunicorn search_service.search_wsgi

# 另启终端验证服务状态：
$ curl -v http://localhost:8000/healthcheck

更多配置详见Gunicorn 文档。

非本地环境配置

默认搜索服务使用LocalConfig连接本地 Elasticsearch。如需使用其他终端节点，需创建自定义Config类，并通过环境变量：SEARCH_SVC_CONFIG_MODULE_CLASS引用。

例如创建生产环境配置：

继承 Config 类创建 ProdConfig
置于 search_service.config 模块
设置环境变量：
SEARCH_SVC_CONFIG_MODULE_CLASS=search_service.config.ProdConfig

更多配置加载机制参见 Flask 文档。

开发者指南

代码规范

PEP 8：遵循 Python 代码风格指南
类型提示：使用类型标注增强可读性

API 文档

基于 OpenApi 3.0.2 的 Swagger 文档通过 Flasgger 生成。API 变更时请同步更新文档。访问 localhost:5001/apidocs/ 查看文档（当前仅支持本地配置环境）。

风险提示与免责声明

本文内容基于公开信息研究整理，不构成任何形式的投资建议。历史表现不应作为未来收益保证，市场存在不可预见的波动风险。投资者需结合自身财务状况及风险承受能力独立决策，并自行承担交易结果。作者及发布方不对任何依据本文操作导致的损失承担法律责任。市场有风险，投资须谨慎。