基于 AI 的 Python 爬虫

✦ 支持 OPENAI、Gemini、Groq、本地 Ollama、Azure 等 LLM

✦ 只需传递 Prompt 和链接

注意:

调用 Ollama 模型,需要运行下方指令,拉取 embedding 模型:

ollama pull nomic-embed-text

问题:

似乎不能换成兼容 OpenAI 调用的 Kimi、DeepSeek 等。

用法

该模型是一个嵌入模型,这意味着它只能用于生成嵌入。

休息API

curl http://localhost:11434/api/embeddings -d '{

"model": "nomic-embed-text",

"prompt": "The sky is blue because of Rayleigh scattering"

}'

Python库

ollama.embeddings(model='nomic-embed-text', prompt='The sky is blue because of rayleigh scattering')

JavaScript 库

ollama.embeddings({ model: 'nomic-embed-text', prompt: 'The sky is blue because of rayleigh scattering' })

相关推荐
天远数科5 分钟前
零信任架构实战:基于天远全能消金报告构建自动化信贷评估网关
运维·人工智能·架构·自动化
云上先途19 分钟前
属性标注是什么?主要解决什么问题?
大数据·人工智能
罗西的思考23 分钟前
[Agent Memory / 强化学习] MemPO源码学习笔记 --- (2)--- 训练
人工智能·算法·机器学习
米小虾27 分钟前
LLM评测的失效与依赖感知聚合
人工智能·llm
幂律智能28 分钟前
不用逐站检索,AI 自动出具财产线索报告
人工智能
小马过河R42 分钟前
FDE 到底需要什么技术栈?从全栈工程到 AI 落地的复合能力
人工智能·engineering·harness·驾驭工程·fde·前沿部署工程师
威联通安全存储1 小时前
TS-h2287XU-RP 在家电制造总装与质检数据场景的部署
python·制造
后端小肥肠1 小时前
别再手动找对标了!做公众号漫画,这套工具从选题到发稿全覆盖
人工智能·vibecoding
米小虾1 小时前
GRPO 在长程 Agent 上为什么跑不动了:NVIDIA FlashREINFORCE 的"每个 prompt 只采一条"方案
人工智能
老金带你玩AI1 小时前
我怎么用 AI,同时写内容、做课程、开发产品
人工智能