Exploring Large Language Models for Knowledge Graph Completion

本文是LLM系列文章,针对《Exploring Large Language Models for Knowledge Graph Completion》的翻译。

探索用于知识图谱补全的大型语言模型

  • 摘要
  • [1 引言](#1 引言)
  • [2 相关工作](#2 相关工作)
  • [3 方法](#3 方法)
  • [4 实验](#4 实验)
  • [5 结论](#5 结论)
  • 局限性

摘要

知识图谱在众多人工智能任务中发挥着至关重要的作用,但它们经常面临不完全性问题。在这项研究中,我们探索利用大型语言模型(LLM)来补全知识图谱。我们将知识图谱中的三元组视为文本序列,并引入了一个名为知识图谱LLM(KGLLM)的创新框架来对这些三元组进行建模。我们的技术使用三元组的实体和关系描述作为提示,并利用响应进行预测。在各种基准知识图谱上的实验表明,我们的方法在三重分类和关系预测等任务中取得了最先进的性能。我们还发现,微调相对较小的模型(例如,LLaMA-7B、ChatGLM6B)的性能优于最近的ChatGPT和GPT-4。

1 引言

2 相关工作

3 方法

4 实验

5 结论

在这项工作中,我们提出了一种新的KG补全方法,称为KG-LLM。我们的方法在KG补全任务(如三重分类和关系预测)中获得了最先进的性能。对于未来的工作,我们计划将我们的KG-LLM作为一个知识增强的语言模型应用于其他NLP任务,并结合KGs的结构信息。此外,我们将探索更有效的LLM的提示工程和上下文指令。

局限性

尽管我们的方法在使用LLM补全KG方面已经证明了有希望的结果,但它目前缺乏处理缺乏实体和关系的文本名称或描述的KG的能力。此外,我们还没有充分利用KG结构信息,这有可能显著改善结果,特别是在实体预测任务中。

相关推荐
划水的code搬运工小李几秒前
EVO评估数据导出在origin中绘制
人工智能
Clarence Liu几秒前
机器学习(5) 梯度下降
人工智能·机器学习
kisshuan123962 分钟前
电信杆塔类型识别与分类_fovea_r101_fpn_4xb4-2x_coco模型详解_模型训练与验证_通俗易懂!入门必看系列!
人工智能·目标跟踪·分类
子午3 分钟前
【2026原创】动物识别系统~Python+深度学习+人工智能+模型训练+图像识别
人工智能·python·深度学习
o_insist8 分钟前
LangChain1.0 实现 PDF 文档向量检索全流程
人工智能·python·langchain
OpenMiniServer11 分钟前
AI + GitLab + VSCode:下一代开发工作流的革命性集成
人工智能·vscode·gitlab
脑洞AI食验员13 分钟前
智能体来了:用异常与文件处理守住代码底线
人工智能·python
摘星观月17 分钟前
【三维重建2】TCPFormer以及NeRF相关SOTA方法
人工智能·深度学习
shangjian00717 分钟前
AI大模型-机器学习-分类
人工智能·机器学习·分类
Tiny_React19 分钟前
使用 Claude Code Skills 模拟的视频生成流程
人工智能·音视频开发·vibecoding