Exploring Large Language Models for Knowledge Graph Completion

本文是LLM系列文章,针对《Exploring Large Language Models for Knowledge Graph Completion》的翻译。

探索用于知识图谱补全的大型语言模型

  • 摘要
  • [1 引言](#1 引言)
  • [2 相关工作](#2 相关工作)
  • [3 方法](#3 方法)
  • [4 实验](#4 实验)
  • [5 结论](#5 结论)
  • 局限性

摘要

知识图谱在众多人工智能任务中发挥着至关重要的作用,但它们经常面临不完全性问题。在这项研究中,我们探索利用大型语言模型(LLM)来补全知识图谱。我们将知识图谱中的三元组视为文本序列,并引入了一个名为知识图谱LLM(KGLLM)的创新框架来对这些三元组进行建模。我们的技术使用三元组的实体和关系描述作为提示,并利用响应进行预测。在各种基准知识图谱上的实验表明,我们的方法在三重分类和关系预测等任务中取得了最先进的性能。我们还发现,微调相对较小的模型(例如,LLaMA-7B、ChatGLM6B)的性能优于最近的ChatGPT和GPT-4。

1 引言

2 相关工作

3 方法

4 实验

5 结论

在这项工作中,我们提出了一种新的KG补全方法,称为KG-LLM。我们的方法在KG补全任务(如三重分类和关系预测)中获得了最先进的性能。对于未来的工作,我们计划将我们的KG-LLM作为一个知识增强的语言模型应用于其他NLP任务,并结合KGs的结构信息。此外,我们将探索更有效的LLM的提示工程和上下文指令。

局限性

尽管我们的方法在使用LLM补全KG方面已经证明了有希望的结果,但它目前缺乏处理缺乏实体和关系的文本名称或描述的KG的能力。此外,我们还没有充分利用KG结构信息,这有可能显著改善结果,特别是在实体预测任务中。

相关推荐
AI行业说16 小时前
美国布艺市场全品类生产解析——誉财YC-18-M8045四轴模板机的多品种柔性制造方案
大数据·人工智能·自动化·智能家居·自动化缝纫
qingyulee16 小时前
CLAUDE使用——vibe_coding
人工智能·arcgis
齐齐大魔王16 小时前
机器学习(五)
人工智能·机器学习
小二·16 小时前
七家手机厂商通过备案:苹果/华为/OPPO/vivo/小米/三星/努比亚端侧AI大模型技术深度解析
人工智能·华为·智能手机
ShallWeL16 小时前
【机器学习】(24)—— 神经网络激活函数
人工智能·神经网络·机器学习
威联通安全存储16 小时前
TS-h1677AXU-RP在工程机械机器人弧焊中的部署
大数据·人工智能·python·机器人
IT_陈寒16 小时前
Java线程池踩了个坑,任务居然默默消失了
前端·人工智能·后端
科技之门16 小时前
存量破局・价值新生 高格办公探寻办公资产全新增长曲线
大数据·人工智能
数据皮皮侠AI16 小时前
退市监督数据(2000-2024)
大数据·人工智能·笔记·机器学习·回归