文本摘要是从一段长文本中提取出最重要的信息,并生成一个简短而有意义的摘要。这个过程可以分为两种主要方法:
抽取式摘要(Extractive Summarization):从原文中直接提取出关键句子或段落,组成摘要。这种方法不会改变原文的内容,只是选择了最能代表文章主题的部分。
- 无监督:Lead,Centroid,Cluster,TextRank
- 有监督:R2N2,NeuralSum,SummaRuNNer,BertSum
生成式摘要(Abstractive Summarization):这种方法通过理解原文内容,然后用自己的语言生成一个简短的总结。生成式摘要可能包含与原文不同的词语或句子结构,但它依然能够传达原文的核心信息。Seq2seq经典架构:优点------不限于原文自由生成摘要、摘要展示了文本的关键信息;缺点------容易产生重复
PGN(Pointer-Generator Network)架构:使用生成概率进行取舍,要么从词汇表生成一个单词,要么从原文本复制一个单词,相对减少了摘要重复问题
评估方法:
- BLEU(Bilingual evaluation understudy):主要计算精确度
- ROUGE(Recall-Oriented Understudy for Gisting Evaluation:基于召回率,评价标准------ROUGE-N和ROUGE-L
文本摘要简介
好好学习Py2024-08-16 16:30
相关推荐
数据小爬虫@2 小时前
深入解析:使用 Python 爬虫获取苏宁商品详情健胃消食片片片片2 小时前
Python爬虫技术:高效数据收集与深度挖掘ℳ₯㎕ddzོꦿ࿐5 小时前
解决Python 在 Flask 开发模式下定时任务启动两次的问题CodeClimb5 小时前
【华为OD-E卷 - 第k个排列 100分(python、java、c++、js、c)】一水鉴天5 小时前
为AI聊天工具添加一个知识系统 之63 详细设计 之4:AI操作系统 之2 智能合约Channing Lewis5 小时前
什么是 Flask 的蓝图(Blueprint)B站计算机毕业设计超人5 小时前
计算机毕业设计hadoop+spark股票基金推荐系统 股票基金预测系统 股票基金可视化系统 股票基金数据分析 股票基金大数据 股票基金爬虫觅远6 小时前
python+playwright自动化测试(四):元素操作(键盘鼠标事件)、文件上传ghostwritten7 小时前
Python FastAPI 实战应用指南CM莫问7 小时前
python实战(十五)——中文手写体数字图像CNN分类