文本摘要是从一段长文本中提取出最重要的信息,并生成一个简短而有意义的摘要。这个过程可以分为两种主要方法:
抽取式摘要(Extractive Summarization):从原文中直接提取出关键句子或段落,组成摘要。这种方法不会改变原文的内容,只是选择了最能代表文章主题的部分。
- 无监督:Lead,Centroid,Cluster,TextRank
- 有监督:R2N2,NeuralSum,SummaRuNNer,BertSum
生成式摘要(Abstractive Summarization):这种方法通过理解原文内容,然后用自己的语言生成一个简短的总结。生成式摘要可能包含与原文不同的词语或句子结构,但它依然能够传达原文的核心信息。Seq2seq经典架构:优点------不限于原文自由生成摘要、摘要展示了文本的关键信息;缺点------容易产生重复
PGN(Pointer-Generator Network)架构:使用生成概率进行取舍,要么从词汇表生成一个单词,要么从原文本复制一个单词,相对减少了摘要重复问题
评估方法:
- BLEU(Bilingual evaluation understudy):主要计算精确度
- ROUGE(Recall-Oriented Understudy for Gisting Evaluation:基于召回率,评价标准------ROUGE-N和ROUGE-L
文本摘要简介
好好学习Py2024-08-16 16:30
相关推荐
Q463913493 小时前
线下销售复盘难落地,AI 会话设备能帮上啥忙XLYcmy3 小时前
京东 算法实习一面 下+手撕虎头金猫3 小时前
如何在群晖NAS上通过Docker部署CloudSaver?群晖部署CloudSaver教程|聚合资源搜索并实现远程访问从零开始学习人工智能3 小时前
WSL2部署CUDA12+cuDNN9踩坑实录:ONNX Runtime GPU推理环境搭建全流程m0_380743873 小时前
从零调用 Claude 教程min(a,b)4 小时前
学习第17天:Agent Memory 与 MCP 协议CodeBlog-star5 小时前
LLM安全实战:提示词注入与越狱攻击防御指南小柯南敲键盘5 小时前
电商图片翻译工具推荐,批量处理主图视频字幕,免费试用比高创意品牌策划设计6 小时前
零售卖场设计软件用CAD还是SketchUp还是酷家乐迷迭香yy8 小时前
行业板块轮动因子实战从板块资金到因子建模的本地化Python全流程