自然语言NLP的基础处理

NLP基本处理从句子的情感分析、实体与实体直接的关系,句子结构来分析

情感分析

1.句子的情感分析找出句子表达的是正面、负面还是中性的情感。

情感分析的影响因素:

  1. 词语顺序:词语的顺序可以影响句子的整体情感。例如,"我喜欢你" 和 "你不喜欢我" 虽然包含相同的词语,但表达的情感截然不同。

  2. 上下文:上下文信息对于情感分析至关重要。例如,"他今天很好" 在不同的上下文中可能表达不同的情感。

  3. 情感修饰语:情感修饰语可以增强或减弱句子的情感强度。例如,"非常" 或 "有点" 这样的词可以改变情感的强度。

  4. 否定词:否定词的使用可以改变句子的情感方向。例如,"我不喜欢这部电影" 表达了负面的情感,而 "我喜欢这部电影" 则表达了正面的情感

关系

2.NLP任务中的实体标注和实体间关系标注

  1. 实体标注:标注文本中的关键实体,如人名、地名、组织名、时间等。

  2. 关系标注:标注实体之间的特定关系,如主谓关系、动宾关系等。

  3. 事件标注:标注文本中的事件,并标注事件的相关参与者(如执行者、受影响者等)

结构

3.词性标注(Part-of-Speech Tagging,简称 POS Tagging)是一种自然语言处理技术,其目的是为句子中的每个单词(或词组)确定其在语法结构中的类别,即词性。词性标注的结果通常是一个包含词和词性标签的列表,例如:"我(代词)","是(动词)","一个(数词)","好人(名词)"。

文本标注工具:BRAT(Browser-based Annotation Tool)是一款开源的文本标注软件

BRAT 的特点包括:

  • 浏览器端运行:无需安装额外的软件,只需通过浏览器即可使用。
  • 实时标注:标注者可以实时看到标注结果,并且可以与他人协作。
  • 标注历史记录:可以查看和恢复之前的标注版本。
  • 多种标注任务支持:可以定义多种标注任务,并支持自定义标注模板。
  • 标注导出:可以将标注结果导出为多种格式,如CoNLL、BIOES等。
相关推荐
G.E.N.4 分钟前
开源!RAG竞技场(2):标准RAG算法
大数据·人工智能·深度学习·神经网络·算法·llm·rag
西西弗Sisyphus13 分钟前
如果让计算机理解人类语言- Word2Vec(Word to Vector,2013)
人工智能·word·word2vec
前端双越老师37 分钟前
30 行代码 langChain.js 开发你的第一个 Agent
人工智能·node.js·agent
东坡肘子1 小时前
高温与奇怪的天象 | 肘子的 Swift 周报 #092
人工智能·swiftui·swift
KaneLogger1 小时前
视频转文字,别再反复拖进度条了
前端·javascript·人工智能
度假的小鱼1 小时前
从 “人工编码“ 到 “AI 协同“:大模型如何重塑软件开发的效率与范式
人工智能
zm-v-159304339862 小时前
ArcGIS 水文分析升级:基于深度学习的流域洪水演进过程模拟
人工智能·深度学习·arcgis
拓端研究室3 小时前
视频讲解|核密度估计朴素贝叶斯:业务数据分类—从理论到实践
人工智能·分类·数据挖掘
灵智工坊LingzhiAI3 小时前
人体坐姿检测系统项目教程(YOLO11+PyTorch+可视化)
人工智能·pytorch·python
昨日之日20063 小时前
Video Background Remover V3版 - AI视频一键抠像/视频换背景 支持50系显卡 一键整合包下载
人工智能·音视频