自然语言NLP的基础处理

NLP基本处理从句子的情感分析、实体与实体直接的关系,句子结构来分析

情感分析

1.句子的情感分析找出句子表达的是正面、负面还是中性的情感。

情感分析的影响因素:

  1. 词语顺序:词语的顺序可以影响句子的整体情感。例如,"我喜欢你" 和 "你不喜欢我" 虽然包含相同的词语,但表达的情感截然不同。

  2. 上下文:上下文信息对于情感分析至关重要。例如,"他今天很好" 在不同的上下文中可能表达不同的情感。

  3. 情感修饰语:情感修饰语可以增强或减弱句子的情感强度。例如,"非常" 或 "有点" 这样的词可以改变情感的强度。

  4. 否定词:否定词的使用可以改变句子的情感方向。例如,"我不喜欢这部电影" 表达了负面的情感,而 "我喜欢这部电影" 则表达了正面的情感

关系

2.NLP任务中的实体标注和实体间关系标注

  1. 实体标注:标注文本中的关键实体,如人名、地名、组织名、时间等。

  2. 关系标注:标注实体之间的特定关系,如主谓关系、动宾关系等。

  3. 事件标注:标注文本中的事件,并标注事件的相关参与者(如执行者、受影响者等)

结构

3.词性标注(Part-of-Speech Tagging,简称 POS Tagging)是一种自然语言处理技术,其目的是为句子中的每个单词(或词组)确定其在语法结构中的类别,即词性。词性标注的结果通常是一个包含词和词性标签的列表,例如:"我(代词)","是(动词)","一个(数词)","好人(名词)"。

文本标注工具:BRAT(Browser-based Annotation Tool)是一款开源的文本标注软件

BRAT 的特点包括:

  • 浏览器端运行:无需安装额外的软件,只需通过浏览器即可使用。
  • 实时标注:标注者可以实时看到标注结果,并且可以与他人协作。
  • 标注历史记录:可以查看和恢复之前的标注版本。
  • 多种标注任务支持:可以定义多种标注任务,并支持自定义标注模板。
  • 标注导出:可以将标注结果导出为多种格式,如CoNLL、BIOES等。
相关推荐
PFFstronger12 小时前
AI到底如何生成测试用例
人工智能
LHX sir12 小时前
医疗设备外设多、协议杂?HubPort 让出厂设备自带 AI
人工智能·物联网·医疗设备·设备智能化
chuan.bai12 小时前
Java RAG 实战附录:qwen3 与 bge-m3 模型切换指南
java·人工智能·算法
武子康12 小时前
Pi Extension 写完不等于可用:从类型检查到真实 Runtime 的证据阶梯
人工智能·llm·agent
润乾软件12 小时前
如何给已有报表系统增加 AI 语言查询能力——AI 赋能数据分析技术探讨与实践
人工智能·chatbi
微硬创新12 小时前
不用换设备,也能接入智能系统:耐达讯自动化NY-B801网关的神奇功效
人工智能·网络协议·自动化·信息与通信
Elastic 中国社区官方博客12 小时前
Elasticsearch:什么是向量数据库?
大数据·运维·数据库·人工智能·elasticsearch·搜索引擎·ai
LHX sir13 小时前
MCP 协议是什么?HubPort 如何让设备被 AI 智能体调用
人工智能·物联网·ai智能体·mcp
jikemaoshiyanshi13 小时前
AI 训练 GPU 利用率偏低,如何通过云上高性能存储优化成本?AWS 基于 I/O 瓶颈分层选型
人工智能·云计算·aws