自然语言处理基础

自然语言

自然语言处理是人工智能能够通过图灵测试的重要工具。

自然语言处理基本的任务和应用

词性标注:把每句话的各个单词的词性标注出来,例如:形容词、名词、动词

named entity recognition命名实体的识别:识别哪些单词是真实世界中的实体,例如:人名、地名、机构名、时间等

co-reference共指消解:句子中的代词和前面哪个实体是指向的现实世界中的同一个实体

basic dependencies:依赖关系,例如:句子中的成分,互相之间的句法关系;依存关系。

  • 不同语种的区别
    中文的自动分词:把中文里面的一句话,词与词之间的空格标注出来
  • 应用
    搜索引擎(谷歌)
    知识图谱(谷歌)
    machine reading
    personal assistant
    machine translation
    sentiment analysis and option mining
    computational social science
相关推荐
火山引擎开发者社区4 小时前
七夕漫谈|向量检索界的超强 CP:DiskANN 铺路,RaBitQ 加速,又准又快还能省
人工智能
孙启超6 小时前
【大模型应用开发】LLM 到底是什么,以及它是怎么训练的
人工智能·lora·llm·微调·sft·token·rlhf
新知图书7 小时前
7.1 需求分析与规划 《AI Agent智能体开发实践》
人工智能·agent·ai agent·智能体
clorinda7 小时前
机器学习文本分类入门:从数据清洗到中文评论词向量转换
人工智能
小宋10217 小时前
Dify 知识库实战:从 PDF 导入到带引用回答,完整搭建企业问答助手
人工智能·ai编程
用户938515635078 小时前
从Vibe Coding到SDD:规范驱动开发如何拯救AI编程失控
人工智能
蓝速科技9 小时前
蓝速科技桌面 AI 双屏翻译机:开放安卓系统商用价值解析
人工智能·科技
博、、9 小时前
社区家政平台开发实战指南:从需求分析到系统部署全流程解析
人工智能·数据挖掘·需求分析
Python私教9 小时前
别急着加 llms.txt:企业官网面向 AI 搜索的工程清单
前端·人工智能·seo
Tokenge9 小时前
AI 前沿日报|2026.08.19:模型安全按下减速键,智能体进入“可控落地”新阶段
人工智能·安全