自然语言处理基础

自然语言

自然语言处理是人工智能能够通过图灵测试的重要工具。

自然语言处理基本的任务和应用

词性标注:把每句话的各个单词的词性标注出来,例如:形容词、名词、动词

named entity recognition命名实体的识别:识别哪些单词是真实世界中的实体,例如:人名、地名、机构名、时间等

co-reference共指消解:句子中的代词和前面哪个实体是指向的现实世界中的同一个实体

basic dependencies:依赖关系,例如:句子中的成分,互相之间的句法关系;依存关系。

  • 不同语种的区别
    中文的自动分词:把中文里面的一句话,词与词之间的空格标注出来
  • 应用
    搜索引擎(谷歌)
    知识图谱(谷歌)
    machine reading
    personal assistant
    machine translation
    sentiment analysis and option mining
    computational social science
相关推荐
qzhqbb1 小时前
基于统计方法的语言模型
人工智能·语言模型·easyui
冷眼看人间恩怨2 小时前
【话题讨论】AI大模型重塑软件开发:定义、应用、优势与挑战
人工智能·ai编程·软件开发
2401_883041082 小时前
新锐品牌电商代运营公司都有哪些?
大数据·人工智能
AI极客菌3 小时前
Controlnet作者新作IC-light V2:基于FLUX训练,支持处理风格化图像,细节远高于SD1.5。
人工智能·计算机视觉·ai作画·stable diffusion·aigc·flux·人工智能作画
阿_旭3 小时前
一文读懂| 自注意力与交叉注意力机制在计算机视觉中作用与基本原理
人工智能·深度学习·计算机视觉·cross-attention·self-attention
王哈哈^_^3 小时前
【数据集】【YOLO】【目标检测】交通事故识别数据集 8939 张,YOLO道路事故目标检测实战训练教程!
前端·人工智能·深度学习·yolo·目标检测·计算机视觉·pyqt
Power20246664 小时前
NLP论文速读|LongReward:基于AI反馈来提升长上下文大语言模型
人工智能·深度学习·机器学习·自然语言处理·nlp
数据猎手小k4 小时前
AIDOVECL数据集:包含超过15000张AI生成的车辆图像数据集,目的解决旨在解决眼水平分类和定位问题。
人工智能·分类·数据挖掘
好奇龙猫4 小时前
【学习AI-相关路程-mnist手写数字分类-win-硬件:windows-自我学习AI-实验步骤-全连接神经网络(BPnetwork)-操作流程(3) 】
人工智能·算法
沉下心来学鲁班4 小时前
复现LLM:带你从零认识语言模型
人工智能·语言模型