技术栈
bag-of-words
TracyCoder123
21 天前
人工智能
·
语言模型
·
自然语言处理
·
n-gram
·
词嵌入
·
bag-of-words
语言模型基础技术的开端：N-Gram与Bag-of-words详解
在自然语言处理（NLP）的发展历程中，基础语言模型是构建复杂任务的基石。无论是早期的文本分类、机器翻译，还是如今大模型的预训练，都能看到N-Gram模型和Bag-of-words词袋模型的影子。本文将从这两个经典模型出发，深入剖析其核心技术原理、相关支撑技术及适用场景，为理解更复杂的语言模型奠定基础。
脚踏实地的大梦想家
1 年前
人工智能
·
python
·
语言模型
·
自然语言处理
·
大模型
·
词袋模型
·
bag-of-words
【大模型基础】P2 Bag-of-Words
词袋模型，Bag-of-Words，是一种简单的文本表示方法，也是 NLP 中的一个经典模型。它将文本中的词看作一个个独立的个体，不考虑它们在句子中的顺序，只关心每个词出现的频次。
我是有底线的