技术栈
词嵌入
Lee_jerome
2 天前
pytorch
·
rnn
·
深度学习
·
gru
·
词嵌入
·
情感分析
·
imdb
python神经网络编程入门(二十七)——RNN IMBD搭建情感分类器与基础训练
前两章一直在"备菜":第 12 章把文字变成整数,第 13 章把长短不一的影评装进 (50000,500)(50000, 500)(50000,500) 的统一模具。数据洗得干干净净,词表、批次、掩码都备好了。可光有食材摆着,成不了菜——得生火、下锅、翻炒。
qq_28372005
3 个月前
python
·
算法
·
词嵌入
·
调优
Embedding 调优实战技巧:从原理到落地,打造高精度向量检索
📝 本章学习目标:本章聚焦 RAG 系统性能瓶颈核心 ——Embedding 调优,从底层原理、模型选择、分块策略、参数精调、进阶优化、全链路实战六大维度,手把手带你掌握可落地的 Embedding 调优技巧,彻底解决检索不准、语义偏差、幻觉严重等核心问题。
一粒马豆
5 个月前
python
·
平面
·
数据可视化
·
词嵌入
·
降维
·
chromadb
如何在二维平面内同时体现系列词汇的词频和相关性?
通过二维平面内的距离体现词与词的相关性,通过词汇文本颜色的色值体现词汇的词频,也可以通过词汇文本的字体大小来体现词频信息,
童话名剑
6 个月前
人工智能
·
深度学习
·
word2vec
·
词嵌入
·
负采样
·
嵌入矩阵
·
glove算法
训练词嵌入(吴恩达深度学习笔记)
目录1.嵌入矩阵E(1)简介(2)学习词嵌入(复杂/早期方式)(3)学习词嵌入方式2.Word2Vec
童话名剑
6 个月前
人工智能
·
深度学习
·
机器学习
·
自然语言处理
·
nlp
·
词嵌入
自然语言处理(吴恩达深度学习笔记)
目录1.词表示 / 词表征(1)引言2.词嵌入(word embeddings)(1)简介(2)t-SNE算法
问道飞鱼
7 个月前
word
·
embedding
·
词嵌入
【大模型学习】词嵌入(Word Embedding)深度解析:从符号到向量的语义映射
核心洞见:词嵌入的本质是将离散的符号空间映射到连续的向量空间,使得语义相似的词在向量空间中距离相近。这突破了传统NLP中"词袋模型"的局限,为深度学习模型理解语言提供了数学基础。
nju_spy
7 个月前
深度学习
·
自然语言处理
·
预训练模型
·
word2vec
·
glove
·
词嵌入
·
文本表示学习
动手学深度学习 - NLP 词嵌入全解析:从 Word2Vec/GloVe 到 FastText/BPE 与 BERT
本文系统梳理 NLP 核心的词嵌入技术全体系,从基础静态词嵌入到进阶动态上下文嵌入完整讲解。首先详解 Word2Vec 的 Skip-Gram 与 CBOW 模型原理、近似训练策略及三国演义中文实战;
TracyCoder123
8 个月前
人工智能
·
语言模型
·
自然语言处理
·
n-gram
·
词嵌入
·
bag-of-words
语言模型基础技术的开端:N-Gram与Bag-of-words详解
在自然语言处理(NLP)的发展历程中,基础语言模型是构建复杂任务的基石。无论是早期的文本分类、机器翻译,还是如今大模型的预训练,都能看到N-Gram模型和Bag-of-words词袋模型的影子。本文将从这两个经典模型出发,深入剖析其核心技术原理、相关支撑技术及适用场景,为理解更复杂的语言模型奠定基础。
hudawei996
8 个月前
人工智能
·
ai
·
自然语言处理
·
词嵌入
·
word embedding
·
词向量
·
语义理解
词嵌入中语料库矩阵和句子矩阵是怎样的?
词语是不能进行计算的,要理解词语,就必须转化成数字,向量可以表示多个词语之间的关系,离得近就是相似等不同的关系。
会写代码的饭桶
1 年前
rnn
·
transformer
·
词嵌入
·
mlp
·
反向传播
·
神经网络基础
Transformers 学习入门:前置知识补漏
在学习 Transformers 之前,打好神经网络和自然语言处理的基础至关重要。本文整理了需要掌握的核心前置知识,用通俗的例子帮你快速理解复杂概念,为后续学习铺平道路。
一粒马豆
1 年前
python
·
embedding
·
chroma
·
词嵌入
·
hugging face
·
词向量
·
chromadb
chromadb使用hugging face模型时利用镜像网站下载注意事项
chromadb默认使用sentence-transformers/all-MiniLM-L6-v2的词嵌入(词向量)模型,如果在程序首次运行时,collection的add或query操作时如果没有指定embeddings或query_embeddings,程序会自动下载相关嵌入向量模型,但是由于默认hugging face后端网络下载速度常常非常慢,所以需要指定镜像网站以加快模型下载速度。
Blossom.118
1 年前
人工智能
·
深度学习
·
机器学习
·
自然语言处理
·
集成学习
·
机器翻译
·
词嵌入
机器学习在自然语言处理中的应用与实践
引言 自然语言处理(Natural Language Processing,NLP)是人工智能领域的一个重要分支,旨在使计算机能够理解、生成和处理人类语言。随着机器学习技术的不断发展,NLP领域取得了显著的进展。机器学习为自然语言处理提供了强大的工具,使得计算机能够从大量文本数据中自动学习语言模式和规律。本文将探讨机器学习在自然语言处理中的应用现状、技术原理以及未来的发展趋势。 机器学习在自然语言处理中的应用 1. 文本分类 文本分类是自然语言处理中的一个经典任务,其目标是将文本分配到预定义的类别中。机器
終不似少年遊*
1 年前
人工智能
·
深度学习
·
nlp
·
机器翻译
·
词嵌入
词向量与词嵌入
目录Word2Vec原理连续词袋模型(CBOW)跳字模型(Skip-Gram)GloveFastText
大模型铲屎官
2 年前
人工智能
·
pytorch
·
自然语言处理
·
大模型
·
nlp
·
词嵌入
·
文本张量表示
深入NLP核心技术:文本张量表示与词嵌入全面解析
01-中文NLP入门必备:全面解析分词、命名实体识别与词性标注(附详细实战案例) 02-深入NLP核心技术:文本张量表示与词嵌入全面解析
胡牧之.
2 年前
矩阵
·
tf-idf
·
svd
·
词嵌入
·
vsm
词嵌入(一):基于矩阵分解的静态词嵌入(VSM、TF-IDF、SVD)
在Transformer中使用了词嵌入层,下文将先从几种直观的思路出发,说明其中的不足,然后提出一个理想的Word Representation应该需要满足哪些要求,将如今主要使用的词嵌入方法分为静态和动态进行说明,介绍实现的不同思路。 此处不讨论分词策略,仅讨论不同的词向量构建方法。
星辰漫步之LLM
2 年前
自然语言处理
·
llm
·
大语言模型
·
词嵌入
Self-attention与Word2Vec
Self-attention(自注意力)和 Word2Vec 是两种不同的词嵌入技术,用于将单词映射到低维向量空间。它们之间的区别:
deephub
2 年前
人工智能
·
深度学习
·
自然语言处理
·
词嵌入
NLP中的嵌入和距离度量
本文将深入研究嵌入、矢量数据库和各种距离度量的概念,并提供示例和演示代码。嵌入是连续向量空间中对象、单词或实体的数值表示。在NLP中,词嵌入捕获词之间的语义关系,使算法能够更好地理解文本的上下文和含义。
微学AI
3 年前
人工智能
·
自然语言处理
·
nlp
·
词嵌入
人工智能任务1-【NLP系列】句子嵌入的应用与多模型实现方式
大家好,我是微学AI,今天给大家介绍一下人工智能任务1-【NLP系列】句子嵌入的应用与多模型实现方式。句子嵌入是将句子映射到一个固定维度的向量表示形式,它在自然语言处理(NLP)中有着广泛的应用。通过将句子转化为向量表示,可以使得计算机能够更好地理解和处理文本数据。
我是有底线的