nlp

2601_962077712 天前
python·nlp·transformers·spacy·新闻事件抽取
基于Python与NLP的新闻事件信息抽取实战:从NER到时空标准化1. 这篇文章真正要解决的问题如果你身为一名开发者, 或许已惯于从技术博客、官方文档以及Issue那里获取信息。然而你可曾思索过, 怎样在海量的、并非结构化的新闻文本里, 自动把关键事件、实体以及关系提取出来, 且将其转变为结构化的数据, 用以供后续的分析、预警或者知识图谱构建呢? 这可不单单是新闻编辑室的需求, 更是舆情监控、风险感知、智能客服甚至AI Agent理解现实世界动态的核心能力。
LlmCraft|大模型工程实践3 天前
人工智能·深度学习·nlp
08 预训练语言模型:BERT 与 GPT系列文章目录01 NLP入门:什么是自然语言处理 ✅02 文本预处理:从原始文本到干净语料 ✅03 文本向量化:词袋模型与 TF-IDF ✅
空堂与归4 天前
人工智能·rnn·神经网络·nlp
序列数据怎么喂给神经网络?用循环神经网络RNN拆开一个时间步关键词:RNN、循环神经网络、序列建模、PyTorch、隐藏状态、时序分类如果你之前的工作主要是图像分类、表格预测或推荐排序,第一次接触序列建模时,往往会下意识想把序列「拍平」成一个固定向量:把 100 个时间步、每步 8 维的特征,直接展开成 800 维 Dense 输入。但这条路在真实的序列任务里基本走不通,因为序列问题有三条硬约束。拍平思路本质上是在假设「每个特征维度都是独立的」,而序列里恰恰没有哪个维度是独立的——它们按时间彼此咬合。
空堂与归4 天前
人工智能·rnn·nlp·lstm
RNN记不住长序列怎么办?用 LSTM 三门一通道接旁路关键词:LSTM、门控循环单元、梯度消失、细胞状态、遗忘门偏置、序列建模、PyTorch适读人群:正在做时序分类、设备异常检测、对话意图识别等序列任务的 Python 工程师;以及想弄清「为什么 RNN 训练到一半准确率卡在随机基线」的 AI 应用开发者。
DevOpenClub5 天前
nlp
多语言内容审核如何避免误翻译:语种检测、纠错与情感分析编排多语言内容审核如何避免误翻译,真正困难的通常不是完成一次 API 调用,而是让结果可以校验、失败可以定位、后续能够回到原始证据。本文围绕“如何在翻译前识别语种,并把纠错、格式化和情感分析接入人工审核”给出一套可以直接落到任务状态和数据契约上的实现方式。
Jialu.6 天前
人工智能·pytorch·分类·微软·nlp·bert
中文 BERT 多任务分类项目:从模型结构到训练细节项目将评论分析拆成三个独立分类任务:投诉分流四分类、虚假评论二分类、广告骚扰二分类。每个任务使用自己的训练数据和分类头。
AIGC大时代6 天前
人工智能·chatgpt·nlp·aigc·论文·知网·学术规范
知网 AIGC 检测在罚什么:均匀句长、低指代、零口癖,并不等于「用过 ChatGPT」图:千笔-AIWritePaper · https://www.aiwritepaper.com答辩前一周,导师把检测截图丢进群里:「方法章整段黄了,你是不是整章贴生成器?」学生打开本地草稿,才发现那一章是按学院模板句改了三遍的手写稿。另一种常见场面更拧巴:真用过大模型起过提纲的同学,正文里塞满实验参数与失败记录,报告反而相对干净。这两种结果放在一起,说明同一件事:检测器在给文本的统计与文体指纹打分,并不是在查你的浏览器历史。
Jialu.6 天前
深度学习·nlp·bert
从 102M 到 34M:BERT 到 BiLSTM 的完整知识蒸馏实现BERT 语义能力强,但参数量约 102M,模型文件约 390MB。直接部署会带来较大的内存占用和推理成本。
LlmCraft|大模型工程实践6 天前
自然语言处理·nlp·tf-idf
03 文本向量化:词袋模型与 TF-IDF系列文章目录01 NLP入门:什么是自然语言处理 ✅02 文本预处理:从原始文本到干净语料 ✅03 文本向量化:词袋模型与 TF-IDF ✅
傲笑风7 天前
人工智能·python·自然语言处理·nlp·bert·openvino
【openvino】tinybert基于openvino服务化部署(四)与tinybert-mediapipe的文件夹结构完整一样,只有部分文件需要更改:其实配置文件config.json基本不变,只是改了name和base_path而已,其它保持不变
啊阿狸不会拉杆7 天前
人工智能·自然语言处理·nlp·easyui·智能体
《自然语言处理:基于大语言模型的方法》第1章 绪论 读书笔记1.1 自然语言处理的概念1.2 自然语言处理的难点1.3 自然语言处理任务体系1.3.1 任务层级1.3.2 任务类别
苏子寒8 天前
笔记·机器学习·ai·nlp·vllm
Nano-VLLM全代码解析笔记(10)-GemmaRMSNorm和MRoPE本节参考资料:VLLM源码Transformers源码(49 封私信) Qwen3.5 架构最全拆解:Linear Attention 源码配图解析、Gated DeltaRule 公式源码逻辑介绍、Full Attention与 MoE 模块算子流程解析 - 知乎
苏子寒14 天前
人工智能·笔记·python·机器学习·nlp·vllm
Nano-VLLM全代码解析笔记(2)-block_manager[1]Nano-VLLM全代码解析笔记(1)-sequence[2]Nano-VLLM全代码解析笔记(2)-block_manager
小女孩真可爱15 天前
人工智能·python·gpt·nlp
GPT(1)----------从零实现 GPT 模型以生成文本本文用于记录和学习GPT搭建,以及一个训练优化的技巧,对于基础知识需自行去补充。## 1. 概述本文档描述一个完整的 GPT (Generative Pre-trained Transformer) 语言模型实现。该实现对应 **GPT-2 Small(124M 参数)** 的标准结构,涵盖从 token 输入到生成文本的完整流程。
苏子寒16 天前
pytorch·笔记·python·机器学习·ai·nlp·vllm
Nano-VLLM全代码解析笔记(6)-embed_head和linear一些问题:[系列(1) 开篇](https://blog.csdn.net/xxx/article/details/xxxxxx) [系列(2) 核心原理](https://blog.csdn.net/xxx/article/details/xxxxxx) 🔗上一篇:[系列(1)开篇](https://blog.csdn.net/xxx/article/details/xxxxxx) 🔗下一篇:[系列(3)实战演练](https://blog.csdn.net/xxx/article/details/
uncle_ll23 天前
llm·nlp·llama·ollama·大模型微调
Llama 3 私有化落地全栈实战:从 Ollama 极速部署到 LLaMA Factory LoRA 定制微调在前沿生成式 AI 的落地应用中,开发者常面临两大工程痛点:本文将围绕开源大模型基座 Llama 3,提供一条“推理部署 + 轻量微调”的完整闭环方案:采用Ollama构建零门槛本地 API 服务,结合LLaMA Factory框架完成低算力消耗的 LoRA 参数高效微调(PEFT)。
墨心@23 天前
自然语言处理·nlp·agent·codex
阶段 1:一次模型调用对应代码:stage01_model.py |理解"模型服务端只产生事件流,不循环"这件事。把多次请求串成闭环的永远是本地代码——这是理解整个 Agent 架构的第一块基石。
阿图灵1 个月前
深度学习·gru·nlp·机器翻译·seq2seq
基于 GRU 的 Seq2Seq 中英机器翻译:从 Tatoeba 语料到 BLEU 0.195项目地址(Gitee):https://gitee.com/Touari/seq2seq_zh_en_translation.git 本文整合自项目《构建文档》与《技术文档》,既讲复现步骤,也讲设计原理。
网络工程小王1 个月前
人工智能·深度学习·自然语言处理·nlp·transformer
【HCIE-AI】4.NLP 核心任务与技术演进学习笔记NLP 的任务可以归纳为四大类:文本分类、序列标注、信息抽取、文本生成。 几乎所有实际应用(搜索引擎、客服机器人、翻译、写作助手)都是这四类的组合。