技术栈
nlp
2601_96207771
2 天前
python
·
nlp
·
transformers
·
spacy
·
新闻事件抽取
基于Python与NLP的新闻事件信息抽取实战:从NER到时空标准化
1. 这篇文章真正要解决的问题如果你身为一名开发者, 或许已惯于从技术博客、官方文档以及Issue那里获取信息。然而你可曾思索过, 怎样在海量的、并非结构化的新闻文本里, 自动把关键事件、实体以及关系提取出来, 且将其转变为结构化的数据, 用以供后续的分析、预警或者知识图谱构建呢? 这可不单单是新闻编辑室的需求, 更是舆情监控、风险感知、智能客服甚至AI Agent理解现实世界动态的核心能力。
LlmCraft|大模型工程实践
3 天前
人工智能
·
深度学习
·
nlp
08 预训练语言模型:BERT 与 GPT
系列文章目录01 NLP入门:什么是自然语言处理 ✅02 文本预处理:从原始文本到干净语料 ✅03 文本向量化:词袋模型与 TF-IDF ✅
空堂与归
4 天前
人工智能
·
rnn
·
神经网络
·
nlp
序列数据怎么喂给神经网络?用循环神经网络RNN拆开一个时间步
关键词:RNN、循环神经网络、序列建模、PyTorch、隐藏状态、时序分类如果你之前的工作主要是图像分类、表格预测或推荐排序,第一次接触序列建模时,往往会下意识想把序列「拍平」成一个固定向量:把 100 个时间步、每步 8 维的特征,直接展开成 800 维 Dense 输入。但这条路在真实的序列任务里基本走不通,因为序列问题有三条硬约束。拍平思路本质上是在假设「每个特征维度都是独立的」,而序列里恰恰没有哪个维度是独立的——它们按时间彼此咬合。
空堂与归
4 天前
人工智能
·
rnn
·
nlp
·
lstm
RNN记不住长序列怎么办?用 LSTM 三门一通道接旁路
关键词:LSTM、门控循环单元、梯度消失、细胞状态、遗忘门偏置、序列建模、PyTorch适读人群:正在做时序分类、设备异常检测、对话意图识别等序列任务的 Python 工程师;以及想弄清「为什么 RNN 训练到一半准确率卡在随机基线」的 AI 应用开发者。
DevOpenClub
5 天前
nlp
多语言内容审核如何避免误翻译:语种检测、纠错与情感分析编排
多语言内容审核如何避免误翻译,真正困难的通常不是完成一次 API 调用,而是让结果可以校验、失败可以定位、后续能够回到原始证据。本文围绕“如何在翻译前识别语种,并把纠错、格式化和情感分析接入人工审核”给出一套可以直接落到任务状态和数据契约上的实现方式。
Jialu.
6 天前
人工智能
·
pytorch
·
分类
·
微软
·
nlp
·
bert
中文 BERT 多任务分类项目:从模型结构到训练细节
项目将评论分析拆成三个独立分类任务:投诉分流四分类、虚假评论二分类、广告骚扰二分类。每个任务使用自己的训练数据和分类头。
AIGC大时代
6 天前
人工智能
·
chatgpt
·
nlp
·
aigc
·
论文
·
知网
·
学术规范
知网 AIGC 检测在罚什么:均匀句长、低指代、零口癖,并不等于「用过 ChatGPT」
图:千笔-AIWritePaper · https://www.aiwritepaper.com答辩前一周,导师把检测截图丢进群里:「方法章整段黄了,你是不是整章贴生成器?」学生打开本地草稿,才发现那一章是按学院模板句改了三遍的手写稿。另一种常见场面更拧巴:真用过大模型起过提纲的同学,正文里塞满实验参数与失败记录,报告反而相对干净。这两种结果放在一起,说明同一件事:检测器在给文本的统计与文体指纹打分,并不是在查你的浏览器历史。
Jialu.
6 天前
深度学习
·
nlp
·
bert
从 102M 到 34M:BERT 到 BiLSTM 的完整知识蒸馏实现
BERT 语义能力强,但参数量约 102M,模型文件约 390MB。直接部署会带来较大的内存占用和推理成本。
LlmCraft|大模型工程实践
6 天前
自然语言处理
·
nlp
·
tf-idf
03 文本向量化:词袋模型与 TF-IDF
系列文章目录01 NLP入门:什么是自然语言处理 ✅02 文本预处理:从原始文本到干净语料 ✅03 文本向量化:词袋模型与 TF-IDF ✅
傲笑风
7 天前
人工智能
·
python
·
自然语言处理
·
nlp
·
bert
·
openvino
【openvino】tinybert基于openvino服务化部署(四)
与tinybert-mediapipe的文件夹结构完整一样,只有部分文件需要更改:其实配置文件config.json基本不变,只是改了name和base_path而已,其它保持不变
啊阿狸不会拉杆
7 天前
人工智能
·
自然语言处理
·
nlp
·
easyui
·
智能体
《自然语言处理:基于大语言模型的方法》第1章 绪论 读书笔记
1.1 自然语言处理的概念1.2 自然语言处理的难点1.3 自然语言处理任务体系1.3.1 任务层级1.3.2 任务类别
苏子寒
8 天前
笔记
·
机器学习
·
ai
·
nlp
·
vllm
Nano-VLLM全代码解析笔记(10)-GemmaRMSNorm和MRoPE
本节参考资料:VLLM源码Transformers源码(49 封私信) Qwen3.5 架构最全拆解:Linear Attention 源码配图解析、Gated DeltaRule 公式源码逻辑介绍、Full Attention与 MoE 模块算子流程解析 - 知乎
苏子寒
14 天前
人工智能
·
笔记
·
python
·
机器学习
·
nlp
·
vllm
Nano-VLLM全代码解析笔记(2)-block_manager
[1]Nano-VLLM全代码解析笔记(1)-sequence[2]Nano-VLLM全代码解析笔记(2)-block_manager
小女孩真可爱
15 天前
人工智能
·
python
·
gpt
·
nlp
GPT(1)----------从零实现 GPT 模型以生成文本
本文用于记录和学习GPT搭建,以及一个训练优化的技巧,对于基础知识需自行去补充。## 1. 概述本文档描述一个完整的 GPT (Generative Pre-trained Transformer) 语言模型实现。该实现对应 **GPT-2 Small(124M 参数)** 的标准结构,涵盖从 token 输入到生成文本的完整流程。
苏子寒
16 天前
pytorch
·
笔记
·
python
·
机器学习
·
ai
·
nlp
·
vllm
Nano-VLLM全代码解析笔记(6)-embed_head和linear
一些问题:[系列(1) 开篇](https://blog.csdn.net/xxx/article/details/xxxxxx) [系列(2) 核心原理](https://blog.csdn.net/xxx/article/details/xxxxxx) 🔗上一篇:[系列(1)开篇](https://blog.csdn.net/xxx/article/details/xxxxxx) 🔗下一篇:[系列(3)实战演练](https://blog.csdn.net/xxx/article/details/
uncle_ll
23 天前
llm
·
nlp
·
llama
·
ollama
·
大模型微调
Llama 3 私有化落地全栈实战:从 Ollama 极速部署到 LLaMA Factory LoRA 定制微调
在前沿生成式 AI 的落地应用中,开发者常面临两大工程痛点:本文将围绕开源大模型基座 Llama 3,提供一条“推理部署 + 轻量微调”的完整闭环方案:采用Ollama构建零门槛本地 API 服务,结合LLaMA Factory框架完成低算力消耗的 LoRA 参数高效微调(PEFT)。
墨心@
23 天前
自然语言处理
·
nlp
·
agent
·
codex
阶段 1:一次模型调用
对应代码:stage01_model.py |理解"模型服务端只产生事件流,不循环"这件事。把多次请求串成闭环的永远是本地代码——这是理解整个 Agent 架构的第一块基石。
阿图灵
1 个月前
深度学习
·
gru
·
nlp
·
机器翻译
·
seq2seq
基于 GRU 的 Seq2Seq 中英机器翻译:从 Tatoeba 语料到 BLEU 0.195
项目地址(Gitee):https://gitee.com/Touari/seq2seq_zh_en_translation.git 本文整合自项目《构建文档》与《技术文档》,既讲复现步骤,也讲设计原理。
网络工程小王
1 个月前
人工智能
·
深度学习
·
自然语言处理
·
nlp
·
transformer
【HCIE-AI】4.NLP 核心任务与技术演进学习笔记
NLP 的任务可以归纳为四大类:文本分类、序列标注、信息抽取、文本生成。 几乎所有实际应用(搜索引擎、客服机器人、翻译、写作助手)都是这四类的组合。