0数据准备与分析
二分类任务，正负样本共计6W；
数据集下载
样本的分布
正负样本中评论字段的长度 ，超过500的都很少，可以直接截断；
- 处理的时候长文本截断；
- 可以前面取一点，中间取，尾巴取；
下载停用词：备用
import nltk
from nltk.corpus import stopwords
下载停用词资源
nltk.download('stopwords')
获取中文停用词列表
stopwords_cn_list = stopwords.words('chinese')
0 NLP: 数据获取与EDA
汀沿河2023-11-29 5:00
相关推荐
leoZ23120 分钟前
Vue3 还原一个企业级后台-08-API注册管理xushichang123_21 分钟前
客服中心想要依托 AI 升级客户服务体验，可选择哪些云联络中心架构方案？：优先评估 Amazon Connect＋客服 AI Agentjikemaoshiyanshi27 分钟前
企业如何借助一体化 AI 工作台赋能办公提效？Amazon Quick 可适配哪些企业业务场景？—— 从智能问答、数据解析到流程自动化的全域 AI 能力平台IT_陈寒34 分钟前
Redis的DEL命令竟然没删掉数据？我踩的这个坑你得知道阿里云大数据AI技术2 小时前
Daft 多模态视频抽帧性能优化实践：从抽帧到大模型打标，一条视频理解流水线是怎么跑起来的weixin_446260852 小时前
Wyvern：生成可溯源多模态报告的智能体框架笨鸟先飞，勤能补拙2 小时前
从预测到决策：人工智能与机器学习的系统方法、工程闭环与现实边界tech讯息2 小时前
生成式 AI 从 POC 验证迈向正式生产，推理部署环节成为卡点的核心原因是什么？Aethir2 小时前
第三章 — 成本与经济模型燕云少君2 小时前
你只是跟AI聊聊天，它已经准备好刷你的卡了