人工智能训练师三级备考笔记

一、实操

1)通用语法(常见于实操题第一块代码块)

1.读取文件数据或加载数据集等描述时

一般为以下结构:Data=pd.read_文件格式('文件名') 注意:文件名需要用' '框起来,必须要有引号

文件格式有以下内容csv、txt、xlsx、json、html、sql、parquet、sas、spss、stata、hdf5,替代文件格式的位置

2.读取前几行数据

使用.head()方法

head( n ) 方法用于读取前面的 n 行,如果不填参数 n ,默认返回 5 行。

使用句法:print(data.head(n))如果要求返回5行数据,n可不填

3.保存数据到对应文件

使用.to_文件类型方法

例如data.to_csv('文件名.csv',index = False) 即将data中的数据保存到csv格式的文件 文件名.csv文件中

4.删除空值或异常值

使用drop或dropna语法

  • drop 是按 行标签(index)或列标签(columns) 删除整行/整列,你必须告诉它"删掉第几行或第几列"。

  • dropna 是按 缺失值的位置 删除行/列,你只需告诉它"哪一列有缺失就删哪一行",不需要知道具体行号。

  • dropna(subset=['列名']) = "只要这一列缺值就删该行,别的列缺不缺我不管"。

2)实操题看到关键字常用语法

关键字:归一化,标准化,或scaler

看到归一化,标准化,或scaler这些关键字,写如下格式的代码

scaler.fit_transform(datanumerical_features)

其中scaler是抄上文,fit_transform是固定用法,括号里的参数是被标准化的对象,抄前文。

关键字:转换数据类型

看到将什么转换成数据类型时,迅速想到pandas.to_numeric(转换的数据)

类似以下格式

复制代码
df['horsepower'] = pd.to_numeric(df['horsepower'], errors='coerce')

这里我要转换的数据是加载的数据集df中的horsepower列 注:多关注使用的符号例如\[\]和''

关键字:划分为训练集和测试集

看到划分数据集想到train_test_split语法例如以下语句

复制代码
X_train, X_test, y_train, y_test = train_test_split(X,y,test_size=0.2, random_state=42)

这里定义了X为训练集,y为测试集,使用train_test_split语法划分,test_size=0.2代表测试集占比20%

关键字训练模型

如果出现训练模型等关键字,使用 数据.fit(训练集,测试集)例如以下代码

复制代码
pipline.fit(X_train,y_train)

训练pipline数据,使用fit方法训练,训练数据为X_train,y_train

关键字:保存模型

pickle.dump(model,文件名)

文件名为题目命名文件

关键字:预测并保存结果

model.predict(X_test)02

过拟合,欠拟合通用改进点;

1 清洗数据,清洗空值,重复值和异常值。

2 扩充训练样本数,增多训练次数

3 调整特征值,加入和目标值有关的字段,去掉和目标值无关的字段

4 对样本进行标准化处理(凑数)

相关推荐
鱼子星_16 分钟前
【C++】反向迭代器:反向迭代器的底层认识与模拟实现
开发语言·c++·笔记·stl
chusi77734 分钟前
2027考研历年真题+电子备考资料+电子版教材+笔记
笔记·考研
云边有个稻草人2 小时前
复盘小站:用 Doubao-Seed-Evolving,把厚厚的笔记一键变成可复习、可自测、可批改的知识资产
笔记·doubao·ai开发实战·复盘小站
不会代码的小猴11 小时前
21. 泛型编程上
开发语言·c++·笔记·算法
摇滚侠13 小时前
《SpringBoot 3:入门与应用实战》第 2 章 IOC 思想与实现 阅读笔记 1
spring boot·笔记·后端
蒸蒸yyyyzwd13 小时前
秋招不熟悉力扣学习笔记1
笔记·学习·leetcode
LuminousCPP14 小时前
数据结构-双向循环链表
c语言·数据结构·笔记·链表
302wanger16 小时前
【阅读笔记】当AI拿走一切之后
笔记
疯狂打码的少年18 小时前
【数据结构】串(字符串):基本概念与存储
数据结构·笔记
Hotchip_MEMS20 小时前
TWS耳机微米级较量:超薄LGA封装如何助力MEMS麦克风小型化?
人工智能·笔记·物联网·电脑