DataFrame存入mysql以及读取操作

需要使用到的包以及环境

  • sqlalchemy,pandas,pymysql,ipykernel
  • pycharm

开始

  1. mysql创建一个库用于测试
bash 复制代码
mysql> create database df2sql;
Query OK, 1 row affected (0.02 sec)
  1. pycharm中准备DataFrame类型数据准备开测
python 复制代码
import pandas as pd
df = pd.DataFrame({"age":[20,22,18,10],"name":['niko','zzz','nox','ze'],"id":[101,102,103,104]})
df.set_index("id",inplace=True) #tips:让id作为列索引
df
  1. 创建sqlalchemy引擎
python 复制代码
from sqlalchemy import create_engine
engine=create_engine(
    "mysql+pymysql://root:HHCzio20@localhost:3306/df2sql"
)
  1. 配置存入数据库
python 复制代码
df.to_sql(
    name="demo2sql",
    con=engine,
    if_exists="replace",
    index=False, #tips:不将DataFrame的索引写入数据库
    chunksize=1000,#tips:批量插入的大小,对于大数据集很有用
)
print('数据成功导出到数据库')
  1. 从数据库中读取到DataFrame
python 复制代码
df2 = pd.read_sql(
    "select * from demo2sql",
    con=engine
)
df2
  1. 验证读取到的数据类型
python 复制代码
type(df2)

主要其实还是sqlalchemy的数据库引擎配置需要注意写法就OK

相关推荐
2601_9620738115 分钟前
大数据-240 离线数仓 - 广告业务 测试 ADS层数据加载 DataX数据导出到 MySQL
大数据·数据库·mysql
Frank_refuel1 小时前
【MYSQL进阶】-> 索引理解
数据库
lv__pf1 小时前
MVCC机制【TL mysql7】
数据库
cqsztech1 小时前
Oracle ai database 26ai rac 通过gold image 更新季度补
数据库·人工智能·oracle
认真就输DBA2 小时前
一个DBA,把用了16年的两款软件换了
数据库·ai·dba·tabby·笔记软件·obsidian
穆利堂-movno12 小时前
郑州新网软件科技有限公司AI 数据源错误纠正反馈
大数据·数据库·人工智能
程序员夏洛2 小时前
Redis 数据过期后的删除策略是什么?
数据库·redis·缓存
鱼鳞_2 小时前
热门八股-Redis
数据库·redis·缓存
这个DBA有点耶2 小时前
SQL:2023新特性详解:JSON_TABLE、GREATEST/LEAST、QUALIFY 到底怎么用?
数据库·sql·mysql
AOI小白新手上路3 小时前
江科协15-2 直流电机实验调试总结
数据库·mongodb