DataFrame存入mysql以及读取操作

需要使用到的包以及环境

  • sqlalchemy,pandas,pymysql,ipykernel
  • pycharm

开始

  1. mysql创建一个库用于测试
bash 复制代码
mysql> create database df2sql;
Query OK, 1 row affected (0.02 sec)
  1. pycharm中准备DataFrame类型数据准备开测
python 复制代码
import pandas as pd
df = pd.DataFrame({"age":[20,22,18,10],"name":['niko','zzz','nox','ze'],"id":[101,102,103,104]})
df.set_index("id",inplace=True) #tips:让id作为列索引
df
  1. 创建sqlalchemy引擎
python 复制代码
from sqlalchemy import create_engine
engine=create_engine(
    "mysql+pymysql://root:HHCzio20@localhost:3306/df2sql"
)
  1. 配置存入数据库
python 复制代码
df.to_sql(
    name="demo2sql",
    con=engine,
    if_exists="replace",
    index=False, #tips:不将DataFrame的索引写入数据库
    chunksize=1000,#tips:批量插入的大小,对于大数据集很有用
)
print('数据成功导出到数据库')
  1. 从数据库中读取到DataFrame
python 复制代码
df2 = pd.read_sql(
    "select * from demo2sql",
    con=engine
)
df2
  1. 验证读取到的数据类型
python 复制代码
type(df2)

主要其实还是sqlalchemy的数据库引擎配置需要注意写法就OK

相关推荐
2401_841495645 小时前
【数据结构】B+树
数据结构·数据库·c++·b+树·概念·结构·操作原理
Hardworking6667 小时前
第7章 软硬件系统集成
数据库·软硬件系统集成
名字还没想好☜7 小时前
Go 的 time.Ticker 陷阱:定时任务里被忽略的内存泄漏与正确关闭
java·数据库·golang·go·定时器
关关长语7 小时前
Wsl解决MySQL容器跨域权限问题
mysql·docker·容器
熊猫钓鱼>_>7 小时前
Redis 突发缓存穿透:一次完整的定位复盘
数据库·人工智能·redis·缓存·ai·agent·智能
wenb1n8 小时前
MySQL诊断系列(3/6):索引分析——5个SQL揪出“僵尸索引”
数据库·人工智能·编程语言
这个DBA有点耶8 小时前
索引碎片与统计信息维护:执行计划突然变差的隐形杀手
mysql·程序员·架构
段一凡-华北理工大学8 小时前
向量数据库实战:选型、调优与落地~系列文章03:向量相似度算法全解:余弦、欧氏、内积,到底该用哪个?
大数据·数据库·人工智能·算法·机器学习·向量相似度·高炉炼铁
ClouGence9 小时前
CloudDM 数据库管理平台,全新 UI,更清晰、更高效!
数据库·开源
Mico1810 小时前
MySQL 8.0.35 GTID 主从复制搭建-基于GITD
android·mysql·adb