DataFrame存入mysql以及读取操作

需要使用到的包以及环境

  • sqlalchemy,pandas,pymysql,ipykernel
  • pycharm

开始

  1. mysql创建一个库用于测试
bash 复制代码
mysql> create database df2sql;
Query OK, 1 row affected (0.02 sec)
  1. pycharm中准备DataFrame类型数据准备开测
python 复制代码
import pandas as pd
df = pd.DataFrame({"age":[20,22,18,10],"name":['niko','zzz','nox','ze'],"id":[101,102,103,104]})
df.set_index("id",inplace=True) #tips:让id作为列索引
df
  1. 创建sqlalchemy引擎
python 复制代码
from sqlalchemy import create_engine
engine=create_engine(
    "mysql+pymysql://root:HHCzio20@localhost:3306/df2sql"
)
  1. 配置存入数据库
python 复制代码
df.to_sql(
    name="demo2sql",
    con=engine,
    if_exists="replace",
    index=False, #tips:不将DataFrame的索引写入数据库
    chunksize=1000,#tips:批量插入的大小,对于大数据集很有用
)
print('数据成功导出到数据库')
  1. 从数据库中读取到DataFrame
python 复制代码
df2 = pd.read_sql(
    "select * from demo2sql",
    con=engine
)
df2
  1. 验证读取到的数据类型
python 复制代码
type(df2)

主要其实还是sqlalchemy的数据库引擎配置需要注意写法就OK

相关推荐
Flynn Liang6 小时前
AI Agent 分层记忆体系实战:用 Redis 五类结构构建可淘汰、可追溯的长短期记忆
数据库·人工智能·redis
nice_lcj52015 小时前
MySQL 的锁:行锁、表锁、间隙锁与死锁
mysql·面试·锁·行锁·死锁·间隙锁
Henry-SAP16 小时前
PP的生产调度员(Production Scheduler)的角色与配置
数据库
Flynn Liang18 小时前
HikariCP 连接池不是越大越好:I/O 密集型 Java 服务的数据库容量工程
java·数据库·mysql·高并发·连接池·hikaricp·sql 优化
FungLeo19 小时前
FengCMS · PHP+MySQL 升级实录 ·三重 MD5 迁移 password_hash:老站密码怎么无痛升级
mysql·php·哈希算法·密码安全·fengcms
雾隐隐o20 小时前
优搭校园 01|项目概览、技术选型与初始化
spring boot·mysql·vue
小乖写代码20 小时前
消息、回执与媒体 · msgstore.db · Messages, Receipts, and Media
数据库·媒体·whatsapp·消息回执
GeW21 小时前
世界目光聚焦中国:底层技术、Linux、数据库的破局逻辑
linux·数据库
PingCAP21 小时前
平凯数据库 × 圣诺云数:让治理数据实时可用、跨域可信流通
数据库·tidb
利威尔xu21 小时前
PostgreSQL 索引失效 4 类:函数运算让查询全表扫描拖垮性能
开发语言·数据库·postgresql·性能优化·索引优化