py连接mysql

爬虫不仅可以将数据写入csv text json...里也可以写进数据库,今天就来学习一下最基本的写入mysql数据库,先下载pymysql(其他库也行,但是操作不同):

python 复制代码
pip install pymysql

连接数据库

我们需要先与mysql建立连接:

python 复制代码
import pymysql
conn = pymysql.connect(
    host='localhost',  # 连接的ip  这里是本地170.0.0.1
    user='root',  # 权限
    password=f'{password}',  # 数据库密码
    database='dachuang',  # 数据库名字
    port=3306,  # 端口
    charset='utf8mb4'  # 数据编码
)
# 创建游标对象
cursor = conn.cursor()

然后开始做一些中间操作,比如爬取数据

sql语句执行:

python 复制代码
# 书写sql
sql_code = f'''
CREATE TABLE IF NOT EXISTS {class_type} (
    id INT AUTO_INCREMENT PRIMARY KEY,
    title VARCHAR(255) NOT NULL,
    url VARCHAR(512) NOT NULL,
    description TEXT,
    author VARCHAR(100) NOT NULL,
    cover_image VARCHAR(512)
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4;
'''
cursor.execute(sql_code)  # 执行sql
insert_sql = f'''
INSERT INTO {class_type} (title, url, description, author, cover_image)
VALUES ("{title}", "{url}", "{description}", "{author}", "{cover_image}");
'''
cursor.execute(insert_sql)

提交事务和回收资源

python 复制代码
conn.commit()  # 提交事务

# 先关闭游标,在关闭连接
cursor.close()
conn.close()

步骤总结

下面再总结一下步骤:

  • 导包
  • 创建连接
  • 创建游标对象
  • ----------------中间操作
  • 写sql语句
  • 执行sql
  • 提交事务
  • 回收资源(关闭游标再关闭连接)

小结

基本知道这些即可,这是最基础的,后面随用随查即可,如文章有什么问题请及时提出,加油加油

相关推荐
这个DBA有点耶3 小时前
NULL不是空——数据库里最反直觉的设计,90%新人踩过的坑
数据库·mysql·代码规范
这个DBA有点耶5 小时前
AI写的SQL跑崩了生产库,这锅谁背?
数据库·人工智能·程序员
镜舟科技5 小时前
Databricks 再提 LTAP,AI 时代的数据底座为何重回大一统叙事?
数据库·架构·agent
Databend6 小时前
从湖仓升级为 Agent 时代的数据控制面,Snowflake 和 Databricks 有哪些布局
大数据·数据库·agent
ClouGence9 小时前
SQL Server CDC 能放到 Always On 备库读吗?一文讲透原理与实践
数据库·sql server
先吃饱再说1 天前
存储的进化:从 MySQL 到浏览器缓存,数据到底住在哪?
数据库
Nturmoils1 天前
字段太多看不全,ksql 的展开模式和输出控制怎么用
数据库·后端
Databend1 天前
Agent 轨迹分析与归因的数据工程实践
大数据·数据库·agent
这个DBA有点耶1 天前
SQL改写进阶:标量子查询的“隐形代价”与消除实战
数据库·mysql·架构
smallyoung1 天前
数据库乐观锁深度解析:MySQL、PostgreSQL 实战 + Spring Boot 集成指南
数据库·mysql·postgresql