py连接mysql

爬虫不仅可以将数据写入csv text json...里也可以写进数据库,今天就来学习一下最基本的写入mysql数据库,先下载pymysql(其他库也行,但是操作不同):

python 复制代码
pip install pymysql

连接数据库

我们需要先与mysql建立连接:

python 复制代码
import pymysql
conn = pymysql.connect(
    host='localhost',  # 连接的ip  这里是本地170.0.0.1
    user='root',  # 权限
    password=f'{password}',  # 数据库密码
    database='dachuang',  # 数据库名字
    port=3306,  # 端口
    charset='utf8mb4'  # 数据编码
)
# 创建游标对象
cursor = conn.cursor()

然后开始做一些中间操作,比如爬取数据

sql语句执行:

python 复制代码
# 书写sql
sql_code = f'''
CREATE TABLE IF NOT EXISTS {class_type} (
    id INT AUTO_INCREMENT PRIMARY KEY,
    title VARCHAR(255) NOT NULL,
    url VARCHAR(512) NOT NULL,
    description TEXT,
    author VARCHAR(100) NOT NULL,
    cover_image VARCHAR(512)
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4;
'''
cursor.execute(sql_code)  # 执行sql
insert_sql = f'''
INSERT INTO {class_type} (title, url, description, author, cover_image)
VALUES ("{title}", "{url}", "{description}", "{author}", "{cover_image}");
'''
cursor.execute(insert_sql)

提交事务和回收资源

python 复制代码
conn.commit()  # 提交事务

# 先关闭游标,在关闭连接
cursor.close()
conn.close()

步骤总结

下面再总结一下步骤:

  • 导包
  • 创建连接
  • 创建游标对象
  • ----------------中间操作
  • 写sql语句
  • 执行sql
  • 提交事务
  • 回收资源(关闭游标再关闭连接)

小结

基本知道这些即可,这是最基础的,后面随用随查即可,如文章有什么问题请及时提出,加油加油

相关推荐
rising start5 小时前
二、全面理解MySQL架构
mysql·架构
星星也在雾里5 小时前
PgBouncer 解决 PostgreSQL 连接数超限 + 可视化监控
数据库·postgresql
bqq198610266 小时前
MySQL性能优化
mysql·mysql优化
雨辰AI7 小时前
SpringBoot3 + 人大金仓读写分离 + 分库分表 + 集群高可用 全栈实战
java·数据库·mysql·政务
长城20247 小时前
关于MySql的ONLY_FULL_GROUP_BY问题
数据库·mysql·聚合列
常常有7 小时前
MySQL 底层执行原理:输入SQL语句到两阶段提交
数据库·sql·mysql
Python私教7 小时前
Playwright MCP 用 a11y 树抓页面:比全量 DOM 省 token 的采集 Agent
爬虫
Mr. zhihao8 小时前
深入解析redis基本数据结构
数据结构·数据库·redis
m0_748839498 小时前
利用天正暖通CAD快速掌握风管数量统计的方法
数据库
随身数智备忘录8 小时前
什么是设备管理体系?设备管理体系包含哪些核心模块?
网络·数据库·人工智能