py连接mysql

爬虫不仅可以将数据写入csv text json...里也可以写进数据库,今天就来学习一下最基本的写入mysql数据库,先下载pymysql(其他库也行,但是操作不同):

python 复制代码
pip install pymysql

连接数据库

我们需要先与mysql建立连接:

python 复制代码
import pymysql
conn = pymysql.connect(
    host='localhost',  # 连接的ip  这里是本地170.0.0.1
    user='root',  # 权限
    password=f'{password}',  # 数据库密码
    database='dachuang',  # 数据库名字
    port=3306,  # 端口
    charset='utf8mb4'  # 数据编码
)
# 创建游标对象
cursor = conn.cursor()

然后开始做一些中间操作,比如爬取数据

sql语句执行:

python 复制代码
# 书写sql
sql_code = f'''
CREATE TABLE IF NOT EXISTS {class_type} (
    id INT AUTO_INCREMENT PRIMARY KEY,
    title VARCHAR(255) NOT NULL,
    url VARCHAR(512) NOT NULL,
    description TEXT,
    author VARCHAR(100) NOT NULL,
    cover_image VARCHAR(512)
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4;
'''
cursor.execute(sql_code)  # 执行sql
insert_sql = f'''
INSERT INTO {class_type} (title, url, description, author, cover_image)
VALUES ("{title}", "{url}", "{description}", "{author}", "{cover_image}");
'''
cursor.execute(insert_sql)

提交事务和回收资源

python 复制代码
conn.commit()  # 提交事务

# 先关闭游标,在关闭连接
cursor.close()
conn.close()

步骤总结

下面再总结一下步骤:

  • 导包
  • 创建连接
  • 创建游标对象
  • ----------------中间操作
  • 写sql语句
  • 执行sql
  • 提交事务
  • 回收资源(关闭游标再关闭连接)

小结

基本知道这些即可,这是最基础的,后面随用随查即可,如文章有什么问题请及时提出,加油加油

相关推荐
深蓝电商API27 分钟前
住宅代理与数据中心代理在爬虫中的选择
爬虫·python
晚霞的不甘1 小时前
揭秘 CANN 内存管理:如何让大模型在小设备上“轻装上阵”?
前端·数据库·经验分享·flutter·3d
市场部需要一个软件开发岗位1 小时前
JAVA开发常见安全问题:纵向越权
java·数据库·安全
海奥华21 小时前
mysql索引
数据库·mysql
csdn_aspnet2 小时前
Libvio.link爬虫技术深度解析:反爬机制破解与高效数据抓取
爬虫·反爬·libvio
2601_949593652 小时前
深入解析CANN-acl应用层接口:构建高效的AI应用开发框架
数据库·人工智能
javachen__2 小时前
mysql新老项目版本选择
数据库·mysql
Dxy12393102162 小时前
MySQL如何高效查询表数据量:从基础到进阶的优化指南
数据库·mysql
Dying.Light2 小时前
MySQL相关问题
数据库·mysql
蜡笔小炘3 小时前
LVS -- 利用防火墙标签(FireWall Mark)解决轮询错误
服务器·数据库·lvs