py连接mysql

爬虫不仅可以将数据写入csv text json...里也可以写进数据库,今天就来学习一下最基本的写入mysql数据库,先下载pymysql(其他库也行,但是操作不同):

python 复制代码
pip install pymysql

连接数据库

我们需要先与mysql建立连接:

python 复制代码
import pymysql
conn = pymysql.connect(
    host='localhost',  # 连接的ip  这里是本地170.0.0.1
    user='root',  # 权限
    password=f'{password}',  # 数据库密码
    database='dachuang',  # 数据库名字
    port=3306,  # 端口
    charset='utf8mb4'  # 数据编码
)
# 创建游标对象
cursor = conn.cursor()

然后开始做一些中间操作,比如爬取数据

sql语句执行:

python 复制代码
# 书写sql
sql_code = f'''
CREATE TABLE IF NOT EXISTS {class_type} (
    id INT AUTO_INCREMENT PRIMARY KEY,
    title VARCHAR(255) NOT NULL,
    url VARCHAR(512) NOT NULL,
    description TEXT,
    author VARCHAR(100) NOT NULL,
    cover_image VARCHAR(512)
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4;
'''
cursor.execute(sql_code)  # 执行sql
insert_sql = f'''
INSERT INTO {class_type} (title, url, description, author, cover_image)
VALUES ("{title}", "{url}", "{description}", "{author}", "{cover_image}");
'''
cursor.execute(insert_sql)

提交事务和回收资源

python 复制代码
conn.commit()  # 提交事务

# 先关闭游标,在关闭连接
cursor.close()
conn.close()

步骤总结

下面再总结一下步骤:

  • 导包
  • 创建连接
  • 创建游标对象
  • ----------------中间操作
  • 写sql语句
  • 执行sql
  • 提交事务
  • 回收资源(关闭游标再关闭连接)

小结

基本知道这些即可,这是最基础的,后面随用随查即可,如文章有什么问题请及时提出,加油加油

相关推荐
0思必得05 分钟前
[Web自动化] Selenium处理动态网页
前端·爬虫·python·selenium·自动化
qq_1927798715 分钟前
高级爬虫技巧:处理JavaScript渲染(Selenium)
jvm·数据库·python
u01092727133 分钟前
使用Plotly创建交互式图表
jvm·数据库·python
爱学习的阿磊34 分钟前
Python GUI开发:Tkinter入门教程
jvm·数据库·python
tudficdew1 小时前
实战:用Python分析某电商销售数据
jvm·数据库·python
Fleshy数模2 小时前
CentOS7 安装配置 MySQL5.7 完整教程(本地虚拟机学习版)
linux·mysql·centos
sjjhd6522 小时前
Python日志记录(Logging)最佳实践
jvm·数据库·python
Configure-Handler2 小时前
buildroot System configuration
java·服务器·数据库
2301_821369612 小时前
用Python生成艺术:分形与算法绘图
jvm·数据库·python
az44yao2 小时前
mysql 创建事件 每天17点执行一个存储过程
mysql