AI应用开发-python对MySQL数据的常见使用

AI应用开发相关目录

本专栏包括AI应用开发相关内容分享,包括不限于AI算法部署实施细节、AI应用后端分析服务相关概念及开发技巧、AI应用后端应用服务相关概念及开发技巧、AI应用前端实现路径及开发技巧
适用于具备一定算法及Python使用基础的人群

  1. AI应用开发流程概述
  2. Visual Studio Code及Remote Development插件远程开发
  3. git开源项目的一些问题及镜像解决办法
  4. python实现UDP报文通信
  5. python实现日志生成及定期清理
  6. Linux终端命令Screen常见用法
  7. python实现redis数据存储
  8. python字符串转字典
  9. python实现文本向量化及文本相似度计算
  10. python对MySQL数据的常见使用

文章目录


一、MySQL数据库的安装与使用

安装

详见:

https://blog.csdn.net/weixin_39289696/article/details/128850498

概括为:

离线安装包下载(msi文件,几百MB),Service only,检测mv C++

2019插件是否安装并完成安装,一路next,配置port,密码验证方式(Authentication

Method)这一步很重要(第一个是强密码校验,mysql推荐使用最新的数据库和相关客户端,MySQL8换了加密插件,所以如果选第一种方式,很可能导致你的navicat等客户端连不上mysql8),设置密码,需要牢记,因为后面要用这个密码连接数据库,用户名为root,最终更改mysql名称(mysql、mysql80等),服务器文件权限(Server

File Permissions)

使用

使用Navicat可轻松实现对数据的链接、库操作(增删改)、表操作(增删改查)。

但AI应用开发往往需要基于以下三点需求需要对MySQL进行代码操作:

1.表层面的数据自动化处理

2.表层面的数据批量处理

3.python实现的算法与其他技术栈(C++QT、Java Web等)实现的系统数据交互

二、代码示例

存储数据

cpp 复制代码
def insert_mysql(word):
    mysql_path = os.path.join(os.getcwd(), "data", "mysql_df1500hdb_config.json")
    with open(mysql_path, 'r', encoding='utf-8') as f:
        mid_json = json.load(f)
    db = pymysql.connect(host=mid_json['host'],
                         port=mid_json['port'],
                         user=mid_json['user'],
                         password=mid_json['password'],
                         database=mid_json['database'])
    cursor = db.cursor()
    insert_code = "INSERT INTO df_his_weatherpv (name,value1,value2,value3,value4,value5,value6,evt_time) VALUES (%s,%s,%s,%s,%s,%s,%s,%s);"
    cursor.execute(insert_code, (
    word.get('name'), word.get('value1'), word.get('value2'), word.get('value3'), word.get('value4'),
    word.get('value5'), word.get('value6'), str(timestamp2time(word.get('time')))))
    # 保留操作
    db.commit()
    # 关闭连接
    db.close()

拿取数据

cpp 复制代码
# 为温度、湿度、气压三个无需vdm分解的数据
def get_feature(now_time_str, des_code):
    table_ls = get_dbtable(now_time_str)
    if len(table_ls) == 1:
        mysql_path = os.path.join(os.getcwd(), "data", "mysql_df1500hdb_config.json")
        with open(mysql_path, 'r', encoding='utf-8') as f:
            mid_json = json.load(f)
        db = pymysql.connect(host=mid_json['host'],
                             port=mid_json['port'],
                             user=mid_json['user'],
                             password=mid_json['password'],
                             database=mid_json['database'])
        cursor = db.cursor()

        sql_code = "SELECT *  FROM {table} WHERE name = '{des}' AND evt_time >= DATE_SUB('{time}', INTERVAL 2 DAY) AND evt_time < '{time}';".format(
            time=now_time_str,
            table=table_ls[0],
            des=des_code)
        cursor.execute(sql_code)
        data = pd.DataFrame(cursor.fetchall())
        # 关闭连接
        db.close()
        # print(data)
        data.columns = ['id', 'name', 'value', 'ect_time', 'status']
        data = data.sort_values('ect_time')
        times = data['ect_time'].tolist()
        values = data['value'].tolist()
        mdh_indexs_dict = generate_26_mdhs(extract_mdh(now_time_str))
        mdhs = [extract_mdh(i) for i in times]
        for i in range(len(mdhs)):
            try:
                mdh_indexs_dict[mdhs[i]].append(i)
            except:
                pass
        flag = 0
        out_ls = []
        for mdh_dict_v in mdh_indexs_dict.values():
            if mdh_dict_v != []:
                flag += 1
                out_ls.append(np.mean(values[min(mdh_dict_v):max(mdh_dict_v) + 1]))
            else:
                out_ls.append(None)
        if flag == 24:
            return out_ls
        elif flag == 23 or flag == 22:
            return deal_none(out_ls)
        else:
            return []
    else:
        mysql_path = os.path.join(os.getcwd(), "data", "mysql_df1500hdb_config.json")
        with open(mysql_path, 'r', encoding='utf-8') as f:
            mid_json = json.load(f)
        db = pymysql.connect(host=mid_json['host'],
                             port=mid_json['port'],
                             user=mid_json['user'],
                             password=mid_json['password'],
                             database=mid_json['database'])
        cursor = db.cursor()

        sql_code = "SELECT *  FROM {table} WHERE name = '{des}' AND  evt_time >= DATE_SUB('{time}', INTERVAL 2 DAY) AND evt_time < '{time}';".format(
            time=now_time_str,
            table=table_ls[0],
            des=des_code)
        cursor.execute(sql_code)
        data1 = pd.DataFrame(cursor.fetchall())
        sql_code = "SELECT *  FROM {table} WHERE name = '{des}' AND  evt_time >= DATE_SUB('{time}', INTERVAL 2 DAY) AND evt_time < '{time}';".format(
            time=now_time_str,
            table=table_ls[1],
            des=des_code)
        cursor.execute(sql_code)
        data2 = pd.DataFrame(cursor.fetchall())
        db.close()
        data = pd.concat([data1, data2], ignore_index=True)
        data.columns = ['id', 'name', 'value', 'ect_time', 'status']
        data = data.sort_values('ect_time')
        times = data['ect_time'].tolist()
        values = data['value'].tolist()
        mdh_indexs_dict = generate_26_mdhs(extract_mdh(now_time_str))
        mdhs = [extract_mdh(i) for i in times]
        for i in range(len(mdhs)):
            try:
                mdh_indexs_dict[mdhs[i]].append(i)
            except:
                pass
        flag = 0
        out_ls = []
        for mdh_dict_v in mdh_indexs_dict.values():
            if mdh_dict_v != []:
                flag += 1
                out_ls.append(np.mean(values[min(mdh_dict_v):max(mdh_dict_v) + 1]))
            else:
                out_ls.append(None)
        if flag == 24:
            return out_ls
        elif flag == 23 or flag == 22:
            return deal_none(out_ls)
        else:
            return []

删除、修改等操作与上述类似,即用即查即可


三、总结

完结,撒花!

相关推荐
hsling松子2 小时前
使用PaddleHub智能生成,献上浓情国庆福
人工智能·算法·机器学习·语言模型·paddlepaddle
belldeep2 小时前
python:reportlab 将多个图片合并成一个PDF文件
python·pdf·reportlab
正在走向自律2 小时前
机器学习框架
人工智能·机器学习
好吃番茄3 小时前
U mamba配置问题;‘KeyError: ‘file_ending‘
人工智能·机器学习
CV-King4 小时前
opencv实战项目(三十):使用傅里叶变换进行图像边缘检测
人工智能·opencv·算法·计算机视觉
禁默4 小时前
2024年计算机视觉与艺术研讨会(CVA 2024)
人工智能·计算机视觉
FreakStudio5 小时前
全网最适合入门的面向对象编程教程:56 Python字符串与序列化-正则表达式和re模块应用
python·单片机·嵌入式·面向对象·电子diy
whaosoft-1435 小时前
大模型~合集3
人工智能
Dream-Y.ocean5 小时前
文心智能体平台AgenBuilder | 搭建智能体:情感顾问叶晴
人工智能·智能体
丶21365 小时前
【CUDA】【PyTorch】安装 PyTorch 与 CUDA 11.7 的详细步骤
人工智能·pytorch·python