【Python】数据导入

Python数据导入的方法有很多,以下是八种常见的方法:

  1. 使用Pandas read函数

Pandas库提供了一种通用的方式来导入各种数据类型,如CSV,Excel,JSON,SQL,等等。

复制代码
import pandas as pd
 
# 导入CSV文件
df = pd.read_csv('filename.csv')
 
# 导入Excel文件
df = pd.read_excel('filename.xlsx')
 
# 导入JSON文件
df = pd.read_json('filename.json')
  1. 使用Python内置的open和csv模块

Python的内置模块提供了基本的文件读写能力,配合csv模块可以读取CSV文件。

复制代码
import csv
 
with open('filename.csv', mode='r') as file:
    reader = csv.reader(file)
    for row in reader:
        print(row)
  1. 使用Python的numpy.loadtxt或numpy.genfromtxt函数

这两个函数可以读取数据,并可选择性地转换数据类型。

复制代码
import numpy as np
 
# 读取CSV文件
data = np.loadtxt('filename.csv', dtype=np.float, delimiter=',')
  1. 使用SQLAlchemy模块

SQLAlchemy是Python的一个数据库工具。它允许你使用Python的语法连接和操作数据库。

复制代码
from sqlalchemy import create_engine
 
engine = create_engine('sqlite:///database.db')
 
# 导入CSV文件到SQL数据库
df = pd.read_csv('filename.csv')
df.to_sql(name='table_name', con=engine, if_exists='replace', index=False)
  1. 使用Python的pickle模块

pickle模块可以用来序列化和反序列化Python的对象结构。

复制代码
import pickle
 
# 写入对象到文件
with open('filename.pkl', 'wb') as file:
    pickle.dump({'key': 'value'}, file)
 
# 从文件读取对象
with open('filename.pkl', 'rb') as file:
    data = pickle.load(file)
  1. 使用Python的sqlite3模块

sqlite3是Python的内置数据库,适用于简单的数据存储。

复制代码
import sqlite3
 
conn = sqlite3.connect('database.db')
 
# 创建一个Cursor:
cursor = conn.cursor()
 
# 执行一条SQL语句:
cursor.execute('SELECT * FROM table_name')
 
# 使用fetchall()获取所有数据:
values = cursor.fetchall()
 
cursor.close()
  1. 使用Python的h5py模块

h5py是用于读取和写入HDF5文件的Python库,HDF5是一种用于存储和组织大量数据的文件格式。

复制代码
import h5py
 
# 写入数据到HDF5文件
with h5py.File('filename.h5', 'w') as file:
    file.create_dataset('dataset_name', data=[1, 2, 3, 4, 5])
 
# 读取HDF5文件的数据
with h5py.File('filename.h5', 'r') as file:
    print(file['dataset_name'][:])
  1. 使用Python的pymysql模块

pymysql是用于Python中与MySQL数据库进行交互的一个库。

复制代码
import pymysql
 
# 连接数据库
conn = pymysql.connect(host='localhost', user='user', password='passwd', db='db', charset='utf8')
 
# 创建游标对象
cursor = conn.cursor()
相关推荐
蹦蹦跳跳真可爱5892 小时前
Python----计算机视觉处理(Opencv:道路检测之提取车道线)
python·opencv·计算机视觉
Tanecious.4 小时前
机器视觉--python基础语法
开发语言·python
ALe要立志成为web糕手4 小时前
SESSION_UPLOAD_PROGRESS 的利用
python·web安全·网络安全·ctf
Tttian6225 小时前
Python办公自动化(3)对Excel的操作
开发语言·python·excel
蹦蹦跳跳真可爱5896 小时前
Python----机器学习(KNN:使用数学方法实现KNN)
人工智能·python·机器学习
独好紫罗兰6 小时前
洛谷题单2-P5713 【深基3.例5】洛谷团队系统-python-流程图重构
开发语言·python·算法
DREAM.ZL8 小时前
基于python的电影数据分析及可视化系统
开发语言·python·数据分析
Uncertainty!!8 小时前
python函数装饰器
开发语言·python·装饰器
吾日三省吾码9 小时前
Python 脚本:自动化你的日常任务
数据库·python·自动化
snowfoootball9 小时前
基于 Ollama DeepSeek、Dify RAG 和 Fay 框架的高考咨询 AI 交互系统项目方案
前端·人工智能·后端·python·深度学习·高考