excel数据导入到数据库的方法

背景:最近在做和HW对接的某项目,需要将第三方接口提供的数据进行展示;在对方提供了详细的excel后,觉得也挺简单的就是将excel数据导入到数据库中。

方案一:

普通的初学者肯定会想,那我读取excel数据,一行一行的读,然后插入到数据库中进行存储,然而这样利用事务进行存储本身也没有问题;但是数据库如果涉及不规范,某列数据的数据类型(长度不够后),就会导致整个执行过程进行回滚;效率也不是很高。

excel数据存放到table中代码:

DataTable dt = new DataTable();

IWorkbook workbook;

string fileExt = Path.GetExtension(path).ToLower();

using (FileStream fs = new FileStream(path, FileMode.Open, FileAccess.Read))

{

if (fileExt == ".xlsx")

{

workbook = new XSSFWorkbook(fs);

}

else if (fileExt == ".xls")

{

workbook = new HSSFWorkbook(fs);

}

else

{

workbook = null;

}

if (workbook == null) return;

ISheet sheet = workbook.GetSheetAt(0);//表头

IRow header = sheet.GetRow(sheet.FirstRowNum);

List<int> columns = new List<int>();

for (int i = 0; i < header.LastCellNum; i++)

{

object obj = GetValueType(header.GetCell(i));

if (obj == null || obj.ToString() == string.Empty)

{

dt.Columns.Add(new DataColumn("Columns" + i.ToString()));

}

else dt.Columns.Add(new DataColumn(obj.ToString()));

columns.Add(i);

}//数据

for (int i = sheet.FirstRowNum + 1; i <= sheet.LastRowNum; i++)

{

DataRow dr = dt.NewRow(); bool hasValue = false;

foreach (int j in columns)

{

drj = GetValueType(sheet.GetRow(i).GetCell(j)); if (drj != null && drj.ToString() != string.Empty)

{

hasValue = true;

}

}

if (hasValue)

{

dt.Rows.Add(dr);

}

}

}

遍历table数据到数据库

string connectstring = "";//数据库连接字符串

SqlConnection conn = new SqlConnection(connectstring); //数据库连接

conn.Open();

for (int i = 0; i < dt.Rows.Count; i++)

{

string sqlstr = "insert t_table (Column1,Column2,Column3,Column4,Column5) values ('" + dt.Rowsi0.ToString()+"','" + dt.Rowsi1.ToString() + "','"

  • dt.Rowsi2.ToString() + "','" + dt.Rowsi3.ToString() + "','"+ dt.Rowsi4.ToString() + "')";

SqlCommand com = new SqlCommand(sqlstr, conn);

if (com.ExecuteNonQuery() < 1)

{

Console.WriteLine("导入数据失败!");

System.Console.WriteLine("编码:"+dt.Rowsi0.ToString()+"导入失败!");

}

System.Console.WriteLine("编码:" + dt.Rowsi0.ToString() + "导入成功!");

}

其中 t_table为数据库中表名称,Column1~Column5为数据库中字段名称.

方案二:

比较高效的做法是利用office自带的功能OLEDB结合OPENROWSET导入数据;具体代码如下:

string connectstring = "";//数据库连接字符串

SqlConnection conn = new SqlConnection(connectstring); //数据库连接

conn.Open();

string sqlstr = @"insert into t_HWPromptMsg select 编码, 提示, 场景,提示信息,备注 from OPENROWSET('MICROSOFT.JET.OLEDB.4.0','Excel 5.0;HDR=YES;DATABASE="+ path + "',sheet1$)";

SqlCommand cmd = new SqlCommand(sqlstr, conn);

cmd.ExecuteNonQuery();

conn.Close();

注意事项:在利用 OPENROWSET时需要打开SQL Server的Ad Hoc Distributed Queries组件,否则会报:报错内容是:SQL Server 阻止了对组件 'Ad Hoc Distributed Queries' 的 STATEMENT'OpenRowset/OpenDatasource' 的访问,因为此组件已作为此服务器安全配置的一部分而被关闭。系统管理员可以通过使用 sp_configure 启用 'Ad Hoc Distributed Queries'。有关启用 'Ad Hoc Distributed Queries' 的详细信息,请参阅 SQL Server 联机丛书中的 "外围应用配置器"。

具体执行步骤:

1.开启Ad Hoc Distributed Queries组件,在sql查询编辑器中执行如下语句:

exec sp_configure 'show advanced options',1

reconfigure

exec sp_configure 'Ad Hoc Distributed Queries',1

reconfigure

2.执行c#程序代码

3.关闭Ad Hoc Distributed Queries组件,在sql查询编辑器中执行如下语句:

exec sp_configure 'Ad Hoc Distributed Queries',0

reconfigure

exec sp_configure 'show advanced options',0

reconfigure

相关推荐
小徐不徐说4 小时前
C++ 接口与插件设计:从工厂注册到 Qt 动态插件
数据库·c++·qt·系统架构·程序设计
论文复现现场5 小时前
WRF、FEA 能用 L40S 加速吗?求解器检查、断点恢复与长期运行
java·数据库·算法·wrf·有限元分析·gpu计算·断点续算
Decay__6 小时前
04_MySQL DBA 日常运维手册 —— 会话管理、锁与阻塞、事务监控、慢查询与日志巡检
运维·数据库·sql·mysql·架构
心梦缘-雪雁7 小时前
SQL Server 查询数据存在哪个表里
数据库
lusklusklusk8 小时前
Python 巡检脚本:进程运行状态、数据库写入时效检查及邮件通知与告警
数据库·python·oracle
GeW8 小时前
产业新优势基础软件的人才底盘,从Linux与数据库开始
linux·数据库
SelectDB9 小时前
Doris Arrow Flight SQL 高速读取协议实战:与 Snowflake 客户端取数链路对照
大数据·数据库·数据分析
曼岛_9 小时前
[图解密码学]第4章 古典密码
java·数据库·密码学
瀚高PG实验室10 小时前
HGDB V9.0.5 .pgpass 免密登录提示 IsEncryptNon-base64 encoding 警告处理
数据库·postgresql·瀚高数据库
龙腾AI白云10 小时前
大模型检索增强生成(RAG)的技术原理与架构设计
数据库·python·机器学习·知识图谱