将 Excel 数据导入 MySql

能承受上万数据量,速度快,并且使用了事务,不会出现某条数据错误而导致部分数据插入(要是全部成功要是一条都不成功,测试过程中没出现失败),需要的朋友可以参考下

1.NPOI

2.MySql.Data

这里做个记录,待日后使用

效果图

     

连接字符串 app.config:

 <connectionStrings>
    <add name="DBConnectString" connectionString="Server=ip;Database=testjh;Uid=user;Pwd=123456;charset=utf8" providerName="MySql.Data.MySqlClient"/>
  </connectionStrings>

执行多条sql语句:

        /// <summary>
        /// 执行多条SQL语句,实现数据库事务。
        /// </summary>mysql数据库
        /// <param name="SQLStringList">多条SQL语句</param>
        public static void ExecuteSqlTran(List<string> SQLStringList)
        {
            using (MySqlConnection conn = new MySqlConnection(MySqlHelper.connectionString))
            {
                conn.Open();
                MySqlCommand cmd = new MySqlCommand();
                cmd.Connection = conn;
                MySqlTransaction tx = conn.BeginTransaction();
                cmd.Transaction = tx;
                try
                {
                    for (int n = 0; n < SQLStringList.Count; n++)
                    {
                        string strsql = SQLStringList[n].ToString();
                        if (strsql.Trim().Length > 1)
                        {
                            cmd.CommandText = strsql;
                            cmd.ExecuteNonQuery();
                        }
                        //后来加上的
                        if (n > 0 && (n % 500 == 0 || n == SQLStringList.Count - 1))
                        {
                            tx.Commit();
                            tx = conn.BeginTransaction();
                        }
                    }
                    //tx.Commit();//原来一次性提交
                }
                catch (System.Data.SqlClient.SqlException E)
                {
                    tx.Rollback();
                    throw new Exception(E.Message);
                }
            }
        }

  

单击按钮:

        /// <summary>
        /// 单击按钮
        /// </summary>
        /// <param name="sender"></param>
        /// <param name="e"></param>
        private void button1_Click(object sender, EventArgs e)
        {
            button1.Text = "正在插入中...";
            OpenFileDialog file1 = new OpenFileDialog();
            file1.Filter = "Excel文件|*.xlsx";
            if (file1.ShowDialog() == DialogResult.OK)
            {
                //开始读excel
                Microsoft.Office.Interop.Excel.Application xlApp = new Microsoft.Office.Interop.Excel.Application(); ;
                Microsoft.Office.Interop.Excel.Workbook workbook = xlApp.Workbooks.Open(file1.FileName, 0, false, 5, "", "",false, Microsoft.Office.Interop.Excel.XlPlatform.xlWindows, "", true, false, 0, true, 1, 0);
                int n = workbook.Worksheets.Count;
                string[] sheetSet = new string[n];
                ArrayList al = new ArrayList();
                for (int i = 0; i < n; i++)
                {
                    sheetSet[i] = ((Microsoft.Office.Interop.Excel.Worksheet)workbook.Worksheets[i + 1]).Name;
                }
                xlApp.Workbooks.Close();

                ExcelHelper ex = new ExcelHelper(file1.FileName);
                if (sheetSet.Length > 0)//判断存在 一个 Sheet1
                {
                    int countLength = sheetSet.Length;//表示 Sheet的个数
                    dt1 = ex.ExcelToDataTable(sheetSet[0], true);//"Sheet1" ,先假如只有一个Sheet1
                    insertMySql();
                }
            }

        }

写入数据:

public void insertMySql()
        {
            try
            {
                int ColumnsCount = dt1.Columns.Count;//得到读出表中 列的数量
                string str = string.Empty;
                string[] strArr = new string[ColumnsCount];
                string valuesStr = string.Empty;
                List<string> listStr=new List<string>();                

                for (int i = 0; i < dt1.Rows.Count; i++)
                {
                    DataRow dr = dt1.Rows[i];

                    for (int j = 0; j < ColumnsCount; j++)
                    {
                        strArr[j] = dr.ItemArray[j].ToString();
                    }
                    string sqlInsert =string.Format("insert into t_test(torder,tname,stu_num,tage) values(‘{0}‘,‘{1}‘,‘{2}‘,‘{3}‘)",strArr[0],strArr[1],strArr[2],strArr[3]);
                    listStr.Add(sqlInsert);
                    #region 没使用事务

                    //string sql = "insert into t_test(torder,tname,stu_num,tage) values(@torder,@tname,@stu_num,@tage)";
                    //MySqlParameter[] parms = {
                    //                     new MySqlParameter("@torder",strArr[0]),
                    //                     new MySqlParameter("@tname",strArr[1]),
                    //                     new MySqlParameter("@stu_num",strArr[2]),
                    //                     new MySqlParameter("@tage",strArr[3])
                    //                     };
                    // 在这里可以直接调用 ExecuteNonQuery 向数据库插数据
                  //  MySqlHelper.ExecuteNonQuery(MySqlHelper.connectionString, CommandType.Text, sql, parms);
                    #endregion
                }
                ExecuteSqlTran(listStr);//使用事务插入
              //  button1.Text = "插入成功!";
                Thread.Sleep(10000);
                button1.Text = "插入成功,请选择Excel文件!";
            }
            catch (Exception ex)
            {

                throw ex;
            }

        }

MySqlHelper:  应该把   ExecuteSqlTran 这个类方法放入该类,这里我没有这么做,项目小(零时需求)就没这么做了!

public static string connectionString = System.Configuration.ConfigurationManager.ConnectionStrings["DBConnectString"].ToString();

  

 

时间: 2024-11-10 08:35:19

将 Excel 数据导入 MySql的相关文章

将Excel数据导入mysql数据库的几种方法

将Excel数据导入mysql数据库的几种方法 “我的面试感悟”有奖征文大赛结果揭晓! 前几天需要将Excel表格中的数据导入到mysql数据库中,在网上查了半天,研究了半天,总结出以下几种方法,下面和大家分享一下: 一.用java来将Excel表格中的数据转到mysql中 这是我们用的第一种方法,就是在java找你感谢个类,然后这个类会将Excel表格中的数据存储到内存里,然后再从内存中读出来插入到数据库中,但是要 注意了,这里是存储到String[ ]数组里面,所以取出来的数据也是Strin

Excel连接到MySQL,将Excel数据导入MySql,MySQL for Excel,,

Excel连接到MySQL 即使当今时代我们拥有了类似微软水晶报表之类的强大报表工具和其他一些灵活的客户管 理应用工具,众多企业在分析诸如销售统计和收入信息的时候,微软的Excel依然是最常用的工具.这当然不是没有理由的:Excel以其强大丰富的各种功 能,已经成为办公环境中不可或缺的工具. 然而,现在公司正在逐渐地将数据开始存储在远程数据库中,这样可以供企业员工从不同的地方来阅读和修改数据.但是,以前固有的工作流程习惯是很难打破的.当你的老板需要从远端使用Excel以饼图的形势来看一下最近的销

将Excel数据导入MySQL

去年的投资统计月报数据量庞大,原始表格是xls格式(还是EXECL2003的),单个sheet最大只能放几万行,但数据总量有10万行以上,于是只能存成两个sheet.EXECL2010格式倒是单个sheet可以放得下,可是居然不能将数据完整的从一个sheet复制粘贴到另一个sheet(可能是因为行数太多).正好想学习一下execl数据导入MySQL数据库的方法,于是开始尝试. 一开始使用的是MySQL for Execl功能,在安装MySQL的时候安装此控件,在Excel的数据菜单下可以直接调用

【MySQL笔记】Excel数据导入Mysql数据库的实现方法——Navicat

很多公司尤其有点年头的公司,财务业务部门的各种表单都是excel来做的表格,随着互联网的发展各种业务流程都电子化流程化了,再在茫茫多的文档中去查找某一个年份月份的报告是件相当枯燥的事,所以都在想办法将以前的数据直接导入现代智能化的办公程序道中,在这里可能很多初级程序员都会有些挠头不知所措,下面来介绍下我的小经验,希望能为大家提供便利! 工具/原料 首先做一下说明,为什么我要用Navicat,第一个原因,因为它是个不错的Mysql GUI工具,更重要的是,它可以将一些外部数据源导入Mysql数据库

Excel数据导入mysql

今天开发提了一个需求,需要把Excel中的数据导入到mysql,本来想把Excel导入成csv的格式就自动有逗号了,这样用逗号作为分隔符,然后把数据拷贝到文本文件 使用mysql的load就可以了,谁知道并非我所想的. 下面看下Excel的数据形式,第四个字段有逗号,我勒个去,这怎么弄: 200005 黄金战靴 纯金打造的战靴,价格不菲,可用于提高其他防具经验 6 1 3 0 1 200006 黄金长剑 纯金打造的长剑,价格不菲,可用于提高其他武器经验 5 2 3 0 1 3.最后通过很多测试解

使用SQLyog将Excel数据导入Mysql数据库

1:建数据库 2:右键数据库→导入→导入外部数据库 3:直接下一步 4:选择数据源类型为EXCEL,选择文件路径,下一步 5:设置数据库信息,下一步 6:选择数据表,Destination中设置数据表名称,Map中设置Excel表列数据的数据表字段名,指定数据类型和长度 7:Advanced中设置表的创建方式 8:下一步直到结束 9:结果 备注:初次导入Excel表需要安装一个小工具,在导入的过程中按提示下载安装即可

用java将excel中数据导入mysql

java的poi技术读取Excel数据到MySQL 这篇blog是介绍java中的poi技术读取Excel数据,然后保存到MySQL数据中. 你也可以在 : java的poi技术读取和导入Excel了解到写入Excel的方法信息 使用JXL技术可以在 :java的jxl技术导入Excel  项目结构: Excel中的测试数据: 数据库结构: 对应的SQL: 1 CREATE TABLE `student_info` ( 2 `id` int(11) NOT NULL AUTO_INCREMENT

[Python]将Excel文件中的数据导入MySQL

Github Link 需求 现有2000+文件夹,每个文件夹下有若干excel文件,现在要将这些excel文件中的数据导入mysql. 每个excel文件的第一行是无效数据. 除了excel文件中已有的数据,还要添加一列,名为“at_company”,值为821. 流程 (1)获取excel文件列表,并根据excel文件名确定之后需要创建的table名: (2)连接mysql (3)创建table (4)插入数据 (5)断开连接 依赖模块 1. xlrd # to read excel fil

C#将Excel数据导入数据库(MySQL或Sql Server)

最近一直很忙,很久没写博客了.今天给大家讲解一下如何用C#将Excel数据导入Excel,同时在文章最后附上如何用sqlserver和mysql工具导入数据. 导入过程大致分为两步: 1.将excel数据导入到DataSet中; 2.将DataSet里面的数据遍历插入到对应的数据库 一.将excel数据导入到DataSet中 需添加引用using System.Data; using System.Data.OleDb; public static DataSet ReadExcel(strin