您好,欢迎访问一九零五行业门户网

黄聪:c#中高效的excel导入sqlserver的方法

将oledb读取的excel数据快速插入的sqlserver中,很多人通过循环来拼接sql,这样做不但容易出错而且效率低下,最好的办法是使用bcp,也就是system.data.sqlclient.sqlbulkcopy 类来实现。不但速度快,而且代码简单,下面测试代码导入一个6万多条数据的sheet,
将oledb读取的excel数据快速插入的sqlserver中,很多人通过循环来拼接sql,这样做不但容易出错而且效率低下,最好的办法是使用bcp,也就是system.data.sqlclient.sqlbulkcopy 类来实现。不但速度快,而且代码简单,下面测试代码导入一个6万多条数据的sheet,包括读取(全部读取比较慢)在我的开发环境中只需要10秒左右,而真正的导入过程只需要4.5秒。
using system;
using system.data;
using system.windows.forms;
using system.data.oledb;
namespace windowsapplication2
{
    public partial class form1 : form
    {
        public form1()
        {
            initializecomponent();
        }
        private void button1_click(object sender, eventargs e)
        {
            //测试,将excel中的sheet1导入到sqlserver中
            string connstring = server=localhost;uid=sa;pwd=sqlgis;database=master;
            system.windows.forms.openfiledialog fd = new openfiledialog();
            if (fd.showdialog() == dialogresult.ok)
            {
                transferdata(fd.filename, sheet1, connstring);
            }
        }
        public void transferdata(string excelfile, string sheetname, string connectionstring)
        {
            dataset ds = new dataset();
            try
            {
                //获取全部数据
                string strconn = provider=microsoft.jet.oledb.4.0; + data source= + excelfile + ; + extended properties=excel 8.0;;
                oledbconnection conn = new oledbconnection(strconn);
                conn.open();
                string strexcel = ;
                oledbdataadapter mycommand = null;
                strexcel = string.format(select * from [{0}$], sheetname);
                mycommand = new oledbdataadapter(strexcel, strconn);
                mycommand.fill(ds, sheetname);
                //如果目标表不存在则创建
                string strsql = string.format(if object_id('{0}') is null create table {0}(, sheetname);
                foreach (system.data.datacolumn c in ds.tables[0].columns)
                {
                    strsql += string.format([{0}] varchar(255),, c.columnname);
                }
                strsql = strsql.trim(',') + );
                using (system.data.sqlclient.sqlconnection sqlconn = new system.data.sqlclient.sqlconnection(connectionstring))
                {
                    sqlconn.open();
                    system.data.sqlclient.sqlcommand command = sqlconn.createcommand();
                    command.commandtext = strsql;
                    command.executenonquery();
                    sqlconn.close();
                }
                //用bcp导入数据
                using (system.data.sqlclient.sqlbulkcopy bcp = new system.data.sqlclient.sqlbulkcopy(connectionstring))
                {
                    bcp.sqlrowscopied += new system.data.sqlclient.sqlrowscopiedeventhandler(bcp_sqlrowscopied);
                    bcp.batchsize = 100;//每次传输的行数
                    bcp.notifyafter = 100;//进度提示的行数
                    bcp.destinationtablename = sheetname;//目标表
                    bcp.writetoserver(ds.tables[0]);
                }
            }
            catch (exception ex)
            {
                system.windows.forms.messagebox.show(ex.message);
            }
        }
        //进度显示
        void bcp_sqlrowscopied(object sender, system.data.sqlclient.sqlrowscopiedeventargs e)
        {
            this.text = e.rowscopied.tostring();
            this.update();
        }
}
}
上面的transferdata基本可以直接使用,如果要考虑周全的话,可以用oledb来获取excel的表结构,并且加入columnmappings来设置对照字段,这样效果就完全可以做到和sqlserver的dts相同的效果了。
获取excel结构的方法可以参考我先前的文章
http://blog.csdn.net/jinjazz/archive/2008/05/13/2441635.aspx
其它类似信息

推荐信息