SqlCommandBuilder类批量更新excel或者CSV数据的方法

 更新时间:2021年9月22日 10:09  点击:2183

当你批量操作数据的时候,常常会使用到update table1 from table2的这种方式,这种方式是最简洁的。
但当你从excel或者CSV文件更新海量数据时,再使用这种方法,那性能是不是好?字符串拼接又何其之多,大数据是不是需要分组更新?
我不想去检测各种方法的速度,因为我个人比较认可以下方式,欢迎大家批评与指正。
我需要使用到的类主要是SqlCommandBuilder

/// <param name="table">准备更新的DataTable新数据</param>
  /// <param name="TableName">对应要更新的数据库表名</param>
  /// <param name="primaryKeyName">对应要更新的数据库表的主键名</param>
  /// <param name="columnsName">对应要更新的列的列名集合</param>
  /// <param name="limitColumns">需要在SQL的WHERE条件中限定的条件字符串,可为空。</param>
  /// <param name="onceUpdateNumber">每次往返处理的行数</param>
  /// <returns>返回更新的行数</returns>
  public static int Update(DataTable table, string TableName, string primaryKeyName, string[] columnsName, string limitWhere,int onceUpdateNumber)
  {
    if (string.IsNullOrEmpty(TableName)) return 0;
    if (string.IsNullOrEmpty(primaryKeyName)) return 0;
    if (columnsName == null || columnsName.Length <= 0) return 0;
    DataSet ds = new DataSet();
    ds.Tables.Add(table);
    int result = 0;
    using (SqlConnection sqlconn = new SqlConnection(SqlHelper.ConnString))
    {
      sqlconn.Open();

      //使用加强读写锁事务  
      SqlTransaction tran = sqlconn.BeginTransaction(IsolationLevel.ReadCommitted);
      try
      {
        foreach (DataRow dr in ds.Tables[0].Rows)
        {
          //所有行设为修改状态  
          dr.SetModified();
        }
        //为Adapter定位目标表  
        SqlCommand cmd = new SqlCommand(string.Format("select * from {0} where {1}", TableName,limitWhere), sqlconn, tran);
        SqlDataAdapter da = new SqlDataAdapter(cmd);
        SqlCommandBuilder sqlCmdBuilder = new SqlCommandBuilder(da);
        da.AcceptChangesDuringUpdate = false;
        string columnsUpdateSql = "";
        SqlParameter[] paras = new SqlParameter[columnsName.Length];
        //需要更新的列设置参数是,参数名为"@+列名"
        for (int i = 0; i < columnsName.Length; i++)
        {
          //此处拼接要更新的列名及其参数值
          columnsUpdateSql += ("[" + columnsName[i] + "]" + "=@" + columnsName[i] + ",");
          paras[i] = new SqlParameter("@" + columnsName[i], columnsName[i]);
        }
        if (!string.IsNullOrEmpty(columnsUpdateSql))
        {
          //此处去掉拼接处最后一个","
          columnsUpdateSql = columnsUpdateSql.Remove(columnsUpdateSql.Length - 1);
        }
        //此处生成where条件语句
        string limitSql = ("[" + primaryKeyName + "]" + "=@" + primaryKeyName);
        SqlCommand updateCmd = new SqlCommand(string.Format(" UPDATE [{0}] SET {1} WHERE {2} ", TableName, columnsUpdateSql, limitSql));
        //不修改源DataTable  
        updateCmd.UpdatedRowSource = UpdateRowSource.None;
        da.UpdateCommand = updateCmd;
        da.UpdateCommand.Parameters.AddRange(paras);
        da.UpdateCommand.Parameters.Add("@" + primaryKeyName, primaryKeyName);
        //每次往返处理的行数
        da.UpdateBatchSize = onceUpdateNumber;
        result = da.Update(ds,TableName);
        ds.AcceptChanges();
        tran.Commit();

      }
      catch
      {
        tran.Rollback();
      }
      finally
      {
        sqlconn.Dispose();
        sqlconn.Close();
      }


    }
    return result;
  }

注: 此方法调用时要传入的参数,包括主键名和列名都应与数据库实际的名称相对应。
你可以不传入限定的where条件,如果传入,只需传入:Name="chamy" or Name="jundy",不需加入“where”等字符,不可以在此处传入主键的限定,你只需要在主键名这个参数上传入名称即可。

以上就是为大家分享的SqlCommandBuilder类批量更新excel或者CSV数据的方法,希望对大家的学习有所帮助。

[!--infotagslink--]

相关文章

  • pandas pd.read_csv()函数中parse_dates()参数的用法说明

    这篇文章主要介绍了pandas pd.read_csv()函数中parse_dates()参数的用法说明,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧...2021-03-05
  • SpringBoot实现excel文件生成和下载

    这篇文章主要为大家详细介绍了SpringBoot实现excel文件生成和下载,文中示例代码介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们可以参考一下...2021-02-09
  • c#读取excel方法实例分析

    这篇文章主要介绍了c#读取excel方法,实例分析了C#读取excel文件的原理与相关技巧,需要的朋友可以参考下...2020-06-25
  • Python导入数值型Excel数据并生成矩阵操作

    这篇文章主要介绍了Python导入数值型Excel数据并生成矩阵操作,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧...2020-06-09
  • C# winform打开Excel文档的方法总结(必看篇)

    下面小编就为大家带来一篇C# winform打开Excel文档的方法总结(必看篇)。小编觉得挺不错的,现在就分享给大家,也给大家做个参考。一起跟随小编过来看看吧...2020-06-25
  • c# 对CSV文件操作(写入、读取、修改)

    这篇文章主要介绍了c# 如何对CSV文件操作,帮助大家更好的理解和学习C#,感兴趣的朋友可以了解下...2020-11-03
  • C# 导出Excel的6种简单方法实现

    C# 导出 Excel 的6种简单方法:数据表导出到 Excel,对象集合导出到 Excel,数据库导出到 Excel,微软网格控件导出到 Excel,数组导出到 Excel,CSV 导出到 Excel,你都会了吗?需要的朋友们下面随着小编来一起学习学习吧...2020-06-25
  • C#实现Excel表数据导入Sql Server数据库中的方法

    这篇文章主要介绍了C#实现Excel表数据导入Sql Server数据库中的方法,结合实例形式详细分析了C#读取Excel表数据及导入Sql Server数据库的具体操作步骤与相关操作技巧,需要的朋友可以参考下...2020-06-25
  • C#中将DataTable转换成CSV文件的方法

    DataTable用于在.net项目中,用于缓存数据,DataTable表示内存中数据的一个表,在.net项目中运用C#将DataTable转化为CSV文件,接下来通过本文给大家提供一个通用的方法,感兴趣的朋友可以参考下...2020-06-25
  • C#实现将数据导出到word或者Excel中的方法

    这篇文章主要介绍了C#实现将数据导出到word或者Excel中的方法,涉及C#操作word及Excel格式文件的方法,具有一定参考借鉴价值,需要的朋友可以参考下...2020-06-25
  • C#使用Ado.Net更新和添加数据到Excel表格的方法

    这篇文章主要介绍了C#使用Ado.Net更新和添加数据到Excel表格的方法,较为详细的分析了OLEDB的原理与使用技巧,可实现较为方便的操作Excel数据,需要的朋友可以参考下...2020-06-25
  • C#使用Aspose.Cells创建和读取Excel文件

    这篇文章主要为大家详细介绍了C#使用Aspose.Cells创建和读取Excel文件,具有一定的参考价值,感兴趣的小伙伴们可以参考一下...2020-06-25
  • C#使用oledb导出数据到excel的方法

    这篇文章主要介绍了C#使用oledb导出数据到excel的方法,结合实例形式分析了C#操作oledb导出数据的相关技巧与注意事项,需要的朋友可以参考下...2020-06-25
  • C#操作excel打印的示例

    这篇文章主要介绍了C#操作excel打印的示例,帮助大家利用c#打印表格,提高办公效率,感兴趣的朋友可以了解下...2020-12-08
  • C#删除Excel中的图片实例代码

    在本篇文章里小编给大家分享了关于C#删除Excel中的图片的实例代码内容,有兴趣的朋友们参考学习下。...2020-06-25
  • C#使用Aspose.Cells控件读取Excel

    本文介绍Aspose.Cells基础的用法,供大家参考。...2020-06-25
  • C#中将ListView中数据导出到Excel的实例方法

    首先 你需要添加引用Microsoft Excel 11.0 Object Library...2020-06-25
  • mysql 导出CSV文件 并带表头的方法

    下面小编就为大家带来一篇mysql 导出CSV文件 并带表头的方法。小编觉得挺不错的,现在就分享给大家,也给大家做个参考。一起跟随小编过来看看吧...2017-04-26
  • R语言开发之CSV文件的读写操作实现

    这篇文章主要介绍了R语言开发之CSV文件的读写操作实现,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧...2021-05-06
  • R语言读取csv文件出错的解决方案

    这篇文章主要介绍了R语言读取csv文件出错的解决方案,具有很好的参考价值,希望对大家有所帮助。一起跟随小编过来看看吧...2021-05-06