您好,欢迎来到三六零分类信息网!老站,搜索引擎当天收录,欢迎发信息

C# Excel数据验重及Table数据验重

2024/12/16 12:06:14发布17次查看
最近在做导入excel数据的时候,要检验数据是否重复:
1、要检验excel数据本身是否有重复?
2、excel中的数据是否与数据库中的数据重复?
一、检验excel中数据是否重复的方式有:
1、将table中的数据使用select语句来过滤(此处略,可以参考二)。
2、使用for循环来手动核对,代码如下:
#region 记录excel中的重复列 /// <summary> /// 记录excel中的重复列 /// </summary> /// <param name="dt">需要获取重复列的表</param> /// <returns>提示重复信息</returns> private string getdistincttable(datatable dt) { //datatable dtclone = dt;这种方式是错误的,因为这种情况,修改dtclone的同时dt也会被修改。 datatable dtclone = dt.clone(); ; string vssubacctno = string.empty; string vsacctno = string.empty; string repeatexcel = string.empty; string vstransdate = string.empty; for (int i = dtclone.rows.count - 1; i >= 0; i--) { vssubacctno = dtclone.rows[i][4].tostring().trim(); vsacctno = dtclone.rows[i][1].tostring().trim(); vstransdate = dtclone.rows[i][8].tostring().trim(); dtclone.rows[i].delete(); dtclone.acceptchanges(); for (int j = dtclone.rows.count - 1; j >= 0; j--) { if (vssubacctno == dtclone.rows[j][4].tostring().trim() && vsacctno == dtclone.rows[j][1].tostring().trim() && vstransdate == dtclone.rows[j][8].tostring().trim()) { //如果重复了,进行记录 repeatexcel += "第" + (i + 1).tostring() + "行\r\n"; break; } } } return repeatexcel; } #endregion
小注:
clone应该修改为为copy
二、检验excel中数据是否与数据库中数据重复的方式有:
1、遍历table并将其中每条数据,在数据库中检验重复。
这种方式适用于table中数据比较少(100以内),而数据库中要对比表很大的情况。因为这种方式要每对比一条数据,都要连接数据库,并执行查询,很费时间。
大体测试了一下,excel中有2000条数据,仅仅在数据库中查询,就消耗了7分40秒即4601000 毫秒(ms),大约一条数据耗时:2300.5毫秒
其实,使用方式2导入2000条,耗时也比方式1导入100条,耗时少。
2、将数据库中要对比的表数据取到一个dataset中,遍历table并将其中每条数据,在dataset中检验重复,代码如下:
strtemp = "acctno='" + obzh.tostring() + "' and transdate='" + obrq.tostring() + "' and subacctno='" + obdfzh.tostring() + "'"; rowstemp = dstemp.tables[0].select(strtemp); if (rowstemp.length>0) { //如果重复了,进行记录 repeatdj += "第" + v.tostring() + "行\r\n"; }
以上就是c#  excel数据验重及table数据验重 的内容。
该用户其它信息

VIP推荐

免费发布信息,免费发布B2B信息网站平台 - 三六零分类信息网 沪ICP备09012988号-2
企业名录 Product