两个数据库通过DataTable实现差异传输

最新推荐文章于 2023-07-19 17:16:13 发布
最新推荐文章于 2023-07-19 17:16:13 发布
阅读量133 收藏
点赞数
文章标签： 数据库
原文链接：http://www.cnblogs.com/chengeng/p/7505475.html
版权

两个主要方法

/// <summary>
/// 用途：
/// 用源表和目标表比较，返回差异的数据（目标表为参照物）
/// 
/// 逻辑：
/// 1、合并两个表
/// 2、循环合并后得到的表，判断是否在目标表中存在，如果不存在，则是新增的，RowState为设置为ADD，如果存在，RowState设置为Modify
/// </summary>
/// <param name="sourceTable">源表</param>
/// <param name="targetTable">目标表</param>
/// <param name="primaryKeyColumn">主键字段</param>
/// <returns>差异数据的DataTable，该DataTable中必须有TableName属性，而且是跟数据库中的表一致的</returns>
private DataTable GetDataTableExceptData(DataTable sourceTable,DataTable targetTable,string tableName,string primaryKeyColumn)
{
DataTable dtExcept = new DataTable(sourceTable.TableName);

try
{
dtExcept = sourceTable.AsEnumerable().Except(targetTable.AsEnumerable(),DataRowComparer.Default).CopyToDataTable();
}
catch (Exception)
{

}


for (int i = 0; i < dtExcept.Rows.Count; i++)
{
object obj = dtExcept.Rows[i][primaryKeyColumn];

targetTable.DefaultView.Sort = primaryKeyColumn;
int count = targetTable.DefaultView.Find(obj);

if (count >= 0)
{
dtExcept.Rows[i].SetModified();
}else{
dtExcept.Rows[i].SetAdded();
}
}

dtExcept.TableName = tableName;
return dtExcept;

}

/// <summary>
/// 用途：
/// 根据DataTable 获取SQL脚本
/// 
/// 逻辑：
/// 1、先判断是否是自动曾长的，如果是自动增长，先关闭自动增长
/// </summary>
/// <param name="dt">源DataTable与目标DataTable的差异</param>
/// <param name="primaryKeyColumn">主键字段</param>
/// <param name="isIdentity">是否自动增长</param>
/// <returns>SQL脚本</returns>
private StringBuilder GetScriptByDataTable(DataTable dt, string primaryKeyColumn,bool isIdentity)
{
StringBuilder sb = new StringBuilder("");

// 开启自动增长时能进行插入数据，后面对应有关闭
if (isIdentity)
{
sb.AppendLine();
sb.Append("-- ===========================" + dt.TableName + "===============================");
sb.AppendLine();
sb.Append("SET IDENTITY_INSERT " + dt.TableName + " ON");
}

if (dt.TableName == "")
{
DialogResult result = MessageBox.Show("DataTable 的 TableName 未指定");
return null; 
}

List<string> list_Column = new List<string>();
foreach (DataColumn item in dt.Columns)
{
list_Column.Add(item.ColumnName);
}


for (int i = 0; i < dt.Rows.Count; i++)
{
StringBuilder sb_Insert = new StringBuilder("");
DataRowState rowState = dt.Rows[i].RowState;
if (rowState == DataRowState.Added)
{
StringBuilder sb_Column = new StringBuilder();
StringBuilder sb_Values = new StringBuilder();

sb_Insert.AppendLine();
sb_Insert.Append("INSERT INTO " + dt.TableName + "(");
for (int m = 0; m < list_Column.Count; m++)
{
sb_Column.Append("," + list_Column[m]);
sb_Values.Append(",'" + dt.Rows[i][list_Column[m]]+"'");
}
sb_Insert.Append(sb_Column.ToString());
sb_Insert.Append(") VALUES(");
sb_Insert.Append(sb_Values.ToString());
sb_Insert.Append(");");
sb_Insert.Replace("INSERT INTO "+ dt.TableName +"(,", "INSERT INTO "+ dt.TableName +"(");
sb_Insert.Replace("VALUES(,", "VALUES(");

sb.Append(sb_Insert.ToString());
}
if (rowState == DataRowState.Modified)
{
StringBuilder sb_Update = new StringBuilder("");
sb_Update.AppendLine();
sb_Update.Append("UPDATE " + dt.TableName + " SET ");
for (int k = 0; k < list_Column.Count; k++)
{
if (list_Column[k] != primaryKeyColumn)
{
sb_Update.Append("," + list_Column[k] + "='" + dt.Rows[i][list_Column[k]] + "'");
}
}
sb_Update.Replace("SET ,", "SET ");
sb_Update.Append(" WHERE " + primaryKeyColumn + " = '" + dt.Rows[i][primaryKeyColumn] + "';");

sb.Append(sb_Update.ToString());
}
if (i > 0 && i % 100 == 0)
{
sb.AppendLine();
sb.Append("GO;");
sb.AppendLine();
}
}

// 关闭自动增长时能进行插入数据，前面对应有开启
if (isIdentity)
{
sb.AppendLine();
sb.Append("SET IDENTITY_INSERT " + dt.TableName + " OFF");
}

return sb;
}

 

=========================================================================

using System;
using System.Collections;
using System.Collections.Generic;
using System.ComponentModel;
using System.Configuration;
using System.Data;
using System.Drawing;
using System.Linq;
using System.Text;
using System.Windows.Forms;

namespace IT_Tools
{
public partial class FormOATransmission : Form
{
/// <summary>
/// 源数据库链接
/// </summary>
private static string ConnectionString_Source = ConfigurationManager.AppSettings["DB_Source"].ToString().Trim(); // 开发机
/// <summary>
/// 目标数据库链接
/// </summary>
private static string ConnectionString_Target = ConfigurationManager.AppSettings["DB_Target"].ToString().Trim(); // 生产机
/// <summary>
/// 需要更新的表集合
/// </summary>
private static ArrayList tableList = new ArrayList();
public FormOATransmission()
{
InitializeComponent();
}

// 两个环境的表对比
private void btnDbCompare_Click(object sender, EventArgs e)
{
string strTableName = ""; // 当前表名称，用于表集合循环
string strPrimaryKeyColumn = "";// 当前表主键字段，用于表集合循环
bool isIdentity=false; // 是否自动曾长，用于表集合循环

DataTable dtSource = null; // 用于存放源表的数据，结构和表名称与目标表一致
DataTable dtTarget = null; // 用于存放目标表的数据，结构和表名称与源表一致
DataTable dt = null;

StringBuilder sb_CurrentTableScript = null;
StringBuilder sb_AllTableScript = new StringBuilder();

DataTable dtTableList = GetTableList(); //获取需要更新的表集合

for (int i = 0; i < dtTableList.Rows.Count; i++)
{
strTableName = dtTableList.Rows[i]["TableName"].ToString();
string sql = "select * from " + strTableName;
dtSource = SqlHelper.ExecuteDataset(ConnectionString_Source, CommandType.Text, sql).Tables[0];
dtTarget = SqlHelper.ExecuteDataset(ConnectionString_Target, CommandType.Text, sql).Tables[0];

strPrimaryKeyColumn = dtTableList.Rows[i]["PrimaryKeyColumn"].ToString();
isIdentity = bool.Parse(dtTableList.Rows[i]["IsIdentity"].ToString());

dt = GetDataTableExceptData(dtSource, dtTarget, strTableName, strPrimaryKeyColumn);
if (dt.Rows.Count > 0)
{
sb_CurrentTableScript = GetScriptByDataTable(dt, strPrimaryKeyColumn, isIdentity);

sb_CurrentTableScript.AppendLine();
sb_AllTableScript.Append(sb_CurrentTableScript);
}
}

rtbSqlContent.Text = sb_AllTableScript.ToString();


}

/// <summary>
/// 用途：
/// 用源表和目标表比较，返回差异的数据（目标表为参照物）
///
/// 逻辑：
/// 1、合并两个表
/// 2、循环合并后得到的表，判断是否在目标表中存在，如果不存在，则是新增的，RowState为设置为ADD，如果存在，RowState设置为Modify
/// </summary>
/// <param name="sourceTable">源表</param>
/// <param name="targetTable">目标表</param>
/// <param name="primaryKeyColumn">主键字段</param>
/// <returns>差异数据的DataTable，该DataTable中必须有TableName属性，而且是跟数据库中的表一致的</returns>
private DataTable GetDataTableExceptData(DataTable sourceTable,DataTable targetTable,string tableName,string primaryKeyColumn)
{
DataTable dtExcept = new DataTable(sourceTable.TableName);

try
{
dtExcept = sourceTable.AsEnumerable().Except(targetTable.AsEnumerable(),DataRowComparer.Default).CopyToDataTable();
}
catch (Exception)
{

}


for (int i = 0; i < dtExcept.Rows.Count; i++)
{
object obj = dtExcept.Rows[i][primaryKeyColumn];

targetTable.DefaultView.Sort = primaryKeyColumn;
int count = targetTable.DefaultView.Find(obj);

if (count >= 0)
{
dtExcept.Rows[i].SetModified();
}else{
dtExcept.Rows[i].SetAdded();
}
}

dtExcept.TableName = tableName;
return dtExcept;

}

/// <summary>
/// 用途：
/// 根据DataTable 获取SQL脚本
///
/// 逻辑：
/// 1、先判断是否是自动曾长的，如果是自动增长，先关闭自动增长
/// </summary>
/// <param name="dt">源DataTable与目标DataTable的差异</param>
/// <param name="primaryKeyColumn">主键字段</param>
/// <param name="isIdentity">是否自动增长</param>
/// <returns>SQL脚本</returns>
private StringBuilder GetScriptByDataTable(DataTable dt, string primaryKeyColumn,bool isIdentity)
{
StringBuilder sb = new StringBuilder("");

// 开启自动增长时能进行插入数据，后面对应有关闭
if (isIdentity)
{
sb.AppendLine();
sb.Append("-- ===========================" + dt.TableName + "===============================");
sb.AppendLine();
sb.Append("SET IDENTITY_INSERT " + dt.TableName + " ON");
}

if (dt.TableName == "")
{
DialogResult result = MessageBox.Show("DataTable 的 TableName 未指定");
return null;
}

List<string> list_Column = new List<string>();
foreach (DataColumn item in dt.Columns)
{
list_Column.Add(item.ColumnName);
}


for (int i = 0; i < dt.Rows.Count; i++)
{
StringBuilder sb_Insert = new StringBuilder("");
DataRowState rowState = dt.Rows[i].RowState;
if (rowState == DataRowState.Added)
{
StringBuilder sb_Column = new StringBuilder();
StringBuilder sb_Values = new StringBuilder();

sb_Insert.AppendLine();
sb_Insert.Append("INSERT INTO " + dt.TableName + "(");
for (int m = 0; m < list_Column.Count; m++)
{
sb_Column.Append("," + list_Column[m]);
sb_Values.Append(",'" + dt.Rows[i][list_Column[m]]+"'");
}
sb_Insert.Append(sb_Column.ToString());
sb_Insert.Append(") VALUES(");
sb_Insert.Append(sb_Values.ToString());
sb_Insert.Append(");");
sb_Insert.Replace("INSERT INTO "+ dt.TableName +"(,", "INSERT INTO "+ dt.TableName +"(");
sb_Insert.Replace("VALUES(,", "VALUES(");

sb.Append(sb_Insert.ToString());
}
if (rowState == DataRowState.Modified)
{
StringBuilder sb_Update = new StringBuilder("");
sb_Update.AppendLine();
sb_Update.Append("UPDATE " + dt.TableName + " SET ");
for (int k = 0; k < list_Column.Count; k++)
{
if (list_Column[k] != primaryKeyColumn)
{
sb_Update.Append("," + list_Column[k] + "='" + dt.Rows[i][list_Column[k]] + "'");
}
}
sb_Update.Replace("SET ,", "SET ");
sb_Update.Append(" WHERE " + primaryKeyColumn + " = '" + dt.Rows[i][primaryKeyColumn] + "';");

sb.Append(sb_Update.ToString());
}
if (i > 0 && i % 100 == 0)
{
sb.AppendLine();
sb.Append("GO;");
sb.AppendLine();
}
}

// 关闭自动增长时能进行插入数据，前面对应有开启
if (isIdentity)
{
sb.AppendLine();
sb.Append("SET IDENTITY_INSERT " + dt.TableName + " OFF");
}

return sb;
}

/// <summary>
/// 需要同步的表
/// </summary>
/// <returns></returns>
private DataTable GetTableList()
{
DataTable dt = new DataTable();
DataRow row = null;

dt.Columns.AddRange(new DataColumn[]{
new DataColumn("TableName",typeof(string))
,new DataColumn("PrimaryKeyColumn",typeof(string))
,new DataColumn("IsIdentity",typeof(bool))
});

row = dt.NewRow();
row["TableName"] = "TB_A";
row["PrimaryKeyColumn"] = "Id";
row["IsIdentity"] = true;
dt.Rows.Add(row);

row = dt.NewRow();
row["TableName"] = "TB_B";
row["PrimaryKeyColumn"] = "Id";
row["IsIdentity"] = true;
dt.Rows.Add(row);

return dt;
}

// 表的同步
private void btnDbTransmisson_Click(object sender, EventArgs e)
{

}
}
}

转载于:https://www.cnblogs.com/chengeng/p/7505475.html

weixin_34239592
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
两个数据库进行数据比对(DataTable对比)
CoCoLait
09-25 3万+
前一段时间做了一个数据比对的工作，大致的要求是这样： 首先从A库导出产品的数据模型到Excel中，导出完成时记录导出产品条目以及产品结构到B库的Model表和Partstr表中。然后就是每隔一段固定时间系统自动进行数据比对（系统自动执行比对服务详见http://blog.csdn.net/u012147433/article/details/48730591）如果有A、B库中的数据有不同，则
C# 对DataTable中按条件进行筛选和更新。
weixin_30322405的博客
01-01 1446
当我们频繁的对数据库进行操作时，可能造成CPU使用率过高，这时我们可以先将数据表读取到DataTable，然后在必要的时候再更新到数据库中。 以下是DataTable中对数据的选择和更新操作。采用DataTable.Select()方法。采用该方法获取的结果是DataRow对象数组。Select()有三种重载（以下资料来自MSDN）： MSDN关于Select()方法内容链接 以下依次进行说明：...
DataTable数据对比
最新发布
技术分享博客
07-19 1861
开发中我们经常会出现查询数据库后返回DataTable的情况，那么DataTable中常用的一些操作阁下又了解多少呢，例如：两个结构不同DataTable怎么找出他们俩之间的交集和差集。
winfrom （1） 窗体传值 连接 （2）鼠标移动窗口
weixin_30648963的博客
06-12 316
private void button1_Click(object sender, EventArgs e) //这里是不用泛型集合的情况，用的是Datatable { SqlConnection conn = new SqlConnection("server=.;database=Cml;user=sa;pwd=123"); ...
C#使用DataSet Datatable更新数据库的三种实现方法
01-01
本文以实例形式讲述了使用DataSet Datatable更新数据库的三种实现方法，包括CommandBuilder 方法、DataAdapter 更新数据源以及使用sql语句更新。分享给大家供大家参考之用。具体方法如下： 一、自动生成命令的条件 ...
C# 连接各种数据库返回DataTable的方法
06-01
本篇文章将详细讲解如何使用C#语言连接不同的数据库，并通过执行SQL语句获取DataTable对象，其中包括Access、SQL Server、Oracle以及MySQL四种常见数据库的连接方法。 1. **C#与Access数据库连接** Access数据库...
详解C#把DataTable中数据一次插入数据库的方法
08-31
本篇文章主要介绍了详解C#把DataTable中数据一次插入数据库的方法，具有一定的参考价值，有兴趣的可以了解一下。
DataTable获取列名 DataTable批量更新至数据库
01-21
好久没写东西了，这几个月也没下功夫钻研技术，愧疚啊。说下近刚学会的DataTable 的用法吧，新手适合看下。 　1 DataTable 获取列名 　在处理数据的时候大家都会用到模型，从datatable遍历数据的时候可以用...
关于两个窗口间的数据传递
kamiiyu的专栏
06-13 1645
其实道理很简单，关键是在frame1在调用frame2的时候，frame2怎么获得frame1的对象一种方法是改造frame2的构造函数，例如：Frame2(Frame1 fObj){}即把把Frame1类的对象带进Frame2中，那么frame2就可以调用frame1的各种属性和方法了第二种方法就是不改造Frame2的高造函数，而是写一个方法返回Frame1的对象例如：p
Vue随笔10-关于两个不同页面（窗口）之间怎么传值通信、调用方法的问题解决
weixin_40994437的博客
11-19 4278
关于两个不同页面（窗口）之间怎么传值通信、调用方法的问题解决前言一、vm.$on(event,callback)的使用二、window.opener的运用 前言 项目中遇到这么个cr—在新打开的页面提交文件后关闭这个页面后就刷新原本的父页面渲染出提交的数据，有想过用vuex的，但是太复杂要改动的东西太多没必要，之后想到过用window.opener.location.reload()这个方法的，但是体验太差了-这是整个页面的刷新，最终找了一上午才找到以下两个办法。 PS:不过经测试，使用方法一的话好像.
matlab 多界面传值,Matlab多窗口传值问题(GUI) | 学步园
weixin_29819639的博客
03-18 415
1.直接传递当要在一个matlab中的.m文件打开一个新窗口时候，可以直接传递例如有两个窗口 A.fig/A.m 和 B.fig/B.m在 A.m中B(var1) ; 即可传入参数那么在B中这样获取即可:if length(varargin)==1some_var= varargin{1};end2.通过output属传回在A.m中some_var=B(var1);也就是 B还需要返回值。那么在...
如何在两个页面之间传递DataTable
WDBS_05的专栏
03-05 5835
转载地址：http://bbs.csdn.net/topics/60089625 SP.NET WEB FORMS 页面间的传值方法        ASP.NET WEB FORMS  给开发者提供了极好的事件驱动开发模式。然而这种简单的应用程序开发模式却给我们带来了一些小问题，举个例子，在传统的ASP应用程序中，你能够通过POST方法很容易的把一个值或多个值从一个页面传送到另一个页面，用
C#中两个窗体间的数据传递
hello
02-21 6201
winform 窗体编程 在两个窗体间传递数据可分为两种： 一：父窗体向子窗体传递。 二：子窗体向父窗体传递。 传递实现的机制： 分别在两个窗体中创建公有属性的设置字段，分别供两个窗口调用。 两种情况的区别： 一：在父窗体向子窗体传递数据时，由于在父窗口中已经实例化出子窗口对象，可以直接调用子窗口的设置字段程序。 代码示例： Step one:在父窗体中添加_senddata字段。 p...
7.C# DataTbale详细操作
qq_34962100的博客
05-18 339
C# DataTbale详细操作 1、创建DataTable对象 DataTabledt=newDataTable("Table_AX"); 2、为DataTable创建列 //方式一(我觉得这种好)dt.Columns.Add("column0",System.Type.GetType("System.String"));//方式二DataColumndc=newDataColumn("column0",typeof(string));DataColumndc=new...
pyqt5两个窗口互相传值
海涛高软
09-17 1480
A: B: import sys from PyQt5.QtWidgets import QApplication, QWidget, QMainWindow from PyQt5.uic.properties import QtWidgets from A import Ui_Dialog from B import Ui_Dialog as BDialog class myA(QWidget, Ui_Dialog): def __init__(self): ...
c#对比两个datatable的差异
06-01
你可以使用 C# 中的 DataTable 类的 Merge 方法来将两个 DataTable 对象合并为一个，然后使用 Select 方法筛选出其中的不同行。 以下是一个示例代码： ```csharp DataTable dt1 = new DataTable(); DataTable dt2 = new DataTable(); // 填充 DataTable 对象 DataTable dtDiff = dt1.Clone(); dtDiff.Merge(dt1); dtDiff.Merge(dt2); var duplicates = dtDiff.AsEnumerable() .GroupBy(r => r) .Where(g => g.Count() > 1) .Select(g => g.Key); DataTable dtResult = dtDiff.Clone(); foreach (DataRow row in duplicates) { dtResult.Rows.Add(row.ItemArray); } ``` 在这个示例中，我们首先使用 Clone 方法复制了 dt1，然后使用 Merge 方法将 dt2 合并到 dtDiff 中。接着，我们使用 AsEnumerable 和 GroupBy 方法找出其中的重复行，最后将这些重复行添加到 dtResult 中。 请注意，这个示例假设两个 DataTable 对象的结构是相同的。如果两个 DataTable 对象的结构不同，则需要进行一些额外的处理来匹配它们的列。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值