【问题标题】:Non Intersecting two ResultSet in JavaJava中不相交的两个ResultSet
【发布时间】:2015-07-06 11:42:19
【问题描述】:

我有两个来自两个不同数据库的结果集,我需要比较它。我想要一个像

这样的操作

A-B

对他们执行。

我无法执行逐行比较,因为 A 结果集中的第一行可以出现在 B 结果集中的任何位置。

以下是在 .NET 中执行此操作的代码,非常简单且完美。

var nonIntersecting = dtSource.AsEnumerable().Except
                      (
                        dtTarget.AsEnumerable(), DataRowComparer.Default
                      );
try
{
   dtSrcToTgtResult = nonIntersecting.CopyToDataTable();
} catch (InvalidOperationException ex) {}

这里的 dtSource,dtTarget 是具有来自数据库的源数据和目标数据的数据表。 dtSrcToTgtResult 包含源中存在但目标中不存在的数据,这正是我想要的。

同样可以在带有结果集的 JavaScript 中完成。我也可以检查 CachedRowSet 或 webRowSet 是否有类似的内容。

编辑

对于投负票的人。这是我已经做过的,但它没有解决问题。

private Boolean compare(ResultSet rsSrc,ResultSet rsTgt,String ExecCondition)
    {
        Boolean status = true;
        try  
        {
            ResultSetMetaData metaSrc = rsSrc.getMetaData(); 
            ResultSetMetaData metaTgt = rsTgt.getMetaData();
            final int columnCountSrc = metaSrc.getColumnCount();
            List<DBRow> dList = new  ArrayList<DBRow>();
            List<DBRow> DataInSourceNotInTarget = new ArrayList<DBRow>();
            List<DBRow> DataInTargetNotInSource = new ArrayList<DBRow>();

            DBRow d = new DBRow();
            DBRow d1 = new DBRow();

            for (int column = 1; column <= columnCountSrc; column++) 
            {
            d.Row.add(metaSrc.getColumnName(column));
            d1.Row.add(metaTgt.getColumnName(column));
            }
            DataInSourceNotInTarget.add(d);
            DataInTargetNotInSource.add(d1);

            if(ExecCondition.equals("Source To Target"))
            {

            while(rsSrc.next())
            {

                if(rsTgt.next())
                {
                for (int column = 1; column <= columnCountSrc; column++) 
                {

                    Object valueSrc = rsSrc.getObject(column);
                    Object valueTgt = rsTgt.getObject(column);

                        if(!valueSrc.toString().equals(valueTgt.toString()))
                        {
                            status=false;
                            System.out.println("ValueSRC: "+v    alueSrc.toString());
                            System.out.println("ValueTgt: "+valueTgt.toString());
                    }

            }
            }
            else
            {
                // if target rows ends
                DBRow dr = new DBRow();

                for (int column = 1; column <= columnCountSrc; column++) 
                {

                    Object valueSrc = rsSrc.getObject(column);
                    dr.Row.add(valueSrc);
                }
                DataInSourceNotInTarget.add(dr);

            }

        }
    }//exec condition if


        if(ExecCondition.equals("Target To Source"))
        {

        while(rsTgt.next())
        {

            if(rsSrc.next())
            {
            for (int column = 1; column <= columnCountSrc; column++) 
            {

                Object valueSrc = rsSrc.getObject(column);
                Object valueTgt = rsTgt.getObject(column);

                    if(!valueSrc.toString().equals(valueTgt.toString()))
                    {
                        status=false;
                        System.out.println("ValueSRC: "+valueSrc.toString());
                        System.out.println("ValueTgt: "+valueTgt.toString());
                    }

            }
            }
            else
            {
                // if Source rows ends
                DBRow dr = new DBRow();

                for (int column = 1; column <= columnCountSrc; column++) 
                {

                    Object valueTgt = rsTgt.getObject(column);
                    dr.Row.add(valueTgt);
                }
                DataInTargetNotInSource.add(dr);

            }

        }

        for(DBRow obj:DataInTargetNotInSource)
        {
            obj.print();
        }
    }//exec condition if


    }
    catch(Exception e)
    {
        e.printStackTrace();
    }

    return status;
}

【问题讨论】:

  • 比较是如何进行的?源和目标是否具有相同的列?
  • @sharonbn 源和目标将具有相同的列,但数据中可能会出现不匹配,这就是验证。确定源中的内容而不是目标中的内容。
  • 你想让别人做你的功课吗?
  • @Despicable 我已经编码,但这是逐行比较完成的。这并不能解决问题。我已经说过了。为什么要给减票。

标签: java resultset


【解决方案1】:

我有一个可行但不是最佳的解决方案:

  1. 需要将所有行加载到内存数据结构中(每个ResultSet加载到列表中,每一项都是列名-值的映射)
  2. 在源行的列表和该列表中的每个项目上循环 - 搜索它在目标列表中不存在(意思是 o(n^2) 处理)

我使用Apache DbUtils 轻松将ResultSet 转换为List。

import java.sql.*;
import java.util.*;
import java.util.stream.*;
import org.apache.commons.dbutils.handlers.MapListHandler;

try (Connection conn = DriverManager.getConnection(url, user, password)) {

    // load source table
    Statement st = conn.createStatement();
    ResultSet sourceRs = st.executeQuery("SELECT * FROM source");
    List<Map<String, Object>> sourceRows = new MapListHandler().handle(sourceRs);
    sourceRs.close();
    st.close();

    // load target table
    st = conn.createStatement();
    ResultSet targetRs = st.executeQuery("SELECT * FROM target");
    List<Map<String, Object>> targetRows = new MapListHandler().handle(targetRs);
    targetRs.close();
    st.close();

    // for every row in source, look for no match in target
    List<Map<String, Object>> diffRows = 
    sourceRows.stream()
        .filter(sourceRow -> rowExistsInTable(sourceRow, targetRows) == false)
        .collect(Collectors.toList());

    diffRows.stream().forEach(System.out::println); 

} catch (Exception e) {
    e.printStackTrace();
}

编辑:

您会注意到sourceRows 的过滤现在是根据方法rowExistsInTable() 的结果完成的。我添加了在表中搜索行并检查行的相等性的方法,而不依赖于 java 8 lambda 语法(还添加了尽可能多的文档:))

/**
 * checks if {@code searchRow} exists in {@code table}
 * existence is determined according to {@code areRowsEqual} method 
 * @param searchRow {@code Map<String, Object>} where keys are column names and values are column vales 
 * @param table {@code List} of {@code Map<String, Object>} rows 
 * @return {@code true} if {@code searchRow} was found in {@code table} 
 */
public static boolean rowExistsInTable(Map<String, Object> searchRow, List<Map<String, Object>> table)
{
    for (Map<String, Object> tableRow : table) {
        if (areRowsEqual(tableRow, searchRow)) return true;
    }
    return false;
}

/**
 * checks if all of row1 columns are found with same values in row2
 * note: does not check if there is column in row2 that does not exist in row1  
 * @param row1 
 * @param row2
 * @return {@code true} if {@code row1} is equal to {@code row2}
 */
public static boolean areRowsEqual(Map<String, Object> row1, Map<String, Object> row2)
{
    // loop on row1 columns
    for (Map.Entry<String, Object> row1Column : row1.entrySet()) {
        String row1ColumnName = row1Column.getKey(); 
        Object row1ColumnValue = row1Column.getValue();
        // search row1 column in row2
        if (row2.containsKey(row1ColumnName) &&
            row2.get(row1ColumnName) != null &&
            row2.get(row1ColumnName).equals(row1ColumnValue)) {
            // row1 column was found in row2, nothing to do 
        } else {
            // row1 column was not found in row2
            return false;
        }
    }
    return true;  // all row 1 columns found in row 2
}

【讨论】:

  • 我无法在我的应用程序中导入 java.util.stream.*。并且 sourceRows.stream() 不可用。
  • 这是 Java 8 的特性。你用的是什么版本?
  • diffRows 只返回源中的所有内容
  • 表示需要修改行的比较。在我的示例中,我使用targetRow.equals(sourceRow) 来确定目标结果集中是否存在源行。它基于 HashMap 的 equals(),它应该检查键和值的相等性。您可能需要根据您拥有的数据进行修改(也许只检查主键列?)。打印和/或调试是下一个阶段...
  • 我这辈子都没用过 lambda exp。当从源到目标进行比较时,你能建议我修改以获得行的差异吗?
猜你喜欢
  • 1970-01-01
  • 2014-05-03
  • 2015-04-20
  • 1970-01-01
  • 2016-09-03
  • 2011-11-03
  • 2019-12-05
  • 1970-01-01
  • 1970-01-01
相关资源
最近更新 更多