如何在 SSIS 中从两个源追加两行？

Question

我必须在 MySQL 服务器中建表。

1. 标题表。 ╔════════════╦════════╦═════════════╦═════════════════╦══════════╗ ║ RecordType ║ CustID ║ DataGenDate ║ DataCreatedDate ║ SourceID ║ ╠════════════╬════════╬═════════════╬═════════════════╬══════════╣ ║ H ║ #1234 ║ 2018-01-05 ║ 2018-01-01 ║ V301 ║ ╚════════════╩════════╩═════════════╩═════════════════╩══════════╝

2. 事务表 ╔════════════╦══════════╦══════════════╦══════════════╦════════════╗ ║ RecordType ║ ProdCode ║ OpeningValue ║ ClosingValue ║ TranDate ║ ╠════════════╬══════════╬══════════════╬══════════════╬════════════╣ ║ T ║ AL001 ║ 95 ║ 90 ║ 2018-01-01 ║ ╠════════════╬══════════╬══════════════╬══════════════╬════════════╣ ║ T ║ AL002 ║ 54 ║ 40 ║ 2018-01-01 ║ ╠════════════╬══════════╬══════════════╬══════════════╬════════════╣ ║ T ║ AL003 ║ 63 ║ 43 ║ 2018-01-02 ║ ╠════════════╬══════════╬══════════════╬══════════════╬════════════╣ ║ T ║ AL004 ║ 56 ║ 23 ║ 2018-01-01 ║ ╚════════════╩══════════╩══════════════╩══════════════╩════════════╝

Header Table 有 Header Information，Transaction 表有 Transaction Data。 我希望通过 SSIS 生成以下格式的文本文件（竖线分隔的“|”）。

H|#1234|2018-01-05|2018-01-01|V301
----------------------------------------
T|AL001|95        |90        |2018-01-01
T|AL002|54        |40        |2018-01-01
T|AL003|63        |43        |2018-01-02
T|AL004|56        |23        |2018-01-01

我尝试使用 ole DB 源和平面文件目标来导出文件，但没有成功。只有我得到交易或标题行。

Answer 1

这可以使用如下的脚本任务来完成，在这种情况下使用 C#。这将创建一个带有管道 (|) 分隔符的 CSV 文件。使用此运行示例测试，我能够通过 SSIS 平面文件连接管理器导入输出 CSV 文件，而无需对文件进行任何修改。此示例假定标题表中只有一行，否则您需要修改此表的 SQL 以返回正确的行。

using System.Data;
using System.Data.SqlClient;
using System.IO;
using System.Text;



//Windows Authentication (Integrated Security)
 string connectionString = @"Data Source=ServerName;Initial Catalog=DatabaseName;Integrated Security=true";
 string headerCmd = @"SELECT RecordType, CustID, DataGenDate, DataCreatedDate, SourceID FROM HeaderTable";
 string rowCmd = @"SELECT RecordType, CustID, DataGenDate, DataCreatedDate, SourceID FROM TransactionTable";

 string outputFile = Dts.Variables["User::FilePathVariable"].Value.ToString();

 StringBuilder csvData = new StringBuilder();
 int headerInt = 0;
 DataTable headerDT = new DataTable();
 DataTable rowDT = new DataTable();

 using (SqlConnection conn = new SqlConnection(connectionString))
 {
     SqlCommand headerSQL = new SqlCommand(headerCmd, conn);
     SqlCommand rowSQL = new SqlCommand(rowCmd, conn);

     SqlDataAdapter da = new SqlDataAdapter();

     conn.Open();

     //get header row
     da.SelectCommand = headerSQL;
     da.Fill(headerDT);

     //get data from Transaction table
     da.SelectCommand = rowSQL;
     da.Fill(rowDT);
 }

 //build header
 foreach (DataRow hDR in headerDT.Rows)
 {
     foreach (DataColumn hDC in headerDT.Columns)
     {
         csvData.Append(hDR[headerInt].ToString() + "|");
         headerInt++;
     }
 }

 //remove last pipe then start new line                    
 csvData.Remove(csvData.Length - 1, 1);
 csvData.Append(Environment.NewLine);

 //add rows
 foreach (DataRow rDR in rowDT.Rows)
 {
     for (int i = 0; i < headerInt; i++)
     {
         csvData.Append(rDR[i] + "|");
     }
     csvData.Remove(csvData.Length - 1, 1);
     csvData.Append(Environment.NewLine);
 }
 //write to CSV
 File.WriteAllText(outputFile, csvData.ToString());