如何在 Oracle 中使用 XMLTABLE 内部连接三个表答案

【问题标题】：How to inner join three tables with XMLTABLE in Oracle如何在 Oracle 中使用 XMLTABLE 内部连接三个表
【发布时间】：2018-04-18 18:38:51
【问题描述】：

我有一个名为XML_INFRASTRUCTURE 的表，其设计如下：

COLUMN_NAME  | DATA_TYPE          | NULLABLE
-------------|--------------------|--------
XMLI_ID      | NUMBER(10,0)       | No
FILENAME     | VARCHAR2(255 CHAR) | Yes
LAST_VERSION | DATE               | Yes
XML_RAW      | CLOB               | Yes

在此表中，我将通过 FTP 接收的所有 XML 文件存储为 XMLTYPE。我使用 XMLTABLE 来获取信息并且一切正常，直到我开始加入表格。

在XML_INFRASTRUCTURE我有以下数据：

XMLI_ID | FILENAME     | LAST_VERSION | XML_RAW
--------|--------------|--------------|--------------------------------
1       | ptcar        | 07-JAN-18    | <?xml version="1.0" encoding="ISO-8859-1"?><cern:ptcars creationDate="2018-03-16T19:35:54" xmlns:cern="http://www.website.com/Infrastructure" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://www.website.com/Infrastructure ../ns/infrastructure.xsd"><cern:ptcar id="1" validFromDate="1996-06-02" validToDate="2007-12-08" ....>
2       | ptrefColumn  | 07-JAN-18    | <?xml version="1.0" encoding="ISO-8859-1"?><cern:ptrefColumns creationDate="2018-03-20T11:33:21" xmlns:cern="http://www.website.com/Infrastructure" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://www.website.com/Infrastructure ../ns/infrastructure.xsd"><cern:ptrefColumn id="279" validFromDate="1998-04-01" validToDate="2001-06-11" ....> 
3       | ptref        | 07-JAN-18    | <?xml version="1.0" encoding="ISO-8859-1"?><cern:ptrefs creationDate="2018-03-20T11:33:05" xmlns:cern="http://www.website.com/Infrastructure"xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://www.website.com//Infrastructure ../ns/infrastructure.xsd"><cern:ptref id="232" validFromDate="1998-04-01" validToDate="2001-06-11" ....>

接下来我有以下要求：

给定值：ptrefId 和 givenDate

select a.longNameFrench , a.longNameDutch
from   ptcar as a, 
       ptrefColumn as b,
       ptref as c
where c.id = ptrefId
and b.id = c.ptrefColumnId
and a.id = b.ptcarId
and a.validFromDate <= givenDate
and a.validToDate >= givenDate
and b.validFromDate <= givenDate
and b.validToDate >= givenDate
and c.validFromDate <= givenDate
and c.validToDate >= givenDate

知道这一点后，我尝试使用 XMLTABLE 获取 XML，但我不知道如何启动并运行连接。如您所见，我尝试链接 XMLTABLE，但现在它已经运行了一个多小时。

SELECT X.LongNameFrench, X.LongNameDutch
FROM XML_Infrastructure,
    XMLTABLE(
        '$d/*:ptcars/*:ptcar'
        PASSING XMLTYPE(XML_Infrastructure.XML_RAW) as "d"
        COLUMNS
            Id              VARCHAR2(10)    PATH    '@*:id',
            LongNameFrench  VARCHAR2(60)    PATH    '@*:longNameFrench',
            LongNameDutch   VARCHAR2(60)    PATH    '@*:longNameDutch',
            ValidFromDate   VARCHAR2(10)    PATH    '@*:validFromDate',
            ValidToDate     VARCHAR2(10)    PATH    '@*:validToDate'
    ) AS X,
    XMLTABLE(
        '$d/*:ptrefColumns/*:ptrefColumn'
        PASSING XMLTYPE(XML_Infrastructure.XML_RAW) as "d"
        COLUMNS
            Id              VARCHAR2(10)    PATH    '@*:id',
            ValidFromDate   VARCHAR2(10)    PATH    '@*:validFromDate',
            ValidToDate     VARCHAR2(10)    PATH    '@*:validToDate'
    ) AS Y,
    XMLTABLE(
        '$d/*:ptrefs/*:ptref'
        PASSING XMLTYPE(XML_Infrastructure.XML_RAW) as "d"
        COLUMNS
            Id              VARCHAR2(10)    PATH    '@*:id',
            ValidFromDate   VARCHAR2(10)    PATH    '@*:validFromDate',
            ValidToDate     VARCHAR2(10)    PATH    '@*:validToDate'
    ) AS Z
WHERE Z.Id = '512'
AND FILENAME = 'ptcar';

非常欢迎提出建议！（抱歉信息过多）

【问题讨论】：

您的 XML 不完整，这并不完全有帮助，而且似乎与您的结果不匹配 - 您要查找的 ID 512 不存在，所以我猜您的意思是 232；但ptcar 文件没有其他两个 XML 文档的数据。因此，据推测，您需要组合来自所有三行的 XML 数据。那么表中的三行是如何相关的 - 纯粹是 last_version 日期？
@AlexPoole 所有 xml 文件之间的关系都在要求中注明。 ptcar.Id = ptrefColumn.Id、ptrefColumn.Id = ptref.ptrefColumnId 和 c.id = ptrefId（给定变量）
虽然您的三个 XML 文档具有不同的 ID，但它们都不是 512。假设它们都引用同一个 id 节点。所以你的例子都应该有id="512"?
512 实际上只是一个例子。 XML 大约有 5000-15000 行，所以它只是表示 XML_RAW 中存储有 XML。

标签： sql oracle xmltable

【解决方案1】：

您正在从同一个 XML 文档创建三个 XMLTable 结果 X、Y 和 Z，并且只有 ptcar 节点 - 所以 Y 和 Z 找不到任何数据（因为没有与这些 XPath 匹配的节点)。

鉴于三个 XML 文档之间的相似性，并假设您显示的 ID 节点都应该是相同的值（在您的示例数据中不是这种情况），您可以使用单个 XMLTable 来提取所有文件中的所有相关数据：

SELECT X.Name, X.Id, X.ValidFromDate, X.ValidToDate, X.LongNameFrench, X.LongNameDutch
FROM XML_Infrastructure
CROSS JOIN XMLTABLE(
        '$d/*/*'
        PASSING XMLTYPE(XML_Infrastructure.XML_RAW) as "d"
        COLUMNS
            Name            VARCHAR2(10)    PATH    './local-name()',
            Id              NUMBER          PATH    '@*:id',
            LongNameFrench  VARCHAR2(60)    PATH    '@*:longNameFrench',
            LongNameDutch   VARCHAR2(60)    PATH    '@*:longNameDutch',
            ValidFromDate   DATE            PATH    '@*:validFromDate',
            ValidToDate     DATE            PATH    '@*:validToDate'
    ) X;

这使用通配符来获取任何子节点，但如果您有其他未显示的类型，您可以过滤。它还添加了一个name 列，这样您就可以知道每行来自哪个文档（或者如果您愿意，可以包含文件名）。它将为所有三个中都不存在的属性提供空值。

然后在 CTE 中使用它并将其连接到自身两次：

WITH cte AS (
  SELECT X.Name, X.Id, X.ValidFromDate, X.ValidToDate, X.LongNameFrench, X.LongNameDutch
  FROM XML_Infrastructure
  CROSS JOIN XMLTABLE(
          '$d/*/*'
          PASSING XMLTYPE(XML_Infrastructure.XML_RAW) as "d"
          COLUMNS
              Name            VARCHAR2(30)    PATH    './local-name()',
              Id              NUMBER          PATH    '@*:id',
              LongNameFrench  VARCHAR2(60)    PATH    '@*:longNameFrench',
              LongNameDutch   VARCHAR2(60)    PATH    '@*:longNameDutch',
              ValidFromDate   DATE            PATH    '@*:validFromDate',
              ValidToDate     DATE            PATH    '@*:validToDate'
      ) AS X
)
select a.longNameFrench, a.longNameDutch
from cte a
join cte b on b.id = a.id
join cte c on c.id = b.id
where c.name = 'ptref'
and b.name = 'ptrefColumn'
and a.name = 'ptcar'
and c.id = ptrefId
and a.validFromDate <= givenDate
and a.validToDate >= givenDate
and b.validFromDate <= givenDate
and b.validToDate >= givenDate
and c.validFromDate <= givenDate
and c.validToDate >= givenDate;

这有点类似于为每种文档类型创建查询视图，然后加入这些视图，但不需要任何新的永久对象。

在另一个 CTE 中使用您的部分样本数据，并将所有 ID 设置为 512 并在 ptcar 中添加缺少的名称：

with XML_INFRASTRUCTURE (XMLI_ID, FILENAME, LAST_VERSION, XML_RAW) as (
  select cast (1 as number(2,0)), cast('ptcar' as varchar2(255)), date '2018-01-07', to_clob('<?xml version="1.0" encoding="ISO-8859-1"?>
<cern:ptcars creationDate="2018-03-16T19:35:54" xmlns:cern="http://www.website.com/Infrastructure" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://www.website.com/Infrastructure ../ns/infrastructure.xsd">
 <cern:ptcar id="512" validFromDate="1996-06-02" validToDate="2007-12-08" longNameFrench="Jean Dupont" longNameDutch="Jan Jansen"/>
</cern:ptcars>') from dual
  union all select 2, 'ptrefColumn', date '2018-01-07', to_clob('<?xml version="1.0" encoding="ISO-8859-1"?>
<cern:ptrefColumns creationDate="2018-03-20T11:33:21" xmlns:cern="http://www.website.com/Infrastructure" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://www.website.com/Infrastructure ../ns/infrastructure.xsd">
 <cern:ptrefColumn id="512" validFromDate="1998-04-01" validToDate="2001-06-11" />
</cern:ptrefColumns>') from dual
  union all select 3, 'ptref', date '2018-01-07', to_clob('<?xml version="1.0" encoding="ISO-8859-1"?>
<cern:ptrefs creationDate="2018-03-20T11:33:05" xmlns:cern="http://www.website.com/Infrastructure" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://www.website.com//Infrastructure ../ns/infrastructure.xsd">
 <cern:ptref id="512" validFromDate="1998-04-01" validToDate="2001-06-11" />
</cern:ptrefs>') from dual
),
cte AS (
  SELECT X.Name, X.Id, X.ValidFromDate, X.ValidToDate, X.LongNameFrench, X.LongNameDutch
  FROM XML_Infrastructure
  CROSS JOIN XMLTABLE(
          '$d/*/*'
          PASSING XMLTYPE(XML_Infrastructure.XML_RAW) as "d"
          COLUMNS
              Name            VARCHAR2(30)    PATH    './local-name()',
              Id              NUMBER          PATH    '@*:id',
              LongNameFrench  VARCHAR2(60)    PATH    '@*:longNameFrench',
              LongNameDutch   VARCHAR2(60)    PATH    '@*:longNameDutch',
              ValidFromDate   DATE            PATH    '@*:validFromDate',
              ValidToDate     DATE            PATH    '@*:validToDate'
      ) AS X
)
select a.longNameFrench, a.longNameDutch
from cte a
join cte b on b.id = a.id
join cte c on c.id = b.id
where c.name = 'ptref'
and b.name = 'ptrefColumn'
and a.name = 'ptcar'
and c.id = 512
and a.validFromDate <= date '2001-01-01'
and a.validToDate >= date '2001-01-01'
and b.validFromDate <= date '2001-01-01'
and b.validToDate >= date '2001-01-01'
and c.validFromDate <= date '2001-01-01'
and c.validToDate >= date '2001-01-01';

给予

LONGNAMEFRENCH                                               LONGNAMEDUTCH                                               
------------------------------------------------------------ ------------------------------------------------------------
Jean Dupont                                                  Jan Jansen

【讨论】：

这是一个有效的解决方案，我不知道/local-name()，它真的很有用。这个解决方案的问题在于，由于我正在处理大量 XML 数据，我只在 193.783 秒后才收到我的数据，这可能有点太长了。即使在我尽可能具体化之后也是如此。

【解决方案2】：

像这样进行选择（或创建视图）：

CREATE VIEW ptcar AS
SELECT Id, LongNameFrench, LongNameDutch,
    TO_DATE(x.ValidFromDate, 'YYYY-MM-DD') as ValidFromDate,
    ...
FROM XML_Infrastructure,
    XMLTABLE(
        '$d/*:ptcars/*:ptcar'
        PASSING XMLTYPE(XML_Infrastructure.XML_RAW) as "d"
        COLUMNS
            Id              VARCHAR2(10)    PATH    '@*:id',
            LongNameFrench  VARCHAR2(60)    PATH    '@*:longNameFrench',
            LongNameDutch   VARCHAR2(60)    PATH    '@*:longNameDutch',
            ValidFromDate   VARCHAR2(10)    PATH    '@*:validFromDate',
            ValidToDate     VARCHAR2(10)    PATH    '@*:validToDate'
    ) as x;

CREATE VIEW ptrefColumn AS
SELECT Id,
    TO_DATE(x.ValidFromDate, 'YYYY-MM-DD') as ValidFromDate,
    ...
FROM XML_Infrastructure,
XMLTABLE(
    '$d/*:ptrefColumns/*:ptrefColumn'
    PASSING XMLTYPE(XML_Infrastructure.XML_RAW) as "d"
    COLUMNS
        Id              VARCHAR2(10)    PATH    '@*:id',
        ValidFromDate   VARCHAR2(10)    PATH    '@*:validFromDate',
        ValidToDate     VARCHAR2(10)    PATH    '@*:validToDate'
) as x

之后，您可以按照问题中的说明直接加入他们。

注意，为什么将XML_RAW 存储为CLOB 而不是XMLTYPE？

【讨论】：

我也有同样的想法，但不知道怎么做。视图可能是一个很好的解决方案。我现在就试试。至于 XML_RAW 的数据类型，老实说，我不记得了，但我猜它要么与方便有关，要么与 Clob 更容易插入的 XML 的大小有关。
所以经过测试，我设法在 49.079 秒后获取了所有数据，这仍然是相当多的，因为知道您需要运行 6 次模拟查询才能加载 1 个页面。
@JorisDecraecker，也许你可以创建一些索引，看看Indexes for XMLType Data
我会研究下一个版本的索引。我为 XML 文件制作了小型压缩工具，并设法将所有 XML 文件的大小减少了 80%。加载时间现在是 4.3 秒而不是 49.079 秒！