【问题标题】:Trying to create dynamic query strings with PL/PgSQL to make DRY functions in PostgreSQL 9.6尝试使用 PL/PgSQL 创建动态查询字符串以在 PostgreSQL 9.6 中创建 DRY 函数
【发布时间】:2018-02-25 02:48:28
【问题描述】:

我的表格每年都包含相同类型的数据,但收集的数据略有不同,因为它们可能没有相同的字段。

d_abc_2016
d_def_2016
d_ghi_2016
d_jkl_2016

每个表都有特定的常量:company_id、employee_id、salary。

但是,每个人都可能有也可能没有这些用于计算总激励的字段:bonus、commission、cash_incentives。还有很多,但仅以这些为例。全部numeric

此时我应该注意,用户只能运行SELECT 语句。

我希望能够做到的是:

  1. 让用户能够拨打SELECT,并在呼叫之外指定自己的字段
  2. 将正在使用的表名传递给函数以在条件逻辑中使用,以确定除了传递整个表之外,应该如何构造查询字符串以用于最终的total_incentives 计算,因此不必传递大量参数传递给函数

基本上是这样的:

SELECT employee_id, salary, total_incentives(t, 'd_abc_2016')
FROM d_abc_2016 t;

因此,被调用的函数将计算 total_incentives,即 numeric 对应的 employee_id,并显示它们的 salary。但用户可能会选择添加其他字段来查看。

对于函数,因为total_incentives函数中使用的字段会因表而异,所以我需要创建逻辑来动态构造查询字符串。

CREATE OR REPLACE FUNCTION total_incentives(ANYELEMENT, t text)
    RETURNS numeric AS
$$
DECLARE
    -- table name lower case in case user typed wrong
    tbl          varchar(255) := lower($2;

    -- parse out the table code to use in conditional logic
    tbl_code     varchar(255) := split_part(survey, '_', 2);

    -- the starting point if the query string
    base_calc    varchar(255) := 'salary + '

    -- query string
    query_string varchar(255);

    -- have to declare this to put computation INTO
    total_incentives_calc numeric;
BEGIN
    IF tbl_code = 'abc' THEN
        query_string := base_calc || 'bonus';
    ELSIF tbl_code = 'def' THEN
        query_string := base_calc || 'bonus + commission';
    ELSIF tbl_code = 'ghi' THEN
        -- etc...
    END IF;

    EXECUTE format('SELECT $1 FROM %I', tbl)
    INTO total_incentives_calc
    USING query_string;

    RETURN total_incentives_calc;
END;
$$
LANGUAGE plpgsql;

这会导致:

ERROR:  invalid input syntax for type numeric: "salary + bonus"
CONTEXT:  PL/pgSQL function total_incentives(anyelement,text) line 16 at EXECUTE

因为它应该返回一组numeric 值。将其更改为以下内容:

CREATE OR REPLACE FUNCTION total_incentives(ANYELEMENT, t text)
    RETURNS SETOF numeric AS
$$
...
    RETURN;

得到同样的错误。

图好,可能是它试图返回的表。

CREATE OR REPLACE FUNCTION total_incentives(ANYELEMENT, t text)
    RETURNS TABLE(tot_inc numeric) AS
$$
...

得到同样的错误。

真的,任何变化都会产生这种结果。所以真的不知道如何让它工作。

查看RESULT QUERY、RESULT NEXT 或RESULT QUERY EXECUTE。

https://www.postgresql.org/docs/9.6/static/plpgsql-control-structures.html

RESULT QUERY 不起作用,因为它需要我知道的硬编码查询,它不会接受变量。

RESULT NEXT 遍历每条记录,我认为这不适合我的需要,而且看起来真的很慢......而且它需要一个硬编码的查询,据我所知。

RESULT QUERY EXECUTE 听起来很有希望。

-- EXECUTE format('SELECT $1 FROM %I', tbl)
-- INTO total_incentives_calc
-- USING query_string;

RETURN QUERY 
    EXECUTE format('SELECT $1 FROM %I', tbl)
    USING query_string;

得到:

ERROR:  structure of query does not match function result type
DETAIL:  Returned type character varying does not match expected type numeric in column 1.
CONTEXT:  PL/pgSQL function total_incentives(anyelement,text) line 20 at RETURN QUERY

它应该返回numeric。

最后,我可以让它工作,但它不会是 DRY。我宁愿不要用重复的代码为每个表创建一堆单独的函数。我见过的大多数工作示例都在函数中包含整个查询,并且这样调用:

SELECT total_incentives(d_abc_2016, 'd_abc_2016');

所以任何额外的列都必须在函数中指定为:

EXECUTE format('SELECT employee_id...)

鉴于用户只能在查询中运行SELECT,这确实不是一个选项。他们需要指定他们希望在查询中看到的任何其他列。

我发布了一个类似的问题,但被告知不清楚,所以希望这个更长的版本能更清楚地解释我想要做什么。

【问题讨论】:

    标签: sql database postgresql plpgsql dynamic-sql


    【解决方案1】:

    列名和表名不应作为USING子句传递的查询参数。

    大概是几行:

    RETURN QUERY 
        EXECUTE format('SELECT $1 FROM %I', tbl)
        USING query_string;
    

    应该是:

    RETURN QUERY 
        EXECUTE format('SELECT %s FROM %I', query_string, tbl);
    

    这个案例是为什么太 DRY 原则有时会出现问题的例子。如果您直接编写它,那么您的代码会更简单、更干净并且可能更短。

    动态 SQL 是最后一个解决方案 - 不是第一个。仅当使用动态 sql 的代码比不使用动态 SQL 的代码要短得多时才使用动态 SQL。

    【讨论】:

    • 酷,运行查询。谢谢您的帮助!现在整理一下,防止它把返回的记录数乘以总记录数。
    猜你喜欢
    • 2012-05-21
    • 1970-01-01
    • 2021-01-21
    • 2017-02-20
    • 1970-01-01
    • 2013-05-14
    • 1970-01-01
    • 2015-04-19
    • 1970-01-01
    相关资源
    最近更新 更多