如何从文件中分离 SQL 查询列表？

Question

如果所有查询都以; 结尾，我可以通过这个字符爆炸，但是当; 出现在字段中时我该怎么办？

例如

[...]Select * From my_data where idk=';';\nSelect [...]  

或

[...]Select * From my_data where idk=';\n';Select [...]

我的文件包含各种查询，包括 INSERTs，并且可以有类似上面所示的语法变化，其中 ; 后面有时会在字段内换行。

如何处理这个问题？

explode 之类的 PHP 函数会失败，eregi 或 preg_match 会起作用吗？

Answer 1

我建议编写一个非常简单的解析器。解析器像状态机一样工作，状态机将对字符进行操作。基本上，以下状态机将吃掉字符，直到找到不在由单引号分隔的字段内的;。

// no guarantees this is a fast or efficient one-liner
// PHP isn't the the greatest language for this sort of thing
$chars = str_split(implode("\n", file('filename.txt')));
$state = 0; // 0 = not in field, 1 = in field, 2 = in field, escaped char    
$query = "";
// loop over all characters in the file
foreach($c in $chars){
    // no matter what, append character to current query
    $query .= $c;

    // now for the state machine
    switch( $state ){
        case 0:
            if( $c == "'" ){
               $state = 1;
            }else if( $c == ";" ){
               // have a full query, do something with it
               // say, write $query to file
               // now reset $query
               $query = "";
            }
            break;
        case 1:
            if( $c == "'" ){
                // if the current character is an unescaped single quote
                // we have exited this field (so back to state 0)
                $state = 0;
            }else if( $c == "\\" ){
                // we found an backslash and so must temporarily
                // sit in a different state (avoids the sequence \')
                // and deals appropriately with \\'
                $state = 2;
            }
            break;
        case 2:
            // we can escape any char, to get here we were in a field
            // so to a field we must return
            $state = 1;
    }
}

Answer 2

实际语句并不多，那么如果您将\s*statement 爆炸但添加了所有语句怎么办？

示例...

$queries = <<<END
select * from table where text=";";


insert into table(adsf,asdf,fff) values(null,'text;','adfasdf');
update table set this="adasdf;";

alter table add column;
select * from table where text=";";


insert into table(adsf,asdf,fff) values(null,'text;','adfasdf');
update table set this="adasdf;";

alter table add column;
END;

$statements = preg_split( '~;\s*(select.*?)|;\s*(insert.*?)|;\s*(update.*?)|;\s*(alter.*?)~i', $queries, null, PREG_SPLIT_DELIM_CAPTURE );

$good_statements[] = array_shift( $statements );

foreach( $statements as $statement ) {

    if ( $statement == '' ) continue;
    if ( !($i % 2) ) {
        $statement_action = $statement;
        echo $statement;
        $i++;
    }
    else {
        $good_statements[] = sprintf( "%s %s", trim( $statement_action ), trim( $statement ) );
        $i++;
    }

}


print_r($good_statements);

Answer 3

可靠且普遍？您必须编写一个解析器，该解析器不仅理解一般的 SQL，而且尤其理解 MySQL 的非标准 SQL 变体的复杂性。例如，它必须应对：

• 具有\-escapes 的单引号字符串，因此\' 不会结束字符串（但\\' 会），除非使用了NO_BACKSLASH_ESCAPE sql_mode 选项；
• 双引号字符串是字符串文字，具有类似的转义规则，除非 ANSI_QUOTES 已打开；
• 反引号架构名称（双引号应该做什么）；
• 像 /* ... */ 和 # 和 -- 这样古怪的 cmets 不会开始评论，除非前面有空格

这是一个巨大的痛苦，这就是为什么通常最好避免将多个 SQL 语句粘在一起。