删除一行，加上匹配模式的最后一行的逗号

Question

DROP TABLE IF EXISTS `qalnk`;
/*!40101 SET @saved_cs_client     = @@character_set_client */;
/*!40101 SET character_set_client = utf8 */;
CREATE TABLE `qalnk` (
  `id` bigint(20) NOT NULL,
  `answer_id` bigint(20) DEFAULT NULL,
  `date_deleted` bigint(20) DEFAULT NULL,
  `deleted_by_user_ap_id` varchar(36) DEFAULT NULL,
  `expression_id` bigint(20) DEFAULT NULL,
  `expression_type` varchar(255) DEFAULT NULL,
  `ordering` int(11) DEFAULT NULL,
  `question_id` bigint(20) DEFAULT NULL,
  `expression_for_deselect_id` bigint(20) DEFAULT NULL,
  PRIMARY KEY (`id`),
  KEY `FK6661B19F393DFCD` (`expression_id`),
  KEY `FK6661B195182DDCD` (`question_id`),
  KEY `FK6661B195742A56B` (`expression_for_deselect_id`),
  KEY `idx_qlnk_nswrd` (`answer_id`),
  KEY `FK6661B19126D878D` (`answer_id`),
  KEY `FK6661B1975B33071` (`id`),
  CONSTRAINT `FK6661B19126D878D` FOREIGN KEY (`answer_id`) REFERENCES `ans` (`id`),
  CONSTRAINT `FK6661B1975B33071` FOREIGN KEY (`id`) REFERENCES `apobj` (`id`)
) ENGINE=InnoDB DEFAULT CHARSET=latin1;
/*!40101 SET character_set_client = @saved_cs_client */;

我的目标是从数据库中删除所有约束，所以我想对单词“CONSTRAINT”进行简单的代码搜索并删除该行

我尝试使用 sed

sed '/\s*CONSTRAINT/d' ~/Downloads/dump.sql > ~/ouput.sql

但是由于 CONSTRAINTS 是最后一个语句，所有这些尾随逗号都被留下了。我不介意它是 awk、sed 还是一些常用工具。

想要的输出是

DROP TABLE IF EXISTS `qalnk`;
/*!40101 SET @saved_cs_client     = @@character_set_client */;
/*!40101 SET character_set_client = utf8 */;
CREATE TABLE `qalnk` (
  `id` bigint(20) NOT NULL,
  `answer_id` bigint(20) DEFAULT NULL,
  `date_deleted` bigint(20) DEFAULT NULL,
  `deleted_by_user_ap_id` varchar(36) DEFAULT NULL,
  `expression_id` bigint(20) DEFAULT NULL,
  `expression_type` varchar(255) DEFAULT NULL,
  `ordering` int(11) DEFAULT NULL,
  `question_id` bigint(20) DEFAULT NULL,
  `expression_for_deselect_id` bigint(20) DEFAULT NULL,
  PRIMARY KEY (`id`),
  KEY `FK6661B19F393DFCD` (`expression_id`),
  KEY `FK6661B195182DDCD` (`question_id`),
  KEY `FK6661B195742A56B` (`expression_for_deselect_id`),
  KEY `idx_qlnk_nswrd` (`answer_id`),
  KEY `FK6661B19126D878D` (`answer_id`),
  KEY `FK6661B1975B33071` (`id`)
) ENGINE=InnoDB DEFAULT CHARSET=latin1;
/*!40101 SET character_set_client = @saved_cs_client */;

Answer 1

sed 是在单行上进行简单替换的出色工具，但对于其他任何事情，只需使用 awk。这是多字符 RS 的 GNU awk 和 [[:space:]] 的缩写 \s：

$ awk -v RS='^$' -v ORS= '{gsub(/,\s*CONSTRAINT[^\n,]+/,"")}1' file
DROP TABLE IF EXISTS `qalnk`;
/*!40101 SET @saved_cs_client     = @@character_set_client */;
/*!40101 SET character_set_client = utf8 */;
CREATE TABLE `qalnk` (
  `id` bigint(20) NOT NULL,
  `answer_id` bigint(20) DEFAULT NULL,
  `date_deleted` bigint(20) DEFAULT NULL,
  `deleted_by_user_ap_id` varchar(36) DEFAULT NULL,
  `expression_id` bigint(20) DEFAULT NULL,
  `expression_type` varchar(255) DEFAULT NULL,
  `ordering` int(11) DEFAULT NULL,
  `question_id` bigint(20) DEFAULT NULL,
  `expression_for_deselect_id` bigint(20) DEFAULT NULL,
  PRIMARY KEY (`id`),
  KEY `FK6661B19F393DFCD` (`expression_id`),
  KEY `FK6661B195182DDCD` (`question_id`),
  KEY `FK6661B195742A56B` (`expression_for_deselect_id`),
  KEY `idx_qlnk_nswrd` (`answer_id`),
  KEY `FK6661B19126D878D` (`answer_id`),
  KEY `FK6661B1975B33071` (`id`)
) ENGINE=InnoDB DEFAULT CHARSET=latin1;
/*!40101 SET character_set_client = @saved_cs_client */;

对于仅限 POSIX 的解决方案（请参阅下面来自 @mklement0 的 cmets）：

awk -v RS=$(printf '\3') -v ORS= '{gsub(/,[[:space:]]*CONSTRAINT[^\n,]+/,"")}1'

Answer 2

这有点小技巧 - 使用 (GNU) awk 将尾随 ,s 移动到后续行的开头，然后是 sed 删除。

awk -v RS= '{gsub(/,\n/, "\n,"); print}'  ~/Downloads/dump.sql | 
sed '/\s*CONSTRAINT/d' > ~/ouput.sql

这给了我以下，应该是有效的 SQL

DROP TABLE IF EXISTS `qalnk`;
/*!40101 SET @saved_cs_client     = @@character_set_client */;
/*!40101 SET character_set_client = utf8 */;
CREATE TABLE `qalnk` (
  `id` bigint(20) NOT NULL
,  `answer_id` bigint(20) DEFAULT NULL
,  `date_deleted` bigint(20) DEFAULT NULL
,  `deleted_by_user_ap_id` varchar(36) DEFAULT NULL
,  `expression_id` bigint(20) DEFAULT NULL
,  `expression_type` varchar(255) DEFAULT NULL
,  `ordering` int(11) DEFAULT NULL
,  `question_id` bigint(20) DEFAULT NULL
,  `expression_for_deselect_id` bigint(20) DEFAULT NULL
,  PRIMARY KEY (`id`)
,  KEY `FK6661B19F393DFCD` (`expression_id`)
,  KEY `FK6661B195182DDCD` (`question_id`)
,  KEY `FK6661B195742A56B` (`expression_for_deselect_id`)
,  KEY `idx_qlnk_nswrd` (`answer_id`)
,  KEY `FK6661B19126D878D` (`answer_id`)
,  KEY `FK6661B1975B33071` (`id`)
) ENGINE=InnoDB DEFAULT CHARSET=latin1;
/*!40101 SET character_set_client = @saved_cs_client */;

Answer 3

搜索任何具有“CONSTRAINT”表达式的行并删除该行之前的行和,。

sed -e '/.*/{
N
s/,\n.*CONSTRAINT//g}' -e '/.*CONSTRAINT.*/d' my_file

Answer 4

^{尽管投了反对票，但我认为这个答案提供了有效的解决方案，可以像宣传的那样工作，同时（希望）也能提供信息。如果不是，请告诉我们，以便我修复它。}

单通sed 解决方案要求一次读取所有输入行，类似于Ed Morton's helpful awk answer：

一个 GNU sed 解决方案：

sed -zr 's/,\n\s*CONSTRAINT\s+[^\n,]+//g' file

• -z 使用 NUL（空字节）作为输入行分隔符，并且由于输入中没有嵌入的 NUL，因此将file 的全部内容一次读入模式空间。

• -r 启用扩展正则表达式（现代语法、扩展功能）。

• 正则表达式删除所有CONSTRAINT 行，包括前一行中的,\n，从而使封闭CREATE TABLE 语句的语法保持不变。

不幸的是，BSD (macOS)sed 解决方案要麻烦得多：

BSD sed 版本缺少许多 GNU 的（非标准）便利功能，这使得解决方案更加痛苦。 BSD sed 仅对 POSIX 标准提供了一些扩展，但值得注意的是能够使用所谓的扩展正则表达式。

sed -E ':a
$!{N;ba
}
s/,\n([[:blank:]]*CONSTRAINT[[:blank:]]+[[:print:][:blank:]]+\n)+/\
/g' file

• -E - 类似于 GNU sed 的 -r - 启用扩展正则表达式。

• :a\n$!{N;b\na} 是一个常见的sed 习惯用法，它会一次读取整个输入：

  • :a 定义要跳转到的标签。
  • $! 匹配每一行 但 (!) 最后一行 ($)
  • {N;ba}; 将下一行读入模式空间（要操作的输入缓冲区），然后分支 (b) 以标记 a (:a)。
  • 换句话说：这会将所有行读入模式空间，这是随后的命令操作的内容（在本例中为s）。

• 注意所需的换行符，用于终止分支标签和分支命令，以及（以转义形式）在替换命令中。

  • 可以通过使用多个 -e 选项将其塞进一行，但这会降低命令的可读性。
• 注意使用详细的 POSIX 字符类，例如 [[:blank:]]，因为不支持快捷方式类，例如 \s。
  • 特别是，虽然\n 可以在正则表达式中匹配原则上，但在字符类 中却无法识别它。因此，[^\n] 必须与[[:print:][:blank:]] 进行模拟——添加[:blank:] 以匹配制表符字符。不被视为可打印 字符； （\t 也不能在 char. 类中使用）。