如何将 bash 命令注入 inline-python？

Question

我目前正在编写一个dockerfile，其中项目的代码行数将通过cloc进行计数，并发送到服务器。服务器提供 RESTful API。我想从这个 API 获取一个 Data-Transfer-Object，对其进行修改并将其发送回同一个 API 以对其进行更新。 由于跑步者不会记住超过一行的变量，因此我（可能）必须将所有内容都放在一行中（静态 API 除外）：

ENV API=http://example-url.com/api/datapoints/

到目前为止，我的 curl 命令是这样的：

RUN curl 
    -d (curl -s ${API} | python3 -c "import sys, json; 
                                     newDatapointDTO=json.load(sys.stdin); 
                                     newDatapointDTO['metric']="`cloc ./src/ --json`"; 
                                     print(newDatapointDTO)") 
    -H "Content-Type: application/json" 
    -X PUT ${API}

这里的问题是跑步者不喜欢中断python命令以便从bash中设置变量。那么我如何将cloc ./src/ --json然后插入Python？

我也觉得这个命令有点太复杂了——应该有更好的解决方案...

Answer 1

使用 jq -Rs . <<'EOF' 将您的命令转换为 JSON，粘贴您的命令，然后 EOF 给我们：

RUN ["bash", "-c", "curl \n    -d (curl -s ${API} | python3 -c \"import sys, json; \n                                     newDatapointDTO=json.load(sys.stdin); \n                                     newDatapointDTO['metric']=\"`cloc ./src/ --json`\"; \n                                     print(newDatapointDTO)\") \n    -H \"Content-Type: application/json\" \n    -X PUT ${API}\n"]

去掉多余的空格并修正引用使得：

RUN ["bash", "-c", "curl -d (curl -s ${API} | python3 -c \"import sys, json;\nnewDatapointDTO=json.load(sys.stdin);\nnewDatapointDTO['metric']=$(cloc ./src/ --json);print(newDatapointDTO)\") -H \"Content-Type: application/json\" -X PUT ${API}"]

但是，由于该代码使用 shell 注入将数据插入 Python，因此它仍然是一个非常糟糕的主意。你的 Python 代码的更健全的版本可能看起来像：

import sys, json, subprocess
newDatapointDTO=json.load(sys.stdin)
newDatapointDTO['metric'] = subprocess.run(['cloc', './src/', '--json'], check=True, stdout=subprocess.PIPE).stdout
print(newDatapointDTO)

...因此将其包装在 shell 命令中可能如下所示：

pythonScript="import sys, json, subprocess
newDatapointDTO=json.load(sys.stdin)
newDatapointDTO['metric'] = subprocess.run(['cloc', './src/', '--json'], check=True, stdout=subprocess.PIPE).stdout
print(newDatapointDTO)"

curl -d "$(curl -s "$API" | python -c "$pythonScript")" \
     -H "Content-Type: application/json" \
     -X PUT "$API"

...所以，生成一个命令行的 JSON 编码，调用如下所示：

jq -Rs . <<'EOF'
pythonScript="import sys, json, subprocess
newDatapointDTO=json.load(sys.stdin)
newDatapointDTO['metric'] = subprocess.run(['cloc', './src/', '--json'], check=True, stdout=subprocess.PIPE).stdout
print(newDatapointDTO)"

curl -d "$(curl -s "$API" | python -c "$pythonScript")" \
     -H "Content-Type: application/json" \
     -X PUT "$API"
EOF

...这给了我们输出：

"pythonScript=\"import sys, json, subprocess\nnewDatapointDTO=json.load(sys.stdin)\nnewDatapointDTO['metric'] = subprocess.run(['cloc', './src/', '--json'], check=True, stdout=subprocess.PIPE).stdout\nprint(newDatapointDTO)\"\n\ncurl -d \"$(curl -s \"$API\" | python -c \"$pythonScript\")\" \\\n     -H \"Content-Type: application/json\" \\\n     -X PUT \"$API\"\n"

...所以我们知道您可以在 Dockerfile 中添加以下内容：

RUN ["bash", "-c", "pythonScript=\"import sys, json, subprocess\nnewDatapointDTO=json.load(sys.stdin)\nnewDatapointDTO['metric'] = subprocess.run(['cloc', './src/', '--json'], check=True, stdout=subprocess.PIPE).stdout\nprint(newDatapointDTO)\"\n\ncurl -d \"$(curl -s \"$API\" | python -c \"$pythonScript\")\" \\\n     -H \"Content-Type: application/json\" \\\n     -X PUT \"$API\"\n"]