【问题标题】:Is it possible to POST to the SQS url using the post body是否可以使用帖子正文发布到 SQS url
【发布时间】:2018-09-08 16:20:00
【问题描述】:

https://docs.aws.amazon.com/AWSSimpleQueueService/latest/APIReference/API_SendMessage.html

https://sqs.us-east-2.amazonaws.com/123456789012/MyQueue/
?Action=SendMessage
&MessageBody=This+is+a+test+message

这工作正常,但是可以使用帖子正文发送有效负载吗?

我有一个外部服务在帖子正文中发送 json 有效负载(吞吐量非常高)。如果我可以直接向他们提供 SQS url,并且避免创建 AWS api 网关 --> lambda --> SQS 堆栈,那将是理想的。

我对替代解决方案持开放态度。

【问题讨论】:

  • 我正在使用 API Gateway + SQS(无 Lambda)执行此操作,使用 API Gateway 中的 VTL 正文映射模板将原始正文 JSON 转换为 SQS 所期望的...看起来很hackish,但是同时优雅。这是尽可能接近的,AFAIK,因为 SQS 的POSTs 本质上要求正文中的内容与您现在在查询字符串中的内容相同,但放入正文中。会感兴趣吗?
  • 那太棒了,你能发布一个关于你如何转换 json 帖子正文的迷你教程吗?

标签: amazon-web-services aws-lambda


【解决方案1】:

这可能不是完全API 网关的设计者所想的,但考虑到...

  • AWS Query API(由 SDK 使用)在线上为 SQS 等服务工作的方式——标准 application/x-www-form-urlencoded 格式的 url 编码键/值对,以及

  • API Gateway (VTL) 中的内置正文映射模板语言公开了$util.urlEncode(),并且

  • API 网关在将请求发送到后端服务时可以透明地对请求进行签名

...这意味着您可以简单地构造一个有效的 API 请求 - 一个表单帖子 - 就像使用 VTL 模板一样,它封装了原始消息正文 - urlencoded,这就是我们所需要的。我们实际上并不关心它是 JSON,只要它是有效的字符数据。

使用此解决方案,可以避免使用 Lambda 函数,并且客户端无需了解 SQS 期望消息如何格式化的任何信息。

整个传入的请求正文成为 SQS 中的Message。


在 API Gateway 控制台中:

创建资源(例如/)和方法(例如POST)。

在集成请求设置中:

Integration type: AWS Service
AWS Region: [select your region]
AWS Service: Simple Queue Service (SQS)
AWS Subdomain [leave blank]
HTTP Method: POST
Action Type: Use path override
Path override: /
Execution Role: [your role ARN, needs to be able to send a message to the queue]
Credentials cache: Do not add caller credentials to cache key
Content Handling: Passthrough

在HTTP Headers 下,添加一个标题Content-Type。该值应指定为“映射自”'application/x-www-form-urlencoded'——注意这是一个单引号字符串。

在Body Mapping Templates 下,选择Never。

添加Content-Type 的Content-Type 并使用以下映射模板:

Action=SendMessage##
&QueueUrl=$util.urlEncode('https://sqs.us-east-2.amazonaws.com/000000000000/my-queue-name')##
&MessageBody=$util.urlEncode($input.body)##

您有一个 API,可以将原始 JSON 输入正文转换为 SQS SendMessage API 请求。

每行末尾的## 是为了便于阅读——VTL 是一种文本模板语言,因此保留了空格和换行符。将## 放在每行的末尾会导致换行符被剥离,这对于构建正确的Web 表单是必要的。否则,整个身体映射模板需要在一行中。

部署然后测试:

$ curl -X POST https://xxxxxxxxxx.execute-api.us-east-2.amazonaws.com/v1 --data '{"works": true}' -H 'Content-Type: application/json'

回复:

{"SendMessageResponse":{"ResponseMetadata":{"RequestId":"bbbbbbbb-aaaa-5555-8888-334ed25bb6b3"},"SendMessageResult":{"MD5OfMessageAttributes":null,"MD5OfMessageBody":"81f2ecc3cb027268138bdfe7af0f8a3f","MessageId":"cccccccc-dddd-4444-1111-542e08bb39af","SequenceNumber":null}}}

对于额外的功劳,集成响应中的正文映射模板也可以用于自定义响应。

【讨论】:

  • 你太棒了,我需要的拼图中缺少的一块是$util.urlEncode($input.body)。我明天第一件事就是试试看!
  • 是否可以使用正文映射模板添加 MessageAttribute ?我在这里问了一个问题。 stackoverflow.com/questions/52877403/…
  • @JohnWebb 是的,有。我已经提供了这个问题的答案。
  • 谁能帮我找到API的资源名称?就像我希望将其传递到 SQS 并稍后从 Lambda @Michael-sqlbot 检索
【解决方案2】:

【讨论】:

    猜你喜欢
    • 2018-07-25
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2012-07-25
    • 2016-12-16
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多