通过 NiFi 1.15 InvokeHTTP 处理器在多部分/表单数据请求中发布 JSON 和 CSV

Question

我正在研究 NiFi 1.15 流程，我必须向服务发送请求，该服务需要在 POST 请求中发送 2 条表单数据作为多部分/表单数据。 第一部分是一个简单的 JSON object，带有一些参数，而第二部分是 CSV 文件。 这是我要实现的目标的示例。

Content-Type: multipart/form-data; boundary=1cf28ed799fe4325b8cd0637a67dc612


--1cf28ed799fe4325b8cd0637a67dc612
Content-Disposition: form-data; name="json"; filename="json"

{"Param1": "Value1","Param2": "Value2","Param3": true}
--1cf28ed799fe4325b8cd0637a67dc612
Content-Disposition: form-data; name="file"; filename="body.csv"

Field1,Field2,Field3,Field4,Field5
VALUE_FIELD_1,VALUE_FIELD_2,VALUE_FIELD_3,"Some value for field 4",VALUE_FIELD_5

--1cf28ed799fe4325b8cd0637a67dc612--

另一个可接受的 output 将使Content-Disposition行为空。

由于我正在处理的环境中有一些限制，我不允许使用脚本处理器，例如另一个 SO question 中建议的ExecuteGroovyScript。

相反，我开始创建GenerateFlowFile -> InvokeHTTP流。 GenerateFlowFile 将 output 转换为流文件，其中包含与上述类似的文本。 这是 GenerateFlowFile 的屏幕截图。

连接的 InvokeHTTP 处理器配置为使用POST Http 方法并发送标头（在我的情况下为 Authorization header），并且 Send Message Body 设置为 true。 它还通过 ${mime.type} function 从流文件预先生成的属性中提取 Content-Type。 您可以在以下屏幕截图中看到详细信息。

可悲的是，这不起作用。 服务器以“MIME 多部分 stream 的意外结束。MIME 多部分消息不完整”进行响应。 错误。

在 SO 中搜索了一段时间后，我发现了另一个问题，描述了类似的问题，但他们得到了不同的错误，并且还通过不同的方法发布参数。

我也知道Otto Fowler 的博客文章，他在其中展示了 InvokeHTTP 如何支持带有 multipart/form-data 的 POST。 我也尝试过这种方法，但没能成功。 该服务抛出一个错误，指出 NiFi 没有发送我post:form:part之一。

现在我被卡住了，无法发送该数据。 我确实设法编写了一个简单的 Python 脚本来测试服务器是否正常工作。 作为参考，这里是脚本：

import requests
server = 'https://targetserver.com'

#Authentication
result = requests.post(server + '/authentication',
                       {'grant_type': 'password',
                        'username': 'username',
                        'password': 'password'})
token = result.json()['access_token']

#Build the request
headers = {'Authorization': 'bearer ' + token}
json_data = '{"Param1": "Value1","Param2": "Value2","Param3": true}'

# First the JSON then the csv file.
files = {'json': json_data,
         'file': open('body.csv', 'rb')}
result = requests.post(server + '/endpoint', headers = headers, files = files)
print(result.text)

有人对如何解决这种情况有建议吗？