如何通过骆驼路线到S3使用md5检查文件完整性？

Question

我正在使用骆驼将文件发送到s3存储桶。 我想使用md5验证文件完整性。 我正在使用org.apache.commons.codec.digest.DigestUtils 。

from(ftp_endpoint)
    .idempotentConsumer(simple("${in.header.CamelFileName}"), redisIdempotentRepository)
    .setHeader(S3Constants.KEY, simple("${file:name}"))
    .setHeader(S3Constants.CONTENT_MD5, simple(DigestUtils.md5(body().toString()).toString()))
    .to(s3_endpoint)

我收到以下异常

com.amazonaws.services.s3.model.AmazonS3Exception: The Content-MD5 you specified was invalid. 
(Service: Amazon S3; Status Code: 400; Error Code: InvalidDigest; Request ID: 8462458C6250091C)

如何正确计算MD5，以便将其上传到S3。

Answer 1

我可以在您的setHeader中发现几个问题。

.setHeader(S3Constants.CONTENT_MD5, simple(DigestUtils.md5(body().toString()).toString()))

首先，由于要在其上调用toString() ，因此您无需计算身体的MD5（由于您正在读取文件，因此我假设它是byte[] toString() 。
其次， DigestUtils.md5的文档指出返回类型为byte[] ，您再次在其上调用toString() 。

在字节数组上调用toString()返回一个包含以下内容的字符串

[B @ 106d69c

例如，参见SO上的另一个问题“ UTF-8 byte [] to String” 。

您可以使用DigestUtils.md5Hex尝试此解决方案，该方法将哈希作为字符串返回：

.setHeader(S3Constants.CONTENT_MD5, simple(DigestUtils.md5Hex(body())))

Answer 2

这对我有用。

from(ftp_endpoint)
    .idempotentConsumer(simple("${in.header.CamelFileName}"), redisIdempotentRepository)
    .setHeader(S3Constants.KEY, simple("${file:name}"))
    .process(md5HeadersProcessor)
    .to(s3_endpoint)


public class Md5HeadersProcessor implements Processor {
    private java.util.Base64.Encoder encoder = java.util.Base64.getEncoder();

    @Override
    public void process(Exchange exchange) throws NoSuchAlgorithmException {
        byte[] bytes = exchange.getIn().getBody(byte[].class);
        MessageDigest md = MessageDigest.getInstance("MD5");
        md.update(bytes);
        String md5= encoder.encodeToString(md.digest());
        exchange.getIn().setHeader(S3Constants.CONTENT_MD5, md5);
    }
}