将 Newtonsoft JSON 序列化为字节数组

Question

我的目标是在字节数组字段中发送包含标头对象和压缩数据的 JSON。

[JsonObject(MemberSerialization.OptOut)]
public class Message
{
    public Message()
    {
        Header = new Header();
    }

    public Header Header { get; set; }


    public byte[] Data { get; set; }
}

字节数组是 gzip 压缩的 JSON 对象，但这无关紧要。 我遇到的问题是，如果我序列化 JSON，它会转换为字符串，然后再转换回字节。 问题是，消息大小增加了很多，因为序列化字节数组会将其转换为字符串表示。

我受到最大消息大小的限制，并且我已经准备好压缩数据，但是当我要发送包含字节数组和未压缩标头中的压缩数据的 JSON 时，序列化 JSON 对象使我超出了消息大小限制。

是否有任何可靠的方法可以立即将 JSON 对象转换为字节数组。

           var stringMessage = JsonConvert.SerializeObject(message,Formatting.None);
            var bytes = Encoding.UTF8.GetBytes(stringMessage);

            var stringMessage2 = JsonConvert.SerializeObject(message.TransportHeader, Formatting.None);
            var bytes2 = Encoding.UTF8.GetBytes(stringMessage2);

            Message eventMessage = new Message(bytes);
            var bytes3= Encoding.UTF8.GetBytes(JsonConvert.SerializeObject(message.Transportdata));

压缩数据大小 =243905

序列化后以字节为单位的完整 JSON = 325313

仅以字节为单位的标头大小 = 90

只是将压缩数据序列化并转换回字节 = 325210，（当数据被 JsonConvert.SerializeObject 序列化并产生字符串表示时，大小会增加）

它显然上升了很多，并且是由字节数组引起的。

Answer 1

我找到了一种方法来做我想做的事，它不完全是 JSON，而是 BSON 或也称为二进制 JSON。 好吧，既然找到解决方案纯属运气，我不确定 BSON 的知名度如何。

无论如何，Newtonsoft 通过位于https://www.nuget.org/packages/Newtonsoft.Json.Bson/1.0.1 的Newtonsoft.Json.Bson nuget 包支持它

一些用于序列化/反序列化的代码

            foreach (var message in transportMessageList)
        {
            MemoryStream ms = new MemoryStream();
            using (BsonDataWriter writer = new BsonDataWriter(ms))
            {
                JsonSerializer serializer = new JsonSerializer();
                serializer.Serialize(writer, message);
            }

            var bsonByteArray = ms.ToArray();
            Assert.True(bsonByteArray.Length!=0);
            bsonList.Add(bsonByteArray);
        }

        var deserializdTransmortMessageList = new List<TransportMessage>();
        foreach (var byteArray in bsonList)
        {
            TransportMessage message;
            MemoryStream ms = new MemoryStream(byteArray);
            using (BsonDataReader reader = new BsonDataReader(ms))
            {
                JsonSerializer serializer = new JsonSerializer();
                message = serializer.Deserialize<TransportMessage>(reader);
            }
            Assert.True(message.Transportdata.Length!=0);
            deserializdTransmortMessageList.Add(message);
        }

您可以使用与 JSON 相同的类/对象，序列化压缩的字节数组不再导致大小增加。

请注意，Newtonsoft 网站上的 BSON 文档已过时，目前仅列出已弃用的 api 调用。 我的代码使用正确的非弃用 API 调用。

Answer 2

JSON 是一种基于字符的格式，因此必然涉及字符数据。 我怀疑你使用了 UTF16 编码，它使每个字符变成两个字节。 如果您使用UTF8您将不会遇到任何有意义的大小开销。