简体繁体 English

使用 Scala 处理大型 JSON

[英]Handle large JSON with Scala

原文 2019-01-04 13:53:52 0 1 json/ scala/ playframework/ stack-overflow

I have several files with an array inside and I need to concatenate these arrays.我有几个文件，里面有一个数组，我需要连接这些数组。 The problem is those files are a lot and quite big (around 5mb each, in total more than 100mb).问题是这些文件很多而且很大（每个大约 5mb，总共超过 100mb）。
I tried with PlayJson but I got back a StackOverflow error and I think this is caused by the parsing of the String into the Json Object, so I am looking for another Scala library.我尝试使用 PlayJson，但返回 StackOverflow 错误，我认为这是由于将字符串解析为 Json 对象引起的，因此我正在寻找另一个 Scala 库。 Do you have any suggestion?你有什么建议吗？
I don't care too much for this case to marshal the json to an object, I simply need a way to do some simple changes in the JSON structure.我不太关心这种情况来将 json 编组为一个对象，我只需要一种方法来对 JSON 结构进行一些简单的更改。

1 个解决方案

You can use Circe + Iteratee or any parser that supports streaming, eg.您可以使用 Circe + Iteratee 或任何支持流式传输的解析器，例如。 Jawn.下巴。

Here is a very good tutorial for Circe + Iteratee.这是 Circe + Iteratee 的一个非常好的教程。

https://github.com/circe/circe/tree/main/examples/sf-city-lots https://github.com/circe/circe/tree/main/examples/sf-city-lots

如何在scala中处理json中的double - How to handle double in json in scala

在TableView中处理大型JSON文件 - Handle large JSON files in TableView

使用Scala Play框架处理多维JSON - Handle multidimensional JSON with scala Play framework

可以处理大输入 (2 GB) 的 JSON 解析器？ - JSON parser that can handle large input (2 GB)?

如何从URL处理大量JSON - How to handle a large amount of JSON from a URL

如何在MVC中处理大量的Json数据？ - How to handle large set of Json Data in MVC?

使用 Scala 和 JSON4S 解析大型 JSON 文件 - Parsing large JSON file with Scala and JSON4S

将大型多嵌套json解析为scala案例类 - parsing a large multi nested json into scala case class

使用Scala Play Framework 2加载大型JSON文件时出错 - Error loading large JSON files using Scala Play Framework 2

如何在 Scala sbt REPL 控制台中查看大型 Json 记录？ - How to view a large Json record in a Scala sbt REPL console?

暂无

暂无

声明:本站的技术帖子网页，遵循CC BY-SA 4.0协议，如果您需要转载，请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.

相关问题 如何在scala中处理json中的double - How to handle double in json in scala 在TableView中处理大型JSON文件 - Handle large JSON files in TableView 使用Scala Play框架处理多维JSON - Handle multidimensional JSON with scala Play framework 可以处理大输入 (2 GB) 的 JSON 解析器？ - JSON parser that can handle large input (2 GB)? 如何从URL处理大量JSON - How to handle a large amount of JSON from a URL 如何在MVC中处理大量的Json数据？ - How to handle large set of Json Data in MVC? 使用 Scala 和 JSON4S 解析大型 JSON 文件 - Parsing large JSON file with Scala and JSON4S 将大型多嵌套json解析为scala案例类 - parsing a large multi nested json into scala case class 使用Scala Play Framework 2加载大型JSON文件时出错 - Error loading large JSON files using Scala Play Framework 2 如何在 Scala sbt REPL 控制台中查看大型 Json 记录？ - How to view a large Json record in a Scala sbt REPL console?

相关标签

粤ICP备18138465号 © 2020-2024 STACKOOM.COM