流式传输json元素

Question

假设我有一个如下所示的json：

{"body":"abcdef","field":"fgh"}

现在假设'body‘元素的值很大(~100MB或更大)。我希望流出body元素的值，而不是将其存储在字符串中。我该怎么做呢？有没有什么Java库可以用来做这件事？

这是当出现较大的json值时，使用OutOfMemoryException失败的代码行：

String inputStreamString = (String) JsonPath.read(textValue.toString(), "$.body");

这里的'textValue‘是一个hadoop.io.Text对象。我假设OutOfMemory错误的发生是因为我们试图像toString() (创建一个新对象)和JsonPath.read()这样的方法调用，所有这些都是在内存中完成的。我需要知道在处理大型textValue对象时是否有一种方法可以采用。如果您需要更多信息，请告诉我。

Answer 1

JsonSurfer非常适合于通过选择性提取来处理非常大的JSON数据。

示例如何在JSON中冲浪，收集监听器中的匹配值：

BufferedReader reader = new BufferedReader(new FileReader(jsonFile));
JsonSurfer surfer = new JsonSurfer(GsonParser.INSTANCE, GsonProvider.INSTANCE);
SurfingConfiguration config = surfer.configBuilder().bind("$.store.book[*]", new JsonPathListener() {
        @Override
        public void onValue(Object value, ParsingContext context) throws Exception {
            JsonObject book = (JsonObject) value;
        }
    }).build();
surfer.surf(reader, config);

Answer 2

Jackson为generating and processing JSON数据提供了一个流式应用编程接口。