[英]Reading lines from BufferedReader using Stream
我正在尝试读取一个巨大的文件,其中包含大约十亿行。 我想使用Stream进行并行处理并将每一行插入数据库中。 我正在做这样的事情,
br = new BufferedReader(new InputStreamReader(inputStream, "UTF-8"));
list = br.lines().parallel().collect(Collectors.toList());
这会将所有行存储在列表中。 但是我不想将所有行都保留在内存中。 因此,我想在读取一行后将它们保存到数据库中。 请帮助我实现这一目标。 另外,指导我调整这个想法。
提前致谢 :)
似乎您需要使用forEach
并传递一个Consumer
,它将使用该行并将其存储在数据库中
lines.parallel()
.forEach(line -> {
//Invoke the code passing the 'line' that persists in the DB...something like
dbWriter.write(line);
});
声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.