如何在不复制数据的情况下逐行处理缓冲区中的数据？

Question

我目前正在做这样的事情：

void my_func(std::iostream &a_large_buffer) {
    std::vector<std::string> my_lines;
    for (std::string line; std::getline(a_large_buffer, line); ) 
    {
        // do stuff with line
        my_lines.emplace_back(line);
    }
    // ...
}

my_func正在处理网络请求的 output ，产生a_large_buffer 。 我检索的数据可能很大（数 GB）。

目前，代码通过将缓冲区中的数据复制到将存储在向量中的字符串来处理缓冲区中的数据。 复制过程会增加 memory 的使用量。

我怎样才能避免这种不必要的复制？

备选方案：如何删除已读取的缓冲区部分中的数据？

在将缓冲区复制到line后，我想“释放”缓冲区中的数据。 或者直接将它从a_large_buffer移到line 。

我找不到std::moveline 。 有这样的事情吗？

正如评论中所指出的，一个简单的解决方案是立即处理line而不是保留它。 请注意，这不是一个选项。 我必须将line复制（或移动）到my_lines ，因为my_lines将被传递给其他函数。

快速示例：

我的想法是，如果我从缓冲区中读取，缓冲区中的内容仍然存在。 我想改变它并在阅读后删除所有内容。 我确信有一种方法。

玩这里的例子。

请注意，该示例使用 stringstream 而不是 iostream。

Answer 1

my_lines.emplace_back(std::move(line));