Java.nio.file.NoSuchFileException 但文件退出

Question

我正在尝试从文件夹中读取文件。 该文件夹中有 >1000 个文件，我尝试使用ScheduledThreadPoolExecutor.scheduleWithFixedDelay()每 10 秒读取 100 个文件

Files.list(Paths.get(path)).sorted().limit(limit).forEach(file ->{ //limit = 100
                    try{ 
                        String content = new String(Files.readAllBytes(file), "UTF-8");
                        //do business logic
                        doneFile.add(fileName);
                    }catch (Exception e){
                        log.error(e);
                    }
                });

if(doneFile.size() > 0){
                for(String fileName: doneFile){
                    try {
                        Files.delete(Paths.get(path + fileName));
                    } catch (IOException e) {
                        log.error(e);
                    }
                }
            }

大约 60-80 个文件被成功读取，其他文件抛出java.nio.file.NoSuchFileException 。
删除函数也会抛出一些java.nio.file.NoSuchFileException 。

但最后，尽管有例外，但在一些线程之后读取并删除了所有文件

在这种情况下是什么导致异常，我该如何解决？ 非常感谢！ 附言。 先生关于我的英语不好

Answer 1

我评论道：

听起来像其他东西正在添加和删除文件。 您是否有可能同时运行两个计划任务？ 是否有可能是外部进程正在执行此操作？

你回复：

我检查了日志文件，发现ScheduledThreadPoolExecutor.scheduleWithFixedDelay()创建了 10 个线程，而不是 4 个循环中预期的 8 个线程

所以......听起来你有两个（或更多）线程遍历同一个目录，在没有任何协调的情况下处理和删除文件。 结合Files.list将缓冲它列出的部分或全部目录的事实，你会遇到如下问题：

• 在第二个线程尝试打开它之前，一个线程删除另一个文件流中的文件。 当后者尝试打开文件时，这会导致NoSuchFileException 。

• 两个线程同时处理同一个文件，一个删除它，而第二个线程仍在处理它。 当后者尝试删除文件时，这会导致NoSuchFileException 。

可能的解决方案：

1. 编写代码以忽略这些异常。 （但是您仍然可以让两个线程同时处理同一个文件，这似乎是一件坏事。）

2. 重构代码，以便在任何时候只有一个线程扫描目录。

如果在目录内处理时需要并行性，请让目录处理器线程将每个文件的任务提交给具有有限线程池的执行程序。