Hadoop HDFS Shell命令用于反向模式搜索

Question

我想知道我们是否可以在HDFS目录中列出与指定模式不匹配的文件。

例如，假设我有一些文件的名称包含一些日期值[例如：'file201606250001.csv']。

如果我需要获取不属于日期格式的文件列表，请说“ * 20160629 *”，我可以使用什么命令？

我尝试给出以下命令，但它仍列出所有文件（包括与我要排除的模式匹配的文件）。

hdfs dfs -ls /test/* | grep -v '*20160629*'

我尝试了此处给出的解决方案，但仍返回所有文件。

Answer 1

首先列出文件，然后列出除模式以外的grep （ -v选项）

hadoop fs -ls /dir/path/to/search |grep -v '20160629'