Hadoop流无法访问jar存档

Question

我正在运行此hadoop流命令：

/home/hduser/hadoop/bin/hadoop jar
/home/hduser/hadoop/share/hadoop/tools/lib
/hadoop-*streaming*.jar 
-file audio.py 
-cacheArchive        hdfs://localhost:54310/user/hduser
  /input/audio/cacheaudiodir.jar#cacheaudiodir 
-input /user/hduser/input/audio -output /user/hduser/output
-mapper audio.py -cmdenv AUDIO_DIR=cacheaudiodir

当我尝试在Python映射器中引用“ cacheaudiodir”时，出现错误： No such file or directory ，例如：

dir_a='cacheaudiodir'
filelist_a = commands.getoutput('/home/hduser/hadoop/bin/hadoop fs -ls ' + dir_a)

如何指向此symlink文件夹中的文件？

Answer 1

似乎cachearchive在本地是未解压缩的，而不是在hdfs中，因此'hadoop fs -ls'找不到任何东西，而'ls'却找到了。