從本地Linux解壓縮文件到HDFS時出錯

Question

此命令在本地linux上運行良好

gzip -d omega_data_path_2016-08-10.csv.gz

我想將擴展名為.csv.gz的文件解壓縮到HDFS位置。

我嘗試了以下命令，但出現此錯誤

 [cloudera@client08 localinputfiles]$ gzip -d omega_data_path_2016-08-10.csv.gz | hadoop dfs -put /user/cloudera/inputfiles/
gzip: omega_data_path_2016-08-10.csv already exists; do you wish to overwrite (y or n)? DEPRECATED: Use of this script to execute hdfs command is deprecated.
Instead use the hdfs command for it.

put: `/user/cloudera/inputfiles/': No such file or directory

有人可以幫我解決這個問題嗎？

Answer 1

要使gzip將輸出寫在標准輸出上，請使用-c標志。

所以命令是

gzip -dc omega_data_path_2016-08-10.csv.gz | hdfs dfs -put - /user/cloudera/omega_data_path_2016-08-10.csv