創建 HDFS 文件

Question

我知道可以使用蛇咬創建目錄 HDFS 和 python

但我希望在 HDFS 目錄上創建一個文件

Answer 1

您可以使用touchz在HDFS上創建一個空文件...

我在文檔中看到rename命令，它可能接受帶有遠程 HDFS 路徑的本地源來上傳文件，但是沒有put或copyFromLocal CLI 命令，所以我認為 Snakebite 不能做你想做的事。

我確實看到put minicluster。

---

總體而言，根據您的需要， pyspark或hdfs可能會更好。

Answer 2

使用子進程

from subprocess import Popen, PIPE 

(ret, out, err)= run_cmd(['hdfs', 'dfs', '-touchz', '/directory/filename'])