CSV文件復制到保留了文件名的HDFS

Question

最有可能是一個假問題，但我找不到合適的例子。

如果我迷路了，請改正我的想法。 為此，我創建了一個作業並通過流式觸發它：

job create hdfsjob 
    --definition "filepollhdfs --directory=/tmp/xd --names=*" --deploy
stream create csvStream 
    --definition "file --ref=true --dir=/data/in --pattern=*.txt 
    > queue:job:hdfsjob" --deploy

我可以通過xd源filepollhdfs中的fileName和fileExtension來管理文件名和擴展名，但是如何保留其原始名稱？

為防止翻轉，將rollover參數設置為一個很高的值是個好主意，還是例如可能破壞內存消耗的東西？

理想的做法是遍歷源目錄結構並在hdfs中重新創建相同的結構。