暫存文件下載到 GCP Dataflow Worker 的什么位置

Question

我正在使用 Java 使用 GCP 數據流 Flex 模板。 我想為 TLS 驗證暫存“/usr/local/jdk-11-latest/lib/security/cacerts”和“/usr/local/jdk-11-latest/lib/security/keystore.jks”。 我檢查了這些文件是否已為數據流運行器暫存，但它們並未下載到與用於上傳相同的路徑。 GCP Dataflow 將從 GCS 下載的暫存文件放在哪里？

Answer 1

如果您打開工作的雲日志並在dataflow.googleapis.com/worker-startup日志中進行搜索，您會看到如下所示的日志正在Downloading: gs://.../xxx.jar to /var/opt/google/tmp/download.0.219961590/file.0 。 然后，當您搜索java cmd 日志記錄時，您可以看到所有 jars 都位於/var/opt/google/dataflow/下。