![](/img/trans.png)
[英]How to manually copy executable to workers with Apache Beam Dataflow on GCP
[英]Where are Staged files downloaded to on GCP Dataflow Workers
我正在使用 Java 使用 GCP 数据流 Flex 模板。 我想为 TLS 验证暂存“/usr/local/jdk-11-latest/lib/security/cacerts”和“/usr/local/jdk-11-latest/lib/security/keystore.jks”。 我检查了这些文件是否已为数据流运行器暂存,但它们并未下载到与用于上传相同的路径。 GCP Dataflow 将从 GCS 下载的暂存文件放在哪里?
如果您打开工作的云日志并在dataflow.googleapis.com/worker-startup
日志中进行搜索,您会看到如下所示的日志正在Downloading: gs://.../xxx.jar to /var/opt/google/tmp/download.0.219961590/file.0
。 然后,当您搜索java
cmd 日志记录时,您可以看到所有 jars 都位于/var/opt/google/dataflow/
下。
声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.