cost 287 ms
如何将文件从 /user/maria_dev/tutorials/test.csv (HDP) 复制到 /sandbox/tutorial-files/640/nifi/input (HDF)? - How to copy a file from /user/maria_dev/tutorials/test.csv (HDP) to /sandbox/tutorial-files/640/nifi/input (HDF)?

在 Docker 桌面上使用 Hortonworks HDP 3.0.1 和 HDF 沙盒我已登录 HDP,并尝试将文件从 /user/maria_dev/tutorials/test.csv 复制到 HDF 的 /sandbox/tutorial-files/640/nifi/input 但这不 ...

Kafka 2.0 - KafkaConnect 连接器中的多个 Kerberos 主体 - Kafka 2.0 - Multiple Kerberos Principals in KafkaConnect Connectors

我们目前正在使用捆绑了 Kafka 2.0.0 的 HDF(Hortonworks Dataflow)3.3.1。 问题在于在同一个 KafkaConnect 集群上运行具有不同配置(Kerberos 主体)的多个连接器。 作为此 Kafka 版本的一部分,所有连接器都应该使用相同的消费者/生产者 ...

是否需要在“定制处理器”中关闭DBCPConnectionPool对象,还是由Controller Service本身处理? - Do we need to close DBCPConnectionPool object in Custom Processor Or Is it handled by Controller Service itself?

我创建了一个自定义处理器,负责将一些记录保存在mysql数据库中。 为了设置mysql数据库,我在自定义处理器中使用DBCPConnectionPool对象,该对象确实将数据正确保存到数据库表中,但是我担心在完成保存逻辑后,池化机制没有关闭该连接。 这适用于2到3个流文件,但是当我发送多个流 ...

是否可以使用apache nifi对文件中的某些值进行数学运算? - Is there any way to make mathematical operations for some values in files with apache nifi?

我从URL使用API​​获取一些数值数据,并且正在寻找一种在将数据放入文件目录之前在apache nifi中进行一些数学运算的方法。 现在已经谢谢你了。 顺便说一句,我正在使用InvokeHTTP处理器来获取数据并将文件放置在我正在使用PutFile处理器的某个位置。 我搜索了一些相关 ...

NiFi:尽管在nifi.properties中进行了设置,但content_repository已满 - NiFi: content_repository is full despite settings in the nifi.properties

我看到content_repository所在的磁盘分区已满85%。 当我查看存储库文件夹时,我看到了超过2周的文件碎片。 我的第一个问题是,如果分区100%充满,将会发生什么。 第二个问题是如何防止分区100%充满? 我在nifi.properties中的设置如下: 我 ...

NiFi如何从NiFi Flow查询内容存储库 - NiFi How to query Content Repository from NiFi Flow

我有一个用例,需要从另一个流中使用FlowFile。 据我所知,所有流文件都保存到内容存储库中。 因此,例如,我的第一个流程从DB读取数据,执行一些转换并将其放入Hive。 我的第二个流程需要获取那些转换后的流程文件,并将它们放到另一个位置或执行一些过滤等操作。 如何从N ...

设置多节点Hadoop Hortonworks集群 - Setting up Multi Node Hadoop Hortonworks Cluster

我正在使用hadoop进行概念验证,很可能会设置一个包含HDP和HDF Hortonwork组件的集群。 数据量确实很小,因此,如果我没有记错的话,每个节点的磁盘量可能不需要超过10 GB。 主节点和从节点的无CPU和RAM的考虑标准是什么? ...

招摇:python 请求:javax.ws.rs.NotAllowedException:不允许 HTTP 405 方法 - swagger: python requests: javax.ws.rs.NotAllowedException: HTTP 405 Method Not Allowed

如果错误是多余的,请道歉,但我正在寻找特定的解决方案。 我正在尝试使用 swagger rest API 将新版本的架构发布到 Hortonworks 架构注册表。 我正在使用 python requests 模块以编程方式发布新版本。 我尝试了之前关于“方法允许异常”的问题所建议的各种方法, ...

Apache NiFi中的处理器属性和Flowfile属性之间的差异 - Difference Between Processor Properties and Flowfile Attributes in Apache NiFi

我目前的理解是NiFi处理器属性特定于该处理器。 因此,向处理器添加新属性将仅在该处理器中可见,而不会传递给以后的处理器块? 这就是为什么需要UpdateAttribute来添加在流文件中遍历数据流时保留在其中的元数据的原因: 那么,允许用户在处理器中添加自定义属性(超出该处 ...

如何在NiFi中为管理员用户授予所有权限 - How to give all permissions to Admin users in NiFi

我刚刚使用Kerberos身份验证设置了NiFi SSL,并将自己添加为“初始管理员用户”。 登录后,我能够创建流程并为其他用户附加策略和所有内容。 但是我无法查看任何流的Query Provenance 。 谷歌搜索后,我发现我必须为每个Process Group或在root级别 ...

从流文件内容中提取多行内容 - Extracting multiline content from flow file content

我正在从MySQL表(仅适用于选定的列)中导入数据,并将其放入HDFS中。 完成此操作后,我想在Hive中创建一个表。 为此,我有一个schema.sql文件,其中包含整个表的CREATE TABLE语句,并且我只想为导入的列生成新的CREATE TABLE语句。 与以下示例中的g ...


 
粤ICP备18138465号  © 2020-2024 STACKOOM.COM