我们正在尝试下载 ambari 版本 2.6.1 但没有成功(根据https://docs.hortonworks.com.s3.amazonaws.com/HDPDocuments/HDF3/HDF-3.1.1/bk_installing-h -p... ) 知道为什么我们得到ERROR 403: ...
我们正在尝试下载 ambari 版本 2.6.1 但没有成功(根据https://docs.hortonworks.com.s3.amazonaws.com/HDPDocuments/HDF3/HDF-3.1.1/bk_installing-h -p... ) 知道为什么我们得到ERROR 403: ...
在 Docker 桌面上使用 Hortonworks HDP 3.0.1 和 HDF 沙盒我已登录 HDP,并尝试将文件从 /user/maria_dev/tutorials/test.csv 复制到 HDF 的 /sandbox/tutorial-files/640/nifi/input 但这不 ...
NiFi 由许多 web 应用程序(Web UI、web API、文档、自定义 UI、数据查看器等)组成是否可以只安装特定的应用程序? ...
我正在尝试使用 Hortonworks Schema Registry 反序列化一些由 Nifi 序列化的 Kafka 消息 在 Nifi 端用作 RecordWritter 的处理器:AvroRecordSetWriter 模式写入策略:HWX 内容编码模式参考 我能够在其他 Nifi ...
我们目前正在使用捆绑了 Kafka 2.0.0 的 HDF(Hortonworks Dataflow)3.3.1。 问题在于在同一个 KafkaConnect 集群上运行具有不同配置(Kerberos 主体)的多个连接器。 作为此 Kafka 版本的一部分,所有连接器都应该使用相同的消费者/生产者 ...
我在 Nifi 中使用 UpdateRecord 处理器,我需要从一个记录路径(/amount)获取值,向它添加一些值并将结果值放入另一个记录路径(/result)。 我找不到任何方法来做到这一点。 任何帮助都会很棒!! ...
我创建了一个自定义处理器,负责将一些记录保存在mysql数据库中。 为了设置mysql数据库,我在自定义处理器中使用DBCPConnectionPool对象,该对象确实将数据正确保存到数据库表中,但是我担心在完成保存逻辑后,池化机制没有关闭该连接。 这适用于2到3个流文件,但是当我发送多个流 ...
我在NiFi中使用QueryCassandra处理器从Cassandra获取数据,但是我的查询正在获取timedoutexception。 我想增加从处理器运行CQL查询时的请求超时。 有没有办法做到这一点,否则我将不得不编写自定义处理器? ...
我从URL使用API获取一些数值数据,并且正在寻找一种在将数据放入文件目录之前在apache nifi中进行一些数学运算的方法。 现在已经谢谢你了。 顺便说一句,我正在使用InvokeHTTP处理器来获取数据并将文件放置在我正在使用PutFile处理器的某个位置。 我搜索了一些相关 ...
我对Nifi Web UI有问题。 当我设置nifi.web.http.host =鸾-HT01,我不能在浏览器上访问Nifi的Web UI通过公网IP,例如: HTTP://本地主机:8080 / nifi / , http://107.113.193.160:8080 / nifi 。 ...
我看到content_repository所在的磁盘分区已满85%。 当我查看存储库文件夹时,我看到了超过2周的文件碎片。 我的第一个问题是,如果分区100%充满,将会发生什么。 第二个问题是如何防止分区100%充满? 我在nifi.properties中的设置如下: 我 ...
我有一个用例,需要从另一个流中使用FlowFile。 据我所知,所有流文件都保存到内容存储库中。 因此,例如,我的第一个流程从DB读取数据,执行一些转换并将其放入Hive。 我的第二个流程需要获取那些转换后的流程文件,并将它们放到另一个位置或执行一些过滤等操作。 如何从N ...
我正在使用hadoop进行概念验证,很可能会设置一个包含HDP和HDF Hortonwork组件的集群。 数据量确实很小,因此,如果我没有记错的话,每个节点的磁盘量可能不需要超过10 GB。 主节点和从节点的无CPU和RAM的考虑标准是什么? ...
如果错误是多余的,请道歉,但我正在寻找特定的解决方案。 我正在尝试使用 swagger rest API 将新版本的架构发布到 Hortonworks 架构注册表。 我正在使用 python requests 模块以编程方式发布新版本。 我尝试了之前关于“方法允许异常”的问题所建议的各种方法, ...
我目前的理解是NiFi处理器属性特定于该处理器。 因此,向处理器添加新属性将仅在该处理器中可见,而不会传递给以后的处理器块? 这就是为什么需要UpdateAttribute来添加在流文件中遍历数据流时保留在其中的元数据的原因: 那么,允许用户在处理器中添加自定义属性(超出该处 ...
我刚刚使用Kerberos身份验证设置了NiFi SSL,并将自己添加为“初始管理员用户”。 登录后,我能够创建流程并为其他用户附加策略和所有内容。 但是我无法查看任何流的Query Provenance 。 谷歌搜索后,我发现我必须为每个Process Group或在root级别 ...
我有一个ExecuteSQL处理器,当服务器关闭或断电时,它总是被禁用,因为DBCP连接池的控制器服务已关闭,我必须手动打开DBCP连接池。 我可以自动启用该控制器服务吗? ...
根据这个文档 ,我应该在zeppelin或spark2配置中找到zeppelin.livy.principal ,但是那里没有这样的选择。 ...
我正在从MySQL表(仅适用于选定的列)中导入数据,并将其放入HDFS中。 完成此操作后,我想在Hive中创建一个表。 为此,我有一个schema.sql文件,其中包含整个表的CREATE TABLE语句,并且我只想为导入的列生成新的CREATE TABLE语句。 与以下示例中的g ...
为了快速测试和开发,有一种方法可以从处理器的右上角清除公告,这真的很有帮助。 一旦我看到错误并修复它,我想在重新启动之前清除它。 如果可以使用当前版本,请指导。 ...