在Hadoop群集上进行R安装

Question

我正在现有的Hadoop集群上设置R。 到目前为止，我已经在集群的节点（EDGE节点）部分之一上安装了R rpms和相关的库软件包，它可以按预期工作。 是将R rpm安装在群集的所有服务器上，还是仅将库目录（在我的情况下为/ usr / lib64 / R / library ）安装在所有服务器之间？

Answer 1

对于rmr，您需要在各处安装，对于rhdfs，您不需要安装，对于rhive我也不知道。 安装是指R rpm或同等必要的依赖关系。 至于同步lib dirs，我已经尝试过类似的方法来简化rmr2的部署，但是我们（客户端和我一致）取消了连接，因为这似乎是一种非常脆弱的策略（取决于所有库是否完全相同） 。 它在非常受控制的环境中工作，但是我们对整个过程进行了同步，而不仅仅是库。