使用 install_github 安装 SparkR 包时出错

Question

我正在尝试在 R 中使用SparkR包。我有所有依赖包，如devtools 、 Rtools.exe等。

当我尝试以下命令时：

install_github("amplab-extras/SparkR-pkg",subdir="pkg")

我收到以下错误：

Downloading github repo amplab-extras/SparkR-pkg@master
Error in function (type, msg, asError = TRUE ) :
  Received HTTP code 403 from proxy after CONNECT

为了解决这个问题，我设置了一个有效的 http_proxy、https_proxy，但它不工作并抛出上述错误。 我是 R/RStudio 的新手。

Answer 1

我已经在 Windows 7、64 位和 R-3.2.x 上安装了 SparkR，并安装了 Spark 1.4。

** 如果您需要了解在 Windows 上安装 Spark，请查看 Spark 的官方文档或此处列出的分步过程。

• 转到maven的bin文件夹

  C:\\Program Files\\apache-maven-3.3.3\\bin

• 打开记事本并粘贴文本

  "%~dp0\\mvn.cmd" %*

• 将记事本保存在 bin 文件夹中为 mvn.bat 如下所示

  C:\\Program Files\\apache-maven-3.3.3\\bin\\mvn.bat

• 重启Rstudio并执行

  library(devtools) install_github("repo/SparkR-pkg", ref="branchname", subdir="pkg")

Answer 2

由于 SparkR 从 2015 年 6 月的 1.4 版本开始并入 Spark Core 项目，现在 SparkR 构建指令与 Spark 构建指令相同。 确保为 SparkR 添加 maven 标志 -Psparkr。

例如，您可以使用 SparkR 构建一个版本的 Spark，如下所示：

build/mvn -Psparkr -DskipTests clean package

有关更多详细信息，请参阅： http : //spark.apache.org/docs/latest/building-spark.html 。