繁体   English   中英

Ubuntu通过apt-get安装apache spark

[英]Ubuntu install apache spark via apt-get

我需要安装spark并在一台机器上以独立模式运行它,并寻找通过apt-get安装它的直接方式

我在这里通过pip找到了如何通过pyspark执行此操作

我找不到用一个终端命令安装spark的方法。

安装pyspark安装所有的spark软件吗?

我发现说明了如何安装的火花,这是更复杂

有没有办法通过apt-get使用类似的一个终端命令安装spark?

编辑

我发现解释了如何使用apt-get安装spark,我得到以下错误

E:无法找到包火花核E:无法找到包spark-master E:无法找到包spark-worker E:无法找到包spark-history-server E:无法找到包spark-python

谢谢

在安装pyspark之前,您必须安装Java8。 这描述于

在Ubuntu上进行Java8的全自动安装

$ apt-get update
$ apt-get -y install software-properties-common
$ add-apt-repository -y ppa:webupd8team/java
$ echo debconf shared/accepted-oracle-license-v1-1 select true | debconf-set-selections
$ echo debconf shared/accepted-oracle-license-v1-1 seen true | debconf-set-selections
$ apt-get update
$ apt-get -y install oracle-java8-installer

(见https://newfivefour.com/docker-java8-auto-install.html

之后你可以简单地运行pip install pyspark

暂无
暂无

声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.

 
粤ICP备18138465号  © 2020-2024 STACKOOM.COM