![](/img/trans.png)
[英]Install python-pip using apt-get via Ubuntu's apt-get in Dockerfile
[英]Ubuntu install apache spark via apt-get
我需要安装spark并在一台机器上以独立模式运行它,并寻找通过apt-get安装它的直接方式
我在这里通过pip找到了如何通过pyspark执行此操作
我找不到用一个终端命令安装spark的方法。
安装pyspark安装所有的spark软件吗?
我发现说明了如何安装的火花,这是更复杂
有没有办法通过apt-get使用类似的一个终端命令安装spark?
编辑
我发现这解释了如何使用apt-get安装spark,我得到以下错误
E:无法找到包火花核E:无法找到包spark-master E:无法找到包spark-worker E:无法找到包spark-history-server E:无法找到包spark-python
谢谢
在安装pyspark之前,您必须安装Java8。 这描述于
在Ubuntu上进行Java8的全自动安装
$ apt-get update
$ apt-get -y install software-properties-common
$ add-apt-repository -y ppa:webupd8team/java
$ echo debconf shared/accepted-oracle-license-v1-1 select true | debconf-set-selections
$ echo debconf shared/accepted-oracle-license-v1-1 seen true | debconf-set-selections
$ apt-get update
$ apt-get -y install oracle-java8-installer
(见https://newfivefour.com/docker-java8-auto-install.html )
之后你可以简单地运行pip install pyspark
。
声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.