更新运行 spark Ubuntu 14 的 python 版本

Question

我正在尝试使用 python 为 spark 设置我的环境。 我得到了一个带有 Ubuntu 14.04 Desktop 的虚拟机，然后我安装了 spark 1.6.2 版，现在我正在努力配置 python 3.5 版。

我目前的 pyspark 运行如下：

我可用的 python 版本是 - ls /usr/bin/ | 蟒蛇

我试图编辑文件 .bashrc 以添加变量 PYSPARK_PYTHON

非常感谢您的支持

Answer 1

最后删除pyspark ，你会好起来的

export PYSPARK_PYTHON=/usr/bin/python3.5

虽然最好将它设置在

$SPARK_HOME/conf/spark-env.sh

参考pyspark 使用什么路径？