创建自定义 dataproc 图像时无法安装 python3 包

Question

我正在按照以下链接创建 dataproc-version 1.5.21-debian10 的自定义图像https://cloud.google.com/dataproc/docs/guides/dataproc-images

根据此链接，如果我尝试以下自定义脚本

#！ /usr/bin/庆典

apt-get -y update <-- 这以错误命令未找到结束

apt install python3-pip -y <-- E: 无法定位 package

python3.7 -m pip 安装 numpy <-- /usr/bin/python3.7: 没有名为 pip 的模块

相反，如果我尝试 pip 安装 numpy，它会在 python2.7 中安装 package

请建议我能做什么？

Answer 1

Dataproc 1.5 图像默认使用 Conda 和 Python 3。 要在 Conda 环境中安装软件包，您应该使用 Conda 的conda二进制文件而不是系统一：

/opt/conda/miniconda3/bin/conda install numpy

请注意，不鼓励使用 Pip 在 Conda 环境中安装包，但如果需要，您仍然可以这样做：

/opt/conda/miniconda3/bin/pip install numpy

Answer 2

您应该使用 pip3 而不是 pip 来使用 Python 3.7 环境。

pip3 install numpy