AssertionError：數據科學經驗上的多個.dist-info目錄

Question

在由Apache Spark服務支持的Python 3.5筆記本中，我使用pip安裝了BigDL 0.2。 刪除該安裝並嘗試安裝BigDL版本0.3時，出現以下錯誤：（添加了換行符以提高可讀性）

AssertionError: Multiple .dist-info directories:
/gpfs/fs01/user/scbc-4dbab79416a6ec-4cf890276e2b/.local/lib/python3.5/site-packages/BigDL-0.3.0.dist-info,
/gpfs/fs01/user/scbc-4dbab79416a6ec-4cf890276e2b/.local/lib/python3.5/site-packages/BigDL-0.2.0.dist-info

但是，這些目錄都不存在：

!ls -al /gpfs/fs01/user/scbc-4dbab79416a6ec-4cf890276e2b/.local/lib/python3.5/site-packages/
total 0
drwx------ 2 scbc-4dbab79416a6ec-4cf890276e2b users 4096 Nov  8 06:12 .
drwx------ 3 scbc-4dbab79416a6ec-4cf890276e2b users 4096 Nov  8 06:12 ..

怎么了？ 刪除舊版本的軟件包后，如何安裝新版本的軟件包？

Answer 1

錯誤消息中的目錄路徑錯誤。 DSX上的Python 3.5內核通過設置環境變量PIP_BUILD為pip指定了一個構建目錄。 多個dist-info目錄位於：

!printenv PIP_BUILD ; ls -l $PIP_BUILD/*
/tmp/scbc-4dbab79416a6ec-4cf890276e2b/pip-build
total 0
drwx------ 8 scbc-4dbab79416a6ec-4cf890276e2b users 117 Nov  7 02:02 bigdl
drwx------ 2 scbc-4dbab79416a6ec-4cf890276e2b users 135 Nov  7 02:02 BigDL-0.2.0.dist-info
drwx------ 2 scbc-4dbab79416a6ec-4cf890276e2b users 135 Nov  8 06:12 BigDL-0.3.0.dist-info

要解決此問題，請刪除構建目錄：

!rm -rf $PIP_BUILD

之后， pip可以毫無問題地安裝軟件包：

!pip install --no-dependencies bigdl==0.3
Collecting bigdl==0.3
  Using cached BigDL-0.3.0-py2.py3-none-manylinux1_x86_64.whl
Installing collected packages: bigdl
Successfully installed bigdl