Python / Pip包裝； 如何將內置文件移動到安裝目錄

Question

我一直在研究Python程序包，該程序包包裝了一些需要從源代碼構建的C ++庫。 我使用CMake構建這些組件，最后希望整個組件都可以“通過點子安裝”。 我快到了，但是我無法將CMake構建的庫最終保存在最終的Python安裝目錄中。

我設法使它們進入最終的“輪子”，這很奇怪，但是它們不在我的site_packages目錄中。

我的setup.py文件如下所示：

import os
import re
import sys
import sysconfig
import site
import platform
import subprocess
import pathlib

from distutils.version import LooseVersion
from setuptools import setup, Extension
from setuptools.command.build_ext import build_ext as build_ext_orig

class CMakeExtension(Extension):
    def __init__(self, name, sourcedir=''):
        Extension.__init__(self, name, sources=[])
        self.sourcedir = os.path.abspath(sourcedir)

class CMakeBuild(build_ext_orig):
    def run(self):
        try:
            out = subprocess.check_output(['cmake', '--version'])
        except OSError:
            raise RuntimeError("CMake must be installed to build the following extensions: " +
                               ", ".join(e.name for e in self.extensions))

        if platform.system() == "Windows":
            raise RuntimeError("Sorry, pyScannerBit doesn't work on Windows platforms. Please use Linux or OSX.")

        for ext in self.extensions:
            self.build_extension(ext)

    def build_extension(self, ext):
        extdir = os.path.abspath(os.path.dirname(self.get_ext_fullpath(ext.name)))
        cmake_args = ['-DCMAKE_LIBRARY_OUTPUT_DIRECTORY=' + extdir,
                      '-DPYTHON_EXECUTABLE=' + sys.executable,
                      '-DCMAKE_VERBOSE_MAKEFILE:BOOL=OFF',
                      '-Wno-dev',
                      '-DCMAKE_RUNTIME_OUTPUT_DIRECTORY=' + extdir,
                      '-DSCANNERBIT_STANDALONE=True',
                      '-DCMAKE_INSTALL_RPATH=$ORIGIN',
                      '-DCMAKE_BUILD_WITH_INSTALL_RPATH:BOOL=ON',
                      '-DCMAKE_INSTALL_RPATH_USE_LINK_PATH:BOOL=ON',
                      '-DCMAKE_INSTALL_PREFIX:PATH=' + extdir,
                     ]

        cfg = 'Debug' if self.debug else 'Release'
        build_args = ['--config', cfg]

        if platform.system() == "Windows":
            cmake_args += ['-DCMAKE_LIBRARY_OUTPUT_DIRECTORY_{}={}'.format(cfg.upper(), extdir)]
            if sys.maxsize > 2**32:
                cmake_args += ['-A', 'x64']
            build_args += ['--', '/m']
        else:
            cmake_args += ['-DCMAKE_BUILD_TYPE=' + cfg]
            build_args += ['--', '-j2']

        env = os.environ.copy()
        env['CXXFLAGS'] = '{} -DVERSION_INFO=\\"{}\\"'.format(env.get('CXXFLAGS', ''),
                                                              self.distribution.get_version())

        if not os.path.exists(self.build_temp):
            os.makedirs(self.build_temp)

        # untar ScannerBit tarball
        subprocess.check_call(['tar','-C','pyscannerbit/scannerbit/untar/ScannerBit','-xf','pyscannerbit/scannerbit/ScannerBit_stripped.tar','--strip-components=1'], cwd=ext.sourcedir, env=env)

        # First cmake
        subprocess.check_call(['cmake', ext.sourcedir] + cmake_args, cwd=self.build_temp, env=env)
        # Build all the scanners
        subprocess.check_call(['cmake', '--build', '.', '--target', 'multinest'] + build_args, cwd=self.build_temp)
        # Re-run cmake to detect built scanner plugins
        subprocess.check_call(['cmake', ext.sourcedir], cwd=self.build_temp)
        # Main build
        subprocess.check_call(['cmake', '--build', '.'] + build_args, cwd=self.build_temp)
        # Install
        #subprocess.check_call(['cmake', '--build', '.', '--target', 'install'], cwd=self.build_temp)

setup(
    name='pyscannerbit',
    version='0.0.8',
    author='Ben Farmer',
    # Add yourself if you contribute to this package
    author_email='ben.farmer@gmail.com',
    description='A python interface to the GAMBIT scanning module, ScannerBit',
    long_description='',
    ext_modules=[CMakeExtension('_interface')],
    cmdclass=dict(build_ext=CMakeBuild),
    zip_safe=False,
    packages=['pyscannerbit'],
)

如您所見，我告訴CMake在“ extdir”中構建庫，事實證明是

/tmp/pip-req-build-d7mfvn1a/build/lib.linux-x86_64-3.6

我以為只是將文件從此處（或其他臨時目錄？）復制到最終安裝路徑中，但是可能無法那樣工作（盡管正如我之前所說，這些內置文件確實會最終在生成的輪子中）。 這些生成的文件是否需要添加到MANIFEST.in或某些“ package_data”條目或類似的東西？ 目前，它們未在任何地方列出，因為據我了解，這些文件是用於在構建前而不是構建后移動文件的。 目前，我僅使用MANIFEST.in來確保正確填充sdist tarball。

為了完整起見，我使用pip構建程序包，如下所示：

python setup.py sdist
pip install -v dist/pyscannerbit-0.0.8.tar.gz

就是這樣，我知道tarball的構建是可行的，以后可與PyPI一起使用。

如果您想嘗試，則源在github上： https : //github.com/bjfar/pyscannerbit

Answer 1

好的，看來我的路徑有點不對。 我以前將CMAKE_LIBRARY_OUTPUT_DIRECTORY設置為

extdir = os.path.abspath(os.path.dirname(self.get_ext_fullpath(ext.name)))

但是我需要指出

extdir+'/pyscannerbit'

其中pyscannerbit是軟件包的名稱。 否則，文件最終會在構建所在的父目錄中結束，而不是在項目目錄中結束。 因此，它們隨后不會被復制到安裝路徑。