用Cython编译C和C++源代码

2022-02-22 00:00:00 cython compiler-errors clang c++ clang++

我正在尝试用Cython同时编译C和C++源代码。这是我的当前设置:

-setup.py

from distutils.core import setup
from Cython.Build import cythonize
from distutils.extension import Extension
import os

language = "c++"
extra_compile_flags = ["-std=c++17"]
os.environ["CC"] = "clang++"

ext_modules = [
    Extension(
        name="Dummy",
        sources=["mydummy.pyx", "source1.cpp","source2.c"],
        language=language,
        extra_compile_args=extra_compile_flags,
   )
]

ext_modules = cythonize(ext_modules)

setup(
    name="myapp",
    ext_modules=ext_modules,
)

-编译命令:

python3 setup.py build_ext --inplace --verbose

在日志中,我收到以下消息:

clang++ -DNDEBUG -g -fwrapv -O2 -Wall -g -fstack-protector-strong -Wformat -Werror=format-security -Wdate-time -D_FORTIFY_SOURCE=2 -fPIC -I. -I/usr/include/python3.6m -I/usr/include/python3.6m -c /path/source2.c -o build/temp.linux-x86_64-3.6/./path/source2.o -std=c++17 -O3
clang: warning: treating 'c' input as 'c++' when in C++ mode, this behavior is deprecated [-Wdeprecated]

编译过程很糟糕,但是警告看起来相当糟糕。我怎么才能摆脱它呢? 天真的解决方案

os.environ["CC"] = "clang"
os.environ["CXX"] = "clang++"

失败,error: invalid argument '-std=c++17' not allowed with 'C'


解决方案

GCC(或clang)只是一个前端,它会根据编译文件的文件扩展名调用相应的编译器(c-或c++-编译器)(.c表示应该用c-编译器编译,.cpp表示应该用c++-编译器编译),例如类似的SO-issue。

因此,不需要将编译器设置为"clang++",因为它将自动发生。

但是,cython需要知道它必须生成cpp文件(以及接受c++语法),而不是c文件。链接器还必须知道,它必须链接cpp库(如果使用g++/clang++进行链接,则会自动完成)。因此,我们需要将language = "c++"添加到Extension的定义中,如DavidW的答案所示-这将解决最后两个问题。

剩下的问题是,我们希望对不同的源文件使用不同的编译器选项(-std=c++17仅用于cpp文件)。这可以使用不太知名的命令build_clib

来实现
#setup.py:

from distutils.core import setup
from Cython.Build import cythonize
from distutils.extension import Extension

ext_modules = [
    Extension(
        name="mydummy",
        sources=["mydummy.pyx", "source1.cpp"]
        language="c++",
        extra_compile_args=["-std=c++17"],
   )
]

ext_modules = cythonize(ext_modules)

myclib = ('myclib', {'sources': ["source2.c"]})

setup(
    name="mydummy",
    libraries=[myclib],
    ext_modules=ext_modules,
)

现在使用

python setup.py build --verbose

python setup.py build_clib --verbose build_ext -i --verbose

将首先构建一个简单的由C代码组成的静电库,并将其链接到生成的由C++代码组成的扩展。

上面的代码在构建静电库时使用默认编译标志,对于您来说应该足够了。

distutilsdoesn't offer可以指定附加标志,因此如果需要,我们必须切换到提供此功能的setuptools,或者修补build_clib命令。

对于第二种选择,我们必须在上述setup.py-file中添加以下内容:

#setup.py
...
# adding cflags to build_clib
from distutils import log
from distutils.command.build_clib import build_clib

# use original implementation but with tweaked build_libraries!
class build_clib_with_cflags(build_clib):
    def build_libraries(self, libraries):
            for (lib_name, build_info) in libraries:
                sources = build_info.get('sources')
                if sources is None or not isinstance(sources, (list, tuple)):
                    raise DistutilsSetupError(
                           "in 'libraries' option (library '%s'), "
                           "'sources' must be present and must be "
                           "a list of source filenames" % lib_name)
                sources = list(sources)

                log.info("building '%s' library", lib_name)


                macros = build_info.get('macros')
                include_dirs = build_info.get('include_dirs')
                cflags = build_info.get('cflags')                    # HERE we add cflags
                objects = self.compiler.compile(sources, 
                                                output_dir=self.build_temp,
                                                macros=macros,
                                                include_dirs=include_dirs,
                                                extra_postargs=cflags,        # HERE we use cflags
                                                debug=self.debug)


                self.compiler.create_static_lib(objects, lib_name,
                                                output_dir=self.build_clib,
                                                debug=self.debug)

...
setup(
    ...
    cmdclass={'build_clib': build_clib_with_cflags}, # use our class instead of built-in!
)

现在我们可以向库定义添加额外的编译标志(如果使用setuptools可以跳过上一步):

...
myclib = ('myclib', {'sources': ["source2.c"], 'cflags' : ["-O3"]})
...

相关文章