用Cython编译C和C++源代码
我正在尝试用Cython同时编译C和C++源代码。这是我的当前设置:
-setup.py
from distutils.core import setup
from Cython.Build import cythonize
from distutils.extension import Extension
import os
language = "c++"
extra_compile_flags = ["-std=c++17"]
os.environ["CC"] = "clang++"
ext_modules = [
Extension(
name="Dummy",
sources=["mydummy.pyx", "source1.cpp","source2.c"],
language=language,
extra_compile_args=extra_compile_flags,
)
]
ext_modules = cythonize(ext_modules)
setup(
name="myapp",
ext_modules=ext_modules,
)
-编译命令:
python3 setup.py build_ext --inplace --verbose
在日志中,我收到以下消息:
clang++ -DNDEBUG -g -fwrapv -O2 -Wall -g -fstack-protector-strong -Wformat -Werror=format-security -Wdate-time -D_FORTIFY_SOURCE=2 -fPIC -I. -I/usr/include/python3.6m -I/usr/include/python3.6m -c /path/source2.c -o build/temp.linux-x86_64-3.6/./path/source2.o -std=c++17 -O3
clang: warning: treating 'c' input as 'c++' when in C++ mode, this behavior is deprecated [-Wdeprecated]
编译过程很糟糕,但是警告看起来相当糟糕。我怎么才能摆脱它呢? 天真的解决方案
os.environ["CC"] = "clang"
os.environ["CXX"] = "clang++"
失败,error: invalid argument '-std=c++17' not allowed with 'C'
解决方案
GCC(或clang)只是一个前端,它会根据编译文件的文件扩展名调用相应的编译器(c-或c++-编译器)(.c表示应该用c-编译器编译,.cpp表示应该用c++-编译器编译),例如类似的SO-issue。
因此,不需要将编译器设置为"clang++",因为它将自动发生。
但是,cython需要知道它必须生成cpp文件(以及接受c++语法),而不是c文件。链接器还必须知道,它必须链接cpp库(如果使用g++/clang++进行链接,则会自动完成)。因此,我们需要将language = "c++"
添加到Extension
的定义中,如DavidW的答案所示-这将解决最后两个问题。
剩下的问题是,我们希望对不同的源文件使用不同的编译器选项(-std=c++17
仅用于cpp文件)。这可以使用不太知名的命令build_clib
:来实现
#setup.py:
from distutils.core import setup
from Cython.Build import cythonize
from distutils.extension import Extension
ext_modules = [
Extension(
name="mydummy",
sources=["mydummy.pyx", "source1.cpp"]
language="c++",
extra_compile_args=["-std=c++17"],
)
]
ext_modules = cythonize(ext_modules)
myclib = ('myclib', {'sources': ["source2.c"]})
setup(
name="mydummy",
libraries=[myclib],
ext_modules=ext_modules,
)
现在使用
python setup.py build --verbose
或
python setup.py build_clib --verbose build_ext -i --verbose
将首先构建一个简单的由C代码组成的静电库,并将其链接到生成的由C++代码组成的扩展。
上面的代码在构建静电库时使用默认编译标志,对于您来说应该足够了。
distutils
doesn't offer可以指定附加标志,因此如果需要,我们必须切换到提供此功能的setuptools
,或者修补build_clib
命令。
对于第二种选择,我们必须在上述setup.py
-file中添加以下内容:
#setup.py
...
# adding cflags to build_clib
from distutils import log
from distutils.command.build_clib import build_clib
# use original implementation but with tweaked build_libraries!
class build_clib_with_cflags(build_clib):
def build_libraries(self, libraries):
for (lib_name, build_info) in libraries:
sources = build_info.get('sources')
if sources is None or not isinstance(sources, (list, tuple)):
raise DistutilsSetupError(
"in 'libraries' option (library '%s'), "
"'sources' must be present and must be "
"a list of source filenames" % lib_name)
sources = list(sources)
log.info("building '%s' library", lib_name)
macros = build_info.get('macros')
include_dirs = build_info.get('include_dirs')
cflags = build_info.get('cflags') # HERE we add cflags
objects = self.compiler.compile(sources,
output_dir=self.build_temp,
macros=macros,
include_dirs=include_dirs,
extra_postargs=cflags, # HERE we use cflags
debug=self.debug)
self.compiler.create_static_lib(objects, lib_name,
output_dir=self.build_clib,
debug=self.debug)
...
setup(
...
cmdclass={'build_clib': build_clib_with_cflags}, # use our class instead of built-in!
)
现在我们可以向库定义添加额外的编译标志(如果使用setuptools
可以跳过上一步):
...
myclib = ('myclib', {'sources': ["source2.c"], 'cflags' : ["-O3"]})
...
相关文章