b2c信息网

您现在的位置是:首页 > 明日新闻 > 正文

明日新闻

numpy怎么看源码(numpy源代码)

hacker2022-07-11 03:49:19明日新闻68
本文目录一览:1、怎么源码编译依赖LAPACK和ATLAS库的NumPy包2、

本文目录一览:

怎么源码编译依赖LAPACK和ATLAS库的NumPy包

1. GCC版本要求

使用较新版本的GCC工具集(尽量不低于v4.7)且集成有gfortran编译器。

备注1:这里大写的"GCC"是指GNU Compiler Collection,它除包含C语言编译器gcc外,还包含很多其它语言的编译器(如g++/gfortran等)

备注2:3.x版的的C语言编译器gcc会由于某些头文件缺失导致编译atlas库报错

备注3:若GCC工具集中没有gfortran编译器,则编译lapack库时会遇到一些莫名其妙的错误(因为lapack是用fortran编写的),好在GCC4.7及以上版本中已经集成了gfortran编译器

在GCC版本符合要求的前提下,临时将其加入环境变量PATH并设置动态库查找路径:

[plain] view plain copy

在CODE上查看代码片派生到我的代码片

    $ export PATH=/home/slvher/tools/gcc48/bin/:$PATH  

    $ export LD_LIBRARY_PATH=/home/slvher/tools/gcc48/lib64:/home/slvher/tools/gcc48/lib  

备注4:在当前shell会话中临时设置LD_LIBRARY_PATH可以保证编译过程中正确搜索到GCC库,但最好不要设置到.bash_profile中,因为那样会影响其它程序的查找路径,可能会踩到坑。

备注5:这里提到的GCC的版本要求及环境变量设置如果没有出差错,那么下面的编译会比较顺利,否则会遇到各种编译/链接问题,后续我会用一篇笔记来记录这些踩坑的过程及遇到这些诡异问题时的分析思路,这里不赘述。

2. 编译LAPACK和ATLAS库

lapack是用fortran开发的经过特别优化的线性代数计算库;atlas也是一个优化过的线性代数计算库,它提供了BLAS库的全部API(包括C接口和Fortran接口),还实现了lapack库中的部分函数,atlas在编译过程中会根据机器的配置参数来调整科学计算函数的参数,以便在该机器上达到更好的计算性能。

初看起来,需要分别编译lapack和atlas两个库,所幸的是,atlas库支持编译时自动编译lapack库,因此,只需正确完成atlas库的编译配置,编译atlas库就可以了。

下面是编译atlas/lapack库的主要步骤。

1) 分别从官网下载lapack源码包和atlas源码包,我下载的是目前的最新版lapack-3.5.0.tgz及atlas3.10.2.tar.bz2

2) 解压atlas源码压缩包:tar -jxvf atlas3.10.2.tar.bz2

3) cd ATLAS mkdir BLDdir cd BLDdir

4) 执行configure命令以配置编译参数

[plain] view plain copy

在CODE上查看代码片派生到我的代码片

    $ ../configure --shared -b 64 --prefix=/home/slvher/tools/scikit-learn-virtualenv/dep-libs/sklearn-libs --with-netlib-lapack-tarfile=/home/slvher/tools/scikit-learn-virtualenv/dep-libs/lapack-3.5.0.tgz   

其中,--shared表明要编译atlas共享库(configure会自动在编译命令中插入"-fPIC"参数,无需在这里显式指定);--prefix指定编译结果的安装路径;--with-netlib-lapack-tarfile表明编译atlas库时会用相同的编译器及编译/链接参数自动编译lapack库,这里指定lapack源码包的路径后,configure运行后会自动解压lapack源码并将其拷贝至BLDdir/src/lapack/reference/这个目录下。

5) configure运行完后,BLDdir目录下生成了Make.inc文件,该文件中设置了众多编译参数(如查找路径、编译产出路径、编译器、传给编译器的参数,等等),BLDdir子目录下很多模块的Makefile都会include这个Make.inc,包括源码独立的lapack包,可见,这个Make.inc文件可以达到统一编译环境的目的。

6) make build

7) make check

8) make ptcheck

9) make install

如果上述一系列命令均执行成功,那么编译完成的*.a和*.so库会安装到--prefix参数指定的路径下,这些库的头文件也会被拷贝到安装路径下的include目录。

至此,ATLAS和LAPACK库均完成编译,其中LAPACK库是.a静态库,ATLAS库是.so动态库。事实上,ATLAS的动态库中已经包含了LAPACK静态库的所有符号和代码。

下面可以开始编译依赖LAPACK和ATLAS库的NumPy包了。

3. 编译优化版NumPy包

前提:官网下载NumPy源码包并解压,这里以目前最新版numpy-1.9.2.tar.gz为例进行说明。

1) cd至解压目录numpy-1.9.2

2) cp site.cfg.example site.cfg

3) 在site.cfg中配置atlas项,其中include_dirs和library_dirs是atlas库安装路径下的include和lib目录

[plain] view plain copy

在CODE上查看代码片派生到我的代码片

    [atlas]  

    atlas_libs   = lapack,f77blas,cblas,atlas  

    library_dirs = /home/slvher/tools/scikit-learn-virtualenv/dep-libs/sklearn-libs/lib  

    include_dirs = /home/slvher/tools/scikit-learn-virtualenv/dep-libs/sklearn-libs/include  

4) python setup.py config

5) python setup.py build --fcompiler=gnu95 ## 指定Fortran编译器为GCC4.8工具集中的gfortran

6) python setup.py install

正常情况下,build成功后,install会把编译产出拷贝到当前python解释器安装路径下的lib/python2.7/site-packages目录中。

此时,可以通过下面的例子来查看NumPy包的配置情况:

[python] view plain copy

在CODE上查看代码片派生到我的代码片

     import numpy as np  

     np.__config__.show()  

    atlas_3_10_blas_threads_info:  

        libraries = ['lapack', 'f77blas', 'cblas', 'atlas']  

        library_dirs = ['/home/slvher/tools/scikit-learn-virtualenv/dep-libs/sklearn-libs/lib']  

        define_macros = [('HAVE_CBLAS', None), ('ATLAS_INFO', '"\\"3.10.2\\""')]  

        language = c  

        include_dirs = ['/home/slvher/tools/scikit-learn-virtualenv/dep-libs/sklearn-libs/include']  

    lapack_opt_info:  

        libraries = ['tatlas', 'lapack', 'f77blas', 'cblas', 'atlas']  

        library_dirs = ['/home/slvher/tools/scikit-learn-virtualenv/dep-libs/sklearn-libs/lib']  

        define_macros = [('ATLAS_INFO', '"\\"3.10.2\\""')]  

        language = f77  

        include_dirs = ['/home/slvher/tools/scikit-learn-virtualenv/dep-libs/sklearn-libs/include']  

    blas_opt_info:  

        libraries = ['lapack', 'f77blas', 'cblas', 'atlas']  

        library_dirs = ['/home/slvher/tools/scikit-learn-virtualenv/dep-libs/sklearn-libs/lib']  

        define_macros = [('HAVE_CBLAS', None), ('ATLAS_INFO', '"\\"3.10.2\\""')]  

        language = c  

        include_dirs = ['/home/slvher/tools/scikit-learn-virtualenv/dep-libs/sklearn-libs/include']  

    openblas_info:  

      NOT AVAILABLE  

    openblas_lapack_info:  

      NOT AVAILABLE  

    atlas_3_10_threads_info:  

        libraries = ['tatlas', 'lapack', 'f77blas', 'cblas', 'atlas']  

        library_dirs = ['/home/slvher/tools/scikit-learn-virtualenv/dep-libs/sklearn-libs/lib']  

        define_macros = [('ATLAS_INFO', '"\\"3.10.2\\""')]  

        language = f77  

        include_dirs = ['/home/slvher/tools/scikit-learn-virtualenv/dep-libs/sklearn-libs/include']  

    lapack_mkl_info:  

      NOT AVAILABLE  

    blas_mkl_info:  

      NOT AVAILABLE  

    mkl_info:  

      NOT AVAILABLE  

也可以用具体的例子来验证其功能是否正常:

[python] view plain copy

在CODE上查看代码片派生到我的代码片

     import numpy as np  

     np.arange(15).reshape(3, 5)  

    array([[ 0,  1,  2,  3,  4],  

           [ 5,  6,  7,  8,  9],  

           [10, 11, 12, 13, 14]])  

       

     a = np.arange(15).reshape(3, 5)  

     a  

    array([[ 0,  1,  2,  3,  4],  

           [ 5,  6,  7,  8,  9],  

           [10, 11, 12, 13, 14]])  

     type(a)  

    type 'numpy.ndarray'  

      

      

     from numpy.linalg import *  

     b = np.array([[1.0, 2.0], [3.0, 4.0]])  

     b  

    array([[ 1.,  2.],  

           [ 3.,  4.]])  

     b.transpose()  

    array([[ 1.,  3.],  

           [ 2.,  4.]])  

     inv(b)  

    array([[-2. ,  1. ],  

           [ 1.5, -0.5]])  

    

如何查看python numpy内部函数的源代码

一般的ide(Pycharm, Atom, SublimeText等)都有跳转到源码的功能, ctrl+鼠标单击即可

没有ide安装一个即可

怎样阅读numpy源码

在本地是已经编译过的pyd文件,要看源代码可以去github看

ithub.com/numpy/numpy

在python中,怎么查看numpy模块中的exp函数源代码

pip install ipython

ipython

一般来说这样就能看到源代码了,不过numpy好像比较特殊,可以参考如下方法:

安装pipenv,

用pipenv打开numpy源码

$ pipenv --three

$ python3.6 -c "from pathlib import Path;fn='Pipfile';Path(fn).write_text(Path(fn).read_text().replace('pypi.org', 'mirrors.aliyun.com/pypi'))"

$ pipenv shell

$ pipenv install numpy

$ pipenv open numpy

发表评论

评论列表

  • 语酌末屿(2022-07-11 10:23:49)回复取消回复

    lib64:/home/slvher/tools/gcc48/lib  备注4:在当前shell会话中临时设置LD_LIBRARY_PATH可以保证编译过程中正确搜索到GCC库,但最好不要设置到.bash_profile中,因为那样会影响其它