Windows10下源码编译MXNet C++ api with MKL

素颜马尾好姑娘i 2023-02-25 02:13 13阅读 0赞

在上一篇《Windows10下源码编译MXNet C++ api with OpenBlas》文章说到可以用Openblas编译生成libmxnet，说实话，以我个人感觉，难度要稍大一些。Openblas在windows下的兼容性实在堪忧，如果自己编译的话，小问题非常多，我不一定写的那么全面，虽然成功编译过，但用起来不是那么上手，从openblas自己编译入手来编译libmxnet，网上相关介绍比较少。

这里我们尝试MKL，个人感觉，只能说这个容易一些，在windows桌面电脑里，我推荐用MKL编译。Intel就这样，保持了其一贯对windows强有力支持和兼容性。

参考

[https://github.com/apache/incubator-mxnet/issues/15632][https_github.com_apache_incubator-mxnet_issues_15632]

这个配置可供大家参考，但我看了一下，这个版本比较老，而且用法和我的有不少区别。大家可以结合着参考。里面的内容我不重复。下面要写的，全是我自己关于编译时的配置。

上次那个Openblas版本的mxnet的路径是D:\\devMXNet\\apache-mxnet-151，这次这个mkl版本的我在后面加了一个a，以示路径区别，如下，

D:\\devMXNet\\apache-mxnet-151a

关于如何安装vs2019，opencv这些老生常谈就不放到这里了。大家可以参考我前面的文章。

## 修改源码 ##

和上一篇文章中讲到的一样，首先你要修改源码(1.5.1及以下版本），主要是这里  
apache-mxnet-151a\\include\\mxnet\\tuple.h  
其中关于\_MSV\_VER的那句，改成下面这个样子（否则后面不能正确生成op.h)

namespace dmlc {
    /*! \brief description for optional TShape */
    DMLC_DECLARE_TYPE_NAME(optional<mxnet::TShape>, "Shape or None");
    DMLC_DECLARE_TYPE_NAME(optional<mxnet::Tuple<int>>, "Shape or None");
    // avoid low version of MSVC
    #if !(defined(_MSC_VER) && _MSC_VER < 1900)  //#if !defined(_MSC_VER)
    template<typename T>
    struct type_name_helper<mxnet::Tuple<T> > {
      static inline std::string value() {
        return "tuple of <" + type_name<T>() + ">";
      }
    };
    #endif
    }  // namespace dmlc

## Cmake-gui配置 ##

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3Rhbm14MjE5_size_16_color_FFFFFF_t_70][]

## 配置结果 ##

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3Rhbm14MjE5_size_16_color_FFFFFF_t_70 1][]

有几个警告，忽略不要管。

当然，如果你一定要了解，可以到[https://github.com/apache/incubator-mxnet/issues][https_github.com_apache_incubator-mxnet_issues]里面去搜索相关的话题，大多数问题里面都有人碰到过。

这样，generating done之后， 你就可以在vs2019中启动生成全部项目了。这个耗时非常长，具体没细看，大约用了2个小时左右吧。这个过程中，生成基本libmxnet.dll一般都没问题。

同样，最后因为缺少op.h，那些samples是无法成功编译的。这时个，就要先生成op.h了。

## 生成op.h ##

把所有的\*.dll 文件从mkl的安装目录

C:\\IntelSWTools\\compilers\_and\_libraries\_2020.1.216\\windows\\redist\\intel64\_win\\mkl

拷贝到

D:\\devMXNet\\apache-mxnet-151a\\cpp-package\\scripts>

注意我的OpenCV\_world430.dll在一个无关的文件夹下，大概因为这个地方设置到了环境变量Path中的原因，depedencies优先在这里找到了。

总之，你要让OpWrapperGenerator.py能找到所有相关的dll文件即可，在哪里无所谓，能找到就行。

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3Rhbm14MjE5_size_16_color_FFFFFF_t_70 2][]

然后生成op.h文件（mx36gpu是我的anaconda mxnet-gpu开发环境）

(mx36gpu) D:\devMXNet\apache-mxnet-151a>cd /d D:\devMXNet\apache-mxnet-151a\cpp-package\scripts
    (mx36gpu) D:\devMXNet\apache-mxnet-151a\cpp-package\scripts>python OpWrapperGenerator.py libmxnet.dll
    (mx36gpu) D:\devMXNet\apache-mxnet-151a\cpp-package\scripts>

如上提到的本人所示的目录结构，生成的文件最后在这里，

D:\\devMXNet\\apache-mxnet-151a\\cpp-package\\include\\mxnet-cpp\\op.h

## 生成samples项目 ##

然后回到vs2019，直接点击"生成"，切切注意不要点击“重新生成”，否则你又要从头开始，至少一个小时又没了。

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3Rhbm14MjE5_size_16_color_FFFFFF_t_70 3][]

此时你可能还会碰到一些报错，如无法链接到“mxnet\_static.lib"什么的。这时候就是一个BUG，类似下面这个样子，

(参考: [https://github.com/apache/incubator-mxnet/issues/11628][https_github.com_apache_incubator-mxnet_issues_11628])

13>LINK : fatal error LNK1104: cannot open file 'mxnet_static.lib'
    15>LINK : fatal error LNK1104: cannot open file 'mxnet_static.lib'
    14>LINK : fatal error LNK1104: cannot open file 'mxnet_static.lib'
    16>LINK : fatal error LNK1104: cannot open file 'mxnet_static.lib'
    18>LINK : fatal error LNK1104: cannot open file 'mxnet_static.lib'
    19>LINK : fatal error LNK1104: cannot open file 'mxnet_static.lib'
    17>LINK : fatal error LNK1104: cannot open file 'mxnet_static.lib'
    20>LINK : fatal error LNK1104: cannot open file 'mxnet_static.lib'
    12>LINK : fatal error LNK1104: cannot open file 'mxnet_static.lib'

解决办法：

直接把文件

D:\\devMXNet\\apache-mxnet-151a\\dev\\Release\\libmxnet.lib

拷贝到

D:\\devMXNet\\apache-mxnet-151a\\devcpp\\cpp-package\\example\\mxnet\_static.lib

注意文件名已经改成了mxnet\_static.lib

当然，不嫌麻烦你可以到cmake的配置文件里去改。

## 成功生成 ##

最后，我截一个12个samples全部成功生成的图给大家，也祝大家顺利编译成功！

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3Rhbm14MjE5_size_16_color_FFFFFF_t_70 4][]

[https_github.com_apache_incubator-mxnet_issues_15632]: https://github.com/apache/incubator-mxnet/issues/15632
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3Rhbm14MjE5_size_16_color_FFFFFF_t_70]: /images/20230209/232968ca587348da99b567e80cbd6218.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3Rhbm14MjE5_size_16_color_FFFFFF_t_70 1]: /images/20230209/8cc86c1a95914db1bf0e3afc584af876.png
[https_github.com_apache_incubator-mxnet_issues]: https://github.com/apache/incubator-mxnet/issues
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3Rhbm14MjE5_size_16_color_FFFFFF_t_70 2]: /images/20230209/8b92978d81634cfc84d86f95446e7a8a.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3Rhbm14MjE5_size_16_color_FFFFFF_t_70 3]: /images/20230209/93262925261e4365b3db501cf7101ae9.png
[https_github.com_apache_incubator-mxnet_issues_11628]: https://github.com/apache/incubator-mxnet/issues/11628
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3Rhbm14MjE5_size_16_color_FFFFFF_t_70 4]: /images/20230209/7f2c394d4e3c42d4acfa97d26e180fa4.png