Python Anaconda Windows 10 的 XGBoost 安装问题（2018 年 5 月 18 日）答案

【问题标题】：XGBoost installation issues for Python Anaconda Windows 10 (18 May 2018)Python Anaconda Windows 10 的 XGBoost 安装问题（2018 年 5 月 18 日）
【发布时间】：2018-10-29 10:45:42
【问题描述】：

在过去的几天里，我尝试使用

中的说明安装 XGBoost

有些说明很简单（例如，conda install -c conda-forge xgboost）。其他涉及几十个步骤，其中一些对于像我这样的新手来说不清楚和困惑。

一些安装似乎可以工作，但在 jupyter notebook 中导入模块失败。例如，我可以在...\Anaconda2\envs\py36\Lib\site-packages\xgboost-0.71-py3.6.egg\xgboost 看到已安装的文件，但导入会产生错误。

我最近的尝试遵循了https://www.kaggle.com/general/30163#latest-330213:conda install -c anaconda py-xgboost 上发布的说明。

再次，安装似乎可以工作：我可以在...\Anaconda2\envs\py36\Lib\site-packages\xgboost 下看到已安装的文件。但是在我的笔记本中，当我尝试同时使用这两种方式导入模块时

from xgboost import XGBRegressor

和

import xgboost

我收到OSError: [WinError 126] The specified module could not be found error.

完整的追溯如下。

有解决办法吗？更好的安装方式？我想继续了解 Dan Becker 在 kaggle 上对 ML 的介绍！

版本：

 python version : 3.6.4150.1013
  conda version : 4.3.30

  Microsoft Windows : Version 10.0.16299.431
           platform : win-64
           git bash : launches a window labeled `MINGW64:/c/users/karls`

回溯：

---------------------------------------------------------------------------
OSError                                   Traceback (most recent call last)
<ipython-input-7-15d947748610> in <module>()
----> 1 from xgboost import XGBRegressor   # OSError: [WinError 126] The specified module could not be found
      2 
      3 my_model = XGBRegressor()
      4 # Add silent=True to avoid printing out updates with each cycle
      5 my_model.fit(train_X, train_y, verbose=False)

~\Anaconda2\envs\py36\lib\site-packages\xgboost\__init__.py in <module>()
      9 import os
     10 
---> 11 from .core import DMatrix, Booster
     12 from .training import train, cv
     13 from . import rabit                   # noqa

~\Anaconda2\envs\py36\lib\site-packages\xgboost\core.py in <module>()
    113 
    114 # load the XGBoost library globally
--> 115 _LIB = _load_lib()
    116 
    117 

~\Anaconda2\envs\py36\lib\site-packages\xgboost\core.py in _load_lib()
    107     if len(lib_path) == 0:
    108         return None
--> 109     lib = ctypes.cdll.LoadLibrary(lib_path[0])
    110     lib.XGBGetLastError.restype = ctypes.c_char_p
    111     return lib

~\Anaconda2\envs\py36\lib\ctypes\__init__.py in LoadLibrary(self, name)
    424 
    425     def LoadLibrary(self, name):
--> 426         return self._dlltype(name)
    427 
    428 cdll = LibraryLoader(CDLL)

~\Anaconda2\envs\py36\lib\ctypes\__init__.py in __init__(self, name, mode, handle, use_errno, use_last_error)
    346 
    347         if handle is None:
--> 348             self._handle = _dlopen(self._name, mode)
    349         else:
    350             self._handle = handle

OSError: [WinError 126] The specified module could not be found

编辑 1 安装尝试

示例 1：conda install -c anaconda py-xgboost

启动 Anaconda 提示符
激活 py36
运行 conda install -c anaconda py-xgboost

这是我几天前尝试此安装时的命令窗口结果（在我今天回溯这些步骤时，在“已安装所有请求的软件包”确认下方）：

(py36) C:\Users\karls>conda install -c anaconda py-xgboost
Fetching package metadata ...............
Solving package specifications: .

Package plan for installation in environment C:\Users\karls\Anaconda2\envs\py36:

The following packages will be UPDATED:

    bzip2:        1.0.6-haa5b126_2        --> 1.0.6-vc14_3          anaconda [vc14]

The following packages will be SUPERSEDED by a higher-priority channel:

    cryptography: 2.1.4-py36he1d7878_0    --> 2.0.3-py36h123decb_1  anaconda
    curl:         7.58.0-h7602738_0       --> 7.55.1-vc14hdaba4a4_3 anaconda [vc14]
    freetype:     2.8-h51f8f2c_1          --> 2.8-vc14h17c9bdf_0    anaconda [vc14]
    hdf5:         1.10.1-h98b8871_1       --> 1.10.1-vc14hb361328_0 anaconda [vc14]
    icu:          58.2-ha66f8fd_1         --> 58.2-vc14hc45fdbb_0   anaconda [vc14]
    jpeg:         9b-hb83a4c4_2           --> 9b-vc14h4d7706e_1     anaconda [vc14]
    libiconv:     1.15-h1df5818_7         --> 1.15-vc14h29686d3_5   anaconda [vc14]
    libpng:       1.6.34-h79bbb47_0       --> 1.6.32-vc14h5163883_3 anaconda [vc14]
    libssh2:      1.8.0-hd619d38_4        --> 1.8.0-vc14hcf584a9_2  anaconda [vc14]
    libtiff:      4.0.9-h0f13578_0        --> 4.0.8-vc14h04e2a1e_10 anaconda [vc14]
    libxml2:      2.9.7-h79bbb47_0        --> 2.9.4-vc14h8fd0f11_5  anaconda [vc14]
    libxslt:      1.1.32-hf6f1972_0       --> 1.1.29-vc14hf85b8d4_5 anaconda [vc14]
    lxml:         4.2.1-py36heafd4d3_0    --> 4.1.1-py36he0adb16_0  anaconda
    lzo:          2.10-h6df0209_2         --> 2.10-vc14h0a64fa6_1   anaconda [vc14]
    openssl:      1.0.2n-h74b6da3_0       --> 1.0.2l-vc14hf4c37d5_5 anaconda [vc14]
    pillow:       5.0.0-py36h0738816_0    --> 4.2.1-py36hdb25ab2_0  anaconda
    py-xgboost:   0.71-py36h6538335_0     --> 0.71-py36h6538335_0   anaconda
    pycurl:       7.43.0.1-py36h74b6da3_0 --> 7.43.0-py36h086bf4c_3 anaconda
    pyopenssl:    17.5.0-py36h5b7d817_0   --> 17.4.0-py36h3316aad_0 anaconda
    qt:           5.6.2-vc14h6f8c307_12   --> 5.6.2-vc14h6f8c307_12 anaconda [vc14]
    sqlite:       3.22.0-h9d3ae62_0       --> 3.20.1-vc14h7ce8c62_1 anaconda [vc14]
    tk:           8.6.7-hcb92d03_3        --> 8.6.7-vc14hb68737d_1  anaconda [vc14]
    yaml:         0.1.7-hc54c509_2        --> 0.1.7-vc14hb31d195_1  anaconda [vc14]
    zlib:         1.2.11-h8395fce_2       --> 1.2.11-vc14h1cdd9ab_1 anaconda [vc14]

Proceed ([y]/n)?

我输入了y，回车，模块就安装好了。我没有复制结果，但它表明成功 - 但是当我尝试将其导入笔记本时未找到该模块。

这是我今天再次采取这些步骤时的结果：

(C:\Users\karls\Anaconda2) C:\Users\karls>activate py36

(py36) C:\Users\karls>conda install -c anaconda py-xgboost
Fetching package metadata ...............
Solving package specifications: .

# All requested packages already installed.
# packages in environment at C:\Users\karls\Anaconda2\envs\py36:
#
py-xgboost                0.71             py36h6538335_0    anaconda

(py36) C:\Users\karls>

编辑 2 示例 2：

【问题讨论】：

在安装的python包中好像找不到实际的C++库。您能否明确列出您为达到当前状态所遵循的所有步骤？
@Mykhailo Lisovyi，感谢您的回复。我在原始帖子的底部添加了一次尝试的步骤。
谢谢。由于问题似乎是由于未找到 xgboost 库，可能检查 .dll 库是否在 ...\Anaconda2\envs\py36\Lib\site-packages\xgboost\lib 中（或者在 Windows 上，子目录可能是 Lib）。此外，这些其他线程可能会有所帮助：stackoverflow.com/questions/35139108/…stackoverflow.com/questions/36292484/…（注意，他们在安装前卸载了py-xgboost）
@Mykhailo Lisovyi，我在原始帖子底部附上了 xgboost 目录中文件的屏幕截图。我看不到 dll 文件。
@neigeldoi 好的，这意味着您只安装了 python 绑定，但实际上是在底层 xgboost c++ 库上。所以我认为你需要在 conda 中安装 xgboost 和 py-xgboost 包。提供的两个链接是否有帮助？

标签： python python-3.x windows-10 anaconda xgboost

【解决方案1】：

我发现一个安装过程似乎可以在 jupyter notebook 中使用 Anaconda 4.3 for python 3.6.4 在 Windows 10 win-64 上运行。下面我详细说明我遵循的过程。在底部，我包含了几个已安装文件夹和文件的屏幕截图。如果您对如何改进此过程有任何建议，请告诉我。

此过程改编自 http://adataanalyst.com/machine-learning/installing-xgboost-for-windows-10/ 的指令，而这些指令又源自 http://stackoverflow.com/questions/33749735/how-to-install-xgboost-package-in-python-windows-platform。

准备

如果您没有 git，请安装它并将其添加到您的 PATH。
作为之前尝试安装 xgboost 的一部分，我最近将 numpy 和 scipy 更新到了最新版本
下载并安装 MinGW-64：http://sourceforge.net/projects/mingw-w64/

一个。在设置对话框中，将架构设置为“x86_64”（原为 i686），将线程设置为“win32”（原为 posix）

b.我将 MinGW-64 安装到 C:\Program Files 中的默认文件路径，所以我将 C:\Program Files\mingw-w64\x86_64-8.1.0-win32-seh-rt_v6-rev0\mingw64\bin 添加到我的 PATH环境变量

c。安装完成后，按照建议我去了mingw64\bin文件夹并将mingw32-make重命名为make
- 实际上，我制作了mingw32-make 的副本，并将副本命名为make
- 这样做可能是我下面的一些麻烦的根源，尽管我能够克服它们。我建议您尝试重命名文件，而不是像我一样将同一文件的两个副本保留不同的名称

获取 XGBOOST 源代码

启动 Windows 命令提示符：开始 |视窗系统 |命令提示符
- 这些步骤也可能适用于 MINGW64，我稍后会切换到，但在这里我尝试忠实记录我按照指示执行的步骤）
一个。输入cd c:\，其中c:\ 代表您要安装xgboost 的位置。对我来说是C:\...\Anaconda2\envs\py36\Lib\site-packages

b.输入git clone --recursive https://github.com/dmlc/xgboost
- 这将在显示下一步提示之前运行并输出几十行输出
c。输入cd xgboost

d。输入git submodule init
- 这没有产生任何输出并立即再次显示提示
e。输入git submodule update
- 这没有产生任何输出并立即再次显示提示
f。输入copy make\mingw64.mk config.mk
- 输出：“已复制 1 个文件。”
- 注意：到目前为止，所有命令都在 Windows 命令提示符下运行。下一个在那里不起作用，所以我切换到 mingw64 终端。我重新运行了步骤“f”并继续下一步。
启动mingw64终端：开始| MinGW--W64项目 |运行终端

一个。输入cd C:\Users\karls\Anaconda2\envs\py36\Lib\site-packages\xgboost

b.输入copy make\mingw64.mk config.mk

c。输入make -j4
- 此命令无效。根据我在谷歌上搜索的建议，我尝试了几十种变化：make.exe、makefile、cmake、pymake、make.py、mingw64-make、mingw64-make.exe、C:\Program Files\mingw-w64\x86_64-8.1.0-win32-seh-rt_v6-rev0\mingw64\bin\make，不胜枚举。没有任何效果。我尝试将目录更改为site-packages\xgboost 内的其他文件夹。最后，虽然输出是可疑的，但我发现了以下内容并且能够继续。
d。将目录更改为...\site-packages\xgboost\make

e。输入mingw64.mk -j4
- 这会弹出一个“你想如何打开这个文件？”对话，这是我见过的最有希望的输出。我没有打开文件。命令有什么好处吗？我不知道，但我继续下一步。

安装 Python 包

f。将目录更改为site-packages\xgboost\python-package

g.输入python setup.py install

这会输出几十行：运行这个、创建那个、写入和读取和复制等。
我还有几个“警告：找不到匹配的文件...”行。
大概在接下来的更多编写、安装、运行、创建、复制、字节编译、删除、处理、提取、添加和搜索的行中处理了任何缺失的内容
最后一行显示“已完成 xgboost==0.71 的处理依赖项”

此时我可以在 jupyter notebook 中导入和使用 xgboost，所以我没有采取任何进一步的步骤。但是，我遵循的说明（上面链接）包括您可能认为必要的其他步骤。如果您在我的过程中发现任何错误，请告诉我，因为我仍然怀疑我的安装不会受到以后更新问题的影响（例如，该目录似乎在多个位置包含相同文件的副本）。

下面是几个安装目录的截图：

【讨论】：