稳定的基线不适用于 tensorflow答案

【问题标题】：Stable Baselines doesn't work with tensorflow稳定的基线不适用于 tensorflow
【发布时间】：2020-10-25 08:54:45
【问题描述】：

所以我最近重新开始学习机器学习，并决定开始“ConnectX”（https://www.kaggle.com/learn/intro-to-game-ai-and-reinforcement-learning）的 Kaggle 课程。我正在尝试做第 4 课，其中我使用 stable-baselines + Tensorflow 来制作 AI。问题是，我似乎无法正确使用稳定基线，因为当我尝试导入它时它会立即给我一个错误。这是错误消息：

---------------------------------------------------------------------------
ImportError                               Traceback (most recent call last)
<ipython-input-13-f5986851ce81> in <module>
      1 import os
----> 2 from stable_baselines.bench import Monitor
      3 from stable_baselines.common.vec_env import DummyVecEnv
      4 
      5 # Create directory for logging training information

~\Anaconda3\lib\site-packages\stable_baselines\__init__.py in <module>
----> 1 from stable_baselines.a2c import A2C
      2 from stable_baselines.acer import ACER
      3 from stable_baselines.acktr import ACKTR
      4 from stable_baselines.deepq import DQN
      5 from stable_baselines.her import HER

~\Anaconda3\lib\site-packages\stable_baselines\a2c\__init__.py in <module>
----> 1 from stable_baselines.a2c.a2c import A2C

~\Anaconda3\lib\site-packages\stable_baselines\a2c\a2c.py in <module>
      5 import tensorflow as tf
      6 
----> 7 from stable_baselines import logger
      8 from stable_baselines.common import explained_variance, tf_util, ActorCriticRLModel, SetVerbosity, TensorboardWriter
      9 from stable_baselines.common.policies import ActorCriticPolicy, RecurrentActorCriticPolicy

~\Anaconda3\lib\site-packages\stable_baselines\logger.py in <module>
     15 from tensorflow.python.util import compat
     16 
---> 17 from stable_baselines.common.misc_util import mpi_rank_or_zero
     18 
     19 DEBUG = 10

~\Anaconda3\lib\site-packages\stable_baselines\common\__init__.py in <module>
      2 from stable_baselines.common.console_util import fmt_row, fmt_item, colorize
      3 from stable_baselines.common.dataset import Dataset
----> 4 from stable_baselines.common.math_util import discount, discount_with_boundaries, explained_variance, \
      5     explained_variance_2d, flatten_arrays, unflatten_vector
      6 from stable_baselines.common.misc_util import zipsame, set_global_seeds, boolean_flag

~\Anaconda3\lib\site-packages\stable_baselines\common\math_util.py in <module>
      1 import numpy as np
----> 2 import scipy.signal
      3 
      4 
      5 def safe_mean(arr):

~\Anaconda3\lib\site-packages\scipy\signal\__init__.py in <module>
    287 
    288 """
--> 289 from . import sigtools, windows
    290 from .waveforms import *
    291 from ._max_len_seq import max_len_seq

~\Anaconda3\lib\site-packages\scipy\signal\windows\__init__.py in <module>
     39 """
     40 
---> 41 from .windows import *
     42 
     43 __all__ = ['boxcar', 'triang', 'parzen', 'bohman', 'blackman', 'nuttall',

~\Anaconda3\lib\site-packages\scipy\signal\windows\windows.py in <module>
      5 
      6 import numpy as np
----> 7 from scipy import linalg, special, fft as sp_fft
      8 
      9 __all__ = ['boxcar', 'triang', 'parzen', 'bohman', 'blackman', 'nuttall',

~\Anaconda3\lib\site-packages\scipy\special\__init__.py in <module>
    631 from .sf_error import SpecialFunctionWarning, SpecialFunctionError
    632 
--> 633 from . import _ufuncs
    634 from ._ufuncs import *
    635 

ImportError: DLL load failed: The specified module could not be found.

scipy 似乎有问题，但我不知道我能做些什么来解决它。即使我运行import stable_baselines，也会发生此错误。这是我为创建虚拟环境而运行的代码（顺便说一句，这是在 PowerShell b/c 中，这是 Jupyter Lab 给我的）：

python -m venv myenv
.\myenv\Scripts\Activate.ps1
pip install stable-baselines

注意：我不知道这是否有任何意义，但是当我安装stable-baselines时，出现错误：ERROR: gym 0.17.2 has requirement cloudpickle<1.4.0,>=1.2.0, but you'll have cloudpickle 1.5.0 which is incompatible.

PS：我发现了同样的问题here，但我不知道他们是如何解决的。答案只是说“我使用了 anaconda”，但 anaconda 中没有 stable-baselines 包！我尝试从 anaconda 安装 tensorflow 并从 pip 安装 stable-baselines，但它仍然给出了相同的错误。

最后编辑： 看起来这个问题是在 . 导入上并且仅在 jupyter notebook 中有效（与 tensorflow 没有任何关系 - 它在 Python CLI 中运行良好)。我已经在关于opencvhere 的新问题中解释了这一点。

~阿尤什

【问题讨论】：

标签： python tensorflow stable-baselines

【解决方案1】：

稳定的基线网站声称他们还不支持 tf2.X。所以这可能是你的问题

试试下面的，

pip install tensorflow==1.14.0
pip install stable-baselines[mpi]==2.10.0

直到今天（2020 年 9 月 4 日），他们似乎一直在为我工作。

我知道这可能有点晚了，但我现在发现了您的问题，并决定尽我所能回答。祝你好运！

【讨论】：

【解决方案2】：

如果您正在寻找稳定基线的 TF2 版本，请检查以下（实验性）分支之一：

或者，尝试 Stable Baselines 3（目前处于测试阶段），它基于 PyTorch 而不是 Tensorflow，旨在替换当前基于 TF1 的 SB2 版本：

https://github.com/DLR-RM/stable-baselines3

【讨论】：

【解决方案3】：

import stable_baselines 不起作用。

import stable_baselines3 有效。

要安装稳定基线，您可以使用

conda install -c conda-forge stable-baselines3 如果你使用 Anaconda
pip install stable-baselines 如果你想使用 PIP 安装

【讨论】：