如何在 GPU 上运行 theano

Question

如果我使用 python 3.5 运行以下代码

import numpy as np
import time
import theano
A = np.random.rand(1000,10000).astype(theano.config.floatX)
B = np.random.rand(10000,1000).astype(theano.config.floatX)
np_start = time.time()
AB = A.dot(B)
np_end = time.time()
X,Y = theano.tensor.matrices('XY')
mf = theano.function([X,Y],X.dot(Y))
t_start = time.time()
tAB = mf(A,B)
t_end = time.time()
print ("NP time: %f[s], theano time: %f[s] **(times should be close when run
on CPU!)**" %(np_end-np_start, t_end-t_start))
print ("Result difference: %f" % (np.abs(AB-tAB).max(), ))

我得到了输出

NP time: 0.161123[s], theano time: 0.167119[s] (times should be close when
run on CPU!)
Result difference: 0.000000

它说如果时间很接近，这意味着我正在我的 CPU 上运行。

如何在我的 GPU 上运行此代码？

注意：

• 我有一台配备 Nvidia Quadro k4200 的工作站。
• 我已经安装了 Cuda 工具包
• 我已经在 VS2012 上成功完成了一个 cuda vectorAdd 示例项目。

Answer 1

如果您使用的是 Linux，请在您的主文件夹中创建一个 .theanorc 文件并添加以下内容以设置 theano 以在 GPU 上运行。

[global]
device = gpu
floatx = float32

Answer 2

或者，如果您想以编程方式使用 GPU：

import theano.sandbox.cuda
theano.sandbox.cuda.use("gpu0")

您应该会看到这样的消息：

Using gpu device 0: Tesla K80

如果您运行的环境不容易配置，则很有用。

Answer 3

您可以通过在 Theano 的配置中指定 device=gpu 来配置 Theano 以使用 GPU。设置配置的主要方法有两种：（1）在THEANO_FLAGS 环境变量中，或（2）通过.theanorc 文件。这两种方法以及 Theano 的所有配置标志都是 documented。

如果在调用 import theano 后看到类似这样的消息，您就会知道 Theano 正在使用 GPU。

Using gpu device 0: GeForce GT 640 (CNMeM is disabled)

详细信息可能因您而异，但如果根本没有出现任何消​​息，则表明 Theano 仅使用 CPU。

另请注意，即使您看到 GPU 消息，您的特定计算图也可能无法在 GPU 上运行。要查看您的计算的哪些部分在 GPU 上运行，请打印其编译和优化的图

f = theano.function(...)
theano.printing.debugprint(f)

以前缀“Gpu”开头的操作将在 GPU 上运行。名称中没有该前缀的操作将在 CPU 上运行。