Numba jit nopython 模式：告诉 numba 外部任意函数的签名

Question

我需要为通用指标构建一个相异矩阵。由于我需要算法快速运行，所以我在nopython 模式下使用了numba 0.35。 这是我的代码

import numpy as np
from numba import jit
from jellyfish import levenshtein_distance

def _dissimilarity_matrix(metric):
    @jit(nopython=True)
    def dm(data):
        n = data.shape[0]
        diss = np.zeros((n, n))
        for i in range(n):
            for j in range(i+1):
                dist = metric(data[i], data[j])
                diss[i, j] = dist
                diss[j, i] = dist
        return diss

    return dm

@jit(nopython=True)
def euclidean_distance(vec1, vec2):
    return np.sqrt(((vec1 - vec2)**2).sum())

test1 = np.random.randn(10, 2)
dissimilarity_matrix1 = _dissimilarity_matrix(euclidean_distance)
diss1 = dissimilarity_matrix1(test1)

test2 = np.array(["this", "is", "a", "test"])
dissimilarity_matrix2 = _dissimilarity_matrix(levenshtein_distance)
diss2 = dissimilarity_matrix2(test2)

但输出是：

numba.errors.TypingError: Failed at nopython (nopython frontend)
Untyped global name 'metric': cannot determine Numba type of <class 'builtin_function_or_method'>
File "test.py", line 12

请注意，函数euclidean_distance 是我定义的，并且有装饰器@jit(nopython=True)，而函数levenshtein_distance 来自外部模块（不是我编写的）。有没有办法明确告诉numba 传入的函数的签名（即_dissimilarity_matrix 中的metric）？ 我真的需要函数_dissimilarity_matrix 在nopython 模式下运行并接受任意函数作为输入。

Answer 1

当metric 为euclidean_distance 时，您的代码对我有效，因为这也是一个nopython jitted numba 函数。但是，您不能传入任意函数。为了使某些东西在nopython 模式下工作，每个可调用函数都必须由 numba 支持（请参阅http://numba.pydata.org/numba-doc/latest/reference/pysupported.html 和 http://numba.pydata.org/numba-doc/latest/reference/numpysupported.html）或用户定义为 numba nopython 函数。没有绕过这个限制。