【问题标题】:Minimum-Sized Encompassing Numpy Array (cropping)最小尺寸的 Numpy 数组(裁剪)
【发布时间】:2018-07-24 12:31:12
【问题描述】:

我想在包含满足条件的所有值的 ndarray 中找到最小尺寸的二维 ndarray。

例如: 假设我有数组

x = np.array([[1, 1, 5, 3, 11, 1],
    [1, 2, 15, 19, 21, 33],
    [1, 8, 17, 22, 21, 31],
    [3, 5, 6,  11, 23, 19]])

并致电f(x, x % 2 == 0) 那么程序的返回值就是数组

[[2, 15, 19]
 [8, 17, 22]
 [5, 6, 11]]

因为它是包含所有偶数的最小矩形数组(条件)。

我找到了一种方法来查找条件为真的所有索引,方法是使用np.argwhere,然后从原始数组中从最小索引切片到最大索引,我已经使用for loop 完成了它但我想知道是否有更有效的方法来使用 numpy 或 scipy。

我目前的方法:

def f(arr, cond_arr):
    indices = np.argwhere(cond_arr)
    min = np.amin(indices, axis = 0) #get first row, col meeting cond
    max = np.amax(indices, axis = 0) #get last row, col meeting cond
    return arr[min[0]:max[0] + 1, min[1] : max[1] + 1]

【问题讨论】:

  • 在我看来,您的功能已经非常高效了。对您的需求来说太慢了吗?
  • 它适用于我的数据,我只是想知道是否有更好的方法,旧的 kolmogorov 复杂性问题。 Numpy 进行了很好的优化,但在我可以应用高级索引之前,我必须对完整的数组比较进行 3 次调用。我觉得可能有一个函数可以在数组的一次传递中同时找到最小和最大索引。

标签: python arrays numpy scipy


【解决方案1】:

该功能已经非常高效 - 但您可以做得更好。

我们可以将条件折叠到每个轴(使用逻辑 OR 的归约)并找到第一个/最后一个索引,而不是检查每个行/列的条件,然后找到最小值和最大值:

def f2(arr, cond_arr):
    c0 = np.where(np.logical_or.reduce(cond_arr, axis=0))[0]
    c1 = np.where(np.logical_or.reduce(cond_arr, axis=1))[0]    
    return arr[c0[0]:c0[-1] + 1, c1[0]:c1[-1] + 1]

它是如何工作的:

使用示例数据cond_array 看起来像这样:

>>> (x%2==0).astype(int)
array([[0, 0, 0, 0, 0, 0],
       [0, 1, 0, 0, 0, 0],
       [0, 1, 0, 1, 0, 0],
       [0, 0, 1, 0, 0, 0]])

这是列条件:

>>> np.logical_or.reduce(cond_arr, axis=0).astype(int)
array([0, 1, 1, 1, 0, 0])

这是行条件:

>>> np.logical_or.reduce(cond_arr, axis=).astype(int)
array([0, 1, 1, 1])

现在我们只需要为两个数组中的每一个找到第一个/最后一个非零元素。

真的更快吗?

%timeit f(x, x%2 == 0)   #  10000 loops, best of 3: 24.6 µs per loop
%timeit f2(x, x%2 == 0)  # 100000 loops, best of 3: 12.6 µs per loop

嗯,有点……但它确实在更大的数组中闪耀:

x = np.random.randn(1000, 1000)
c = np.zeros((1000, 1000), dtype=bool)
c[400:600, 400:600] = True

%timeit f(x,c)   #  100 loops, best of 3: 5.28 ms per loop
%timeit f2(x,c)  # 1000 loops, best of 3: 225 µs per loop

最后,这个版本的开销稍大,但在维度数量上是通用的:

def f3(arr, cond_arr):
    s = []
    for a in range(arr.ndim):
        c = np.where(np.logical_or.reduce(cond_arr, axis=a))[0]
        s.append(slice(c[0], c[-1] + 1))
    return arr[s]

【讨论】:

    猜你喜欢
    • 2010-12-26
    • 1970-01-01
    • 2014-07-24
    • 1970-01-01
    • 1970-01-01
    • 2023-04-01
    • 1970-01-01
    • 2019-01-11
    • 2021-07-25
    相关资源
    最近更新 更多