Python:有效计算 Cadzow 滤波器的非对角线元素的平均值

标签 python performance filter data-processing

我目前已经在 Python 中实现了 Gadzow 过滤器。

放入一些上下文中。您从一个一维数组开始(以 range(10) 为例)并从中构建一个类似 Hankel 的矩阵,如下所示

H= [[0, 1, 2, 3, 4, 5],
    [1, 2, 3, 4, 5, 6],
    [2, 3, 4, 5, 6, 7],
    [3, 4, 5, 6, 7, 8],
    [4, 5, 6, 7, 8, 9]])

然后你用这个矩阵做一些线性代数,这是没有问题的。之后,最耗时的步骤是求平均问题。

在新矩阵 B 中,对结果矩阵的元素进行平均。在第一行中,您按照 H 中的精度给出的路径对所有元素进行平均。所以类似于非对角线,但从右上角到左下角。在第二个切片中,您忽略第一行,依此类推。

矩阵 $H$ 在此分析步骤下将保持不变,但例如矩阵

1 2 2 1
1 1 1 1
1 1 1 1

会变成

1 1.5 1.33 1
1 1   1    1
1 1   1    1

好的,希望你能理解这个问题。我的(工作但效率低下)代码是

def av_diag(A,i,j):
    dim = A.shape
    # get the "borders" of A
    lim = min((dim[0]-i,j+1))
    # calculate the mean
    return np.mean([A[i+it,j-it] for it in range(lim)])

def avHankel(A):
    # get the mean for all elements by nested list comprehension
    return np.array([[av_diag(A,i,j) for j in range(len(A[0]))] for i in range(len(A))]) 

这对于我的数据来说需要一段时间,包含 2048 个数据点,最终形成一个 1024x1023 矩阵。

我很高兴能有一些技巧来加快速度。

谢谢

最佳答案

您可以将输入矩阵与过滤器矩阵进行卷积,以加快代码速度。可以定义过滤器矩阵,以便在卷积的每个步骤中,它仅提取给定坐标处的反对角线。基本上,您的过滤矩阵只是一个反单位矩阵。最后,由于卷积只会对反对角线的元素求和,因此您必须将输出除以正确的样本数以获得平均值:

import numpy as np
from scipy.signal import fftconvolve
from time import time


def av_diag(A,i,j):
    dim = A.shape
    lim = min((dim[0]-i,j+1))
    return np.mean([A[i+it,j-it] for it in range(lim)])

def avHankel(A):
    return np.array([[av_diag(A,i,j) for j in range(len(A[0]))] for i in range(len(A))])


def fast_avHankel(A):
    m, n = A.shape
    filt = np.eye(m)[:,::-1]
    Apad = np.pad(A, ((0, m-1), (m-1, 0)), mode = "constant", constant_values = 0)
    Asum = fftconvolve(Apad, filt, mode = "valid")
    Adiv = np.array([ [ min(m-i, j+1) for j in range(n) ] for i in range(m) ])
    return Asum / Adiv


if __name__ == "__main__":
    A = np.random.rand(500, 500)

    starttime = time()
    Hold = avHankel(A)
    print(time() - starttime)    # 10.6 seconds on a laptop

    starttime = time()
    Hnew = fast_avHankel(A)
    print(time() - starttime)    # 0.26 seconds on a laptop

关于Python:有效计算 Cadzow 滤波器的非对角线元素的平均值,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/50175671/

相关文章:

python - Spark数据框将多行转换为列

java - 如何实时清除位图内存?

python - scipy.ndimage.filters.convolve - 沿不同轴的不同模式?

ios - 在 map 中搜索注释

python - 在 python 中更改字符串的特定部分(更新系统发育树中的 Bootstrap 值)

python导入同根包名不同位置的不同子包

Python&PyGTK : Stop while on button click

java - 性能和 hibernate

css - 使用动画 gif 作为 CSS Sprite 是一个好习惯吗?

symfony - 在configureDatagridFilters中创建自定义类型字段 - Sonata Admin