SSE 内在函数优化

Question

我是 SSE 内在函数的新手，并尝试通过它优化我的代码。这是我关于计算等于给定值的数组元素的程序。

我将代码更改为 SSE 版本，但速度几乎没有变化。我想知道我是否以错误的方式使用 SSE...

此代码用于不允许我们启用编译器优化选项的赋值。

没有 SSE 版本：

int get_freq(const float* matrix, float value) {

    int freq = 0;

    for (ssize_t i = start; i < end; i++) {
        if (fabsf(matrix[i] - value) <= FLT_EPSILON) {
            freq++;
        }
    }

    return freq;
}

上交所版本：

#include <immintrin.h>
#include <math.h>
#include <float.h>

#define GETLOAD(n) __m128 load##n = _mm_load_ps(&matrix[i + 4 * n])
#define GETEQU(n) __m128 check##n = _mm_and_ps(_mm_cmpeq_ps(load##n, value), and_value)
#define GETCOUNT(n) count = _mm_add_ps(count, check##n)

    int get_freq(const float* matrix, float givenValue, ssize_t g_elements) {

        int freq = 0;
        int i;

        __m128 value = _mm_set1_ps(givenValue);
        __m128 count = _mm_setzero_ps();
        __m128 and_value = _mm_set1_ps(0x00000001);


        for (i = 0; i + 15 < g_elements; i += 16) {
            GETLOAD(0); GETLOAD(1); GETLOAD(2); GETLOAD(3);
            GETEQU(0);  GETEQU(1);  GETEQU(2);  GETEQU(3);
            GETCOUNT(0);GETCOUNT(1);GETCOUNT(2);GETCOUNT(3);
        }

        __m128 shuffle_a = _mm_shuffle_ps(count, count, _MM_SHUFFLE(1, 0, 3, 2));
        count = _mm_add_ps(count, shuffle_a);
        __m128 shuffle_b = _mm_shuffle_ps(count, count, _MM_SHUFFLE(2, 3, 0, 1));
        count = _mm_add_ps(count, shuffle_b);
        freq = _mm_cvtss_si32(count);


        for (; i < g_elements; i++) {
            if (fabsf(matrix[i] - givenValue) <= FLT_EPSILON) {
                freq++;
            }
        }

        return freq;
    }

Answer 1

如果您需要使用-O0 进行编译，则尽可能在单个语句中执行。在普通代码中，int a=foo(); bar(a); 将编译为与 bar(foo()) 相同的 asm，但在 -O0 代码中，第二个版本可能会更快，因为它不会将结果存储到内存然后重新加载它以供下一个声明。

-O0 旨在提供最可预测的调试结果，这就是为什么在每条语句之后所有内容都存储到内存中的原因。这显然对性能很不利。

我写a big answer a while ago 是为了一个与其他人不同的问题，因为像你这样的愚蠢任务要求他们针对-O0 进行优化。其中一些可能会有所帮助。

---

不要努力完成这项任务。您发现的大多数使用-O0 使您的代码运行得更快的“技巧”可能只对-O0 有用，但在启用优化时没有任何区别。

在现实生活中，代码通常至少使用 clang 或 gcc -O2 编译，有时使用 -O3 -march=haswell 或任何自动矢量化的东西。 （一旦调试完毕，您就可以进行优化了。）

---

回复：您的更新：

现在它编译了，可以看到来自 SSE 版本的可怕 asm。我把它放在on godbolt along with a version of the scalar code that actually compiles, too。

标量版本的结果要好得多。它的源代码在一个表达式中完成所有操作，因此临时变量保留在寄存器中。但是，循环计数器仍在内存中，例如，在 Haswell 上，它的瓶颈最多是每 6 个周期迭代一次。 （有关优化资源，请参阅x86 标签 wiki。）

---

顺便说一句，矢量化fabsf() 很简单，请参阅Fastest way to compute absolute value using SSE。那和 SSE 比较小于应该可以为您提供与标量代码相同的语义。 （但更难让-O0 不烂）。

您最好手动展开标量版本一到两次，因为-O0 太糟糕了。

Answer 2

一些编译器非常擅长对向量进行优化。您是否检查了两个版本的优化构建的生成程序集？ “天真的”版本不是实际上使用了 SIMD 或其他优化技术吗？