【问题标题】:Struct of arrays, arrays of structs and memory usage pattern数组结构、结构数组和内存使用模式
【发布时间】:2015-07-15 03:48:57
【问题描述】:

我一直在阅读有关 SOA 的文章,我想尝试在我正在构建的系统中实现它。

我正在编写一些简单的 C 结构来做一些测试,但我有点困惑,现在我有 3 个不同的结构用于 vec3。我将在下面展示它们,然后进一步详细介绍该问题。

struct vec3
{
size_t x, y, z;
};

struct vec3_a
{
size_t pos[3];
};

struct vec3_b
{
size_t* x;
size_t* y;
size_t* z;
};

struct vec3 vec3(size_t x, size_t y, size_t z)
{
    struct vec3 v;
    v.x = x;
    v.y = y;
    v.z = z;
    return v;
}

struct vec3_a vec3_a(size_t x, size_t y, size_t z)
{
    struct vec3_a v;
    v.pos[0] = x;
    v.pos[1] = y;
    v.pos[2] = z;
    return v;
}

struct vec3_b vec3_b(size_t x, size_t y, size_t z)
{
    struct vec3_b v;
    v.x = (size_t*)malloc(sizeof(size_t));
    v.y = (size_t*)malloc(sizeof(size_t));
    v.z = (size_t*)malloc(sizeof(size_t));
    *(v.x) = x;
    *(v.y) = y;
    *(v.z) = z;
    return v;
}

这就是vec3的三种类型的声明。

struct vec3 v = vec3(10, 20, 30);
struct vec3_a va = vec3_a(10, 20, 30);
struct vec3_b vb = vec3_b(10, 20, 30);

使用 printf 打印出地址,我得到如下值:

size of vec3      : 24 bytes
size of vec3a     : 24 bytes
size of vec3b     : 24 bytes
size of size_t    : 8 bytes
size of int       : 4 bytes
size of 16 int    : 64 bytes
vec3 x:10, y:20, z:30
vec3 x:0x7fff57f8e788, y:0x7fff57f8e790, z:0x7fff57f8e798
vec3a x:10, y:20, z:30
vec3a x:0x7fff57f8e768, y:0x7fff57f8e770, z:0x7fff57f8e778
vec3b x:10, y:20, z:30
vec3b x:0x7fbe514026a0, y:0x7fbe51402678, z:0x7fbe51402690

我做的最后一件事是创建一个包含 10 个结构 vec3_b 的数组,并打印出返回这些值的地址。

    struct vec3_b vb3[10];
    for(int i = 0; i < 10; i++)
    {
        vb3[i] = vec3_b(i, i*2, i*4);
    }

index:0 vec3b x:0x7fbe514031f0, y:0x7fbe51403208, z:0x7fbe51403420
index:1 vec3b x:0x7fbe51403420, y:0x7fbe51403438, z:0x7fbe51403590
index:2 vec3b x:0x7fbe51403590, y:0x7fbe514035a8, z:0x7fbe514035c0
index:3 vec3b x:0x7fbe514035c0, y:0x7fbe514035d8, z:0x7fbe514035f0
index:4 vec3b x:0x7fbe514035f0, y:0x7fbe51403608, z:0x7fbe51403680
index:5 vec3b x:0x7fbe51403680, y:0x7fbe51403698, z:0x7fbe514036b0
index:6 vec3b x:0x7fbe514036b0, y:0x7fbe514036c8, z:0x7fbe514036e0
index:7 vec3b x:0x7fbe514036e0, y:0x7fbe514036f8, z:0x7fbe51403710
index:8 vec3b x:0x7fbe51403710, y:0x7fbe51403728, z:0x7fbe51403740
index:9 vec3b x:0x7fbe51403740, y:0x7fbe51403758, z:0x7fbe51403770

问题:

  1. 我对@9​​87654327@ 的实现是设置数组结构的正确方法吗?

  2. 由于vec_3b 结构是 24 字节大,我可以在 1 个现代 cpu 的缓存行中容纳 2 加 12 个额外字节吗?

  3. 如果我的 vec3_b 是进行 SoA 设置的正确方法,我在寻址时遇到了一些问题,我将 10 个 vec3_b 放在一起。

查看十六进制值及其十进制表示,我看不到任何让我相信我的设置不正确的模式。

      ---------------x-----------------|----------------y-----------------|----------------z-----------------|

0|    0x7fbe514031f0 : 140455383675376 | 0x7fbe51403208 : 140455383675400 | 0x7fbe51403420 : 140455383675936
1|    0x7fbe51403420 : 140455383675936 | 0x7fbe51403438 : 140455383675960 | 0x7fbe51403590 : 140455383676304
2|    0x7fbe51403590 : 140455383676304 | 0x7fbe514035a8 : 140455383676328 | 0x7fbe514035c0 : 140455383676352

【问题讨论】:

  • vec_b 存在内存泄漏问题,因为有 malloc() 调用而没有 free() 调用。
  • @llya 我没有把那部分代码放在这里,但连同下面 Jonathan 的回答,这也是不使用这种设置的另一个原因。

标签: c arrays struct cpu-cache


【解决方案1】:
  1. 我想不出vec_3b 会是个好主意。

  2. 请注意,您还必须为指针指向的 24 字节数据寻找空间,并且它可能与结构本身不连续,因此您可能只是将有效缓存大小减少了与vec3vec_3a 相比,系数为2。每个malloc() 都有一个最小尺寸;在 64 位机器上,通常至少有 16 个字节。因此,vec_3b 结构中三个指向值的三个单独分配需要至少 48 个其他字节用于支持数据(加上结构本身的 24 个字节)。这不适合单个缓存行;不能保证放置它以使其适合 2 个缓存行。

  3. N/A — 问题基于错误假设。

【讨论】:

  • 您对指针的分配空间是正确的,当我编写这些测试时,我什至没有考虑过这一点。这可以解释为什么记忆根本没有模式。我正在尝试定义适合 simd 类型的数据结构。我将使用更多信息更新问题,看看是否可以将其细化为可行的方法,我不介意旋转我的数据以适应,但如您所见,我的第一次尝试没有成功。
  • 总的来说,最好保留这个问题,并为您修改后的场景提出一个新问题。否则,你有一个变色龙问题,不被善待。
  • 我很抱歉,我会解决的。
【解决方案2】:

1 & 3:不,您的vec3_b 不是 struct-of-arrays 设置。

您正在做的是拥有多个结构,每个结构都有一个指向 64 位数据的 64 位指针。

使用 struct-of-arrays,您可以创建一个结构,它有几个可变大小的数组。

所以第 10 个 x 值将是 mystruct.x[9],而不是 mystruct[9].x[0]

关键是要连续存储所有 x 值,因此您可以使用 movdqu / _mm_loadu_si128 加载多个 x 值。如果您使用 SIMD,请选择支持所需值范围的最小元素宽度。与 32 位元素相比,使用 64 位元素会将您的吞吐量减少一半。您的代码一次将处理 128b,如果它们是半角,则它是元素的两倍。

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2013-07-29
    • 2010-10-27
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多