微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

为什么非连续加载速度更快,即使缓存未命中惩罚保证为零?

如何解决为什么非连续加载速度更快,即使缓存未命中惩罚保证为零?

​​背景:

我用 C 编写了一个函数并用 arm-none-eabi-gcc (7-2018-q2-update) 编译它。 为循环体生成的汇编代码看起来每次迭代需要 20 个周期, 包括 2 个等待状态,用于加载操作访问非易失性程序存储器中的常量数据。

然而,我的 MCU 的 NVM 控制器缓存说缓存未命中惩罚保证为零, 所以我不确定为什么它不能为两个 NVM 加载操作预取数据。 因此,我认为循环每次迭代应该需要 18 个周期。

遗憾的是,实测性能与预期性能有很大差异。 如果我将 int8_t incrementint16_t patch_data_i 更改为 int32_t, 然后 GCC 以稍微不同的顺序有效地生成相同的指令。 我们称这个版本为 (b)。

有趣的是,版本 (a) 每次迭代需要 21 个周期,版本 (b) 每次迭代需要 20 个周期!

这种性能差异是高度可重复的。 我已经非常精确地测量了它,通过改变版本 (a) 和版本 (b) 的 (5,6,7,8) 之间的迭代次数。 泰克 465 示波器在固定 B 扫描设置下的定时测量:

T(a)[min,max,avg] = (20.0,21.0,20.3) c @ 48 MHz.
T(b)[min,avg] = (21.0,22.0,21.3) c @ 48 MHz.

(这个循环体的性能至关重要,因为它执行了 8 次迭代, 此函数每 2000 个时钟周期调用一次。 对于我的应用程序,即使是这种单周期差异也大约占总 cpu间的 0.5%。)

我的问题有 4 个部分:

  1. 这里发生了什么?
  2. 为什么版本 (a) 需要 21 个周期而版本 (b) 需要 20 个周期?
  3. 为什么两个版本不用 18 个周期?
  4. 是否有任何可能的方法可以准确预测 Atmel SAMD21 微控制器上 RAM 和 NVM 的访问延迟, 除了尝试随机排列组装操作并在示波器上测量所有内容

(对这 4 个部分中的任何一个的回答将不胜感激。)

代码(版本a)

__attribute__((used))
void enc_calc_transition(struct enc *enc,uint16_t old_state,uint16_t
                         new_state)
{
    uint32_t transitions = enc_interleave_states(old_state,new_state);
    size_t j = 0;
    for (size_t i = 0; i < 8; i++,j += 4) {
        const size_t transition = (transitions >> j) & 0xf;
        const int8_t increment = enc_increment_for_transition[transition];
        int16_t patch_data_i = enc->patch_data[i];
        patch_data_i += increment;
        size_t patch_data_i_plus_one = patch_data_i + 1;
        patch_data_i = enc_constrain_8x258[patch_data_i_plus_one];
        enc->patch_data[i] = patch_data_i;
    }
}

代码(版本 b)

__attribute__((used))
void enc_calc_transition(struct enc *enc,j += 4) {
        const size_t transition = (transitions >> j) & 0xf;
        const int32_t increment = enc_increment_for_transition[transition];
        int32_t patch_data_i    = enc->patch_data[i];
        patch_data_i += increment;
        size_t patch_data_i_plus_one = patch_data_i + 1;
        patch_data_i       = enc_constrain_8x258[patch_data_i_plus_one];
        enc->patch_data[i] = patch_data_i;
    }
}

生成的程序集(版本a)

cyc addr    code        instr   fields

x   894e:   2200        movs    r2,#0
x   8950:   250f        movs    r5,#15
x   8952:   4f09        ldr     r7,[pc,#36] ; (8978)
x   8954:   4e09        ldr     r6,#36] ; (897c)
x   8956:   4460        add     r0,ip

1   8958:   000b        movs    r3,r1
1   895a:   40d3        lsrs    r3,r2
1   895c:   402b        ands    r3,r5
2   895e:   7804        ldrb    r4,[r0,#0]
2   8960:   56f3        ldrsb   r3,[r6,r3]
1   8962:   3204        adds    r2,#4
1   8964:   191b        adds    r3,r3,r4
1   8966:   18fb        adds    r3,r7,r3
2   8968:   785b        ldrb    r3,[r3,#1]
2   896a:   7003        strb    r3,#0]
1   896c:   3001        adds    r0,#1
1   896e:   2a20        cmp     r2,#32
2   8970:   d1f2        bne.n   8958 <enc_calc_transition+0x38>
18

x   8972:   bdf0        pop     {r4,r5,r6,pc}
x   8974:   000090a8 ; <enc_expand_16x256>
x   8978:   00008fa4 ; <enc_constrain_8x258>
x   897c:   00008f94 ; <enc_increment_for_transition> [signed,8x16]

instruction cycles:

movs lsrs ands ldrb ldrsb adds adds adds ldrb strb adds cmp bne
= 1 + 1 + 1 + 2 + 2 + 1 + 1 + 1 + 2 + 2 + 1 + 1 + 2
= 18

生成的程序集(版本 b)

cyc addr    code        instr   fields

x   894e:   2200        movs    r2,ip

1   8958:   0021        movs    r1,r4
1   895a:   40d1        lsrs    r1,r2
2   895c:   7803        ldrb    r3,#0]
1   895e:   4029        ands    r1,r5
2   8960:   5671        ldrsb   r1,r1]
1   8962:   18fb        adds    r3,r3
1   8964:   185b        adds    r3,r1
2   8966:   785b        ldrb    r3,#1]
1   8968:   3204        adds    r2,#4
2   896a:   7003        strb    r3,#32
2   8970:   d1f2        bne.n   8958
18

x   8972:   bdf0        pop     {r4,8x16]

instruction cycles:

movs lsrs ldrb ands ldrsb adds adds ldrb adds strb adds cmp bne
= 1 + 1 + 2 + 1 + 2 + 1 + 1 + 2 + 1 + 2 + 1 + 1 + 2
= 18

我对生成的程序集的解释(版本a)

我已经为每个案例写出了我对生成的程序集的“解释”。 这部分可能是不必要的,但我认为它也可以包含它,因为它帮助我理解 (a) 和 (b) 之间的区别。 如上所述,循环前后的部分是相同的。 我能看到的唯一显着区别是两个版本以略有不同的顺序执行相同的指令。 特别是版本 (b)(每次迭代需要 20 个周期), 连续加载/存储操作的实例为零, 连续加载/加载操作的零个实例, 和连续存储/存储操作的零个实例。 (记录的每个加载操作的等待状态数在括号中注释:1 个等待状态将由 // ^ ldrb [1] 表示。)

r2 size_t j = 0;
r5 uint32_t mask_0xf = 0xf;
r7 uint8_t *constrain = &enc_constrain_8x258[0]; // 0x8fa4
r6 uint8_t *increment_for_transition =
    &enc_increment_for_transition[0]; // 0x8f94
r0 uint8_t *patch_data = &enc->patch_data[0]

do {
    r3 uint32_t _transitions = transitions;
    r3 uint32_t transitions_shifted = _transitions >> j;

    r3 size_t transition = transitions_shifted & mask_0xf;
    r4 int16_t patch_data_i = *(patch_data + 0); //
        // ^ ldrb [0]
    r3 int8_t _increment = *(increment_for_transition + transition);
        // ^ ldrsb [1]

    j += 4;
    r3 int16_t inc_plus_pdata = _increment + patch_data_i;
    r3 uint8_t *constrain_plus_inc_plus_pdata =
        constrain + inc_plus_pdata;
    r3 uint8_t constrained_pdata = *(constrain_plus_inc_plus_pdata + 1);
        // ^ ldr [1]

    *(patch_data + 0) = constrained_pdata;
        // ^ strb [0]
    patch_data++;
} while (j < 32);

我对生成的程序集的解释(版本 b)

r2 size_t j = 0;
r5 uint32_t mask_0xf = 0xf;
r7 uint8_t *constrain = &enc_constrain_8x258[0]; // 0x8fa4
r6 uint8_t *increment_for_transition =
    &enc_increment_for_transition[0]; // 0x8f94
r0 uint8_t *patch_data = &enc->patch_data[0]

do {
    r1 uint32_t _transitions = transitions;
    r1 uint32_t transitions_shifted = _transitions >> j;

    r3 int32_t patch_data_i = *(patch_data + 0);
        // ^ ldrb [0]
    r1 size_t transition = transitions_shifted & mask_0xf;
    r1 int32_t _increment = *(increment_for_transition + transition);
        // ^ ldrsb [1]

    r3 uint8_t *constrain_plus_pdata = constrain + patch_data_i;
    r3 uint8_t *constrain_plus_pdata_plus_inc =
        constrain_plus_pdata + _increment;
    r3 uint8_t constrained_pdata = *(constrain_plus_pdata_plus_inc + 1);
        // ^ ldr [1]
    j += 4;

    *(patch_data + 0) = constrained_pdata;
        // ^ strb [0]
    patch_data++;
} while (j < 32);

平台信息

  • 微控制器是 Atmel/microchip AT91SAMD21G18A

  • 架构是 ARMv6-M。

  • 微架构是 ARM Cortex-M0+。

  • 我的 MCU 内核的主时钟频率是 48 MHz。

  • 在 48 MHz 时,如果缓存被禁用,SAMD21 [非易失性] 程序存储器需要 1 个等待状态。

  • 在 48 MHz 时,SAMD21 SRAM 需要零等待状态。

但是,我看不出为什么从 RAM 中执行代码会更快。 我相信 NVM 数据路径与 RAM 数据路径是分开的, 所以从 NVM 取指令永远不应该与从 RAM 取数据竞争 (我不是 100% 确定这个事实,但我认为这是真的。)。 因此,如果 NVM 控制器缓存按照文档工作, 从 NVM 运行这个循环似乎肯定比从 RAM 运行这个循环快。

  • SAMD21 具有 64 字节缓存,用于访问非易失性存储器。
  • NVM 控制器缓存“是一种直接映射缓存,实现了 8 行 64 位(即 64 字节)。”
  • NO_MISS_PENALTY 模式下启用 NVM 控制器缓存。
  • 这是 NO_MISS_PENALTY 模式的数据表描述: “NVM 控制器(缓存系统)不会在缓存未命中时插入等待状态。 提供最佳系统性能。”
  • 数据表未提供有关 NO_MISS_PENALTY 模式的更多信息。

解决方法

Cortex-M0+ 使用冯诺依曼架构。无论是在零等待状态 SRAM 中还是在闪存中,取指令总是与数据访问竞争。

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。