多处理器系统架构与集群设计全解析
1. 流水线处理器与重叠执行
流水线处理器通过在从内存获取变量 A 的值的同时，从指令中获取变量 B 的地址，来实现重叠执行。流水线计算机将指令填充到流水线中，并同时开始处理所有指令，以最大化重叠效果。由于指令处理速度至关重要，它们常被用作超级计算机。然而，调试这类系统极具挑战性，因为当故障发生时，很难确切知道正在执行的是哪条指令。
例如，早期的 IBM 370 模型 195 就是一款流水线处理器。执行错误（称为程序中断）会被编码，以便程序员识别出错类型。错误通常会导致输出错误发生时的内存列表（称为转储），其中包含整个程序空间的十六进制列表，以及指令、数据和下一条要执行指令的地址。大多数情况下，需要在转储中找到出错的指令，并查看该指令正在操作的数据。但当发生不精确中断时，可能需要查看指示指令之前的十几条指令，因为从系统角度来看，它们都在执行中。
2. 背板的作用与原理
背板因其位于机柜后部而得名。带有 CPU 和内存的计算机板卡通过导轨滑入机柜，并插入后部的背板，从而获取电源和板间数据通信线路。
3. 多处理器的分类
3.1 Flynn 分类法
20 世纪 60 年代末，M. J. Flynn 提出了一种简单的计算系统分类法，从 CPU 的角度关注指令和数据的访问路径。他提出问题：“CPU 的指令处理器能同时访问多少条指令，CPU 的算术逻辑单元能同时访问多少块数据？”答案在两种情况下都只有“一个”或“多个”，由此产生了四种不同的架构：
|架构类型|指令路径|数据路径|
| ---- | ---- | ---- |
|单指令单数据（SISD）|单
：Transformer推理优化的工程实践与性能突破){kind=spacer}
