FSD, 参考资料来源FSD Chip - Tesla - WikiChip

另外可参考笔者之前分享文章：[自动驾驶技术]-6 Tesla自动驾驶方案之硬件（AI Day 2021），​​​​​​​[自动驾驶技术]-8 Tesla自动驾驶方案之硬件（AI Day 2022）

1 整体介绍

特斯拉FSD计算机架构：

- 双冗余SoC，冗余电源：每个SoC拥有独立的电源和操作系统，确保高可靠性。

- 传感器输入：包括IMU、雷达、GPS、超声波传感器、轮速计、转向角和地图数据。

-  8个外部摄像头和12个超声波传感器：同时将数据输入两个FSD芯片。

- 独立处理：两个芯片独立生成车辆未来行动计划，并交由安全系统进行比较和验证。

2 FSD芯片规格

特斯拉D1芯片由1个GPU，2个NPU，3簇12个ARM Cortex-A72 CPU核，安全核，视频编码器等模块组成。

- 制程工艺：14nm FinFET CMOS，12层金属

- 面积：260 mm²

- 晶体管数量：60亿

- 包装：37.5 x 37.5 mm FCBGA

- 处理器：12个Cortex-A72核心，2.2GHz

- 神经网络性能：36.86*2 TOPS

- 功耗：每芯片低于40W

3 芯片核心组件

- GPU：用于图像处理

- CPU：12核ARM Cortex-A72

- ISP（图像信号处理器）

- H.265视频编码器

- 内存控制器、PHYs、片上互连和外围设备

3.1) 神经网络加速器（NNA）

- 两个独立实例双神经处理单元（NPU）：每个NPU拥有32MB的SRAM，用于存储临时网络结果，减少数据移动。

- 设计频率：使用8位乘法和32位加法，2GHz+。

- 多路累加器阵列：每个NPU有96x96的乘加阵列，总共9,216个MACs和18,432个操作。

- 硬件SIMD、ReLU和Pooling单元（参见3.2和3.3）。

- 每个实例32MB SRAM，优化带宽；操作流程在每个周期中，数据从SRAM读入MAC阵列进行计算，结果数据写回SRAM。

- 激活函数支持包括ReLU、Sigmoid Linear Unit (SiLU)、TanH。

3.2) SIMD数据路径

- 可编程SIMD单元，支持丰富的指令集

- 浮点与整数运算

- 支持所有指令的谓词化

- 量化硬件的流水线实现，融合ReLu、缩放和归一化层

3.3) 池化硬件

- 支持平均和最大池化

- 为最常见的小池化尺寸优化

- 重新排列输出像素以实现更快的池化

3.4）指令集和微架构：

- 简化硬件设计：一些硬件被简化，增加了软件复杂性，但降低了硅片成本。

- 软件优化：特斯拉的神经网络编译器负责层融合、内存访问平滑、通道填充和DMA操作。

- 运行模式：神经网络程序在芯片启动时加载并驻留内存，NPU在异步运行整个神经网络模型后中断CPU进行后处理。

4 特斯拉自研优势

• 优化性能：通过自研SoC，特斯拉可以针对特定的自动驾驶任务进行深度优化，提高处理效率和系统响应速度。
• 降低成本：自研芯片可以减少对第三方供应商的依赖，从而降低长远的成本。
• 增强控制：特斯拉可以完全掌控芯片的设计和生产过程，确保产品的质量和安全性，同时能够快速进行更新和改进。
• 知识产权：自研芯片可以保护特斯拉的技术和算法不被竞争对手轻易复制。

5 特斯拉NNA设计哲学

专注加速MAC操作：由于99.7%的操作是乘加（MAC），加速MAC能显著提升性能。

硬件专用量化和池化单元：提高整体速度和效率。

灵活的SIMD单元：支持丰富的指令集，包括整数和浮点运算。

灵活的状态机控制逻辑：减少控制功耗，支持复杂操作。

数据共享和最小化数据移动：减少SRAM和DRAM活动，进一步降低功耗。

单时钟域设计：支持DVFS（动态电压频率调整）以优化功耗和时钟分布。