AI 前沿
两美元ESP32-S3借助SIMD实现快速FAST角点检测
开发者在Hacker News分享为ESP32-S3编写的SIMD加速FAST特征检测器。该芯片约2美元,具备128位SIMD指令;实现处理320×240 QVGA帧约需6毫秒,性能约为参考实现两倍。
开发者在Hacker News发文称,为ESP32-S3编写了利用其128位SIMD指令的加速FAST特征检测器。测试结果显示,该实现处理一张QVGA分辨率、即320×240像素的画面约需6毫秒,性能约为参考实现两倍,并公开了源代码。
文章介绍,ESP32-S3价格约2美元,内置最高240MHz的双核CPU,并集成WiFi和低功耗蓝牙等外设。开发者在查阅技术参考手册时发现该芯片支持一组有限SIMD指令,于是尝试用汇编写入更高级的视觉代码。
实现过程中,开发者先研究了Larry Bank博客、Espressif的esp-dsp库和esp-dl库等资料,随后编写FAST角点预测试的SIMD版本。该预测试会在中心像素的四个正方向采样,并判断与中心像素差值超过阈值的“极端”像素是否至少达到三个。
由于每个向量寄存器可存放16个8位数值,开发者设计为一次计算16个像素的极值计数。ESP32-S3指令集不支持直接非对齐读取,因此需要利用指令从相邻两个寄存器拼接结果中抽取所需片段。文章还提到,该芯片的比较指令存在限制,开发者在实现中需要绕过这些特性,并编写了基础寄存器分配器。