AI 导读
Tesla FSD 展示对比:人眼在强眩光下只见白茫茫一片,AI 重建画面却能清晰辨出道路、树木和车辆。其做法是跳过 ISP,把传感器原始光子计数直接喂给神经网络,保留完整光强信息以重建场景细节。Musk 称人眼感知的 RGB 是左图,Tesla AI 光子计数重建是右图,这正是 FSD 在夜间或极端眩光下仍能看清的原因。
正文
Tesla 的 FSD 的对比还是挺震撼的,左边人眼看到的完全是一片白茫茫的眩光,右边AI重建出来的画面却清晰可辨。
简单科普一下这个技术:
你手机拍太阳方向会一片白对吧?这是因为相机要把光信号处理成人看得懂的照片,亮的地方直接爆掉了。
但传感器本身其实记录了每个像素接收到多少光子,这些数据还在,只是被 ISP 直接给扔掉了。
Tesla的做法是跳过ISP,把传感器的原始光子计数直接喂给神经网络。
光子计数保留了完整的光强信息,AI从中重建出场景细节,所以右图能在一片白里看到路、树、车。
一个不恰当的比喻,把一本学术论文改写成通俗读物,普通人更容易读了,但专家反而觉得关键细节被删了。
The human-perceived RGB is image 1 and the Tesla AI photon count reconstruction is image 2. This is why Tesla FSD can see so well at night or through extreme glare.在 X 查看被引用的帖子
来源:@frxiaobei · x.com