当前位置:AIGC资讯 > AIGC > 正文

惊艳!!!特斯拉端到端演示视频分析

本文经自动驾驶之心公众号授权转载,转载请联系出处。

外网有用户放了一段特斯拉FSD v12的视频,有人搬运到b站上了:

https://www.bilibili.com/video/BV1Z6421M797www.bilibili.com/video/BV1Z6421M797

这次恰好还是纯视觉比较难做的场景:雨天地面有积水,积水反射的各种图案可能会产生一些奇奇怪怪的occupancy。由于特斯拉去年也没有开ai day(说是友商总是一帧一帧地抠他们的ppt,干脆不开了),在没有详细信息的情况下,从视频里可以窥见一些端到端的特性,下面针对其中一些有意思的地方分析一下。

01:57,误检车门打开,大幅度绕行:

这里倒是问题不大,左侧有比较大的空间,所以多绕一点也无所谓了。

02:09,误检occ导致几乎刹停:

这里行人已经走了所以可以起步了,但地面有较多积水,反射地面以上的物体导致occ误检,又停了一会才起步。

04:40,近距离cutin车辆漏检

这里左侧非常近距离的倒车cut-in车辆漏检了,但planning似乎并没有给出起步的意图,这里体现出了端到端的一大优势:上游出错的结果并不一定会导致错误的驾驶行为,后面我们还会看到更多类似的例子。

05:37 误检occ

这里可能也是地面积水产生的occ吧,端到端采信了这个结果,左右乱打方向盘,一会向左一会向右。

05:48,左右近距离occ误检

在左右非常近的位置出现了occ误检,如果还是按规则来写可能就得报接管了(也不一定,毕竟没有在行驶轨迹上),这里端到端直接无视了这两坨occ,继续开。

06:57,正前方近距离行人误检

这个是真的牛逼,脸上刷出来一个行人,所有基于规则的规控此时一定会急刹+警报了,但端到端模型并不认可上游的结果,照常行驶。

14分:在一个私人停车场里打转出不去了

这里可能是BEV的感知距离不够的问题,迟迟没有找到出口,在一个停车场里打转。。

其他的片段就都是主路上行驶了,到了主路上FSD v12的表现很丝滑,没有什么大问题,尤其是夜晚看车道线的检测也是非常稳定的,不过我觉得大部分厂家也能做到这样的水平,就不多提了。

单看停车场这一段,如果不看上游的结果的话,除了那个正前方occ误检导致左右乱打方向盘,FSD v12的轨迹还是比较丝滑的,即使有错误也没有被卡住的情况。在这样一个有行人、有不规则移动障碍物(手推车)、地面有积水的场景中表现也确实还可以。

特斯拉使用的还是有中间模块监督的多任务端到端,所以前端仍然可以显示出来obj det和occ的结果。但是端到端里的规控并不一定会采信上游的结果,近距离漏检了不一定会起步撞车,近距离误检了也不一定会刹停,所有的结果都输入到pnc里综合判断。这确实是比较有意思的一点,可以确定的是马斯克并没有说谎,这的确是一个端到端系统才会有的表现。

更新时间 2024-03-04