自动驾驶如何应对大模型的幻觉问题的? - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
HarrisIce
V2EX    问与答

自动驾驶如何应对大模型的幻觉问题的?

  • /li>  
  •   HarrisIce 2024-07-15 14:29:35 +08:00 1658 次点击
    这是一个创建于 503 天前的主题,其中的信息可能已经有所发展或是发生改变。

    关注到最近车企都在推端到端的自动驾驶大模型了,但是目前的大模型不都是生成式的么,车企如何解决大模型的幻觉问题的?在道路上的大模型,一旦输出错误的结果,就非常危险了,车企如何应对这些问题的?

    我现在推测可能是预训练的小参数量、多模态模型,在端侧 orinx 推理后,再由传统的 rule-base 的模型做一层验证 or 过滤?可能以前的 rule 是道路规则,现在的 rule 可能是违规规则,以实现对大模型输出的危险的结果的过滤?

    有行业内的朋友科普一下吗

    10 条回复    2024-07-15 15:17:08 +08:00
    murmur
        1
    murmur  
       2024-07-15 14:30:25 +08:00
    没解决幻觉问题啊,前几天哪家的车不是把广告牌上的汽车识别成障碍物然后刹停了
    MillaMaxwell
        2
    MillaMaxwell  
       2024-07-15 14:40:59 +08:00
    应该是会一直迭代训练更新的吧
    说起来,以前上班路上有一个路口,旁边是小山坡,每次路过的时候地图上都会识别出一个人在那站着(实际上那块是空气),差不多过了一个月,更新了一次系统之后就再没识别出来人了
    lDqe4OE6iOEUQNM7
        3
    lDqe4OE6iOEUQNM7  
       2024-07-15 14:53:30 +08:00
    规则加端到端,不是完全端到端
    lDqe4OE6iOEUQNM7
        4
    lDqe4OE6iOEUQNM7  
       2024-07-15 14:55:04 +08:00
    现在就特斯拉端到端实际落地了,其他家全部还是高清地图加不停地几十万行规则代码实现的,ads3.0,小鹏理想后面也会发端到端的
    lDqe4OE6iOEUQNM7
        5
    lDqe4OE6iOEUQNM7  
       2024-07-15 14:56:20 +08:00
    没看到国内的都是不完全端到端的,你要相信你所想到的问题工程师早就想到了
    cheng6563
        6
    cheng6563  
       2024-07-15 15:01:27 +08:00
    为啥非要用大语言模型呢,让他读取交规更新吗...
    LandCruiser
    7
    LandCruiser  
       2024-07-15 15:05:59 +08:00
    特斯拉是 30 帧的图片输入给 AI ,AI 生成了什么?好像什么都没生成啊,你意思特斯拉的模型生成了指令?
    cbythe434
        8
    cbythe434  
       2024-07-15 15:09:41 +08:00
    不可能解决,这么大的产业,不会考虑个体问题
    百公里事故率<平均事故率就能强推,哪些人作为分子就交给系统吧
    sujin190
        9
    sujin190  
       2024-07-15 15:13:16 +08:00 via Android
    大模型不是只有生成式这一种好吧,好像也没有人说自动驾驶的大模型和 gpt 是同一种好吧,再说自动驾驶每秒需要读取传感器很多次输出很多次结果,单次识别异常并不会造成致命结果

    而且更重要的是高层级的大模型输出会受到低层级的传感器直接限制,比如就算大模型识别异常发出撞上去指令,但是雷达距离这种直接的物理规则可以非常直接的限制该指令无效啊
    sujin190
        10
    sujin190  
       2024-07-15 15:17:08 +08:00 via Android
    好比就算是人也有脑子锈逗作死的时候,但是你的条件反射会直接纠正你的作死,自动驾驶也是同理,高层级大模型智能和低层里传感器条件反射防作死
    关于     帮助文档     自助推广系统     博客     API     FAQ     Solana     854 人在线   最高记录 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 27ms UTC 19:28 PVG 03:28 LAX 11:28 JFK 14:28
    Do have faith in what you're doing.
    ubao msn snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86