端到端之åŽï¼Œï¼Œï¼Œï¼Œï¼Œï¼ŒAI æ™ºé©¾è¿›å…¥â€œé€ å¤©ä¸‹â€é˜¶æ®µ
图片系 AI 生产
克日,,,,,,CVPR 2026 在美国丹佛开幕。。。。。作为盘算机视觉领域最主è¦çš„妿œ¯èšä¼šä¹‹ä¸€ï¼Œï¼Œï¼Œï¼Œï¼Œï¼ŒCVPR 一直被视为 AI æ‰‹è‰ºæ¼”è¿›çš„é£Žå‘æ ‡ã€‚。。。。今年,,,,,,一个显ç€è½¬å˜æ˜¯ï¼Œï¼Œï¼Œï¼Œï¼Œï¼ŒAI 的焦点æ£åœ¨ä»Žâ€œè¯†åˆ«å¤©ä¸‹â€è¿›ä¸€æ¥è½¬å‘“明确天下ã€å±•望天下并与天下互动â€ã€‚。。。。
这一趋势在自动驾驶领域体现得尤为直接。。。。。今年 CVPR 首次开设具身智能基座模åå®‰æŽ’é’»ç ”ä¼šï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œç‰¹æ–¯æ‹‰ AI è½¯ä»¶å‰¯æ€»è£ Ashok Elluswamyã€å°é¹é›†å›¢é€šç”¨æ™ºèƒ½ä¸å¿ƒè®¤çœŸäººåˆ˜å…ˆæ˜Žç‰æ¥è‡ªå·¥ä¸šä¸€çº¿çš„æ‰‹è‰ºè®¤çœŸäººï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œåˆ†äº«äº†å„自团队在具身智能和自动驾驶基座模å上的希望。。。。。
Ashok Elluswamy é‡ç‚¹è®¨è®ºçš„æ˜¯ç‰¹æ–¯æ‹‰æ€Žæ ·æž„建é¢å‘机械人的基座模åï¼Œï¼Œï¼Œï¼Œï¼Œï¼ŒåŒ…æ‹¬å¤§è§„æ¨¡å¤šæ¨¡æ€æ¨¡åçš„æž¶æž„ã€æ•°æ®ä¸Žè®ç»ƒï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œä»¥åŠä»Žåƒç´ 输入到执行控制的端到端 “pixels-to-actuation†è¦é¢†ï¼Œï¼Œï¼Œï¼Œï¼Œï¼ŒåŒæ—¶ä¹Ÿæ¶‰åŠè¯„测åè®®ã€æ¸…é™è€ƒé‡å’ŒçœŸå®žå¤©ä¸‹å¯é 安排。。。。。
ç›¸æ¯”å¦æœ¯çœ‹æ³•自己,,,,,,更值得关注的是车ä¼å¯¹ AI æ™ºé©¾åº•å±‚èƒ½åŠ›çš„é‡æ–°ç•Œè¯´ã€‚。。。。当模åä¸å†åªæ˜¯è¯†åˆ«è½¦è¾†ã€è¡Œäººå’Œè½¦é“线,,,,,,而是直接从视频æµã€å¯¼èˆªæŒ‡ä»¤ç‰è¾“å…¥ä¸è¾“出驾驶行动,,,,,,车ä¼è¯¥æ€Žæ ·åˆ¤æ–它真的明确开车??????åˆè¯¥æ€Žæ ·åœ¨ä½Žæœ¬é’±ã€å¯å¤çްã€å¯æŽ§çš„æƒ…å½¢ä¸éªŒè¯å®ƒçš„æ¸…é™ç•Œçº¿ï¼Ÿï¼Ÿï¼Ÿï¼Ÿï¼Ÿï¼Ÿ
这也是天下模å在这次 CVPR 上被推到å‰å°çš„é…æ™¯ã€‚。。。。
VLA 之åŽï¼Œï¼Œï¼Œï¼Œï¼Œï¼ŒAIéœ€è¦æ˜Žç¡®â€œå¤©ä¸‹çš„转å˜â€
已往一年,,,,,,VLA 是自动驾驶领域最çƒçš„æ‰‹è‰ºè¦å®³è¯ä¹‹ä¸€ã€‚。。。。它试图把视觉ã€è¯è¨€å’Œè¡ŒåŠ¨ç»Ÿä¸€åˆ°ç»Ÿä¸€ä¸ªæ¨¡åæ¡†æž¶ä¸ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œè®©ç³»ç»Ÿç›´æŽ¥ä»Žè§†é¢‘æµã€å¯¼èˆªæŒ‡ä»¤ç‰è¾“å…¥ä¸å¤©ç”Ÿé©¾é©¶è¡ŒåŠ¨ã€‚ã€‚ã€‚ã€‚ã€‚ç®€æœ´è¯´ï¼Œï¼Œï¼Œï¼Œï¼Œï¼ŒVLA å°±åƒæ˜¯åœ¨å¦ä¹ äººç±»å¸æ—¶æœºæ€Žä¹ˆå¼€è½¦ã€‚。。。。
刘先明去年曾在 CVPR 先容æ£åœ¨ç ”å‘ä¸çš„第二代 VLA 模å;;ä¸åˆ°ä¸€å¹´åŽï¼Œï¼Œï¼Œï¼Œï¼Œï¼ŒåŸºäºŽè¯¥æ¨¡å的辅助驾驶软件已ç»è¿›å…¥é‡äº§ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œå¹¶åœ¨æŽ¨é€é¦–æœˆå®žçŽ°è¾…åŠ©é©¾é©¶é‡Œç¨‹å æ¯”凌驾 50%。。。。。
但端到端智驾越往å‰èµ°ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œå¦ä¸€ä¸ªé—®é¢˜è¶Šçªå‡ºï¼šæ¨¡åå¯ä»¥æ¨¡æ‹Ÿäººç±»é©¾é©¶ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œå´æœªå¿…çœŸæ£æ˜Žç¡®æ¯ä¸ªè¡ŒåЍ之åŽçš„ç‰©ç†æ•ˆæžœã€‚。。。。好比现在选择å˜é“,,,,,,æ—车会ä¸ä¼šè¿«è¿‘??????å‰è½¦çªç„¶å‡é€Ÿæ—¶ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œç³»ç»Ÿæ˜¯å¦è¿˜èƒ½å¹³ç¨³å¤„ç†ï¼Ÿï¼Ÿï¼Ÿï¼Ÿï¼Ÿï¼Ÿ
天下模åè¦è¡¥ä¸Šçš„ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œæ£æ˜¯è¿™å±‚能力。。。。。
åˆ˜å…ˆæ˜Žåœ¨æ¼”è®²ä¸æåˆ°ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œå°é¹ç‰©ç†å¤©ä¸‹åŸºåº§æ¨¡å既包括第二代 VLA,,,,,,也包括天下模åã€‚ã€‚ã€‚ã€‚ã€‚äºŒè€…ä¸æ˜¯è¹Šå¾„之争:VLA å¦ä¹ â€œæ€Žæ ·è¡ŒåŠ¨â€ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œå¤©ä¸‹æ¨¡åå¦ä¹ “行动之åŽå¤©ä¸‹ä¼šæ€Žæ ·è½¬å˜â€ã€‚。。。。
è¿™èƒŒåŽæ˜¯è‡ªåЍ驾驶 AI 范å¼çš„转å˜ã€‚。。。。已往模å主è¦ä¾èµ–人类驾驶数æ®ä¸¾è¡Œè¡Œä¸ºå¦ä¹ ,,,,,,但人类行动信å·ç›¸å¯¹å¸Œç½•,,,,,,åªèƒ½å‘Šè¯‰æ¨¡åâ€œæœ€åŽæ€Žä¹ˆåšâ€ã€‚。。。。天下模å则通过展望下一帧ã€ä¸‹ä¸€çŠ¶æ€æˆ–未æ¥è¡¨å¾ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œä»Žæµ·é‡è§†é¢‘ä¸å¦ä¹ 交通情形的è¿åŠ¨çºªå¾‹ã€ç©ºé—´å…³ç³»å’Œå› 果结构。。。。。
X-World:让 AI 在视频空间里模拟未æ¥
å°é¹æ¤æ¬¡é‡ç‚¹å±•示的 X-World,,,,,,是其天下模å系统ä¸çš„代表性手艺。。。。。å‡è¯è®ºæ–‡å½¢è²Œï¼Œï¼Œï¼Œï¼Œï¼Œï¼ŒX-World æ˜¯ä¸€ä¸ªå¯æŽ§çš„å¤šæ‘„åƒå¤´å¤©ç”Ÿå¼å¤©ä¸‹æ¨¡å。。。。。它的输入包括历å²å¤šè§†è§’æ‘„åƒå¤´è§†é¢‘ã€æœªæ¥è‡ªè½¦è¡ŒåŠ¨ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œä»¥åŠå¯é€‰çš„动æ€äº¤é€šåŠ å…¥è€…ã€é™æ€è¹Šå¾„å…ƒç´ ã€å¤©æ°”å’Œæ—¶é—´ç‰æ¡ä»¶ï¼›ï¼›è¾“出则是未æ¥ä¸€æ®µæ—¶é—´å†…车辆多路摄åƒå¤´å¯èƒ½çœ‹åˆ°çš„视频画é¢ã€‚。。。。
æ›´ç›´ç™½åœ°è¯´ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œå®ƒä¸æ˜¯ç®€æœ´å¤©ç”Ÿä¸€æ®µâ€œåƒè¹Šå¾„â€çš„è§†é¢‘ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œè€Œæ˜¯åœ¨å›žè¦†ä¸€ä¸ªé©¾é©¶é—®é¢˜ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œè‹¥æ˜¯è½¦è¾†æŽ¥ä¸‹æ¥æ‰§è¡ŒæŸä¸ªè¡ŒåŠ¨ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œå‘¨å›´å¤©ä¸‹ä¼šé…¿æˆä»€ä¹ˆæ ·ï¼Ÿï¼Ÿï¼Ÿï¼Ÿï¼Ÿï¼Ÿ
X-World 使用七路环视摄åƒå¤´ï¼Œï¼Œï¼Œï¼Œï¼Œï¼ŒåŒ…括å‰çª„è§’ã€å‰é±¼çœ¼ã€å‰å·¦ã€å‰å³ã€åŽå·¦ã€åŽå³å’ŒåŽè§†æ‘„åƒå¤´ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œå½¢æˆ 360 度围绕视野,,,,,,这决议了它è¦è§£å†³çš„æ˜¯å¤šæ‘„åƒå¤´ä¸€è‡´çš„视频仿真。。。。。
论文显示,,,,,,自动驾驶天下模å的难点在于,,,,,,画é¢çœ‹èµ·æ¥çœŸå®žè¿œè¿œä¸æ•·ã€‚。。。。它至少è¦çŸ¥è¶³ä¸‰ä¸ªè¦æ±‚ï¼šè¡ŒåŠ¨å¯æŽ§ã€åœºæ™¯å¯ç¼–辑ã€å¤šè§†è§’一致。。。。。
é¦–å…ˆæ˜¯è¡ŒåŠ¨å¯æŽ§ã€‚ã€‚ã€‚ã€‚ã€‚ç»Ÿä¸€ä¸ªåˆå§‹åœºæ™¯ä¸‹ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œè‹¥æ˜¯è¾“å…¥å³è½¬ã€å·¦è½¬ã€å˜é“或直行,,,,,,模å天生的未æ¥ç”»é¢å¿…éœ€ä¸¥é…·åæ˜ 差别驾驶行动的效果。。。。。X-World 展示了这ç§èƒ½åŠ›ï¼šæ¨¡åå¯ä»¥å‡è¯å·®åˆ«è‡ªè½¦è½¨è¿¹ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œå¤©ç”Ÿå³è½¬ã€å·¦è½¬ã€è½¦é“åšæŒå’Œå˜é“ç‰å·®åˆ«æœªæ¥è§†é¢‘。。。。。
这对智驾评测很是主è¦ã€‚。。。。真实蹊径上,,,,,,一辆车在一个路å£åªèƒ½åšå‡ºä¸€æ¬¡é€‰æ‹©ï¼›ï¼›ä½†åœ¨å¤©ä¸‹æ¨¡å里,,,,,,统一个场景å¯ä»¥é‡å¤æµ‹è¯•å¤šç§æˆ˜ç•¥ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œä¾‹å‡†æœŸå¾…ã€ç»•行ã€å˜é“或刹åœï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œä»Žè€Œè§†å¯Ÿå·®åˆ«å†³è®®å¸¦æ¥çš„æ•ˆæžœã€‚。。。。
其次是场景å¯ç¼–辑。。。。。X-World ä¸ä½†æŽ§åˆ¶è‡ªè½¦è¡ŒåŠ¨ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œè¿˜èƒ½æŽ§åˆ¶åŠ¨æ€äº¤é€šåŠ å…¥è€…å’Œé™æ€è¹Šå¾„å…ƒç´ ã€‚ã€‚ã€‚ã€‚ã€‚åŠ¨æ€å·¥å…·åŒ…括车辆ã€è¡Œäººã€è‡ªè¡Œè½¦ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œé™æ€å…ƒç´ 包括车é“线ã€è¹Šå¾„ç•Œçº¿å’Œäº¤é€šæ ‡è®°ã€‚ã€‚ã€‚ã€‚ã€‚
è¿™æ„味ç€ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œç ”å‘团队å¯ä»¥è‡ªåŠ¨åˆ¶é€ é•¿å°¾åœºæ™¯ã€‚ã€‚ã€‚ã€‚ã€‚å¥½æ¯”åœ¨åŽŸæœ¬æ£å¸¸é€šè¡Œçš„蹊径视频ä¸ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œæ’å…¥ä¸€ä¸ªä»Žé®æŒ¡è½¦è¾†åŽæ–¹çªç„¶æ³›èµ·çš„éª‘è¡Œè€…ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œå†æµ‹è¯•自动驾驶系统是å¦èƒ½å¤Ÿå®žæ—¶åˆ¹åœã€‚。。。。
第三是多视角一致和长时åºç¨³å›ºã€‚。。。。自动驾驶仿真ä¸å¯åªæ˜¯å‰è§†ç”»é¢æµé€šï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œè¿˜è¦åŒ…管å‰è§†ã€ä¾§è§†ã€åŽè§†ä¸çš„车辆ã€è¹Šå¾„ã€ç•Œçº¿å…³ç³»ç›¸äº’一致。。。。。为æ¤ï¼Œï¼Œï¼Œï¼Œï¼Œï¼ŒX-World 在架构上引入 view-temporal self-attentionï¼Œï¼Œï¼Œï¼Œï¼Œï¼ŒåŒæ—¶å»ºæ¨¡æ—¶é—´ç»´åº¦å’Œå¤šæ‘„åƒå¤´è§†è§’ä¹‹é—´çš„å…³ç³»ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œä»¥åšæŒè·¨è§†è§’å‡ ä½•ä¸€è‡´æ€§ã€ç›®çš„身份一致性和è¿åŠ¨ä¸€è¿žæ€§ã€‚ã€‚ã€‚ã€‚ã€‚
å°é¹çš„论文ä¸ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œè¿˜å±•示了 24 秒多摄åƒå¤´é•¿åºåˆ—天生,,,,,,强调模åå¯ä»¥åœ¨è¾ƒé•¿æ—¶é—´å†…åšæŒç”»é¢ç¨³å›ºï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œé˜»æ¢å¤©ç”Ÿå¼æ¨¡å常è§çš„æ¼‚移问题。。。。。
AI 智驾的新分水å²ï¼šè·¯æµ‹ä¹‹å¤–ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œè¿˜è¦æœ‰ä»¿çœŸé—环
从行业角度看,,,,,,天下模å的价值并ä¸åœ¨äºŽâ€œè§†é¢‘天生得多逼真â€ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œè€Œåœ¨äºŽå®ƒå¯èƒ½æˆä¸ºç«¯åˆ°ç«¯æ™ºé©¾çš„è®ç»ƒåœºå’Œç§‘场。。。。。
è¿™ç§è¶‹åŠ¿å¹¶éžå°é¹ä¸€å®¶è½¦ä¼çš„自力判æ–,,,,,,特斯拉 AI è½¯ä»¶å‰¯æ€»è£ Ashok Elluswamy 也讨论了特斯拉构建机械人基座模å的原则和è¦é¢†ã€‚。。。。这说明,,,,,,全çƒå¤´éƒ¨çީ家æ£åœ¨å½¢æˆç±»ä¼¼å…±è¯†ï¼šè‡ªåЍ驾驶ä¸å†åªæ˜¯è½¦è¾†åŠŸæ•ˆç«žäº‰ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œè€Œæ˜¯å…·èº« AI 在真实物ç†å¤©ä¸‹ä¸æ„ŸçŸ¥ã€å†³è®®ã€è¡ŒåŠ¨å’Œä¸€è¿žå¦ä¹ 的问题。。。。。
差别在于路径差别。。。。。特斯拉更强调以大规模车队数æ®ã€ç«¯åˆ°ç«¯æŽ§åˆ¶å’Œæœºæ¢°äººå¹³å°ä¹°é€šèƒ½åŠ›ï¼›ï¼›å°é¹åˆ™è¯•图通过 VLA 与天下模å连系,,,,,,补é½å¯æŽ§ä»¿çœŸã€é•¿æ—¶åºæŽ¨æ¼”å’Œå事实测试这一层能力。。。。。
真实蹊径测试本钱高ã€é£Žé™©å¤§ã€å¤çŽ°éš¾ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œå°¤å…¶éš¾ä»¥ç¬¼ç½©ä½Žé¢‘å±é™©åœºæ™¯ã€‚。。。。天下模å则å¯ä»¥é€šè¿‡å事实推演和场景编辑,,,,,,让统一场景被é‡å¤æµ‹è¯•,,,,,,有数风险被自动结构,,,,,,模å在虚拟情形ä¸è¢’露问题。。。。。
这说明,,,,,,AI 智驾竞争已ç»ä¸ä½†æ˜¯å•点算法比拼,,,,,,而是模åã€æ•°æ®ã€ç®—力ã€èŠ¯ç‰‡ã€ç¼–译器和工程效率的系统竞争。。。。。å°é¹æŠ«éœ²çš„æ•°æ®æ˜¾ç¤ºï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œå…¶ç¬¬äºŒä»£ VLA æ¨¡åæ‹¥æœ‰æ•°åäº¿å‚æ•°ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œä½¿ç”¨ä¸Šäº¿è§†é¢‘片æ–è®ç»ƒï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œæ¯ç‰ˆæ¨¡åè®ç»ƒé‡å‡Œé©¾ 4 万亿 Token;;在阻æ¢ä»Šå¹´ 3 月的一年间,,,,,,å°é¹é›†ç¾¤å• GPU è®ç»ƒæ•ˆçއæå‡ 1010%,,,,,,å•使命è®ç»ƒæ•ˆçއæå‡ 4360%,,,,,,GPU 硬件使用率从 40%æå‡åˆ° 90%。。。。。
虽然,,,,,,天下模å还ä¸å¯è¢«ç®€æœ´ç‰åŒäºŽçœŸå®žå¤©ä¸‹ã€‚。。。。天生视频稳固,,,,,,ä¸ä»£è¡¨ç‰©ç†çºªå¾‹å®Œå…¨å‡†ç¡®ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œå°¤å…¶åœ¨æžç«¯å¤©æ°”ã€é‡å¤§åšå¼ˆã€æ–½å·¥æ”¹é“å’Œéžç†æ€§é©¾é©¶åœºæ™¯ä¸ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œå¤©ä¸‹æ¨¡åä»éœ€è¦å¤§å®—çœŸå®žæ•°æ®æ ¡å‡†ã€‚。。。。
å› æ¤ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œå®ƒçŸæœŸå†…æ›´åƒæ˜¯çœŸå®žè·¯æµ‹ä¹‹å¤–的一层高效增补,,,,,,用于结构长尾场景ã€åšå事实推演ã€å¼€å±•é—环评测和强化å¦ä¹ è®ç»ƒã€‚。。。。未æ¥çš„æ™ºé©¾ç«žäº‰ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œä¸ä½†çœ‹è°åœ¨è·¯ä¸Šè·‘得更多,,,,,,也看è°èƒ½åœ¨äº‘ç«¯é€ å‡ºæ›´å¤šçœŸå®žã€é‡å¤§ã€å¯å¤çŽ°çš„è™šæ‹Ÿå¤©ä¸‹ã€‚ã€‚ã€‚ã€‚ã€‚ï¼ˆæœ¬æ–‡é¦–å‘于钛媒体APP,,,,,,作者|æŽçމé¹ï¼Œï¼Œï¼Œï¼Œï¼Œï¼Œç¼–è¾‘ï½œæ¨æž—)
@刘长冰:欧美片xx软件,,,,,,ä¸å›½è™Žå¤´åŒ…åˆ·å±æµ·å†…外@æŽæ…ˆé›„:“钢腿女å©â€ç‰›é’°äººæ°‘日报撰文
@钱嘉玲:é™ä»·éƒ½æ•‘ä¸äº†ç‡ƒæ²¹è½¦é—®é¢˜å‡ºåœ¨å“ª
çƒé—¨æŽ’行
- 1 人妻一二区
- 2 大雷擦狙狙在线观看免费播放
- 3 xxnxxx
- 4 17c.com最
- 5 新版天堂资源中文8在线
- 6 av网站有哪些
- 7 Tanhuase
- 8 PH成人
- 9 xlav