404黄台软件平台理想汽车7月内全量推送无图NOA 发布端到端+VLM全新自动驾驶技术架构_404黄台软件平台ZAKER新闻
理想汽车7月内全量推送无图NOA 发布端到端+VLM全新自动驾驶技术架构_404黄台软件平台ZAKER新闻
塔尔萨种族大屠杀事件是美国有史以来血腥的种族暴力事件之一,但在美国历史书中却很少被提及。当时,一群支持种族歧视的白人冲进了塔尔萨市的一个黑人聚集区,烧毁上千栋住宅,这里一夜之间被夷为平地,造成数百人死亡、数千人受伤。塔尔萨大屠杀也被称为“美国历史上最严重的种族屠杀事件”。
2024 年 7 月 5 日,理想汽车在 2024 智能驾驶夏季发布会宣布将于 7 月内向全量理想 AD Max 用户推送 " 全国都能开 " 的无图 NOA,并将于 7 月内推送全自动 AES(自动紧急转向)和全方位低速 AEB(自动紧急制动)。同时,理想汽车发布了基于端到端模型、VLM 视觉语言模型和世界模型的全新自动驾驶技术架构,并开启新架构的早鸟计划。智能驾驶产品方面,无图 NOA 不再依赖高精地图或先验信息,在全国范围内的导航覆盖区域均可使用,并借助时空联合规划能力带来更丝滑的绕行体验。无图 NOA 也具备超远视距导航选路能力,在复杂路口依然可以顺畅通行。同时,无图 NOA 充分考虑用户心理安全边界,用分米级微操带来默契安心的智驾体验。此外,即将推送的 AES 功能可以实现不依赖人辅助扭力的全自动触发,规避更多高危事故风险。全方位低速 AEB 则再次拓展主动安全风险场景,有效减少低速挪车场景的高频剐蹭事故发生。自动驾驶技术方面,新架构由端到端模型、VLM 视觉语言模型和世界模型共同构成。端到端模型用于处理常规的驾驶行为,从传感器输入到行驶轨迹输出只经过一个模型,信息传递、推理计算和模型迭代更高效,驾驶行为更拟人。VLM 视觉语言模型具备强大的逻辑思考能力,可以理解复杂路况、导航地图和交通规则,应对高难度的未知场景。同时,自动驾驶系统将在基于世界模型构建的虚拟环境中进行能力学习和测试。世界模型结合重建和生成两种路径,构建的测试场景既符合真实规律,也兼具优秀的泛化能力。理想汽车产品部高级副总裁范皓宇表示:" 理想汽车始终坚持和用户共同打磨产品体验,从今年 5 月推送首批千名体验用户,到 6 月将体验用户规模扩展至万人以上,我们已经在全国各地积累了超百万公里的无图 NOA 行驶里程。无图 NOA 全量推送后,24 万名理想 AD Max 车主都将用上这款先进的智能驾驶产品,这是一项诚意满满的重磅升级。"理想汽车智能驾驶研发副总裁郎咸朋表示:" 从 2021 年启动全栈自研,到今天发布全新的自动驾驶技术架构,理想汽车的自动驾驶研发从未停止探索的脚步。我们结合端到端模型和 VLM 视觉语言模型,带来了业界率先在车端部署双系统的方案,也率先将 VLM 视觉语言模型成功部署在车端芯片上,这套业内先进的全新架构是自动驾驶领域里程碑式的技术突破。"无图 NOA 四项能力提升,全国道路高效通行将于 7 月内推送的无图 NOA 带来四项重大能力升级,全面提升用户体验。首先,得益于感知、理解和道路结构构建能力的全面提升,无图 NOA 摆脱了对先验信息的依赖。用户在全国范围内有导航覆盖的城市范围内均可使用 NOA,甚至可以在更特殊的胡同窄路和乡村小路开启功能。其次,基于高效的时空联合规划能力,车辆对道路障碍物的避让和绕行更加丝滑。时空联合规划实现了横纵向空间的同步规划,并通过持续预测自车与他车的空间交互关系,规划未来时间窗口内的所有可行驶轨迹。基于优质样本的学习,车辆可以快速筛选最优轨迹,果断而安全地执行绕行动作。在复杂的城市路口,无图 NOA 的选路能力也得到显著提升。无图 NOA 采用 BEV 视觉模型融合导航匹配算法,实时感知变化的路沿、路面箭头标识和路口特征,并将车道结构和导航特征充分融合,有效解决了复杂路口难以结构化的问题,具备超远视距导航选路能力,路口通行更稳定。同时,无图 NOA 重点考虑用户心理安全边界,用分米级的微操能力带来更加默契、安心的行车体验。通过激光雷达与视觉前融合的占用网络,车辆可以识别更大范围内的不规则障碍物,感知精度也更高,从而对其他交通参与者的行为实现更早、更准确的预判。得益于此,车辆能够与其他交通参与者保持合理距离,加减速时机也更加得当,有效提升用户行车时的安全感。主动安全能力进阶,覆盖场景再拓展在主动安全领域,理想汽车建立了完备的安全风险场景库,并根据出现频次和危险程度分类,持续提升风险场景覆盖度,即将在 7 月内为用户推送全自动 AES 和全方位低速 AEB 功能。为了应对 AEB 也无法规避事故的物理极限场景,理想汽车推出了全自动触发的 AES 自动紧急转向功能。在车辆行驶速度较快时,留给主动安全系统的反应时间极短,部分情况下即使触发 AEB,车辆全力制动仍无法及时刹停。此时,AES 功能将被及时触发,无需人为参与转向操作,自动紧急转向,避让前方目标,有效避免极端场景下的事故发生。全方位低速 AEB 则针对泊车和低速行车场景,提供了 360 度的主动安全防护。在复杂的地库停车环境中,车辆周围的立柱、行人和其他车辆等障碍物都增加了剐蹭风险。全方位低速 AEB 能够有效识别前向、后向和侧向的碰撞风险,及时紧急制动,为用户的日常用车带来更安心的体验。自动驾驶技术突破创新,双系统更智能理想汽车的自动驾驶全新技术架构受诺贝尔奖得主丹尼尔 · 卡尼曼的快慢系统理论启发,在自动驾驶领域模拟人类的思考和决策过程,形成更智能、更拟人的驾驶解决方案。快系统,即系统 1,善于处理简单任务,是人类基于经验和习惯形成的直觉,足以应对驾驶车辆时 95% 的常规场景。慢系统,即系统 2,是人类通过更深入的理解与学习,形成的逻辑推理、复杂分析和计算能力,在驾驶车辆时用于解决复杂甚至未知的交通场景,占日常驾驶的约 5%。系统 1 和系统 2 相互配合,分别确保大部分场景下的高效率和少数场景下的高上限,成为人类认知、理解世界并做出决策的基础。理想汽车基于快慢系统理论形成了自动驾驶算法架构的原型。系统 1 由端到端模型实现,具备高效、快速响应的能力。端到端模型接收传感器输入,并直接输出行驶轨迹用于控制车辆。系统 2 由 VLM 视觉语言模型实现,其接收传感器输入后,经过逻辑思考,输出决策信息给到系统 1。双系统构成的自动驾驶能力还将在云端利用世界模型进行训练和验证。高效率的端到端模型端到端模型的输入主要由摄像头和激光雷达构成,多传感器特征经过 CNN 主干网络的提取、融合,投影至 BEV 空间。为提升模型的表征能力,理想汽车还设计了记忆模块,兼具时间和空间维度的记忆能力。在模型的输入中,理想汽车还加入了车辆状态信息和导航信息,经过 Transformer 模型的编码,与 BEV 特征共同解码出动态障碍物、道路结构和通用障碍物,并规划出行车轨迹。多任务输出在一体化的模型中得以实现,中间没有规则介入,因此端到端模型在信息传递、推理计算、模型迭代上均具有显著优势。在实际驾驶中,端到端模型展现出更强大的通用障碍物理解能力、超视距导航能力、道路结构理解能力,以及更拟人的路径规划能力。高上限的 VLM 视觉语言模型VLM 视觉语言模型的算法架构由一个统一的 Transformer 模型组成,将 Prompt(提示词)文本进行 Tokenizer(分词器)编码,并将前视相机的图像和导航地图信息进行视觉信息编码,再通过图文对齐模块进行模态对齐,最终统一进行自回归推理,输出对环境的理解、驾驶决策和驾驶轨迹,传递给系统 1 辅助控制车辆。理想汽车的 VLM 视觉语言模型参数量达到 22 亿,对物理世界的复杂交通环境具有强大的理解能力,即使面对首次经历的未知场景也能自如应对。VLM 模型可以识别路面平整度、光线等环境信息,提示系统 1 控制车速,确保驾驶安全舒适。VLM 模型也具备更强的导航地图理解能力,可以配合车机系统修正导航,预防驾驶时走错路线。同时,VLM 模型可以理解公交车道、潮汐车道和分时段限行等复杂的交通规则,在驾驶中作出合理决策。重建生成结合的世界模型理想汽车的世界模型结合了重建和生成两种技术路径,将真实数据通过 3DGS(3D 高斯溅射)技术进行重建,并使用生成模型补充新视角。在场景重建时,其中的动静态要素将被分离,静态环境得到重建,动态物体则进行重建和新视角生成。再经过对场景的重新渲染,形成 3D 的物理世界,其中的动态资产可以被任意编辑和调整,实现场景的部分泛化。相比重建,生成模型具有更强的泛化能力,天气、光照、车流等条件均可被自定义改变,生成符合真实规律的新场景,用于评价自动驾驶系统在各种条件下的适应能力。重建和生成两者结合所构建的场景为自动驾驶系统能力的学习和测试创造了更优秀的虚拟环境,使系统具备了高效闭环的迭代能力,确保系统的安全可靠。koa12jJid0DL9adK+CJ1DK2K393LKASDad
编辑:林莽
TOP1热点:汪顺叫潘展乐C位大帅哥
康龙化成(03759):公司为客户提供跨越药物发现、药物开发两个阶段的全流程一体化药物研究、开发及生产CRO+CMO解决方案。。
TOP2热点:副局长被曝给子女安排工作 已被双开
很多人认为聊天文件是微信占用巨大存储空间的罪魁祸首,事实上绝不仅于此。在微信使用过程中,诞生的聊天文件都会保存在用户的手机本地文件之中。
然而,根据钛媒体App梳理,上述提及的三家AI公司英矽智能、云知声和黑芝麻智能面临共性的业绩挑战:营收不高、长期大额亏损、研发降不下来、盈利和“造血”能力较差、投资人急需退出变现等。
TOP3热点:副局长被曝给子女安排工作 已被双开后营露营无增减
另一方面,茉酸奶在各社交平台进行广泛营销。小红书上有关茉酸奶的笔记超过7万,抖音上更涌现了“茉酸奶的榴莲来报恩了”等花样打卡视频。同时,茉酸奶也拿捏了消费者“薅羊毛”的心态,在李佳琦与品牌官方直播间出售优惠券。
但中炬高新明显和控股股东有着不同想法,其在7月12日回应,7月24日临时股东大会将正常召开。
TOP4热点:官方调查卫生巾过期13年改码再售S货是不是想挨C叫大
【宏观需求改善预期】CPI、PPI、PMI、社会零售等指标或处低位或在回暖,叠加政策底逐步确认,机构预测经济底将在三季度出现。
TOP5热点:四川凉山突发森林大火?谣言上边一面亲下边一面膜的注意事项
格隆汇7月13日丨招商南油(601975.SH)预计上半年归母净利润同比增长86.83%至100.66%,其中,23Q2预计实现归母净利润4.04至4.64亿元,同比增长约22.65%至40.86%。
TOP6热点:四川凉山突发森林大火?谣言宏翔小蓝视频GY2023
【本文结束】如需转载请务必注明出处:快科技
TOP7热点:普京送卡德罗夫的母亲一束鲜花TOBU8SKX
不过Melek补充称,他预计年底前银价有稳固的潜力,因为随着衰退状况开始产生影响,美联储将开始降息。
TOP8热点:四川凉山突发森林大火?谣言美国14MAY18_XXXXXL
她说,“我永远不会忘记,我们逃离时白人暴徒的暴行。我现在仿佛还能闻到烟味、看到火光,我仿佛仍能看到非洲裔的商店被烧毁,我仿佛仍能听到飞机在头顶飞过,我仿佛还能听到尖叫声……”
TOP9热点:刘亦菲裸背大片扑克牌视频不盖被子
然而,根据钛媒体App梳理,上述提及的三家AI公司英矽智能、云知声和黑芝麻智能面临共性的业绩挑战:营收不高、长期大额亏损、研发降不下来、盈利和“造血”能力较差、投资人急需退出变现等。
TOP10热点:被虐待致死女童母亲庭后发声5G天天奭5G天天运动
“首先,起诉书指控吴毅职务侵占天意影视总金额27048567.68元,而据不完全统计,天意影视以借贷担保、借贷以及制作人费用等形式实际欠吴毅49899178.45元。”程学炜表示,吴毅的“亏”就“吃”在运营过程中,将自己财产与公司财产的混同。即便是这样,也仅仅是运营管理不规范,属于法律民事调整的范畴,而根本不构成侵占等犯罪。