天天最新:HAOMO AI DAY迎来DriveGPT雪湖·海若,毫末顾维灏:将重塑汽车智能化技术路线
“DriveGPT雪湖·海若将重塑汽车智能化技术路线,面向全行业开放。毫未有信心在中国第 一个进入自动驾驶3.0时代。”在4月11日举行的第八届HAOMOAIDAY上,毫末智行CEO顾维灏在《DriveGPT雪湖·海若驱动自动驾驶3.0时代加速到来》的演讲中,重磅发布自动驾驶生成式大模型DriveGPT,中文名“雪湖·海若”,并分享了围绕大模型的应用能力,以及介绍了中国*自动驾驶数据智能体系MANA和中国自动驾驶行业*智算中心MANAOASIS雪湖·绿洲最新升级。同时,顾维灏还宣布雪湖·海若智能驾驶能力首发车型将落地在即将量产上市的新摩卡DHT-PHEV上。
(毫末智行CEO顾维灏)
重塑汽车智能化技术路线,毫末发布自动驾驶生成式大模型DriveGPT雪湖·海若
(资料图片仅供参考)
当下,AI大模型的落地应用再度引发广泛关注,而不同行业领域的从业者,也在积极探索面向各自细分行业行之有效的AI大模型。在AI自动驾驶领域,毫末是大模型研发和应用的先行者。AI DAY现场,顾维灏重磅发布自动驾驶生成式大模型DriveGPT,中文名雪湖·海若。
“海若”出自《庄子·秋水》。《庄子·秋水》中有两个神话人物河伯和北海若。河伯请教北海若,何谓大小之分,北海若教导,不因天地而觉大,不因毫末而觉小。因此,毫末把DriveGPT中文名命名为“雪湖·海若”,寓意着智慧包容、海纳百川,为行业发展贡献力量。
毫末DriveGPT雪湖·海若通过引入驾驶数据建立RLHF(人类反馈强化学习)技术,对自动驾驶认知决策模型进行持续优化。DriveGPT雪湖·海若的目标是实现端到端自动驾驶,现阶段主要用于解决自动驾驶的认知决策问题,后续持续会将毫末多个大模型的能力整合到DriveGPT雪湖·海若。目前,毫末DriveGPT雪湖·海若实现了模型架构与参数规模的升级,参数规模达到1200亿,预训练阶段引入4000万公里量产车驾驶数据,RLHF阶段引入 5万段人工精选的困难场景接管Clips。
DriveGPT雪湖·海若的底层模型采用GPT(Generative Pre-trained Transformer)生成式预训练大模型,与ChatGPT使用自然语言进行输入与输出不同,DriveGPT雪湖·海若面向自动驾驶场景,输入是感知融合后的文本序列,输出是自动驾驶场景文本序列,即将自动驾驶场景Token化,形成“Drive Language”,最终完成自车的决策规控、障碍物预测以及决策逻辑链的输出等任务。
(DriveGPT雪湖·海若的技术原理介绍)
顾维灏对DriveGPT雪湖·海若的实现过程进行了详细的解释。首先在预训练阶段通过引入量产驾驶数据,训练初始模型,再通过引入驾驶接管Clips数据完成反馈模型(Reward Model)的训练,然后再通过强化学习的方式,使用反馈模型去不断优化迭代初始模型,形成对自动驾驶认知决策模型的持续优化。同时,DriveGPT雪湖·海若还会根据输入端的提示语以及毫末CSS自动驾驶场景库的决策样本去训练模型,让模型学习推理关系,从而将完整驾驶策略拆分为自动驾驶场景的动态识别过程,完成可理解、可解释的推理逻辑链生成。
(DriveGPT雪湖·海若的实现过程)
顾维灏还在现场宣布雪湖·海若智能驾驶能力首发车型是即将量产上市的新摩卡DHT-PHEV。他表示,雪湖·海若可以逐步应用到城市NOH、捷径推荐、智能陪练以及脱困场景中。有了雪湖·海若的加持,车辆行驶会更安全,动作更人性、更丝滑,并有合理的逻辑告诉驾驶者,车辆为何选择这样的决策动作。对于普通用户来说,车辆越来越像老司机,用户对智能产品的信任感会更强,理解到车辆的行为都是可预期、可理解的。
(毫末雪湖·海若智能驾驶能力首发车型:新摩卡DHT-PHEV)
目前,毫末DriveGPT雪湖·海若已正式对行业开放,开启对限量首批客户的合作,北京交通大学计算机与信息技术学院、高通、火山引擎、华为云、京东科技、四维图新、魏牌新能源、英特尔等已经加人。DriveGPT雪湖·海若对行业提供开放服务,将促进自动驾驶的从业者和研究机构快速构建基础能力,释放创新。
当前,毫末在使用数据过程中,逐步建立起一套基于4D Clips驾驶场景识别方案,具备极高性价比。在行业上,给出正确的标注结果,一张图片需要约5元;如果使用DriveGPT雪湖·海若的场景识别服务,一张图片的价格将下降到0.5元。单帧图片整体标注成本仅相当于行业的1/10。接下来,毫末会将图像帧及4D Clips自场景识别服务逐步向行业开放使用,这将大幅降低行业使用数据的成本,提高数据质量,从而加速自动驾驶技术的快速发展。
(雪湖·海若场景识别能力对外开放,价格为行业当前水平的十分之一)
MANAOASIS升级三大能力,为DriveGPT雪湖·海若提供算力支持
云端算力对于大模型平稳落地运行不可或缺。此前,毫末已经构建了中国自动驾驶行业*的智算中心MANA OASIS(雪湖·绿洲)。活动上,顾维灏介绍,在DriveGPT雪湖·海若的算力支持方面,MANA OASIS从算力优化等层面升级了三大能力。
(MANAOASIS雪湖·绿洲)
首先,毫末与火山引擎全新搭建了“全套大模型训练保障框架”,实现了异常任务分钟级捕获和恢复能力,可以保证千卡任务连续训练数个月没有任何非正常中断,有效保证了大模型训练稳定性。
其次,将“增量式学习”推广到大模型训练,构建 DriveGPT雪湖·海若大模型学习系统。毫末研发出以真实数据回传为核心的增量学习技术,并将其推广到了大模型训练,构建了一个大模型持续学习系统,自主研发任务级弹性伸缩调度器,分钟级调度资源,集群计算资源利用率达到95%。
最后,优化关键算子,以提升数据吞吐量,提升 DriveGPT雪湖·海若大模型训练效率。MANAOASIS通过引入火山引擎提供的Lego算子库实现算子融合,端到端吞吐提升84%,满足大模型训练的效率要求。
MANA视觉感知能力持续提升,MANA架构全线升级开放赋能
毫末打造的中国*自动驾驶数据智能体系MANA,在经过一年多的应用迭代后,本次AIDAY也迎来了全面的升级。顾维灏介绍,首先,感知和认知相关大模型能力统一整合到DriveGPT雪湖·海若;其次,计算基础服务针对大模型训练在参数规模、稳定性和效率方面做了专项优化,并集成到OASIS当中;第三,增加了使用NeRF技术的数据合成服务,降低Corner Case数据的获取成本;最后,还针对多种芯片和多种车型的快速交付难题,优化了异构部署工具和车型适配工具。
此外,MANA的视觉感知能力持续提升,一方面可同时学习三维空间结构和图片纹理,并将纯视觉测距精度超过了超声波雷达,也使得BEV方案也拥有了更强的通用性和适配性;另一方面,可实现单趟和多趟纯视觉NeRF三维重建,道路场景更逼真,肉眼几乎看不出差异。通过NeRF进行场景重建后,可以编辑合成真实环境难以收集到的CornerCase。在原有的全局视角修改、添加光照/天气效果的基础上,新增合成虚拟动态物体的能力,可以在原有设定的运动轨迹上,合成各种Hard Case,模拟城市复杂交通环境,用更低成本测试提升城市NOH能力边界,更好提升应对城市复杂交通环境。
(MANA视觉感知能力进展)
值得一提的是,面对目前行业里最难的视觉任务之一——单目视觉测量,继特斯拉后,毫末也在中国率先开始验证能否使用鱼眼相机代替超声波雷达进行测距,以满足泊车要求。毫末把视觉BEV感知框架引入到了车端鱼眼相机,做到了在15米范围内达到30cm的测量精度,2米内精度高于10cm的视觉精度效果。泊车场景使用纯视觉测距来取代超声波雷达,将进一步降低整体智驾成本。
(毫末纯视觉测距精度可以使用鱼眼相机取代超声波雷达)
在演讲最后,顾维灏表达了毫末人的技术信仰,“毫末成立到现在接近三年半时间……毫末对技术的坚定投入始终未变。毫末人始终热爱技术,枕戈待旦,全力冲刺。再难,都不会放弃。所爱隔山海,山海皆可平。技术必将改变世界!”
标签:
您可能也感兴趣:
为您推荐
军队抽组医疗力量承担 武汉火神山医院医疗救治任务
同马来西亚总理马哈蒂尔通电话 创造更多合作成果,造福两国和两国人民。
构筑起疫情防控的严密防线
排行
- 腾龙股份股东王柳芳减持302.01万股 价格区间为14.81-15.90元/股
- 因个人资金需要 新泉股份实际控制人唐志华拟减持不超1124.54万股
- 信捷电气股东邹骏宇减持50万股 价格区间为60.41-67.50元/股
- 国家卫健委:湖北以30个省外新增病例17例
- 因自身资金需求 科森科技股东徐宁拟减持不超3.71万股公司股份
- 中公高科股东潘玉利减持50万股 价格区间为20-20.60元/股
- 多地患者治愈后“复阳” 对疫情防控提出新挑战 五大焦点权威解析
- “精诚合作,打赢这一仗!”
- 生态环境部:自1月20日以来全国已累计处置医疗废物12.3万吨 ...
- 承诺两年扭转乱象 银保监会加快推进意外险费率市场化改革 ...
精彩推送
- 出海一年半,吸金能力仅次于 TikTok、Bigo,Weplay 是什么来头?
- 天天最新:HAOMO AI DAY迎来DriveGPT雪湖·海若,毫末顾维...
- 打造生物医药发展新引擎
- 《政企面面观》预告 | 民营企业有必要建立现代企业制度吗?
- 环球快看点丨海南自贸港为大湾区带来新机遇
- 消息!昌江区:加速回暖 消费市场“春暖花开”
- 焦点滚动:3月新增人民币贷款、社融创历史同期新高,住户贷款...
- 速看:预制菜成小龙虾千亿市场破局关键
- 聚焦消费机遇、变化与趋势:南财集团联合主办女性时尚消费论坛
- 谁是“应变”高手?|2023中国消费品牌增长力大调查报名启动
- 环球关注:三大医药龙头,联手投了杭州资本
- 考研调剂复试要3分钟内确认?高校回应
- 速看:世界银行行长:预计今年中国GDP增速超5%
- 当前播报:集聚董明珠等近100位商业领袖2023木兰年会向你发出邀请
- 环球即时:深圳信用(征信)服务平台助企融资突破1000亿元
- 热点在线丨中国贸促会研究院副院长:北京建设国际消费中心城...
- 2023年3月中国动力电池产销情况:磷酸铁锂电池销量同比增长98...
- 每日消息!M2已281.46万亿元,暴涨12.7%!大通胀,啥时来临?
- 资讯:中国贸促会研究院副院长:北京建国际消费中心城市要抓...
- (数说中国·首季经济形势)10.6万亿元!一季度我国新增人民...
- 刘元春:把握全新历史阶段,从长期视角总结和反思|速递
- 热讯:江西南丰:“三字诀”助推 民营经济“两个健康”
- 环球百事通!快讯|央行:一季度人民币存款增加15.39万亿元,...
- 全球连线|世行行长:预计今年中国GDP增速超过5%
- 【独家】CPI已偏离“黄金区间”,货币政策如何操作?
- 环球精选!甲鱼预制菜走俏餐桌
- 每日观察!科技兴农,大疆农业今年预计培训4万名植保无人机飞手
- 又一场万亿盛宴——储能-世界速看
- 元宇宙地产崩塌,下一个是GPT
- 酒吧界蜜雪冰城,难进县城_全球今日讯
- 天天观天下!调研显示:就业“35岁门槛”,这些行业是重灾区
- 降息,或已箭在弦上?
- 一季度我国人民币贷款增加10.6万亿元 同比创新高
- 南财快评:CPI数据显示生产生活持续恢复-焦点热讯
- 近期经济运行亮点 | 重庆集中开工354个重大项目 总投资319...
- 能聊天、会学习,远不是GPT的终局 全球通讯
- 世界动态:「头腾大战」落幕,Ta依旧头疼
- 全球今日报丨消费零售「第 一股们」失去未来
- 天天通讯!4月11日浦发银行外汇牌价一览 今日人民币购美元价...
- 浙商银行外汇牌价一览 4月11日人民币对美元汇率多少?
- 大超预期!中国3月社会融资规模5.38万亿元,M2货币供应同比12.7%
- 环球最新:自动驾驶落地难,是技术问题还是路线错误
- 华夏银行外汇牌价2023年4月11日 今日港币汇率高吗?
- 英镑卖出价哪家银行高?各大银行卖出价排行榜2023.04_全球播报
- 全世界哪个国家的打工人最累
- 天天快资讯:新加坡元今日卖出价哪家高?今日新加坡元牌价一...
- 环球热讯:聊聊天就能玩转Excel?深圳学生团队开发出AI“职场...
- 个性化分期是每个人的权利吗? 信用卡逾期不还后果多严重?
- 超过60岁还能申请停息挂账吗?停息挂账有办理条件吗?
- 网贷延期的含义是什么?网贷延期怎么在线办理?
- 什么是房贷延期还款?房贷延期必须去柜台办理吗?
- 停息挂账会省下哪些钱?停息挂账必须去柜台办理吗?
- 房贷延期还款好不好办?房贷延期怎么线上办理?
- 什么叫做个性化分期?个性化分期不去银行可以办吗?
- 停息挂账要怎么跟银行协商?停息挂账被拒绝后还能办吗?
- 哪些平台支持网贷延期?网贷延期被平台拒绝了怎么办?
- 哪些银行支持停息挂账?银行拒绝信用卡停息挂账怎么办?
- 风向变了!为了解决就业,为了让老百姓掏钱消费,国家又出手...
- 中汽协:3月新能源车销量同比增34.8%-环球今日报
- 赵岩林:打造商务消费新地标,丰台吹响消费倍速追赶“冲锋号”
- 莫把压力越搞越大了
- 温彬等:食品、能源价格双双下探,促内需政策仍须发力-微头条
- 享刻智能获4000万天使轮融资,真格基金、中关村智友科学家基...
- 焦点速读:阿里云未来将开放通义千问,为每家企业打造专属大模型
- 苦情戏主播又作妖了:叫一声「爹」,骗尽老人心血
- 深圳社区党建故事|“渔”民所愿 老百姓在“家”能话事 ...
- 企业微信,七年之「痒」 关注
- 网红店们该怎么活下去?
- 「配角」们想抓住这个春天-天天报资讯
- 报告:今年有望呈现“前升后稳” 经济复苏将支撑A股
- 安徽1-3月一般公共预算收入完成1189亿元_世界即时看
- 天天看热讯:关注丨提升快递效率激发农村消费潜力
- 中汽协:中国3月份汽车销量245.1万辆,同比增长9.7%|当前简讯
- “宝宝类”基金收益重回“2时代”_环球关注
- 天天热头条丨一年来首次!3月居民消费价格降至1%以下 后续走...
- 统计局:常州市民营经济实现高质量开局
- 香港GDP增长预测被上调至3.6%,专家称仍面临不确定因素和挑战
- 世界热资讯!佛山投资促进局崔伟国:大城配套、小城成本,五...
- 我国算力总规模全球第二,年增长率近30%
- 被华为公开拒绝合营后,东方材料21亿元股权收购案何去何从?...
- 咖啡卷到现在,他们开始往里面掺北京豆汁了
- 天天资讯:Keep卖货,生意难做
- 这届VC,投AI大模型「望而生畏」
- CPI同比涨幅跌破“1”,PPI同比下降,下阶段走势如何?丨火线解读
- 一季度乘用车零售量同比下滑13.4%:稳定汽车消费仍需政策引导...
- 安永发布《消费零售洞察2023之“她经济”》报告-环球百事通
- 当前快报:皮灵:看好数字经济长期的投资机会丨就市论市
- 环球资讯:明明:食品价格低位运行成为拖累CPI主因 政策合力...
- 世界视点!泽维生物完成千万元天使轮融资,誉明创投联合投资
- 美国Biotech出现A轮融资悬崖,国内情况如何? 全球快消息
- 王小川投身大模型,思路是什么?他会怎么做? 天天动态
- 超充,新能源汽车的下一个突破口?|世界快资讯
- 虚拟地产只剩「烂尾楼」,林俊杰也成受害者?
- 传承启元“农家乐基地”开园,前100名购房业主可免费领取一块...
- 权威发布!安庆最新人口数据|今日要闻
- 天天微速讯:陈家强指香港今年经济难以快速增长
- 天天速读:中法经贸合作加速 法企看好中国市场发展机遇
- 大麻烦!大通缩,来了
- 实时:广东省商务厅外商投资促进处张萍:大湾区是广东发展的...
- 2023年3月份居民消费价格同比上涨0.7%,环比下降0.3%
今日要闻
- 《政企面面观》预告 | 民营企业有必要建立现代企业制度吗?
- 环球快看点丨海南自贸港为大湾区带来新机遇
- 消息!昌江区:加速回暖 消费市场“春暖花开”
- 焦点滚动:3月新增人民币贷款、社融创历史同期新高,住户贷款回暖明显
- 聚焦消费机遇、变化与趋势:南财集团联合主办女性时尚消费论坛
- 热点在线丨中国贸促会研究院副院长:北京建设国际消费中心城市有三大机遇
- 2023年3月中国动力电池产销情况:磷酸铁锂电池销量同比增长98.5%|播报
- 每日消息!M2已281.46万亿元,暴涨12.7%!大通胀,啥时来临?
- 资讯:中国贸促会研究院副院长:北京建国际消费中心城市要抓准三个要素
- (数说中国·首季经济形势)10.6万亿元!一季度我国新增人民币贷款同比创新高_当前速看