第八届HAOMO AI DAY:发布自动驾驶生成式大模型DriveGPT雪湖·海若
淘宝搜:【天降红包222】领超级红包,京东搜:【天降红包222】
淘宝互助,淘宝双11微信互助群关注公众号 【淘姐妹】
“DriveGPT雪湖・海若将重塑汽车智能化技术路线,面向全行业开放。毫末有信心在中国第一个进入自动驾驶3.0时代。”
在4月11日举行的第八届HAOMO AI DAY上,毫末智行CEO顾维灏在《DriveGPT雪湖・海若驱动自动驾驶3.0时代加速到来》的演讲中,重磅发布自动驾驶生成式大模型DriveGPT,中文名“雪湖・海若”,并分享了围绕大模型的应用能力,以及介绍了中国首个自动驾驶数据智能体系MANA和中国自动驾驶行业最大智算中心MANA OASIS雪湖・绿洲最新升级。同时,顾维灏还宣布雪湖・海若智能驾驶能力首发车型将落地在即将量产上市的新摩卡DHT-PHEV上。
毫末智行CEO顾维灏
1
重塑汽车智能化技术路线,毫末发布自动驾驶生成式大模型DriveGPT雪湖・海若
当下,AI大模型的落地应用再度引发广泛关注,而不同行业领域的从业者,也在积极探索面向各自细分行业行之有效的AI大模型。在AI自动驾驶领域,毫末是大模型研发和应用的先行者。AI DAY现场,顾维灏重磅发布自动驾驶生成式大模型DriveGPT,中文名雪湖・海若。
毫末自动驾驶生成式大模型毫末DriveGPT
中文名“雪湖・海若”
“海若”出自《庄子・秋水》。《庄子・秋水》中有两个神话人物河伯和北海若。河伯请教北海若,何谓大小之分,北海若教导,不因天地而觉大,不因毫末而觉小。因此,毫末把DriveGPT中文名命名为“雪湖・海若”,寓意着智慧包容、海纳百川,为行业发展贡献力量。
毫末DriveGPT雪湖・海若通过引入驾驶数据建立RLHF(人类反馈强化学习)技术,对自动驾驶认知决策模型进行持续优化。DriveGPT雪湖・海若的目标是实现端到端自动驾驶,现阶段主要用于解决自动驾驶的认知决策问题,后续持续会将毫末多个大模型的能力整合到DriveGPT雪湖・海若。目前,毫末DriveGPT雪湖・海若实现了模型架构与参数规模的升级,参数规模达到1200亿,预训练阶段引入4000万公里量产车驾驶数据,RLHF阶段引入5万段人工精选的困难场景接管Clips。
DriveGPT雪湖・海若的底层模型采用GPT(Generati【【微信】】rmer)生成式预训练大模型,与ChatGPT使用自然语言进行输入与输出不同,DriveGPT雪湖・海若面向自动驾驶场景,输入是感知融合后的文本序列,输出是自动驾驶场景文本序列,即将自动驾驶场景Token化,形成“Dri【【微信】】”,最终完成自车的决策规控、障碍物预测以及决策逻辑链的输出等任务。
DriveGPT雪湖・海若的技术原理介绍
顾维灏对DriveGPT雪湖・海若的实现过程进行了详细的解释。首先在预训练阶段通过引入量产驾驶数据,训练初始模型,再通过引入驾驶接管Clips数据完成反馈模型(Reward Model)的训练,然后再通过强化学习的方式,使用反馈模型去不断优化迭代初始模型,形成对自动驾驶认知决策模型的持续优化。同时,DriveGPT雪湖・海若还会根据输入端的提示语以及毫末CSS自动驾驶场景库的决策样本去训练模型,让模型学习推理关系,从而将完整驾驶策略拆分为自动驾驶场景的动态识别过程,完成可理解、可解释的推理逻辑链生成。
DriveGPT雪湖・海若的实现过程
顾维灏还在现场宣布雪湖・海若智能驾驶能力首发车型是即将量产上市的新摩卡DHT-PHEV。他表示,雪湖・海若可以逐步应用到城市NOH、捷径推荐、智能陪练以及脱困场景中。有了雪湖・海若的加持,车辆行驶会更安全,动作更人性、更丝滑,并有合理的逻辑告诉驾驶者,车辆为何选择这样的决策动作。对于普通用户来说,车辆越来越像老司机,用户对智能产品的信任感会更强,理解到车辆的行为都是可预期、可理解的。
毫末雪湖・海若智能驾驶能力首发车型
新摩卡DHT-PHEV
目前,毫末DriveGPT雪湖・海若已正式对行业开放,开启对限量首批客户的合作,北京交通大学计算机与信息技术学院、高通、火山引擎、华为云、京东科技、四维图新、魏牌新能源、英特尔等已经加人。DriveGPT雪湖・海若对行业提供开放服务,将促进自动驾驶的从业者和研究机构快速构建基础能力,释放创新。
毫末自动驾驶生成式大模型雪湖・海若对行业开放
当前,毫末在使用数据过程中,逐步建立起一套基于4D Clips驾驶场景识别方案,具备极高性价比。在行业上,给出正确的标注结果,一张图片需要约5元;如果使用DriveGPT雪湖・海若的场景识别服务,一张图片的价格将下降到0.5元。单帧图片整体标注成本仅相当于行业的1/10。接下来,毫末会将图像帧及4D Clips自场景识别服务逐步向行业开放使用,这将大幅降低行业使用数据的成本,提高数据质量,从而加速自动驾驶技术的快速发展。
雪湖・海若场景识别能力对外开放
价格为行业当前水平的十分之一
2
MANA OASIS升级三大能力,为DriveGPT雪湖・海若提供算力支持
云端算力对于大模型平稳落地运行不可或缺。此前,毫末已经构建了中国自动驾驶行业最大的智算中心MANA OASIS(雪湖・绿洲)。活动上,顾维灏介绍,在DriveGPT雪湖・海若的算力支持方面,MANA OASIS从算力优化等层面升级了三大能力。
MANA OASIS雪湖・绿洲
首先,毫末与火山引擎全新搭建了“全套大模型训练保障框架”,实现了异常任务分钟级捕获和恢复能力,可以保证千卡任务连续训练数个月没有任何非正常中断,有效保证了大模型训练稳定性。
其次,将“增量式学习”推广到大模型训练,构建DriveGPT雪湖・海若大模型学习系统。毫末研发出以真实数据回传为核心的增量学习技术,并将其推广到了大模型训练,构建了一个大模型持续学习系统,自主研发任务级弹性伸缩调度器,分钟级调度资源,集群计算资源利用率达到95%。
最后,优化关键算子,以提升数据吞吐量,提升DriveGPT雪湖・海若大模型训练效率。MANA OASIS通过引入火山引擎提供的Lego算子库实现算子融合,端到端吞吐提升84%,满足大模型训练的效率要求。
3
MANA视觉感知能力持续提升,MANA架构全线升级开放赋能
毫末打造的中国首个自动驾驶数据智能体系MANA,在经过一年多的应用迭代后,本次AI DAY也迎来了全面的升级。顾维灏介绍,首先,感知和认知相关大模型能力统一整合到DriveGPT雪湖・海若;其次,计算基础服务针对大模型训练在参数规模、稳定性和效率方面做了专项优化,并集成到OASIS当中;第三,增加了使用NeRF技术的数据合成服务,降低Corner Case数据的获取成本;最后,还针对多种芯片和多种车型的快速交付难题,优化了异构部署工具和车型适配工具。
中国首个自动驾驶数据智能体系
MANA全面升级开放赋能
此外,MANA的视觉感知能力持续提升,一方面可同时学习三维空间结构和图片纹理,并将纯视觉测距精度超过了超声波雷达,也使得BEV方案也拥有了更强的通用性和适配性;另一方面,可实现单趟和多趟纯视觉NeRF三维重建,道路场景更逼真,肉眼几乎看不出差异。通过NeRF进行场景重建后,可以编辑合成真实环境难以收集到的Corner Case。在原有的全局视角修改、添加光照/天气效果的基础上,新增合成虚拟动态物体的能力,可以在原有设定的运动轨迹上,合成各种Hard Case,模拟城市复杂交通环境,用更低成本测试提升城市NOH能力边界,更好提升应对城市复杂交通环境。
MANA视觉感知能力进展
值得一提的是,面对目前行业里最难的视觉任务之一――单目视觉测量,继特斯拉后,毫末也在中国率先开始验证能否使用鱼眼相机代替超声波雷达进行测距,以满足泊车要求。毫末把视觉BEV感知框架引入到了车端鱼眼相机,做到了在15米范围内达到30cm的测量精度,2米内精度高于10cm的视觉精度效果。泊车场景使用纯视觉测距来取代超声波雷达,将进一步降低整体智驾成本。
毫末纯视觉测距精度
可以使用鱼眼相机取代超声波雷达
在演讲最后,顾维灏表达了毫末人的技术信仰:
“毫末成立到现在接近三年半时间……毫末对技术的坚定投入始终未变。毫末人始终热爱技术,枕戈待旦,全力冲刺。再难,都不会放弃。所爱隔山海,山海皆可平。技术必将改变世界!”
英文邮件 快速确认一个问题 英语邮件如何写请查看附件
近日,不管你是普通账号还是 plus 账号,都会面临被封的风险,大家不要慌,下面紧急启动了一个解封攻略,帮助大家快速解封!
告诉官方这是误会,第一时间找到并且奉上给力的教程。把邮箱账号和姓名复制到中英文模板
登录其他的邮箱,利用这个邮箱发送横板到需要申诉的邮箱
邮箱: support (支持) 【【网址】】
主题: 紧急呼吁解禁帐户:未经授权访问和滥用我的 ChatGPT 帐户亲爱的 ChatGPT 支持团队,我希望你能收到这封电子邮件。我的名字是(你的邮箱名字),我写信是希望取消对我的 ChatGPT 帐户(用户名:[你的邮箱名字])的禁令,我认为我的帐户因可疑活动而被错误标记和禁止,我怀疑这是未经授权访问和滥用的结果。我最近发现我的帐户遭到入侵,我有理由相信它在我不知情或未同意的情况下被其他人访问和滥用。我对这可能给 ChatGPT 社区造成的任何不便或中断深表歉意,并向您保证我没有参与导致禁令的活动。为解决此问题并恢复我的帐户,我已采取必要步骤通过更改密码和启用双因素身份验证来保护我的帐户。我恳请您调查我的帐户以核实我的说法并考虑解除禁令。我一直重视并尊重 ChatGPT 社区准则,并努力保持积极和建设性的存在。我理解为所有用户维护一个安全和愉快的环境的重要性,并对这种情况可能造成的任何麻烦深表歉意。如果我需要任何其他信息或采取任何行动以促进调查和解决此问题,请告诉我。我非常愿意配合您的任何进一步询问。感谢您的时间和考虑,我热切地等待您的回复,并希望我的帐户能尽快恢复。此致
Subject: Urgent (紧急) Appeal (上诉) for Account (帐 户) UnbanUnauthorized Access (访问) and Misuse (误用) of My ChatPT AccountDearChatGPT Support (支持) Team, Hope this email finds you well.My name (isYour Name) and am writing to appeal (提出上诉) for the remo【【微信】】 (禁令) on my ChatGPT account (帐户) (username Your Username)Ibelie【【微信】】 (帐户) hasbeen mistakenly flagged (国旗) and banned (禁止) due (由于) to suspicious (可 疑) acti【【微信】】 the resuit ofunauthorized access (访 问) and misuse (误用) . I recently (最近) discovered (发现) 【【微信】】 (帐户) was compromised (折中) and I ha【【微信】】t it was accessedand misused (误用) by someone else without my knowledge (知识) or consent (同意) .I deeply (深 深) regret (后悔) any incon【【微信】】 (不便) ordisruption this may ha【【微信】】 (引起) to the ChatGPT community (社区) and would (会) like to assure (保证) you thatIhad no partin the acti【【微信】】 (导致) to the ban (禁令) . To resolve (解决) 【【微信】】 (问题) and restore (恢复) my accountIha【【微信】】essary (必要) steps (步) to secure (确保) my accountby changing my password (密码) and enabling (启用) two-factor authentication. Kindly (慈 祥) request (请求) 【【微信】】 (探讨) myaccount to 【【微信】】 (验 证) my claims (索赔) and consider (考虑) lifting the ban (禁令) I ha【【微信】】 (价值) and respected (尊重) the ChatGPT community (社 区) 【【微信】】ived to maintain (保持) apositi【【微信】】 (建设性) presence (存在) I understand the importance (重要性) of maintaining (保持) a safe and enjoyableen【【微信】】 (用户) and sincerely (真诚) apolo【【微信】】 (麻烦) this situation (情况) may ha【【微信】】 (原因) Please let me know if there is any additional (额外) information or action (行 动) reaured from my end to faciltate the in【【微信】】 (查访) and resolution (分辨率) of 【【微信】】Iam more than willing to cooperate (合作) with any further in【【微信】】 (询价) youmay have. Thank you for your time and consideration (考虑) . Ieagerly await your response (响应) and hope 【【微信】】 (帐户) can bereinstated as soon aspossible Best regards (方面) . 一般回复都是 IP 在亚洲区域登陆,因此被封号,这时候要及时回复官方邮件 之后如果活动轨迹是在香港啊之类的,我们就开始第三步 让你确认你的活动轨迹,明确告诉官方,未曾使用过香港 P,不知道为什么会被检测到,请官方明鉴并给予解封。一次交涉需要多次发送请求,可以用 ChatGPT 帮你生成 3 封解封邮件,分时多次投递给官方邮箱,情节不严重的一般 3 次就可以顺利解封,邮件参考内容如下:
主题:我从未使用过香港的 IP 地址,请官方给予解封尊敬的客服:我发现我的 Chatapt 账户被封了,但是我向您保证,我从未使用过香港的 IP 地址。我非常确定我未曾使用过该地区的 IP 地址,并且我一直遵守着 Chatapt 的规定和要求。我非常重视我的账户和与 Chatapt 的合作,因此我希望能够得到官方的支持和帮助,以解决这个问题。我需要官方对账户封禁的原因进行明确说明,同时也希望能够尽快解封我的账户。我相信,这个问题是可以通过有效的沟通和合作来解决的。谢谢您的耐心阅读,期待您的回复,此致敬礼
[你的邮箱] I ha【【微信】】ss from Hong Kong.Please unblock my account (帐户) as soon as possible Respected (尊重) Customer Service (服务) 【【微信】】 (发现) that my Chat GPT account (帐户) has been blockedbutIassure you that I ha【【微信】】ss from Hong Kong.Iam positive (积 极) that I ha【【微信】】ss from that region (地区) . and ha【【微信】】ules (规则) and re【【微信】】 (要求) of Chatptvalue my account andthe partnership (伙伴关系) with ChatGPT and Ihope to recei【【微信】】stance (援助) in resolving (解决) 【【微信】】 (问题) . I need an explanation (解释) from the company as to why my account (帐户) hasbeen blockedandIalso hope 【【微信】】 can be unblocked as soon as possibleIbelieve tha【【微信】】 (问题) can be resolved (解决) 【【微信】】 (有 效) communication (通信) and cooperation (合作) Thank you for your time and attention (注意) to this matterIlook forward (向前) tohearing back from you soon Sincerely (真诚) . [Your Email]二次交涉需要多次发送请求,可以用 ChatGPT 帮你生成 3 封解封邮件,分时多次投递给官方邮箱,情节不严重的一般 3 次就可以顺利解封。