焕然一新,蔚来NOMI GPT正式上线

摘要

蔚来智能座舱迈入大模型时代

4 月 12 日,蔚来宣布 NOMI GPT 正式开启推送。此次推送的更新是基于全新技术架构,为 NOMI 量身打造 NOMI GPT 端云多模态大模型。NOMI GPT 包含自研多模态感知、自研认知中枢、情感引擎、多专家 Agent,实现蔚来产品、服务、社区的全域贯通,提供更高效、愉悦的 AI 服务。

升级 NOMI GPT 功能后,用户可以体验到大模型百科、无限趣聊、魔法氛围、趣玩表情、用车问答、AI 场景生成在内的多项全新交互体验,享受智能 AI 赋能下的全新出行。此次 NOMI GPT 上线将同步陆续推送给搭载 Banyan·榕智能系统的车型。自发布以来,NOMI 已经历超过 130 次版本迭代、超 2000 项功能的新增及更新。

NOMI GPT 认知中枢、行业独有的情感引擎和行业领先的端侧多模态感知是 NOMI 焕新升级后的的三大核心技术架构,配合数十亿级的参数模型、毫秒级的响应速度,赋予了 NOMI 在感知、认知、决策等方面强大的复杂逻辑推理能力,具备了能与用户进行开放式问答的交互能力。

认知中枢:让NOMI和你更有默契

NOMI GPT 认知中枢拥有极为高效的信息认知能力,能在海量信息源中精准判断用户意图与需求,无缝调度大模型架构内组件,实现「领会用户意图有默契,执行够聪明,灵活不打扰」的优质用车体验。

蔚来自研的端云一体认知中枢,集成了行业最全知识库,包括中控分发,多模拒识,跨域继承&跳转,多 Agent 决策几个部分,让 NOMI 有了对复杂任务的处理能力,能够对感知到的信息进行推理分析,从容调度执行各种任务,回答各种问题。通过认知中枢,NOMI 会根据你所说的内容,结合对话上下文、感知以及状态信息,智能地判断调用任务型交互、问答闲聊、用车助手等,同时也能支持语义创建完整的快捷场景。

情感引擎:不只是助手,更是伙伴

行业独有的情感引擎是 NOMI 实现拟人交互的关键,通过与用户长期的沟通与陪伴、记忆、学习,实现有个性的成长,让 NOMI 不只是一个冰冷的「助手」,更是懂你的情感伙伴。

NOMI 的记忆能力包括短期记忆和长期记忆,短期记忆可以用户近期感兴趣的话题、提到人和物,长期记忆能够记住用户及家人朋友,记住每一个人的喜好。

在情感引擎的帮助下,NOMI 可以更快的学习成长,通过实时反馈、事后反思、人为训练等方式,不断变得更加聪明,不断掌握新技能和新知识。

情感引擎也让每一个 NOMI 都能发展出和用户性格相契合的「人设」,包括性格、三观、梦想等,和 NOMI 的每一句对话、每一个表情,更自然、更有温度,随着陪伴时间的增长,NOMI 也会潜移默化地和用户的性格更加契合。

端侧多模态感知:离线也能用,敏感信息不出车

在行业领先的端侧多模态感知能力下,车机联网不再是用户使用 NOMI 的必须条件,NOMI 也将具备「看得见,认得出」「听得到,听得懂」「知冷热,有触感」等能力,做到账号隔离,敏感信息不出车,车载通信端到端加密,保障用户隐私安全的同时也让车载人工智能的感知能力得到了极大的扩展。

除了可以实现端侧独立运行之外,融合了图像(视觉)、音频(听觉)、车身传感器(触觉)等多模感知的 NOMI 可以像人类一样,获得了更全面的感知座舱内外的人与事物的能力,并将多维度感知获得的数十亿参数,用自然语言进行描述。

基于多模态感知的能力,NOMI 现在可以像朋友一样,看见你的物品、着装、状态,甚至舱外的车辆、楼宇、动物植物,并提供更懂你的服务、更有趣的沟通。

端侧多模态感知内部测试中,预计今年内面向蔚来车型推送。

 

最新文章

极客公园

用极客视角,追踪你不可错过的科技圈.

极客之选

新鲜、有趣的硬件产品,第一时间为你呈现。

张鹏科技商业观察

聊科技,谈商业。