小冰AI产品支持OEM打造多模态情感交互体验|每日看点

小冰人工智能技术框架包括全栈自研的开放域情感交互、大语言模型、深度神经网络渲染、AI内容生成等人工智能技术，在小冰框架的驱动下，可以为智能座舱提供对话、Avatar、AIGC等能力。

胡伟表示，当前座舱交互面临着缺乏情感互动、不具备创造能力以及交互方式单一的挑战。小冰座舱从情感、个性、知识三方面助力OEM打造拟人化的座舱交互体验，基于情感框架打造有温度的AI出行伙伴。通过可自定义大模型角色聊天、AI艺术创造力平台、3D数字人产品、超轻量数字分身等等，助力车企卖车、造车和用车的全流程。

胡伟｜小冰智能座舱负责人

(资料图)

小冰源于微软亚洲工程院，2020从微软完整分拆，专注于做AI相关内容，近两年完成了两轮融资。随着AI产业的快速发展，小冰作为初创AI公司，一直在快速迭代自己的技术和产品。

小冰在国内的团队包括三个主要office，总部设在北京，在苏州和上海分别设有研发中心以及商业化运营中心，在日本东京还设有负责日语聊天助手相关产品和运营的团队。

小冰人工智能框架是小冰一直在持续维护迭代升级的一套技术架构，历经了数年更新，从最开始的对话式人工智能技术，一直到多模态交互数字人，小冰在原有技术升级的基础上也持续引入新能力。基于这些技术，孵化出了小冰的主要的几条产品线，第一是智能对话引擎，第二是AI内容生成引擎，第三是数字人驱动引擎。

图源：嘉宾演讲材料

小冰这两年和头部车厂及手机厂都进行了深入合作，包括在他们的产品中使用小冰的聊天助手功能，以及AI生成服务。

在汽车行业，小冰和广汽、蔚来、长城都有具体量产项目的合作。小冰在广汽传祺和埃安上都分别打造了具备品牌个性的交互虚拟人；为蔚来Nomi语音助手提供了情感聊天能力，让Nomi具备了认知和情感交互能力；为长城旗下多车型都提供了情感对话服务产品来支撑汽车语音助手，实现智能交互。

小冰智能座舱助力汽车智能化发展

智能座舱当前普遍存在的痛点就是缺乏情感互动，不具备创造能力，以及交互方式单一。

小冰希望通过产品和技术支持车厂以及合作伙伴在情感聊天、AI创作和数字人交互共同探讨，解决这些行业痛点。

小冰的产品方案立足于助力OEM打造拟人化的座舱交互体验。拟人化主要会体现在三个特点上，首先是情感，包括情感化聊天、多轮交互情绪识别；其次是个性，满足个性化话题引导、个性化聊天、用户真人3D数字人，品牌个性化定制；最后是知识，包括知识增强型聊天、AI创作图画、AI创作音乐、AI创作诗歌等等。

小冰智能座舱的三个产品线，第一个是情感陪伴产品，也就是情感对话服务，区别于传统的指令式交互，基于小冰AI框架打造的语音助手具备共感的能力，能够主动发起话题，引导用户聊天；基于小冰在对话中得到的对用户的理解以及画像的挖掘，能够根据用户偏好实现主动交互。小冰对话产品具有高性价比生成式聊天能力，包括人设问答、话题聊天、定制对话、互动技能、儿童模式、回复干预等，进行深度交互，现在这些能力已经在多个量产车型上实现搭载。

今年小冰也基于大模型，推出了最新的角色聊天产品，具有非常强大的上下文理解能力，在这个模型里沉淀了非常丰富的中文相关文化知识、背景知识等等，核心功能是创建具备设定方向和专业知识的角色，让角色具有鲜明的特色和灵魂，让用户有沉浸式聊天体验。角色创作也包含文学作品角色。历史名人以及虚拟身份等等，并且基于小冰非常简单易操作的角色定义平台来完成这些设定。我们将这个模型和市场上领先的大模型在聊天能力上进行了对比测试，在合理性、信息量和参与度这些维度上都表现出了明显的领先性。

大模型聊天产品既可以作为单独的应用来提供沉浸式且具有趣味性的角色聊天，可以作为一种服务方式被其他应用来集成。现在小冰也在跟一些合作伙伴在其他社交类应用里集成了这种能力。角色聊天产品的演进路线首先是扩展到更多的角色，根据不同的时空、的属性、行业来定义不同的角色；下一步是支持用户自定义角色，让c端用户来进行角色风格自定义，包括性格、背景和话术风格等，比如说车主设定自己家小孩类似风格的聊天角色，来进行车内语音聊天；再向后，可以融合自定义数字人（PTA）+复刻TTS的能力，实现个性化交互体验从对话风格、到虚拟形象、到定制化TTS声音的全闭环。

小冰的第二条产品线就是AI艺术创造力平台，小冰经过了多年的积累，完成了全球领先的内容生成模型，包括绘画、音乐、作诗等方面的创作能力。例如小冰在绘画领域，通过对过往400年艺术史上236位著名人类画家画作的学习，可以创造出多种绘画风格和作品；在作诗方面，小冰模型也经历了持续的迭代升级，比如在现代诗这一品类上，小冰累积了从1920年开始共519位现代诗人的全部作品。而且，小冰诗人出版了两本由AI创作诗集。

基于AI的创造能力，可以极大的丰富和提升车内运营能力，还可以采用丰富的多样化运营手段来提升品牌影响力，降低成本，同时规避创作版权等问题。小冰现在也和很多车厂在探讨未来产品规划里AI创作落地的场景。比如把AI创作能力引入交互里，增加用户交互的趣味性，通过AI生成不同风格的祝福卡片、旅行明信片、汽车周边产品设计、车机壁纸、歌曲封面及座舱氛围音乐的生成等等。

小冰智能座舱的第三条产品线就是数字人产品，基于小冰的数字人驱动引擎，在车里面提供3D数字人形象，小冰可以在端上对接整个驱动算法，包括车上的语音、场景事件，以及车上的应用状态，集成到数字人交互里，让数字人真正成为座舱交互的焦点之一，同时还要满足不同品牌及不同车型、座舱配置需求。

小冰基于此的超轻量数字分身可以基于单图，也就是自己的一张照片，就能生成一个自己形象的数字人，通过5-10分钟录入10段话，还可以生成自己的声音。也通过增加艺术风格的模型处理，来更换自己的风格。

总结

图源：嘉宾演讲材料

无论是打造智能座舱，还是运营能力和方案，小冰都能够支持OEM在营销领域的内容，比如提供官网或APP端的营销数字人、展厅数字销售员，以及通过大模型来生成营销文案等等能力，所以我们希望，通过小冰能够为车厂在造好车、卖好车、用好车全环节提供助力。

（以上内容来自小冰智能座舱负责人胡伟2023年5月19日在2023中国（重庆）汽车元宇宙高峰论坛发表的《小冰AI产品支持OEM打造多模态情感交互体验》主题演讲。）

关键词：