车载信息服务产业应用联盟
自2023年5月讯飞星火认知大模型发布以来,科大讯飞积极推进大模型在汽车领域的应用落地。通过大模型在汽车智能座舱和智能驾驶中的应用,致力于让人车交互更自由,让自动驾驶更可靠。就在2024年6月27日,科大讯飞在北京国家会议中心发布了讯飞星火V4.0。本次升级后,讯飞星火全面对标ChatGPT 4 Turbo,在8个国际主流测试集中排名第一,在国内大模型中全面领先。
作为车联(TIAA)第53次全国工作会议的联合主办单位,科大讯飞将在会上带来更详尽的分享。
星火大模型助力“中式”智能座舱走向世界
自新能源汽车国家战略实施以来,汽车智能化一直都是中国汽车的优势项目,其中又以科大讯飞为代表的智能语音技术最为显著。自2011年科大讯飞率先完成汽车语音国产化以来,车载语音已经成为中国汽车市场的标准配置。但在广大的海外市场,受制于单一语种市场规模的制约,智能语音服务渗透率的差距仍然很大。
科大讯飞面向万物互联时代,星火语音大模型再突破,发布72个语种/方言免切换对话,破解强干扰场景下语音识别难题,发布国际领先的极复杂场景语音转写,并通过云边端及软硬一体化解决方案,为汽车智能座舱,开辟出了更广阔的天地。
搭载了科大讯飞智能座舱的新款奇瑞星纪元ET,可以实现包括东北话、天津话、英语、俄语在内的语音助理免切换交互。以奇瑞为代表的中国汽车出海军团,以领先的新能源与智能化技术,在多个国家市场取得了亮眼的成绩。去年中国汽车出海销量超过520万台,首次跃居世界第一。如今依托讯飞星火大模型,科大讯飞将有能力为全球更多国家的更多车主,送去中国本土级别的汽车智能体验;助力包括奇瑞、上汽、广汽、长城、长安、比亚迪等在内的中国汽车出海品牌,进一步实现品牌向上。
星火座舱再升级,多模态创造新场景
随着ChatGPT-4o的发布,多模态能力成为大模型热点概念。多模态模型结合了文本、图像、声音等多种数据类型的处理能力。
相较于传统的语音输入、提问闲聊,多模态能力极大地扩展了大模型的应用边界。“能听会看”的大模型,认知能力从“拟人”上升到“类人”,加入到智能座舱场景中,犹如为汽车加上了一个看不见的“随行全能助理”。
比如随着新能源智能汽车的加速普及,越来越多的车主感到过去在驾校里学到的知识“不够用”了;一度还曾有新能源车企高管提出“要与驾校合作,让大家了解新型汽车的使用方法”的争议言论。针对这一问题,科大讯飞研发了基于星火大模型的用车助手:不同于传统的操作手册,用车助手能够实时监测理解车辆状况,根据当下的路况车况,精准解答用户对用车的问题。例如在不同的路况下,帮助用户开启自动驾驶辅助;在不同的天气下,引导用户正确使用车灯;根据实时车况,精准给出维修保养建议等。
多模态能力也为车上的硬件开辟了全新的应用空间。传统的DMS主要用于监测驾驶员疲劳状况,在大模型的赋能下,视觉判断能够高精度获取包括心跳、呼吸、血压在内的多项身体健康指标,在用户无感的状态下长期记录跟踪。讯飞星火健康专家在此基础上联动讯飞医疗资源,为车主提供30种以上健康问题的监测诊断,守护车主安全出行。
硬核科技助力,芯算融合让域控更强劲
在大模型、多场景不断创造新体验的背后,是汽车智能座舱对算力需求的不断升级:为了支持越来越多的智能化功能应用、支撑多模态融合趋势,车内的AI算法日益丰富,传统座舱SOC都将面临CPU算力不足的窘境。相较于PC/手机行业硬件更迭的频率,汽车产品陪伴用户的生命周期要长久得多,也更需要我们通过算法的精研,在存量成熟平台上为用户最大限度榨取出SOC性能价值。
科大讯飞作为国内领先的智能座舱全域解决方案提供商,充分发挥自身技术优势,将智能汽车算法与智能汽车芯片深度融合部署,支撑多模态融合交互应用,实现高效推理、高效移植、高效调试。
以讯飞最具代表性的语音算法为例,通过异构将语音降噪、唤醒、识别、合成从CPU移植到NPU后,能够降低60%的CPU算力需求。而通过在资源富裕的NPU上部署更大模型,能够在本地实现媲美云端的语音识别效果。这就是红旗EH7、蔚来ES8等一批新款车型上,语音识别又快又准背后的技术秘密。
而在更火热的大模型领域,通过端云协同部署方案,在云端利用大模型实现多轮贯穿、流式对话、全领域规划、可控对话、多领域知识深度理解的同时,在本地部署十亿级别参数的端侧模型,用于增强本地语义理解能力,不仅能够明显优化响应时间,还能够有效保障极速、离线、多模、隐私安全类业务闭环体验。端云协同部署方案下,星火大模型能够在98%以上的云端意图分类准确率下,将本地大模型语义增强提升40%,响应速度降低500ms。奇瑞星途星纪元、广汽埃安、长城魏牌都已选择星火端云部署方案,提升车载大模型性能。
芯算融合对汽车芯片的国产替代也有着重大意义。在当前贸易摩擦的宏观经济背景下,中国车企面临外资芯片供应链风险,中国国产车载芯片迎来市场替代的关键机遇。通过算法与芯片的深度融合,可以极大优化系统的终端表现,弥补当前自主产品与国际领先竞品在设计性能、制程工艺上的差距。为中国车企选择国产替代方案提振信心,为消费者带去更具性价比的终端车型!
在科大讯飞看来,人工智能的发展应用,不仅仅是烈火烹油的技术竞争,还是长坡厚雪的应用坚守。科大讯飞始终秉持成就客户的企业价值观,运用最新研究成果,覆盖真实场景需求,始终和中国汽车企业站在一起,以科技普惠的愿景,为中国乃至世界提供美好的出行体验。
车联(TIAA)第53次全国工作会议将于7月4日在厦门召开,会议围绕AI赋能汽车全域感知、交互理解、自动驾驶、智能座舱四个重点领域等相关内容开展议题交流,发布汽车领域团体标准成果等内容,组建建立车联(TIAA)人工智能工作组,召开智慧视窗、人工智能、毫米波雷达等TIAA工作组会议。
报名请扫描下方二维码。