“商汤日日新”大模型体系迎来全面升级

在7月7日2023世界人工智能大会（WAIC）上，商汤科技展示了“商汤日日新SenseNova”大模型体系的多方位全面升级，以及在该体系下的一系列大模型产品更新和落地成果。此外，商汤也着重介绍并展示了其大模型技术自正式发布以来与产业各方的应用实践，包括商汤绝影最新打造的智能座舱产品和车路云协同交通体系等，以及在金融、医疗、电商、移动终端、产业园区等行业生产实践中的落地应用。

大模型是指具有大量参数和复杂结构的机器学习模型。这些模型可以应用于处理大规模的数据和复杂的问题。此前火爆的ChatGPT就是自然语言方面的大模型应用。

2021年，商汤正式推出“SenseAuto绝影”智能汽车平台，包含SenseAuto Cabin绝影智能车舱、SenseAuto ADAS绝影量产智能驾驶、SenseAuto V2X绝影车路协同三个业务板块。而如今，它们也已在大模型的加持下创新。

在智能座舱方面，这套系统拥有四层结构，包括底层的车端/云端支持、车舱大脑、智能化操作系统和应用支持等。通过视觉、听觉等多模态融合，全方位感知用户需求，通过标签化数据记录用户习惯和偏好，提供专属个性服务。同时可支持形象、语音快速定制的数字人进行拟人化交互。商汤在现场展示了健康问诊、旅游规划、儿童伴读和AR说明书等智能座舱应用。

这套智能座舱量产落地经验极其丰富，目前行业客户40+，定点车型60+，定点车辆数量近2500万。比如东风本田e:NS1与广汽本田e:NP1，就是全系搭载由商汤提供的DMC驾驶员状态感知系统。可对驾驶员的表情、视线、姿态动作进行实时感知，准确判定疲劳、分心、危险动作等危险驾驶行为，并将结果快速反馈给DMC驾驶员状态感知系统，及时预警。

在智能驾驶方面， 商汤拥有感知决策一体化的自动驾驶通用大模型UniAD。我们知道，自动驾驶其实是三个业务——感知、预测和规划，业界主流的方案是分别采用不同的模块来处理这些具体任务。而商汤的UniAD首次将感知、预测和规划等三大类主任务、六小类子任务（目标检测、目标跟踪、场景建图、轨迹预测、栅格预测和路径规划）整合到统一的基于transformer的端到端网络框架下，实现了全栈关键任务驾驶通用模型。据悉，其多目标跟踪准确率超越sota 20%，车道线预测准确率提升30%，预测运动位移和规划的误差则分别降低了38%和28%。

此外，大模型还会助力车路云的协同，凭借多模态多任务通用大模型开发路侧视觉感知大模型，结合琼宇2.0及格物2.0构建智能交通孪生与仿真，并利用商量2.0的感知推理和人机交互能力推动车路云共同向大模型对话式交互的演进。

商汤在多模态多任务领域，发布了拥有30亿参数的通用大模型“书生（INTERN）2.5”。而“商汤日日新SenseNova”大模型则是一个模型超市，能不断训练大模型。

大模型必须要大算力来支持，据悉，商汤的AI大装置最高可支持万亿参数超大模型的训练，比特斯拉的DOJO还高。这样的模型和算力能有效地支持商汤科技在智能领域的发展。

■ 关于商汤科技

商汤科技是一家人工智能软件公司，业务涵盖智慧商业、智慧城市、智慧生活、智能汽车四大板块。拥有多模态、多任务通用人工智能能力，涵盖感知智能、自然语言处理、决策智能、智能内容生成等关键技术领域，同时包含AI芯片、AI传感器及AI算力基础设施在内的关键能力。此外，商汤打造新型人工智能基础设施——商汤AI大装置SenseCore，打通算力、算法和平台，并在此基础上建立“商汤日日新SenseNova”大模型及研发体系，能解决通用人工智能任务的能力，推动高效率、低成本、规模化的AI创新和落地，进而打通商业价值闭环，解决长尾应用问题，引领人工智能进入工业化发展阶段。