据湖北日报报道,武汉人工智能研究院院长王金桥介绍:“上半年,我们将发布‘紫东太初’3.0,进一步提升大模型对千行百业的赋能能力。借力相关研究,院方与东风汽车、光庭信息在智能驾驶领域的合作已全面展开。”
据IT之家此前报道,紫东太初第一代AI大模型于2021年发布,由中国科学院自动化研究所和华为联合开发,号称是“全球首个千亿参数多模态大模型”。
区别于当前以文本为主的大部分语言大模型,“紫东太初”大模型在研发之初即以多模态技术为核心,利用图-音-文等更多类型数据进行跨模态的统一表征和学习,实现了图像、文本、语音三模态数据间的“统一表示”与“相互生成”。
紫东太初2.0于2023年6月发布,基于华为全栈国产化软硬件平台昇腾AI与昇思MindSpore,相比第一代着力提升了决策与判断能力,在文本、
图片、音频的基础上,“紫东太初”2.0可融入3D、
视频、传感信号等更多模态数据,并优化语音、
视频和文本的融合认知以及常识计算等功能。
报道称,升级到3.0版本,大模型将在各项性能优化的基础上,具备自主选择、使用工具的能力,满足更深层次的逻辑交互需要。
针对智能驾驶,“紫东太初”将大幅缩短、优化其训练过程。通过大语言模型和多模态能力,大模型可以替代海量的人工,完成汽车、信号灯、路标等数据的自动标注,大幅提升智能汽车感知世界的效率。
同时,“紫东太初”接入汽车后,能够更深层次地学习、理解驾驶目标和意图,快速将环境信息翻译成设备能读懂的语言,并预测未来几秒内的情况,提前向汽车下达合适指令。