种斌Marco 24-12-20 17:44
微博认证:科技博主 头条文章作者 超话主持人(种斌Marco影视板报超话) 微博原创视频博主

多模态交互是AI发展的趋势吗?

多模态交互是指人工智能系统能够处理和响应多种类型的输入和输出,如文本、语音、图像和视频等。

目前ChatGPT在多模态发展已经取得了不错的进展,ChatGPT-4o版本增强了多模态支持和实时推理能力,并且在内容创作和数据分析等多个应用场景中表现出色。展现了大型预训练生成模型的能力,已经能够能够基于简单的语言描述生成高质量的图像。

国内大模型进入性能提升的高速发展时期,多模态模型应用正在逐步铺开。国内第一梯队的大模型整体能力目前已经逼近GPT-4,部分模型中文能力与GPT-4相差无几。多模态发展已成行业共识,多模态大模型在输入输出端的优势明显,不同模态的输入数据具有互补性,多元训练数据输入有助于通用大模型能力的快速扩展。

根据《2024年中国汽车多模态交互发展研究报告》显示国内汽车座舱交互方式正在向多模态发展,语音交互是智能座舱中搭载量及使用频率最高的应用。车载语音系统的装配量已攀升至约1100万辆,装配率高达83%,同比增幅达到10.9%。

AI大模型技术和应用逐渐从文本扩展至多模态,目前国内外多模态理解大模型的研发热潮和广泛应用都进入了拼速度的阶段。《SuperCLUE》发布10月中文多模态理解测评基准报告显示国产多模态大模型已在部分细分任务上具备领先优势。#AI创造营#

发布于 山西