2023-06-07 中国 来源:其他 作者:刘纪铖 领域:信息
关键词:
据品玩网6月4日消息,英国剑桥大学、中国腾讯公司AI Lab及日本奈良先端科学技术大学院大学(NAIST)联合团队提出新型大语言模型PandaGPT,可统一六种模态。PandaGPT将ImageBind的多模态编码器与Vicuna大型语言模型相结合,实现图像及视频、文本、音频、热力图、深度图、惯性测量单元(IMU)读数六种模态下的指令跟随能力。目前PandaGPT的效果尚有提升空间,但展示了跨模态通用人工智能(AGI)的发展潜力。相关研究发表在预印本网址ArXiv上。