当前通用AI大语言模型在用户接入、训练、部署和应用时，往往面临着数据训练成本、数据安全、专业知识等挑战，为具体产业落地带来局限。对此，商业模式定制应运而生。

美国人工智能技术公司OpenAI计划推出一个针对定制化模型/软件的交易市场，类似于App Store应用商城，允许开发者向其他企业出售自己的人工智能定制化模型，为企业提供个性化的人工智能模型服务。

腾讯云也在近期公布了其MaaS（模型即服务，Model-as-a-Service）业务计划，依托腾讯云TI平台创建行业大模型精选商店，提供模型预训练、模型精调、智能应用开发等大模型解决方案。用户加入自己独有的场景数据，可快速生成专属模型；也可根据自身业务场景需求，定制不同参数、不同规格的模型服务。

对于垂直领域来说，用户的流程、需求以及对于数据的理解，能够提升AI大模型个性化、专业化服务能力，在专业业务中实现发展与应用。由大模型作为开发平台，让开发者进一步对接终端用户，细分模型工作能力，能够让用户更有效地应用AI技术，同时也为平台带来更多的商业机会。

▲以视频+音频作为输入的示例

PandaGPT将大型语言模型与不同模态对齐、绑定，以实现跨模态指令跟随能力。其结合了ImageBind的模态对齐能力和Vicuna的语言生成能力，可同时接受多个模态输入，并自然组合不同模态的语义，可执行生成详细图像描述、根据视频编写故事、回答音频问题等复杂任务。

▲将ImageBind的多模态编码器与Vicuna大型语言模型相结合

PandaGPT超越传统的单模态分析，扩展了下游应用场景，更贴近通用人工智能（AGI）的实现方式。AGI（Artificial General Intelligence）是指一种能够像人类一样具有广泛认知能力的通用人工智能技术，与弱人工智能只能解决特定问题不同，AGI能够处理各种不同的任务，并具有学习、推理、判断和自我改进等能力。

目前PandaGPT只是一个研究原型，尚不能直接用于实际应用。