Lyra是由香港中文大学、SmartMore与香港科技大学联合开发的高效多模态大型语言模型(MLLM),专注于提升语音、视觉及语言模态间的交互能力。该模型依托开源基础架构、多模态LoRA模块以及潜在的多模态正则化器,显著降低了训练成本与数据需求。Lyra构建了包含大量多模态样本及长语音数据的高质量数据集,能够有效处理复杂且冗长的语音输入,展现出卓越的全模态认知能力。在多种模态理解和推理任务中,Lyra的表现达到了行业领先水平,并具备更高的计算资源利用率。
Lyra是由香港中文大学、SmartMore与香港科技大学联合开发的高效多模态大型语言模型(MLLM),专注于提升语音、视觉及语言模态间的交互能力。该模型依托开源基础架构、多模态LoRA模块以及潜在的多模态正则化器,显著降低了训练成本与数据需求。Lyra构建了包含大量多模态样本及长语音数据的高质量数据集,能够有效处理复杂且冗长的语音输入,展现出卓越的全模态认知能力。在多种模态理解和推理任务中,Lyra的表现达到了行业领先水平,并具备更高的计算资源利用率。
发表评论 取消回复