全部评论
谈谈您的想法...
联汇科技申请基于预训练多模态大模型的跨模态表示学习方法专利,提高轻量级学生模型的性能和准确性
市场资讯 2025-10-31 09:41:47
10秒看完全文要点
国家知识产权局信息显示,杭州联汇科技股份有限公司申请一项名为“一种基于预训练多模态大模型的跨模态表示学习方法”的专利,公开号CN120874959A,申请日期为2025年06月。
专利摘要显示,本发明公开了一种基于预训练多模态大模型的跨模态表示学习方法,其通过教师模型和学生模型对输入数据在不同尺度上进行特征提取,结合对比蒸馏、特征蒸馏、相似性蒸馏和硬负样本蒸馏对学生模型进行知识提炼;再根据不同蒸馏方法的损失动态调整权重,优化蒸馏过程。本发明提供了一种有效的方法来提炼多模态大规模预训练模型的知识,从而提高轻量级学生模型的性能和准确性,具有高效、简便等优点,可广泛应用于跨模态表示学习等领域。
天眼查资料显示,杭州联汇科技股份有限公司,成立于2003年,位于杭州市,是一家以从事软件和信息技术服务业为主的企业。企业注册资本12713.4897万人民币。通过天眼查大数据分析,杭州联汇科技股份有限公司共对外投资了12家企业,参与招投标项目716次,财产线索方面有商标信息56条,专利信息170条,此外企业还拥有行政许可14个。
声明:市场有风险,投资需谨慎。本文为AI基于第三方数据生成,仅供参考,不构成个人投资建议。