国家知识产权局信息显示,阿里巴巴(中国)有限公司申请一项名为“多模态数据处理方法和多模态数据处理装置”的专利,公开号CN122777995A,申请日期为2026年5月。
专利摘要显示,本发明实施例公开了一种多模态数据处理方法和多模态数据处理装置。本发明实施例在获取图像文本对、视频文本对和音频文本对后,将各样本对中的图像、视频和音频的时序张量输入初始模型的特征提取模块,得到特征融合张量,并根据各特征融合张量确定初始模型的位置编码模块的输入张量,得到位置特征融合张量,进而将各位置特征融合张量输入初始模型的特征编码模块,分别获取图像特征编码张量、视频特征编码张量和音频特征编码张量,从而根据上述特征编码张量与对应文本的文本张量的相似度确定多模态对比损失,以训练初始模型。由此,可以通过单一编码器实现多模态数据的特征编码,从而在降低模型结构复杂度的同时提高模型的多模态感知与理解能力。
天眼查资料显示,阿里巴巴(中国)有限公司,成立于2007年,位于杭州市,是一家以从事软件和信息技术服务业为主的企业。企业注册资本15460.55039万美元。通过天眼查大数据分析,阿里巴巴(中国)有限公司共对外投资了60家企业,参与招投标项目87次,财产线索方面有商标信息11017条,专利信息8240条,此外企业还拥有行政许可19个。
声明:市场有风险,投资需谨慎。本文为AI基于第三方数据生成,仅供参考,不构成个人投资建议。
本文源自:市场资讯
作者:情报员
热门跟贴