金融界 2024 年 11 月 14 日消息,国家知识产权局信息显示,北京百度网讯科技有限公司申请一项名为“基于 MLLM的数据处理及 MLLM 训练方法和装置”的专利,公开号 CN 118939972 A,申请日期为 2024 年 7 月。

专利摘要显示,本公开提供了一种基于 MLLM 的数据处理及 MLLM 训练方法和装置,涉及人工智能技术领域,具体为大模型、多模态数据处理等技术领域。基于 MLLM 的数据处理方法包括:采用 MLLM 包括的微调图像编码器,对目标图像进行编码,以获得第一图像特征;采用所述 MLLM 包括的预训练图像编码器,对所述目标图像进行编码,以获得第二图像特征;对所述第一图像特征和所述第二图像特征进行集成,以获得目标图像特征;基于原始提示文本获取目标提示特征;基于所述目标图像特征和所述目标提示特征,获取数据处理结果。

本文源自:金融界

作者:情报员