近日,安全识别领域的年度盛会——第二十届安全识别技术展览会暨高峰论坛(SDS)在北京国家会议中心举行,行业专家、高校学者、企业代表围绕身份识别、防伪安全、反欺诈等前沿议题展开交流探讨。
马上消费人工智能研究院技术总监沈海峰受邀出席,并作题为《从单点防御到全景认知:多模态大模型驱动的防伪技术变革》的主题演讲,解析当下人脸防伪面临的挑战,分享马上消费基于多模态大模型的技术迭代成果与落地应用经验。
沈海峰指出,生成式大模型大幅降低了深度伪造的技术门槛,叠加黑灰产欺诈全面线上化、技术化升级,传统单点式防御模式已难以应对复杂新型攻击。行业必须跳出传统防御思维,依托多模态大模型构建全景认知、主动对抗的新型防伪体系应对技术型欺诈变革。
行业欺诈与伪造技术迭代,倒逼防伪体系升级
随着数字经济发展,线上金融、远程身份核验等场景广泛应用,人脸防伪与反欺诈成为行业安全建设的重中之重。当前行业正面临多重安全挑战:一方面,黑灰产欺诈模式全面转向线上,形成完整产业链,作案呈现产业化、精准化、移动化、技术化四个特征,攻击手段不断升级;另一方面,生成式大模型普及进一步拉低了深度伪造的技术门槛,AI 换脸、虚拟数字人、仿真视频等新型伪造技术效果愈发逼真,肉眼已难以分辨真伪,各类攻击渗透人脸识别全流程,传统防伪体系承受着巨大压力。
演讲中,沈海峰回顾了人脸防伪技术的三个发展阶段:2000年代初的传统模式识别时代,依靠人工设计 Gabor、LBP 特征,仅能实现定点场景防御;2012年进入深度学习模型时代,可通过学习样本防御已知攻击;2023 年起,多模态大模型技术成熟,行业正式迈入全新防伪阶段。
沈海峰介绍,相较前两代技术,多模态大模型具备泛化性强、可解释性好、逻辑推理能力突出的优势,能够有效抵御未知新型攻击,在高难度样本测试中,防伪大模型准确率较传统深度学习技术提升显著。
作为一家技术驱动的数字金融机构,马上消费长期深耕生物特征识别与人工智能安全领域,通过搭建多模态技术架构,实现图像、音频、视频、文本的跨模态融合处理,并率先将强化学习应用于深度伪造检测。目前,相关研究成果已在ICASSP、ICME等顶会进行发表。
沈海峰介绍,该技术体系包含两大核心创新:一是搭建自动化思维链数据生成流程,大幅降低数据制作成本,同时结合离线监督微调与强化学习,提升模型对复杂攻击的抵御能力;二是双对齐网络结构的创新。通过两次跨模态特征对齐优化视觉编码器,并针对不同伪造程度制作精细化文本描述,进一步强化视觉编码器的语义表达能力和模型识别精度。
多模态大模型多重创新,打造全景认知防伪方案
为持续验证、优化自研算法,马上消费搭建起人脸活体对抗平台,定期开展攻防演练与情报收集,已复现200多类主流深度伪造算法,覆盖换脸、重演等最新方法,积累了千万级以上数据。
沈海峰介绍,目前马上消费已对外发布行业首个人脸伪造公开数据集,为行业开展同类技术研究和防伪大模型前沿探索提供参考素材。
依托成熟的算法能力与实战打磨成果,马上消费构建起前端活体安全 + 后端多层防伪的全景认知防御方案,打造立体化、多层次安全防线。
沈海峰表示,目前该方案已全面落地企业内部风控体系,不仅可精准识别亲属冒用、影像模拟注入等新型活体攻击,还依托 OCR 技术、背景聚类能力,拦截证件伪冒、团伙欺诈等风险,全面覆盖各类线上欺诈场景。此外,马上消费也将人脸防伪能力输出至行业机构,助力合作机构强化业务安全防护水平。
目前,马上消费在防伪安全领域已取得一些成果,多篇相关论文被国际顶会收录。
在推动技术落地的同时,马上消费积极参与国内外行业标准制定。2026年5月,由马上消费牵头起草的ISO国际标准《信息技术 生物特征识别深度伪造攻击检测 测试与报告》正式获批立项,这是全球范围内首次在生物特征识别深度伪造检测领域建立系统化的测试与报告框架。2025年12月,马上消费与华为共同获任国家标准人脸识别工作组副组长单位,深度参与全生命周期国家标准制修订工作。
展望未来,沈海峰表示,马上消费将持续拓展防伪技术应用边界,持续夯实防伪技术体系,为构建更加安全、可信的数字身份认证环境贡献力量。
来源:马上消费官微
热门跟贴