支付宝申请检验大模型损失上界可靠性专利,检验大模型损失上界的鲁棒性

金融界2025年4月10日消息,国家知识产权局信息显示,支付宝(杭州)信息技术有限公司申请一项名为“检验大模型损失上界可靠性的方法及装置”的专利,公开号 CN 119783773 A,申请日期为2024年12月。

专利摘要显示,本说明书 实施例提供一种检验 大模型损失上界可靠 性的方法及装置,在 大模型的训练过程既 更新模型参数又更新 超参数的情况下,对 于估算的大模型损失上界进行可靠性检验。具体地,选择特殊 数据集,以寻找一个在大模型上损失尽可能大的评测数据集, 并确定在评测数据集上的评测损失,检验评测损失是否足够接 近损失上界,从而检验损失上界是否合理的、稳定的。其中,所 获取的评测数据集,满足相同样本在不同更新规则下更新得到 的更新结果之间的距离大于第一数值的发散性、相同更新规则 在不同样本上更新得到的更新结果之间的距离大于相应样本 的参数之间距离的第二倍数的增长性,以使得评测损失尽可能 大。以上技术方案可以检验大模型损失上界的鲁棒性。

天眼查资料显示,支付宝(杭州)信息技术有限公司,成立于2016年,位于杭州市,是一家以从事软件和信息技术服务业为主的企业。企业注册资本10000万人民币,实缴资本1000万人民币。通过天眼查大数据分析,支付宝(杭州)信息技术有限公司共对外投资了12家企业,参与招投标项目38次,专利信息5000条,此外企业还拥有行政许可57个。

本文源自:金融界

作者:情报员