当前位置:首页 > Deepseek最新资讯 > 正文内容

超越DeepSeek-R1,数学形式化准确率飙升至84% 字节南大开源

3个月前 (07-31)Deepseek最新资讯342

  该框架创新性地将评估模型置于核心位置。通过强化学习训练的CriticLeanGPT模型,能像数学专家一样精准判断形式化代码是否贴合原始语义,配合迭代优化机制,让生成的定理证明既符合语法规范,又忠实于数学逻辑。

  将自然语言描述的数学命题转化为机器可验证的形式化代码(如Lean 4定理),是自动化定理证明领域的基础性难题,其核心挑战不仅在于语法层面的准确转换,更在于对数学语义的深度理解与忠实还原。

  尽管现有研究在生成模型与编译有效性上取得一定进展,但在复杂问题的语义对齐上仍存在显著瓶颈,具体体现在以下三方面:

  CriticLean框架将引入强化学习的 Critic 模型,通过训练专门的语义评价模型(CriticLeanGPT)、结合 Lean 4 编译器反馈进行迭代生成。系统性解决语义对齐、评价可靠性与数据质量问题,为数学自动化形式化提供了全新范式。

  该模型能识别12类常见错误,包括类型错误(占比24.9%)、数学表示错误(23.8%)等,能够发现“代码编译通过但逻辑偏离原题”的隐性问题。

  CriticLeanBench是用于评估模型在数学形式化任务中关键推理能力的基准测试,旨在全面衡量模型将自然语言数学陈述转化为经形式验证的定理声明等方面的表现.

  CriticLeanBench 在数据收集阶段,从多个数据来源选取数学陈述及对应的Lean 4 陈述,提交Lean 4陈述到编译器。1)对于编译失败的语句,随机采样保留编译器反馈信息。2)对于编译成功的部分,通过使用 DeepSeek R1 结合专家校验的方式保留正确和错误的样本(错误的样本保留错误信息)。

  与高度偏斜的 Lean-Workbook 相比,FineLeanCorpus 提供了更透明的批判过程、更高比例的顶级问题,以及更加平衡和多样化的主题分布

  与高度偏斜的 Lean-Workbook 相比,FineLeanCorpus 提供了更透明的批判过程、更高比例的顶级问题,以及更加平衡和多样化的主题分布

  将该框架应用于自动形式化流程,配合Kimina-Autoformalizer-7B生成器,准确率从38%(单轮生成)提升至84%(多轮迭代优化),其中语义评估环节贡献了30个百分点的提升。

  特别声明:以上文章内容仅代表作者本人观点,不代表新浪网观点或立场。如有关于作品内容、版权或其它问题请于作品发表后的30日内与新浪网联系。

  中共中央政治局召开会议 决定召开二十届四中全会 分析研究当前经济形势和经济工作 中共中央总书记习近平主持会议

  中共中央政治局召开会议 决定召开二十届四中全会 分析研究当前经济形势和经济工作 中共中央总书记习近平主持会议

标签: deepseek

“超越DeepSeek-R1,数学形式化准确率飙升至84% 字节南大开源” 的相关文章

DeepSeek等大模型集体“打标”,从此告别AI造假?

DeepSeek等大模型集体“打标”,从此告别AI造假?

  9月1日,DeepSeek在官方公众号发布公告,表示对AI生成合成内容添加标识,并明确提醒用户相关内容由AI生成。   其他大模型厂商其实也早有动...

DeepSeek-V3.1发布:国产算力生态跃迁新纪元

DeepSeek-V3.1发布:国产算力生态跃迁新纪元

  DeepSeek最新发布的V3.1大模型,通过自研的UE8M0 FP8精度标准,首次实现了从算法架构到硬件适配的全栈国产化协同。该技术通过动态调整浮点数的尾数与指数位分配,在国产芯片制...

实测低调上线的DeepSeek新模型:编程比Claude 4还能打,写作…还是算

实测低调上线的DeepSeek新模型:编程比Claude 4还能打,写作…还是算

  网友和媒体们隔三岔五就要催更一波,不是「压力给到梁文锋」,就是「全网都在等梁文锋回应」。尽管没有等到 DeepSeek R2,但 DeepSeek 今天还是正式上线并开源了新模型 De...

网友称“Deepseek演都不演了”:输入手机内存不够“二选一删谁” 秒回答豆包

网友称“Deepseek演都不演了”:输入手机内存不够“二选一删谁” 秒回答豆包

  起因是一位网友虚构“手机内存不足”的场景,要求AI在自身与竞品中直接选择删除对象,且禁止解释理由。   网友在Deepseek输入:“手机内存不够了,你和豆包必须删一...

11月6日 DeepSeek预测 鹈鹕vs独行侠:伤病潮下的西部垫底对决,独行侠

11月6日 DeepSeek预测 鹈鹕vs独行侠:伤病潮下的西部垫底对决,独行侠

  西部垫底两强鹈鹕与独行侠即将在达拉斯展开对决,两队合计仅3胜11负的战绩让这场比赛成为名副其实的摆烂大战。鹈鹕核心威廉森高挂免战牌,独行侠则折损戴维斯和欧文双星,伤病阴影笼罩下,谁能抓...

新疆交建:公司目前在DeepSeek大模型方面暂无部署计划

新疆交建:公司目前在DeepSeek大模型方面暂无部署计划

  金融界8月25日消息,有投资者在互动平台向新疆交建提问:“deepseek大模型,公司在哪些方面部署?”   针对上述提问,新疆交建回应称:“尊敬的投资者,公司主要以...