📄 论文
公众号:龙猫LongCat(美团)
GeoRA:为RLVR设计的LoRA--ACL 2026杰出论文解析
美团与北京大学提出GeoRA,将低秩适配显式对齐到RLVR的更新几何,先用谱先验与欧氏先验定位稀疏更新区域,再用SVD压缩为低秩稠密适配器并冻结残差锚点。在1.5B至32B的Qwen与Llama模型上,GeoRA在数学、医学、代码三类RLVR任务上稳定优于LoRA、PiSSA、MiLoRA等基线,Qwen3-8B的AIME24达23.75%,可训练参数较全参微调降低99.5%。
正在生成六维拆解…
这条对你有用吗?
六维拆解由 AI Lens 自动生成 · 帮你 5 分钟读懂一条资讯 · 仅供参考,以原文为准