搜索:MEMIT

共命中 3 条(服务端检索)
一篇读懂知识编辑:不重训就能改模型的知识
因果追踪定位知识存储层、ROME 与 MEMIT 的闭式编辑数学、评估三指标,以及连锁效应等失败模式:一次把「精准改写参数化知识」讲透。
大模型 精选 · 原创 · 今天 阅读 0·访客 0
模型合并与模型编辑:不重训就能改模型的知识
把两个微调后的模型直接「加权平均」竟能同时保留双方能力——模型合并(model merging)的实用性出乎意料;而定位编辑(ROME/MEMIT)可以在不重训的情况下精准修改模型里的单条事实。本篇拆解任务算术的原理、合并的方法族、知识神经元与定位编辑的机制,以及它们对开源生态的真实意义。
研究前沿 精选 · 原创 · 6天前 阅读 33·访客 32
一篇读懂 LLM 的知识裁剪:怎么让模型「忘掉」不该知道的东西
GDPR 删除请求、版权诉讼、危险知识控制都指向同一个技术难题:分布式编码的知识无法删除只能改写。梯度上升、NPO、RMU 各方法的机制与攻击式评估。
大模型 精选 · 原创 · 今天 阅读 0·访客 0