大模
PRISM: Transfer and Limits of Activation Interventions in Tool-Calling Language Models
PRISM 框架研究工具调用语言模型中激活干预的可迁移性,发现利用量化 NF4 标签和跨语言迁移可稳定估计安全干预方向,无需目标语言微调即可将 Llama-3.1-8B 的不安全违规降低 21.95 个百分点,并可迁移至 70B 模型。
大模型·arXiv cs.CL·5 天前
先用站内已采集内容作答;站内不足时联网检索,每条结论都给出来源链接
1 条 · 点击可看原文全文与中文译文
PRISM 框架研究工具调用语言模型中激活干预的可迁移性,发现利用量化 NF4 标签和跨语言迁移可稳定估计安全干预方向,无需目标语言微调即可将 Llama-3.1-8B 的不安全违规降低 21.95 个百分点,并可迁移至 70B 模型。
现有资料不足以回答该问题的技术细节。资料 1 仅提供了 PRISM 框架的摘要级信息,没有给出量化 NF4 标签的构造方式、激活干预方向的估计流程,也没有说明跨语言迁移的具体实现步骤。资料中能确认的部分如下:
关于“具体如何实现”(如 NF4 量化标签如何生成、方向向量在哪一层提取、跨语言对齐的损失或约束形式、迁移到 70B 时是否需要重缩放等),资料 1 的摘要未涉及,无法据此展开。建议查阅原文 https://arxiv.org/abs/2610.20808 的方法章节。