哈勃观察员
26-07-15 17:35 微博认证:科学科普博主 头条文章作者

KAIST发布:让个性化AI更安全的新技术!

想象一下,你倾心打造了一款基于个人知识库的专属智能助手,却可能在某个瞬间,因微调训练而悄然卸下防备,吐出危险回答。这正是个性化人工智能面临的“安全退化”困境——定制化越深入,原厂防护越脆弱。如今,韩国科学技术院(KAIST)的研究团队宣称已找到破局之法,让AI在汲取新知识的同时,绝不松开安全闸门。

研究团队提出了一种名为“缓冲与强化”的安全微调框架,其灵感源自一个反直觉的观察——模型在训练中会经历一种“临时可破解”状态,此时它对危险提问的抵抗力骤降,但这种风险仅存于训练阶段,并未蔓延至已部署服务。团队巧妙利用这一瞬态弱点,化被动为主动。

这个框架分为两步。首先,引入“BufferLoRA”缓冲模块作为隔离层。它像一道智能滤网,在用户提供的有害训练样本冲击基础模型时,吸收并中和毒性,确保模型在学习新技能的同时,底层安全内核不被带偏。训练完毕,该缓冲模块即被移除,不留后患。紧接着,进入“ReinforceLoRA”强化阶段,采用QR分解这一数学利器,将习得的功能信息与安全相关信息分离开来,进而定向增强安全组件,而用户偏好的个性化能力分毫不损。

实验设置了极端场景,用户的全部微调数据均为有害问答对。结果令人震撼——在如此严苛的“投毒”条件下,经该框架保护的模型有害回复率仅为8%,而未加防护的基线模型则高达18%。更难得的是,这一安全升级无需额外安全数据集,也不增加显著算力消耗,实现了个性化性能与安全性的双丰收。

该研究的论文已在预印本平台arXiv上发表,并入选国际机器学习顶级会议(ICML 2026)的亮点报告,跻身投稿中顶尖少数之列。这项被誉为“通过‘越狱’来保护”的理念,将脆弱性重塑为训练工具,对于所有致力于构建个性化智能服务的开发者而言,这无疑是一条梦寐以求的定制化坦途——强大,且永不失控。
#热门微博# #科技快讯# #AI安全技术# #哈勃观察员[超话]#

发布于 广东