答辩公告
我的位置在: 首页 > 答辩公告 > 正文
左知微博士生预答辩公告
浏览次数:日期:2025-02-13编辑:

学位论文简介

为保障用户被遗忘权,从已训练模型中消除部分用户数据影响,围绕深度学习遗忘算法设计以及遗忘程度衡量、增量学习与机器遗忘结合和在联邦遗忘三个方面展开工作,本文的主要工作如下:

(1) 在遗忘算法和遗忘程度衡量,针对现有基于参数扰动的非精准遗忘扰动范围大的问题,提出了两种基于细粒度参数扰动的机器遗忘方法,以最小参数扰动个数完成机器遗忘。同时,针对现有的衡量指标缺乏对遗忘程度的量化方式,提出了一种新颖的基于生成式对抗网络扰动遗忘数据分布的方式对实施遗忘前后模型的性能进行衡量,从而表征遗忘程度。

(2) 在增量学习中完成机器遗忘,提出首个基于向量数据库的类增量学习和机器遗忘框架eCIL-MU,通过对嵌入向量的保存与迁移,以修改数据而非修改模型的方式完成类增量学习和机器遗忘。在此基础上,进一步研究了基于正则化的框架rCIL-MU,通过梯度近似参数重要性的方式进行有机结合,实现样本级别遗忘。

(3) 在联邦学习框架下实现客户端的遗忘,提出了一种基于投影梯度上升的联邦遗忘算法。通过对模型参数进行约束,确保其回滚到范数球内,从而在遗忘过程中同时实现遗忘效率和模型性能的平衡。考虑到传统遗忘方法通常需要依赖完整数据集,引入了数据蒸馏技术,以显著降低通信开销,进而加速遗忘过程。

主要学术成果

[1] Zhiwei Zuo, Zhuo Tang, Kenli Li, Anwitaman Datta. Machine unlearning through fine-grained model parameters perturbation [J]. IEEE Transactions on Knowledge and Data Engineering, 2025. (CCF A 类期刊,第一作者)

[2] Zhiwei Zuo, Zhuo Tang, Bin Wang, Anwitaman Datta. ECIL-MU: Embedding Based Class Incremental Learning and Machine Unlearning[C]//ICASSP 2024-2024 IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP). IEEE, 2024: 6275-6279. (CCF B类会议,第一作者)

[3] Zhiwei Zuo, Qianqian Cai, Jungang Ji, Zhongan Tang. A Validation Approach for the Lipschitz Constant for Neural Networks[C]//HPCC/DSS/SmartCity/ DependSys. IEEE, 2022: 863-869.(CCF C类会议,第一作者)

[4] Debin Deng, Zhiwei Zuo*, Xiong Xiao, Zhuo Tang. Policy Gradient-based Text Adversarial Attack against Deep Learning Classifiers. ETRI Journal (SCI 四区,大修,通讯作者)

[5] 左知微、唐卓、李肯立、肖雄、向婷、刘梦涵; 一种基于GAN的遗忘衡量模型及其工作方法. 专利号: CN202310739381.4 (实审)