我的隐私计算学习——联邦学习（5）

笔记内容来自多本书籍、学术资料、白皮书及ChatGPT等工具，经由自己阅读后整理而成。

（七）联邦迁移学习

相关研究表明，联邦迁移学习不需要主服务器作为各参与方间的协调者，旨在让模型具备举一反三能力，在各参与方样本空间以及特征空间均存在较少交叉信息的情况下，使用迁移学习算法互助地构建模型，可解决标签样本少和数据集不足的问题，例如，某国电商平台与其他国家银行间的数据迁移场景，联邦迁移学习可以很好地解决数据交流问题。联邦迁移学习模式使用某参与方在当前迭代中已训练好的模型参数，迁移到另外一个参与方上，协助其进行新一轮模型训练。联邦迁移学习的主要步骤如下：

(1）参与方根据自身数据集，构建本地模型，获得数据表征，以及一组中间结果，加密后发送给其他参与方；

(2）其他参与方利用接收到的中间结果计算模型的加密梯度和损失值，加入掩码后发给原参与方，解密并更新各自的模型。

不断重复以上的步骤，直至损失函数收敛。在此过程中，相当于每个参与方都利用了其他参与方的当前模型和数据潜在的表征来更新各自的本地模型，买现了迁移学习的联邦模式，即联邦迁移学习。一般而言，联邦迁移学习还可以分为以下几种：

基于样本的联邦迁移学习

各参与方通过有选择地调整用于训练的样本权重来减少不同参与方样本之间分布的差异性，协同地训练得到一个联邦迁移模型。
基于特征的联邦迁移学习

通过最小化不同参与方之间的样本分布差异性或特征差异性来协同学习一个共同的特征空间，并以此特征空间来降低分类类别数或回归误差来实现联邦迁移模型的构建。
基于参数的联邦迁移学习

各参与方利用其他参与方的模型信息或先验关系来初始化或更新本地模型，以此借鉴其他参与方的数据表征和知识。
基于相关性的联邦迁移学习

对不同参与方的知识或特征空间进行相关性映射，并按照相关性顺序来利用其他参与方的知识映射更新本地模型，以此借鉴更多的知识。

总之，相较于传统的迁移学习，联邦迁移学习最大的特点是：基于多参与方的数据表征进行建模，但各参与方的原始数据不允许流向其他参与方，有效保护用户数据的隐私性和安全性。

（八）值得关注的联邦学习项目

除此之外，还有基于 Python 实现的视觉横向联邦开源框架 FedVision、基于 TensorFlow 的 TFF 框架、百度公司的 PaddleFL 框架、华控青交的 PrivPy 隐私计算平台、MesaTEE 安全计算平台 Teaclave、Conclave 查询系统、......

（九）联邦学习的落地应用方向

上面所述的横向联邦学习，典型案例是手机的输入法预测技术和视觉目标检测技术。纵向联邦学习中，典型案例则是银行和电商平台联合训练的推荐系统。企业之间多以纵向联邦学习的方式为主。

联邦学习 + 智慧金融
- 银行（智能营销系统、智能贷款风险管理、银行反欺诈检测系统......推荐更为个性化的银行产品。）
- 保险（车险出险概率预测、个性化健康险定制......预测出险率，使车辆和居民承保及定价更合理。）
- 投资（基金、证券行业可以通过联邦学习获取更多维度的特征，从而进行更加精准的市场走势预测。）
联邦学习 + 智慧医疗
- 医疗影像诊断（对大量影像特征、患者年龄、病史记录等信息，给出精准的综合判断和识别结果。）
- 疾病风险预测（建立统计模型来预测具有某些特征的人群在未来某种事件下或时间范围内患病的概率。）
- 药物挖掘（引入结合药物分子活性预测模块和药物分子活性筛选模块进行建模，增加分子活性预测的准确率，极大提升了药物开发的效率和效果。）
- 医护资源配置（根据患者个人信息预测其所需医护资源，进而提前部署，完成医护资源的配置。）
联邦学习 + 智慧城市
- 零售（学习用户的偏好和近期搜索，个性化产品推荐；根据销售模型进行销量预测和具体的商品定价；实现精准的广告投放，实现精准营销。）
- 交通（供实时服务，准确预估通过当前路段的时间，估算当前路口的车流量，进而优化出行路径。）
- 物流（收集所有的基础销售数据，加入联合训练中，就可以准确预测在接下来一段时间内消费者的消费趋势与动向。）
- 政府（声纹案件侦破、电力资源调度......实现跨市联合、跨省联合等。）
- 安防（多家工厂联合训练，进行风险预测，实现提前预警。通过摄像头的实时图像传输，保证内部工作人员防护合格，降低事故发生率。）
联邦学习 + 物联网
- 车联网（高精度判断车辆队列分布，帮助有效缩短车辆队列长度，优化道路资源配置。）
- 智慧家居（将不同企业的产品数据、用户特征数据等进行多维度联合建模，节约研发成本，还可以进行技术创新，提升用户体验感和满意度。）
- 可穿戴设备（根据异常数据快速预测出用户可能存在的疾病，提示用户健康隐患，医生根据设备中的日常记录，给出全面专业的诊疗意见。）
- 机器人（实现语音客服机器人的多轮对话技术，解决各平台数据共享的问题。）

（十）联邦学习的研究展望

总的来说，联邦学习未来的发展可着眼于以下几个方面：

面向资源受限场景的应用研究

联邦学习的本质是一个分布式机器学习框架，网络通信是分布式节点间共同训练机器学习模型的重要基础，然而以边缘计算为代表的资源受限生产环境普遍存在。网络连接状态直接影响通信效率，++需要设计灵活的本地模型更新方式、部分联邦学习参与方的选择机制、负载容错机制、模型压缩方法、模型协同训练方式，++以解决存储、计算、网络连接、续航能力等资源受限带来的应用问题。
面向云边端一体化的联邦学习

由于 5G 通信、边缘计算等技术的发展，云边端一体化架构已成为信息技术服务的趋势；同时，泛在连接的终端促使大量异构终端接入联邦学习体系；如何高效融合资源，改进联邦学习的架构、机制、模式是重要的研究方向。
联邦学习的数据建模

数据联邦学习面临大量跨设备、非均匀、非独立同分布数据，需要在保证准确性和公平性前提下解决异构数据建模的非凸优化问题；同时，深入研究元学习和多任务学习等方法有助于数据的统计异质性建模。此外，基于异构数据的联邦学习要提升共享模型训练过程的收敛性。
严格的隐私安全

造成数据孤岛的一个重要原因就是数据隐私安全限制，而联邦学习可为各参与方提供数据隐私保护，将私有数据保留在本地。然而这需要在更精细级别上定义隐私，例如，本地或全局级别的隐私，以保证不同场景下联邦学习模型的准确性。此外，可以通过区块链的共识机制解决联邦学习参与方间的信任问题，建立最小信任模型。
合理的激励机制

在企业之间的联邦学习合作落地进程中，设计一个合理的、被广泛认可的纵向联邦学习激励机制，让参与到联邦建模的设备能获得额外的汇报，是迫切的需求，有着重要的商业意义。
与区块链联合

联邦学习旨在创造价值，而区块链旨在表示和转移价值。有以下两种基本结合方式，即攻击溯源和收益分配。第一种结合是利用区块链的记录不可被篡改的特性，对联邦学习合作方可能面临的恶意攻击进行追溯和惩罚。例如，多个参与方进行联邦学习的同时，部署区块链用于记录联邦学习的数据指纹（包括建模样本、推理样本、交互信息），而对应的原始数据存储于参与方本地。当发现有样本遭受恶意攻击时，由参与方或者第三方组成调查组，依据区块链记录的指纹对原始数据进行核验。第二种结合是利用区块链的价值表示和转移功能，对联邦学习服务所创造的价值进行记账和收益分配。例如，多个参与方进行联邦学习的同时，部署区块链用于记录服务的接口调用日志指纹、各个参与方的贡献、该服务所产生的收益，并通过智能合约自动将收益分配给各个参与方。

关于联邦学习，除了以上提及的横向联邦学习、纵向联邦学习和联邦迁移学习，还可以扩展延伸以下两个方向：

联邦持续学习（不遗忘之前学习到的知识）
联邦强化学习（联邦学习与深度神经网络相结合）
链式联邦学习（联邦学习与区块链相结合）
元学习（与模型无关的联邦学习）

2023年10月份新开了一个GitHub账号，里面已放了一些密码学，隐私计算电子书资料了，之后会整理一些我做过的、或是我觉得不错的论文复现、代码项目也放上去，欢迎一起交流！Ataraxia-github