联邦学习实战

书籍作者：杨强黄安埠刘洋陈天健著	ISBN：9787121407925
书籍语言：简体中文	连载状态：全集
电子书格式：pdf,txt,epub,mobi,azw3	下载次数：3722
创建日期：2021-10-07	发布日期：2021-10-07
运行环境：PC/Windows/Linux/Mac/IOS/iPhone/iPad/Kindle/Android/安卓/平板

内容简介

数据孤岛和隐私保护已经成为制约人工智能发展的关键因素。联邦学习作为一种新型的隐私

保护计算方案，在数据不出本地的前提下，能有效联合各参与方联合建模，从而实现“共同富裕”，

成为当下人工智能领域备受关注的热点。

本书以实战为主（包括对应用案例的深入讲解和代码分析），兼顾对理论知识的系统总结。

全书由五部分共19 章构成。第一部分简要介绍了联邦学习的理论知识；第二部分介绍如何使用

Python 和FATE 进行简单的联邦学习建模；第三部分是联邦学习的案例分析，筛选了经典案例进

行讲解，部分案例用Python 代码实现，部分案例采用FATE 实现；第四部分主要介绍和联邦学习

相关的高级知识点，包括联邦学习的架构和训练的加速方法等；第五部分是回顾与展望。

本书适合对联邦学习和隐私保护感兴趣的高校研究者、企业研发人员阅读。

作者简介

杨强教授

微众银行首席人工智能官（CAIO）和香港科技大学（HKUST）计算机科学与工程系讲席教授。曾任香港科技大学计算机科学与工程系系主任。研究兴趣包括人工智能、机器学习和数据挖掘，特别是迁移学习、自动规划、联邦学习和基于案例的推理。

当选多个国际协会会士（Fellow），包括ACM、AAAI、IEEE、IAPR， CAAI和AAAS。

1982 年获北京大学天体物理学学士学位，并分别于1987年和1989 年获马里兰大学帕克分校计算机科学系硕士学位和博士学位。曾在滑铁卢大学（University of Waterloo,1989-1995 年）和西蒙弗雷泽大学（Simon Fraser University, 1995-2001 年）担任教授。

ACM TIST 和IEEE TBD 创始主编，国际人工智能联合会议（IJCAI）理事长（2017-2019 年）和国际人工智能促进学会（AAAI）的执行委员会成员（2016-2020 年）, 香港人工智能学会的理事长，曾任AAAI 2021大会主席。

曾获多个奖项，包括2004/2005 ACM KDDCUP 冠军、ACM SIGKDD 卓越服务奖（2017）、AAAI 创新人工智能应用奖（2018, 2020）和吴文俊人工智能杰出贡献奖（2019）。

华为诺亚方舟实验室的创始主任（2012-2014 年）和第四范式（AI 平台公司）的共同创始人。

著有多本书籍：《智能规划》 Intelligent Planning （Springer）、《学术研究，你的成功之路》（清华大学出版社） Crafting Your Research Future （Morgan & Claypool）、《迁移学习》（机械工业出版社华章公司）Transfer Learning （Cambridge University Press）、《联邦学习》（电子工业出版社）Federated Learning （Morgan Claypool），Constraint-based Design Recovery for Software Engineering（Springer）。

黄安埠

微众银行AI项目组资深研究员，毕业于清华大学。在机器学习、隐私保护安全计算、推荐系统和计算机视觉等领域有丰富的研究和落地经验。已申请和拥有30多项国内和PCT国际专利，学术成果发表在AAAI、ACM TIST、IEEE BigData、AI Magazine等国际学术会议期刊上；获得AAAI人工智能创新应用奖（2020年）；著有《深入浅出深度学习》（电子工业出版社，2017年）一书。在加入微众银行之前曾任职于腾讯，期间领导创建了服务于亿级用户、全球较大的中文音乐流媒体在线推荐平台。

刘洋

微众银行AI项目组资深研究员、研究团队负责人。研究兴趣包括机器学习、联邦学习、迁移学习、多智能体系统、统计力学以及这些技术的产业应用。 2012年获得普林斯顿大学博士学位，2007年获得清华大学学士学位。拥有多项国际发明专利，研究成果曾发表于Nature、IJCAI、AAAI和ACM TIST等科研刊物和会议上；曾获得AAAI人工智能创新应用奖、IJCAI创新应用奖和CCF科技成果奖等多个奖项；《联邦学习》一书的主要作者之一。

陈天健

微众银行AI项目组副总经理，目前负责构建基于联邦学习技术的银行智能生态系统。拥有超过15年的大规模分布式智能系统设计经验，并在Web搜索引擎、对等网络存储、计算基因组学、个性化推荐系统、数字银行等多个应用领域中实现了技术创新。现居中国深圳，与工作伙伴一起建设和推广联邦学习开源项目FATE。在加入微众银行之前曾担任百度金融首席架构师（同时也是百度的主任架构师）。

编辑推荐

《联邦学习实战》涵盖了联邦学习落地的一手应用案例，配以Python代码、阐述FATE平台的使用，读者可以快速开始联邦学习的建模，动手实践！

《联邦学习实战》特色：

w 深度剖析前沿应用案例

w 丰富的配套视频资源、线上资源

w 部分案例配以Python代码讲解

前言

人工智能和大数据技术使我们对未来的社会产生了很多期待，但同时这些高端技术的发展瓶颈也越来越清晰。我们知道，AI 的力量来自大数据，但我们在日常工作和生活中所面临的实际场景往往只有小数据。在法律这个应用领域，获取一个完整的案例样本往往需要很多的时间和资源：每一个案子的处理要经过很多步骤，从立案到结案可能需要几年的时间；毫无疑问，如此积累起来的完整案件样本数量非常少。金融领域也是如此，比如积累的洗钱案例数量可能非常有限，在风控建模中，如果把反洗钱案例看成正样例，那么这样的正样例数据非常珍贵。在医疗领域，CT 胸片的自动检验和诊断需要专业医生来标注数据，但医生的时间十分宝贵，因此对于罕见疾病，能获得的病例数据更是少之又少。

这些例子说明，在现实中能获取的往往是小数据。如果把这个情况延展开来，我们会看到，在人工智能的主战场，如无人车、智能终端等，每一台设备上的数据也是有限的，每一个数据集都不足以建立可用的机器学习模型。

那么，我们可不可以把这些数据汇聚起来形成大数据呢？长久以来，工业界聚集大数据的办法就是在云端上传众多终端的数据集，形成大数据。我们熟知的包括图像训练数据集如mageNet，语音训练数据集如Common Voice，自然语言训练数据集如bAbi 等。

应该说，用这种方式获取的大数据为人工智能的发展开创了很好的先例。但是，现代社会不仅要有强大的技术，同时对技术的社会责任也有严格的限定。随着人工智能和大数据技术的不断发展，社会和政府也对数据的权益和保护有了逐步完善的监管法律法规。例如，欧盟在2018 年施行了《通用数据保护条例》（General Data Protection Regulation，简称GDPR），我国对数据的保护也日趋完善，从国家机关到地方政府，各行各业的数据隐私保护立法日趋完善。所以，一方面人工智能和大数据技术为人类的发展提供了光明的前景和技术保障；另一方面，人类自身的权益保护又限制了数据按照粗放方式进行简单的汇聚。那么，如何在这两者之间找到平衡点，继续推动技术向前发展呢？

在这里，我们给大家讲一个小故事。2018 年，本书的作者之一杨强教授在瑞典举办的国际人工智能大会（IJCAI）上遇到了瑞典的一位工业部长，进行了一些问答交流。对于GDPR 会不会限制欧洲人工智能的成长这一问题，这位部长的回答是：虽然看上去GDPR 会限制人工智能的发展，但是他希望欧洲公司有提出一些满足GDPR 的人工智能方案的理想。今天看来，这个想法是非常好的，因为如果真的做到了，人工智能的技术就能够螺旋式上升，掌握这一技术的人就可以走在世界的前列。

我们看到，随着数字经济的发展，数字经济也演变成“数据经济”，其特点是数据本身成为了重要的生产要素，而数据的交易和流通要满足数据监管及保护数据隐私的要求。

这个趋势在全世界范围内将形成一个新的数据化潮流，因为不管是政府还是社会，人们对数据隐私的安全保护都是非常在意的。今天，一项新技术正在中国蓬勃发展，这项技术就是联邦学习。

联邦学习的技术产生于上述的社会和法律背景下。联邦学习的目的是，不管在面对单个消费者的to C 场景，还是面对企业或机构的to B 场景，都希望各自的数据可以不出本地，数据集不为其他人所有，保护用户隐私和数据权益。在这一要求下，数据的价值可以同时得到充分体现。机器学习模型在极小损失的前提下，能够达到和传统数据汇聚几乎一样的效果，并且这个模型能够为所有参与者使用。

不久前，本书的作者团队出版了世界第一本联邦学习的书籍，包括中文和英文版。在该书中，我们做了一个形象的比喻来描述联邦学习的思想：把联邦学习训练模型的过程类比成喂养一只羊。过去的做法是把草放到羊圈里喂养，就像把数据聚合到中心服务器来建立机器学习模型。但出于隐私利益的考虑，草不能离开本地。为了满足这一要求，且让羊持续得到喂养，我们可以带着羊去访问各个草场，同时保证在这个过程中不泄露隐私。这样，羊可以长大，隐私也可以受到保护。

联邦学习就是采用上面这种分布式隐私计算的思想：在多方合作建模过程中，各方不交换原始数据；在建立模型的过程中，各方可以交换加密后的参数，以保护用户隐私。这就需要我们做几个层面的研究和工程实现，包括分布式建模、安全合规、抵御攻击、网络设计、计算效率、加密算法、边缘计算、生态建设和激励机制等。所以，联邦学习是一个多学科交融的领域，也特别适合跨学科研究。

关于联邦学习，我们常说的有两句话。第一句话是“数据不动模型动”，这是联邦学习的核心，让模型在不同机构之间、端和云之间进行沟通交流。它产生的效果是什么？就是第二句话——“数据可用不可见”。这里所说的不可见，是别人看不见你的数据，你也看不见别人的数据，即数据和模型都保留在本地，建模的过程也保证了数据的安全。

本书在阐述联邦学习原理的同时，着重描述了联邦学习的落地应用实践，以联邦学习开源平台FATE 为基础，涵盖多个领域。既可以为工业实践者提供很好的应用案例，也可以手把手地为初学者引路。读者可以在粗通人工智能及机器学习基本知识的前提下，在本书指引下深入了解人工智能项目落地实践的过程。

总之，我们建立的人工智能体系离不开人的因素，而保护人的隐私是当下人工智能发展中特别重要的一个方面。这也是从政府到个人、企业及社会的要求。另外，人工智能的发展也需要保护模型的安全，保证用户的隐私不被泄露，使用户的权益得到保障。我们衷心希望读者朋友们能够从本书中窥见人工智能的未来，并动手建立负责任的、可信赖的、安全的人工智能和大数据的社会。

本书的部分案例章节有对应的代码实现，读者可以在GitHub 网站上查找本书配套的资源。其中，第3 章、第10 章和第15 章的案例使用了Python 实现；第4 章、第5 章、第8 章和第9 章的案例使用了联邦学习平台FATE 实现；第11 章、第12 章和第13 章是实际的落地案例，由于签署了保密协议，我们不会对外公开这部分的代码细节。书中所涉链接，读者可以扫封底二维码获取。

基于本书和《联邦学习》一书的内容，本书作者杨强教授、刘洋老师在香港科技大学开设世界上首批“联邦学习”的全日制研究生课程（2021 年春季学期启动）。相关教学资源（链接0-1），包括视频、课件等，已部分对外开放。

联邦学习目前正处在高速发展的阶段：一方面，联邦学习的理论知识仍在不断完善和丰富；另一方面，随着联邦学习的应用越来越广泛，很多新的挑战和新的解决方案也会陆续产生。因此，虽然本书力求在理论和实践上都能兼顾最新的发展趋势，但难免有遗漏或者不完善的地方。欢迎读者提出宝贵意见，帮助我们不断完善本书的内容。

杨强，黄安埠，刘洋，陈天健

2021年3 月，中国，深圳

联邦学习实战

内容简介

作者简介

编辑推荐

前言

目录

产品特色