广告
广告
微众银行分布式机器学习算法“联邦学习”的三种学习模式
您的位置 资讯中心 > 产业新闻 > 正文

微众银行分布式机器学习算法“联邦学习”的三种学习模式

2019-11-29 16:14:40 来源:中国金融时报网 点击:878

【大比特导读】这样的模型不仅需要一个机器学习算法,更需要一个分布式的机器学习算法。在分布式的机器学习算法之上,还要有各种加密的算法。在这个基础上,一共有三种模式来进行联邦学习。

2019年世界人工智能大会在上海世博会中心拉开帷幕,海内外大咖齐聚,学术界、工业界交汇,共同讨论人工智能的未来。“联邦学习”,英文叫“Fed-erated Learning”,数据的各个拥有方,在各自数据不出本地的情况下建立模型,并且让这个模型能够共享,那么在建立模型的过程中便不会侵犯用户的隐私,整个建模的过程就叫联邦学习的框架和算法。

微众银行首席人工智能官杨强教授也在大会中表示:联邦学习已经成为AI在学术界和工业界的新趋势,未来行业面临的社会大众的要求和监管会越来越严格,联邦学习能够在满足用户隐私保护和数据安全需求的同时,实现多方共赢。

Google在2016年就开始进行一个项目,在安卓系统的手机用户中建立联邦学习,解决用户个人终端设备的数据隐私问题。首先初始化模型下载到各终端,各终端根据自己本身的数据更新模型参数,不同的终端就会产生不同的更新结果,这些更新被送到云端进行聚合,汇总后的模型参数将作为下一次更新的初始参数,这样一直迭代直到收敛。用这样的一个方法既能保证用户隐私,同时又能共享一个通用模型,利用群体智能在云端不断更新。

微众银行分布式机器学习算法“联邦学习”的三种学习模式

这样的模型不仅需要一个机器学习算法,更需要一个分布式的机器学习算法。在分布式的机器学习算法之上,还要有各种加密的算法。在这个基础上,一共有三种模式来进行联邦学习。

第一种叫做横向联邦学习

横向联邦学习是指当两个数据集的用户不同,重叠较少,但用户特征重叠较多时,我们把数据集按照横向(即用户维度)切分,并取出双方用户特征相同而用户不完全相同的那部分数据进行训练。

第二种叫做纵向联邦学习

纵向联邦学习是说两个数据集的用户特征重叠较少,但它们却有较多的重叠用户,那么我们就把数据集按照纵向(即特征维度)切分,并取出双方用户相同而用户特征不完全相同的那部分数据进行训练。

第三种叫做联邦迁移学习

如果两个数据集既不重叠用户特征,又不重叠用户,那么在这个场景下,微众银行也提出一个新的算法,叫做联邦迁移学习。它可以利用迁移学习的算法,把这两方数据模型的本质挖掘出来,把抽象的模型加以聚合,在聚合的过程中保护用户隐私,也取得了非常大的成功。

声明:转载此文是出于传递更多信息之目的。若有来源标注错误或侵犯了您的合法权益,请与我们联系,我们将及时更正、删除,谢谢。

分享到:
阅读延展
人工智能 算法 机器学习
  • Micro LED终端应用进程加速

    Micro LED终端应用进程加速

    据雷曼光电技术研究中心高级总监屠孟龙介绍,Micro LED像素引擎显示技术通过将LED芯片硬件排布与软件算法有机结合,在不大幅增加成本的前提下,大幅提升Micro LED显示屏的分辨率。

  • 林扬淳出任芯华章研发副总裁,推动国产EDA融合创新

    林扬淳出任芯华章研发副总裁,推动国产EDA融合创新

    近日,芯华章宣布林扬淳(YT Lin)于 2020 年 8 月 31 日加盟芯华章,出任芯华章科技研发副总裁一职。值得一提的是,林扬淳在 EDA 领域拥有 30 余年的深厚造诣,具备丰富的软件架构设计、算法创新、工程团队组建与管理以及客户合作经验。他在 Cadence 和 Synopsys 曾带领团队创建一系列 EDA 产品。

  • 今年第二季度中国可穿戴设备市场回暖

    今年第二季度中国可穿戴设备市场回暖

    在手表类产品的带动下,腕式可穿戴设备在消费市场上展现出强劲的增长势头,其传感器和算法技术的升级,不仅在持续吸引更多用户尝试或更新腕式设备,也在推动监测数据种类多样化的基础上,为其今后在运动、健康乃至医疗方面的服务拓展提供了更多可能。

  • 机器视觉与图像传感器的演变

    机器视觉与图像传感器的演变

    机器视觉技术利用图像识别算法对图像中的物体进行识别,在工业自动化,机器人,农业无人机和三维建模等广泛应用中实现更细致,更准确的物体图像无失真。

  • 乘着大数据“东风” 美云智数助推东风汽车技术中心数字化应用

    乘着大数据“东风” 美云智数助推东风汽车技术中心数字化应用

    不得不说,双方的此次合作颇为不易。除了要攻克在数据采集、算法框架搭建、基础语料梳理验证等技术方面的难点,联合开发过程开始时,恰好正值新冠疫情在国内爆发。“举国上下封锁城封路的情况下,项目规划、实施推进、沟通等严重受阻。”技术中心相关负责人坦言合作中的不易。

  • 研发自主移动机器人产品,隆博科技获得千万元战略融资

    研发自主移动机器人产品,隆博科技获得千万元战略融资

    隆博科技研发的服务型机器人在行业内有领先优势,智能机器人操作系统不仅能集成相应智能算法,更与各类传感器和执行机构进行无缝对接。

  • 意法半导体推出内置机器学习内核的高精度测斜仪

    意法半导体推出内置机器学习内核的高精度测斜仪

    中国,2020年8月26日——意法半导体的IIS2ICLX是一款高精度、低功耗的双轴数字测斜仪,用于工业自动化和结构健康监测[0]等应用,具有可设置的机器学习内核和16个独立的可设置有限状态机,有助于边缘设备节能省电,减少向云端传输的数据量。

  • 物联网技术及相关产业正处在蓬勃发展阶段

    物联网技术及相关产业正处在蓬勃发展阶段

    根据报告,在预测期内,数据分析和机器学习解决方案部门将拥有更大的市场规模。这是因为需要对跨行业垂直领域的连接设备产生的大量数据进行分析。

  • 博彦科技助企业摆脱大数据应用困扰

    博彦科技助企业摆脱大数据应用困扰

    针对企业的这些困扰,博彦科技推出了基于Hadoop底层的大数据管理平台,帮助企业快速打造大数据服务中心,构建数据集市,服务于特定需求,便于数据的攫取及操作;同时,针对流数据处理,形成统一的数据标准。通过数据加工,可直接应用于业务。并通过机器学习将数据形成特征,创建模型。

  • 怎样选择合适的物联网平台

    怎样选择合适的物联网平台

    数据增长越多,处理起来就越困难,这需要立即处理。当公司能够处理大量数据时,机器学习算法可以帮助获得更好的商业智能,这反过来又可以帮助做出更好的决策。

  • 意法半导体推出双轴测斜仪芯片,搭载可编程机器学习内核

    意法半导体推出双轴测斜仪芯片,搭载可编程机器学习内核

    IIS21CLX的操作范围为-40℃至+105℃,温度达到25℃之后,灵敏度随温度变化的范围为-0.012至+0.012%/℃。数字输出更新速率可从12.5到883Hz不等。

  • 预计到2025年,全球物联网市场规模将达到9000亿美元

    预计到2025年,全球物联网市场规模将达到9000亿美元

    在短期内,重点在于软件工具和云。而从长期来看,需要对运营进行数字化转型。这样,大部分物联网收入是由利用数据产生洞察力知识的应用程序、平台和服务产生的。“有用”数据的数量增长以及人工智能和机器学习的进步,将使得数据分析的适用性和价值继续提高。

微信

第一时间获取电子制造行业新鲜资讯和深度商业分析,请在微信公众账号中搜索“大比特商务网”或者“big-bit”,或用手机扫描左方二维码,即可获得大比特每日精华内容推送和最优搜索体验,并参与活动!

发表评论

  • 最新评论
  • 广告
  • 广告
  • 广告
广告
Copyright Big-Bit © 2019-2029 All Right Reserved 大比特资讯公司 版权所有       未经本网站书面特别授权,请勿转载或建立影像,违者依法追究相关法律责任