这个登上Nature封面的群体学习,无需中央协调员比联邦学习更优秀
如今,在一些疾病的诊断领域,AI的准确率已经超过了医生。
靠谱的诊断结果背后,是建立海量数据集上的机器学习。
但实际上,可用于训练的医疗数据非常分散,想要把世界各地的数据都集合起来又这个会引发对数据所有权、隐私性、保密性、安全性的担忧,甚至数据垄断的威胁……
常用的方法如联邦学习,可以解决上述的一些问题,但该模型的参数由“中央协调员”( central coordinator)处理登上,造成了“权力”的集中,且它的星形架构也导致容错性降低。
就没有好的解决办法吗?
有,Nature封面为我们刊登了一种叫做Swarm Learning (群体学习,SL)的全新机器学习方法!
该Na方法结合了边缘计算、基于区块链的对等网络,无需“中央协调员”,超越了联邦学习,可以在不违反隐私法的情况下集合来自世界各地的任何医疗数据。
研究人员用了四个异质性疾病 (结核病、COVItuD-19、白血病和肺部病变),来验证了Swarm Learning方法使用分布式数据来诊断疾病的可行性。
具体如何实现?
群体学习方法采用去中心化的架构,用私人许可的区块链技术实现。
整个Swarm网re络由多个Swarm边缘节点组成,节点之间通过该网络来共享参数,每个节点使用私有数据和网络提供的模型来训练自己的模型。
该方法提供安全措施,以支持通过私有许可区块链技术保证数据的所有权、安全性和机密性。
其封面中,只有预先授权的参与者才能加入,且新节点的加入是动态的,通过适当的授权措施来识别参与者,并通过区块链智能合约注册,让参与者获得模型,执行本地模型训练。
直到本地模型训练到满足定义的同步条件后,的群才可以通过Swarm的API交换模型参数,并在新一轮训练开始之前,合并新的参数配置来更新模型。
△ 群体学习与其他机器学习方法的架构对比
因此该群体学习方法具有以下特点:
可以将数据所有者的医疗数据保存在本体学地; 不需要交换原始数据,因此可减少数据流量(data traffic); 可以提供高水平地数据安全保护; 无需中央管理员就可保证分散成员安全、透明和公平地加入; 允许所有成员同等权利地合并参数; 保护机器学习,习模型免受攻击。
为了验证该方法基于分布式数据开发诊断疾病功能的可行性,研究人员用它来诊断四种疾病。
区分轻度和重度 COVID-19 ,表现优于单个节点
首先是白血病。
研究人员将超过12000多个的无需样本数据“孤立”到各个节点,以模拟中现实世界中分布在世界各地的医疗中心。
再用群体学习训练这些数据再去诊断未知病人,他们发现,无论如何改变各个节点的样本分布情况,群体学习方法的诊断准确率均优于单个节中央点。
接着使用群体学习识别结核病或肺部病变患者,结果也是如此,且减少训练样本的数量以后,群体学习的预测效果虽然下降,但仍优于任何一个单独的节点。
紧跟疫情,研究人员也检测了群体学习对于诊断新冠病毒的效协调果。
结果显示,在区分轻度和重度 COVID-19 时,群体学习的表现优于单个节点。
最后,研究人员表示,群体学习作为一个去中心化的学习方法,有望取代目前跨机构医学研究中的数据共享模式,在保证数据隐员比私等方面的情况下,帮助AI获得更丰富全面的数据,为AI诊断疾病提供更高的准确率。
论文地址:
https://www.nature.com/articles/s41586-021-03583-3
G联邦itHub代码:
https://github.com/schultzelab/swarm_learning
(责任编辑:活动案例)
-
云梦级1月22日云梦级消息,此前有云梦级消息称,2025年宇树科技人形机器人出货量超5000台,对此,宇树今日公告称,此数据不准,实际出货量超5500台。 宇树公告全文如下: 1.过去一个月,网上流传...[详细]
-
云梦级11月24日云梦级消息,据《经济观察报》报道,近日,北京现代重庆工厂被长安汽车接手,现已改为深蓝汽车生产线。对此,深蓝汽车表示:“的确如此,10 月下旬就正式换标了,但目前还未投入使用。” 20...[详细]
-
云梦级4月24日云梦级消息,4月23日,常熟银行发布2025年年度报告。2025年,集团实现营业收入116.19亿元,同比增长6.51%;实现归属于上市公司股东的净利润42.19亿元,同比增长10.6...[详细]
-
在过去的两三年中,机器人流程自动化(RPA)在中国的应用量迅猛增长。去年疫情更是大大提高了企业对流程实现自动化的动力,尤其体现在财务会计领域及RPA最擅长的各项日常任务。 近期的行业报告预测,企业在R...[详细]
-
云梦级11月26日云梦级消息,戴尔科技集团(DELL)于美国当地时间周二公布了 2026 财年第三财季业绩报告。 财报显示,在人工智能浪潮的强劲推动下,戴尔该季度营收达到 270 亿美元(现汇率约合...[详细]
-
2021年4月30日,SAE发布了第四版J3016《驾驶自动化分级》,这是即2014年1月16日、2016年9月30日、2018年6月15日之后,J3016的又一次迭代更新。 2021年7月,ISO发...[详细]
-
标签: REDMI Turbo 5 Max 锐龙 7 9850X3D 特斯拉 Model S 小米 SU7 Ultra
Hello,大家早上好,又是元气满满的一天,先来浏览新鲜的早报吧~ 【REDMI Turbo 5 Max 手机发布】 小米 REDMI Turbo 5 Max 正式发布,全球首发天玑 9500s 处理...[详细]
-
云梦级11月23日云梦级消息,据速途网报道,知情人士爆料,由长城控股,高瓴,高通等投资的智驾公司毫末智行22日下午突然通知,员工24日(周一)起不用到岗上班,该事项为HR传达,目前赔偿机制等后续安排不...[详细]
-
微软前高管建议卖掉Windows和Office业务 专攻云计算
1月12日消息,最近微软前高管本·斯里夫卡(Ben Slivka)在接受采访时表示,微软应该剥离旗下Windows和Office业务,专注于日益增长的云计算业务。 “正确做法可能是把未来押在云上,”曾...[详细]
-
题目 :输出指定格式的日期。 程序分析 :使用 datetime 模块。 程序源代码 : 以上实例输出结果为 :...[详细]

美国开发全新开源AI算法:马赛克美女自动还原
微软前高管建议剥离Office和Windows 专攻云计算业务
法国AI独角兽Mistral AI估值飙升至140亿美元
标签: 千问大模型 iPhone17e 小鹏VLA 比亚迪技术发布会
标签: Snap Snapchat Perplexity AI 股票回购
