90后华裔教授一年连发三篇Nature子刊!首个量子神经网络QuantumFlow开源
神经网络是当下计算应用中发展最快,使用最广的机器学习算法。然而,随着应用不断复杂化导致网络结构不断扩大,存储性能瓶颈已逐渐凸显。
在传统计算平台上,N个数字比特只能表示 1 个N位数据,然而在量子计算中,M个量子比特却同时能表示2^M个数据,并能同时操作这些数据。
量子计算机如此强大的存储与计算能力,使其拥有巨大潜能打破神经网络在传统计算平台上的性能瓶颈,获取量子优势。
量子神经网络是根据量子计算机的特性设计的神经网络。具体而言,研究者们根据量子计算机所提供的基本计算单元(即量子逻辑门)进行量子线路设计,以实现神经网络的计算。
今年 1 月,美国乔治梅森大学姜炜文教90授在《自然通讯》期刊,提出了第一个神经网络/量子计算协同设计框架 QuantumFlow。这也是其一年内,继两篇《自然电子》后的第三篇 Nature 子刊。
https://www.nature.com/articles/s41467-020-20729-5
该框架第一次展示了通过协同优化神经网络结构与量子线路设计,可以较传统计算机获得指数级加速。
图 1 基于 QuatnumFlow 量子神经网络设计栈
基于 QuantumFlow,由姜教授带领的 JQub 团队在今年 10 月举行的 QuantumWeek’21 和 ESWEEK’21 中,开源了 QuantumFlow 的量子神经网络编程框后华架,QFNN。
并在即将召开 ICCAD’21,添加了两个新成员:
(1)第一个对噪声感知的量子神经网络训练器 QF-RobustNN;
(2)基于不同量子神经元设计的量子神经网络结构设计器 QF-Mixer。
至此,第一个开源量子神经网络设计栈横空出世,为量子神经网络应用提供了坚实基础。
QFNN
在刚刚结束的 QuantumWeek 会议上,JQub 团队开源了由胡芷瑞研究员主要参与设计的量子神经网络(Quantum Neural Network)编程框架,QFNN。
https://github.com/JQub/qfnn
QFNN 以 Pytorch 和 IBM Qiskit 为基础,为实裔教现了神经网络在量子电路进行训练和推理提供了基础函数。研究人员可以通过简单调用少数函数,便可以轻松构建可以在 IBM 量子计算机上进行部署的针对神经网络推理的量子电路。
QFNN 不仅支持 QuantumFlow 的所有功能,同时也支持其它量子神经网络设计,包括 Variational Quantum Circuits(VQC)。
除此之外,QFNN 还提供了量子神经网络电路相对应的经典计算模拟,可以用于验证量子神经网络的正确性以及辅助量子计算机进行模型训练。
图 2 QuantumFlow 协同设计框架
在对 QuantumFlow 的支持上,QFNN 采用与 QuantumFlow 中的结构相授一同。如图 2 所示,该框架分为四个模块,包括 qf_circ,qf_net,qf_fb 和 qf_map。
目前 QFNN 支持 QuantumFlow 中的所有模块,并在 QF-Net 中,加入了对 VQC 等量子电路的支持。
利用 QFNN,研究者可以快速搭建量子机器学习电路,在经典计算机上对网络进行训练,在量子平台上进行推理。
同时,QFNN 还支持量子网络结构的探索,即 QF-Mixer。QFNN 在 github 上进行开源,并欢迎有兴趣者共同开发,加入更多的基础量子神经元实现与量子神经网络实现。
QF-RubostNN
在即将于 11 月 1 日召开的 ICCAD 会议上,JQub 团队提出了首个通过训练年连,在量子网络中学习量子位误差的研究工作,即 QF-RubostNN。
https://arxiv.org/pdf/2109.03430.pdf
该研究由梁之鼎博士生主要参与,提出了一个通用的训练框架来进行错误感知学习,这个框架将解决部署神经网络到近期嘈杂的中级量子(NISQ)时期的核心问题:如何抵抗噪声对神经网络推理的影响。
虽然量子计算发展非常迅速,但是目前量子比特在量子机器上的错误率会达到 10^-2,和经典比特在经典的 CMOS 机器上大约 10^-15 的错误率对比无疑是个巨大的差距。
对此,JQub 团队设计了 QF-RubostNN 做出了第一个将噪声学习到量子神经网络发三的尝试,展示出了量子神经网络的容错性:在量子模拟器和 IBM 量子机器上分别运行了 QF-RubostNN,并极大地提升了量子神经网络的推理精确度。
图 3 QF-RubostNN 产生的总体框架简图
QF-RobustNN 最上层的训练权重由量子神经网络,如 QuantumFlow 产生。在每次循环中的训练权重会产生对应的量子线路,此时是在逻辑量子位上的逻辑量子线路,经过设计出的特定应用的量子映射,逻辑量子位被映射到物理量子位,由此便有了对应的物理量子线路。
再将物理量子线路运行在量子机器或者量子模拟器中,得到模型准确率的输出,通过训练框架找到在这时候的噪声下表现最好的训练篇N权重,最后将搜索到的训练权重更新到最上层的训练权重。
这种方法固定初始到结束的逻辑-物理量子映射的规律,使错误可以被预估,并且也可以有效减少附加门的数量,从而降低消耗。
图 4 QF-RobustNN 在不同噪声模型下,对准确率的测量结果
QF-RobustNN 采用在 0 噪声环境(perfect model)下表现最好的训练权重当作实验的 Baseline,通过改变模型的 Error rate(噪声情况)观察 QF-RobustNN 的实现。
在实验结果中可以看到,经过 QF-RobustNN 的准确率相较 baseline 的情况有所提高,而且值得注意的是,随着错误率增加,QF-RobusattNN 对准确率的推动作用更加明显,最高达到了 28% 的效果。
该实验展示了量子神经网络学习量子位错误的可能性,在 NISQ 时代的量子机器,噪声是极大的问题与挑战。实验结果展示了 QF-RobustNN 的有效性。
QF-Mixer
QF-Mixer 是由汪哲鹏博士生主要参与,是第一个探索量子神经网络设计的文章。
https://arxiv.org/pdf/2109.03806.pdf
伴随着量子神经网络在近年来的蓬勃发展,一系列关于量子神经元 (quantum neuron)设计的工作开始涌现。
这些工作通过堆叠各自提出的量子神经元搭建量子神经网络,在简单的机器学习任务中 (比ur如 MNIST 2 分类问题)可以取得较高的准确率。然而,当应用于更复杂的机器学习任务(比如 MNIST 10 分类问题)时,该类量子神经网络的准确率便会大打折扣。
基于这样的现状,QF-Mixer 提出了要混合不同种类的现有的量子神经元来构建一个性能更高的异构量子神经网络。
图 5 混合量子神经元的挑战与 QF-Mixer 设计理念
然而,搭建这样的异构量子神经网络并非易事。
首先,不同的量子神经元对输入和输出的量子态 (quantum state) 有着不同的要求,任意地连接两类神经元往往无法达到这些预设的要求。
其次,不同的神经元在计算上也有着不同的特性和逻辑,更高的准确率未必能通过e子混合不同神经元达到。只有找到合适的神经元组合,才能起到1+1>2 的效果。
针对第一个问题,QF-Mixer 给出了一套在混合不同神经元时需要遵循的准则,这为异构量子神经网络的设计提供了理论支持。
针对第二个问题,JQub 团队发现 Quantumflow 中的量子神经元和变分量子电路 (Variational Quantum Circuit)有着极为互补的特性。
一方面,Quantumflow 中的量子神经元 (QF-量子神经元) 的可学习参数是二值化的,在表达能力上有着较大的限制。变分量子电路的可学习参数则为任意实数。因此,变分量子电路可以为 QF-量子神经元提供更强的表示能刊!力。
另一方面, 变分量子电路仅是一个线性分类器,QF-量子神经元则可以轻松地搭建起拥有多个非线性层的量子神经网络。QF-量子神经元可以帮助变分量子电路构建出更为复杂的模型。
基于上述观察,QF-Mixer 提出了 QF-MixNN,一个混合了 QF-量子神经元和变分量子电路的异构神经网络框架。QF-MixNN 在遵循了 QF-Mixer 提出的混合准则的同时,也在不同的数据集上展现出了更高的准确率。
图 6 QF-Mixer 在 10 类分类问题取得高精度
这一点在图 6 中的表格中也得以体现。可以看到,在 MNIST 数据集上,QF-量子神经元构成的神经网络和变分量子电路均表现不佳,分别仅首个有 52.77% 和 69.92% 的准确率。
与此同时, QF-MixNN 则有着相当亮眼的表现。它在 MNIST 上取得了超过 90% 的准确率。对比 QF-量子神经元构成的神经网络和变分量子电路,准确率的提升分别为 20.7% 和 37.85%。
JQub 团队介绍
姜炜文助理教授于 2021 年加入乔治梅森大学并建立了量子-经典计算机辅助设计实验室(JQub)。
并在《自然通讯》期刊,量子计算机周(QuantumWeek),嵌入式系统周(ESWEEK),以及计算机设计会议(ICCAD)上发表多篇文章,并进行在线课程辅导(Tutorial)讲座。
作者简介
项目领导人姜炜文目前量子是乔治梅森大学助理教授。他于 2019 年获重庆大学博士学位;2017 年到 2019 年,曾在匹兹堡大学电子和计算机工程系参与研究工作;2019-2021 年,曾在圣母大学做博士后研究助理。
博士期间,姜炜文在国际会议和主要期刊上发表了 50 多篇研究论文,其中包括 10 多篇 IEEE/ACM 会刊论文,他在硬件加速和神经网络结构方面的合作研究获得了 IEEE TCAD 2021 最佳论文,以及 DAC’19,CODES+ ISSS’19 和 ASP-DAC’20 最佳论文提名。
他在神经网络和并行系统等方面的研究工作引起了业界的广泛关注,得到了美国国家科学基金会国际自然科学联合会的科研基金,与 I神经BM,Facebook、 Edgecortix inc. (日本/新加坡) 等公司开展了合作研究。
(责任编辑:国货品牌)
-
云梦级3月27日云梦级消息,建设银行27日公布2025年度经营业绩。数据显示,建行2025年实现经营收入7408.71亿元,增幅1.69%;净利润3397.90亿元,增幅1.04%;归母净利润3389...[详细]
-
据路透社报道,苹果周二警告称,从2021年开始,苹果可能会从App Store删除未经允许跟踪用户的应用程序。此举有望提高iPhone用户的隐私,但可能会动摇应用程序广告行业。报道称,这项名为App...[详细]
-
云梦级12月16日云梦级消息,“没有卖不出去的车,只有卖不出去的价格。”这个市场定律,在玛莎拉蒂身上再次得到验证“30多万的格雷嘉卖得‘飞’起来。” 据第一财经报道,近日,上海一家大型玛莎拉蒂经销商管...[详细]
-
技术、行业与伙伴:做厚算力“黑土地”为基,华为云再筑AI新生态
随着大模型的兴起和算力需求的爆发式增长,全球范围内的云厂商都在探索新的路径,而构建开放共赢的生态已成为行业共识。尤其是中国,如何在复杂的外部环境和激烈的市场竞争中走出一条自主可控、生态繁荣、行业深耕的...[详细]
-
用于对象检测、对象识别和分割任务的自动注释解决方案。 你好,朋友们。在这篇博客文章中,我想分享我们在使用人工智能技术自主生成数据标签方面所做的工作。 我们的全文可在此处获得-https://lnkd....[详细]
-
为“传唤朋友”铺路?OpenAI被曝索要轻生少年追悼会完整名单
根据AIbase报道,OpenAI正在采取行动,要求Raine家族提供其16岁儿子Adam Raine追悼会的完整人员名单及相关资料,此举被Raine家族律师斥为“故意骚扰”,并暗示这家人工智能公司可...[详细]
-
云梦级5月18日云梦级消息,据看看新闻报道,在建的京东上海总部大楼“歪”了。记者在现场看到,建筑顶部脚手架的确发生倾斜。工程项目经理表示,建造平台爬升架的爬爪松脱,造成部分脚手架外架扭曲变形,主体结构...[详细]
-
云梦级12月6日云梦级消息,重庆宇隆光电科技股份有限公司(简称:“宇隆科技”)日前递交招股书,准备在深交所创业板上市。宇隆科技专注于新型半导体显示面板领域的智能控制卡及精密功能器件相关产品的研发、生产...[详细]
-
12月23日消息,据国际数据公司(IDC)近日发布的《中国云运营服务市场(2020上半年)跟踪》报告显示,2020上半年,中国整体云运营服务市场规模为100.8亿元人民币,同比增长19.5%。 报告指...[详细]
-
职场人最头疼的时刻莫过于此:两个重要会议撞车,左右为难;突发紧急事件,不得不中途离场,却担心错过关键决策。这些令人焦虑的会议困境,如今有了完美的解决方案。 腾讯会议在9月11日正式推出的AI托管功能,...[详细]
- https://xehay.vn/tim-kiem/=谷歌自动批量发帖软件【tg:seogoogle987】,F82
- https://www.swanagerailway.co.uk/search?q=谷歌自动批量发帖软件【tg:seogoogle987】,0wk
- https://www.vfw.org/search-results?q=谷歌自动批量发帖软件【tg:seogoogle987】,ZU6
- https://www.nbm.org/?action=QUERY&s=谷歌自动批量发帖软件【tg:seogoogle987】,tCL
- https://store.line.me/search/sticker/ja?q=谷歌自动批量发帖软件【tg:seogoogle987】vmc
- https://www.manga-news.com/index.php/recherche/?q=谷歌自动批量发帖软件【tg:seogoogle987】,Dso
- https://www.zutari.com/search/谷歌自动批量发帖软件【tg:seogoogle987】,hQd
- https://www.merchbar.com/search?q=谷歌自动批量发帖软件【tg:seogoogle987】,FJR
- https://www.wheels24.gr/?action=CHECK&s=谷歌自动批量发帖软件【tg:seogoogle987】,k5B
- https://www.lee.com/search?q=谷歌自动批量发帖软件【tg:seogoogle987】,2I4

普通却自信是什么梗
标签: OpenClaw 龙虾 CNCERT 网络安全
网宿科技宣布云计算业务EdgeRay爱捷云独立运营
标签: 京东 小哥之家 快递小哥 武汉
想象一个人工智能无处不在的世界
