网易首页 > 网易号 > 正文 申请入驻

用上傅里叶变换,很快啊,AI几秒钟就能解出偏微分方程

0
分享至

边策 明敏 发自 凹非寺
量子位 报道 | 公众号 QbitAI

最近的气温真是忽高忽高、让人琢磨不定,但所幸天气预报都还很准确,没有和大家开玩笑。

不过,你知道这些准确的气温预测,是通过解方程算出来的吗?

不仅如此,靠解方程还能模拟飞机空气动力、疾病传播模型!

是什么方程这么厉害?我学过吗?

它就是偏微分方程(PDE),在我们的世界中无处不在。

但在实际应用中,用计算机求解偏微分方程的难度很大,往往为了求出一个解而需要大型机器运行一个月

并且,随着科研中遇到问题的复杂度、运算量逐渐增加,也就更需要高效快速的求解方法。

最近,来自加州理工大学的一个研究团队就用AI来解决这一难题,他们开发了一种新的神经网络,比传统的PDE求解快几个数量级,并且在理论上适用于任何偏微分方程。

甚至连流体力学里的“老大难”:N-S方程也不在话下!

对于简单方程的求解,这种方法只需几秒就能解出答案,而传统方法需要18个小时!

训练神经网络=求解PDE

神经网络的本质是逼近一个函数,函数是从一个变量到另一个变量的映射。

比如图像识别网络,就是把输入的图像数据,与最后的分类结果之间建立映射关系。

训练神经网络其实就是尽可能逼近这个函数,这和数值求解PDE本质是一样的。

2016年,人们开始研究图像识别神经网络如何用于求解PDE,用成对的生成数据来训练神经网络,比如计算平面上不同基本形状(如三角形、四边形)物体周围的空气流速场。

训练数据集的输入是物体几何形状和的初始条件信息,输出是相应的二维几何物体。训练过程等于建立输入和输出之间的相关性。

训练后的神经网络,可以用于预测其他情况(比如汽车形状)的流速场,它只和与传统数值求解器的结果略有不同,但求解速度更快。

然而,对于专门研究PDE的人来说,这种方法还远远不够。

因为上面的方法精度一般达不到要求,如果想要实现更高的精度,所需的数据量和网络大小将爆炸式增长,失去了原本快速求解的意义。

从函数到算子

所以,人们想到了一种新方法,求助于“算子”。算子是一种从函数到函数的映射。

函数:数→数
算子:函数→函数

比如,正弦算子(sin)把线性函数x变成三角函数sinx,微分(求导)算子(d/dx)把三次函数x³变成二次函数3x²。

2019年,来自布朗大学和中科院的学者开发了一种“深度算子网络”(DeepONet),就是用算子的方法求解PDE。

DeepONet的特殊之处在于其分叉架构,它以两个并行网络处理数据,一个是“分支”和一个“主干”。

“分支网络”学习生成算子,也就是对输入端函数进行近似,“主干网络”负责对输出端函数进行同样操作。然后,DeepONet结合两个网络的输出,得到PDE的解。

虽然DeepONet相比PDE数值求解器速度惊人,但是它需要在训练期间进行密集计算。当必须使用大量数据训练使算子越来越精确时,可能会存在问题。

那么神经算子能加速PDE求解吗?

傅里叶变换

后来,加州理工大学与普渡大学的团队,开发了另一种新的方法——“傅里叶神经算子”(FNO)

FNO比DeepONet在计算上要更加简单,因为DeepONet还要浅层网络去近似模拟算子,而FNO有现成的方法可用,就是傅里叶变换。

有些音乐软件显示的频谱图,其实就是一种傅里叶变换,它把连续变化声音信号转换到频率空间中。

经过傅里叶变换,原来函数之间的卷积,在频率空间中变成了更简单的乘积。

FNO的核心是傅里叶层。

傅里叶层会在训练数据推送到神经网络的单层之前,对其进行傅里叶变换,然后用一个线性变换R过滤掉其中的高频部分,再通过傅里叶逆变换的得到原空间的函数。

FNO可以显著提高求解PDE的速度。在一个求解NS方程的例子中,需要3万次模拟,FNO求解时间不到一秒,DeepONet耗时2.5秒,而在这种情况下,传统的求解器需要18个小时。

团队介绍

该研究的第一作者是Zongyi Li,是加州理工计算机和数学系的一名博士二年级学生。研究方向为机器学习、理论计算机科学和应用数学。

他的导师是英伟达著名女科学家Anima Anandkumar

作为AI界的风云女性,Anima不仅在研究成果上战绩斐然,在学术圈也是怼天怼地

此前,她曾在博客公开喊话,强烈反对发论文不给代码行为,呼吁学术会议强制要求投稿同时必须公开代码,以对造假论文进行追责、利于行业公平竞争。

并且为了对抗AI学术界对女性的歧视和调侃,她曾在Twitter上大战LeCun。以一己之力让顶级学术会议NIPS改了名字,避免了女性参会者的尴尬。

Anima希望学术界更关注女性的学术成就,而不是长相。当有人在她的讲座视频下夸她漂亮时,她的做法是——删评

参考链接:
[1]https://www.quantamagazine.org/new-neural-networks-solve-hardest-equations-faster-than-ever-20210419/
[2]https://arxiv.org/abs/2010.08895
[3]https://arxiv.org/abs/1910.03193
[4]https://github.com/zongyi-li/fourier_neural_operator

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

/阅读下一篇/

MiniMax押注线性注意力,让百万级长文本只用1/2700算力

返回网易首页 下载网易新闻客户端
相关推荐
热点推荐
垫射自家大门!谢维军离谱解围变乌龙,海港客场2-0领先津门虎

垫射自家大门!谢维军离谱解围变乌龙,海港客场2-0领先津门虎

直播吧
2025-04-16 18:44:10
景德镇3死后续:妈妈躯体化非常严重,肇事者父亲错过救儿子机会

景德镇3死后续:妈妈躯体化非常严重,肇事者父亲错过救儿子机会

老鹈爱说事
2025-04-16 17:57:25
贼眉鼠眼演戏差?演什么都一个样,这个美籍华人“戏混子”别演了

贼眉鼠眼演戏差?演什么都一个样,这个美籍华人“戏混子”别演了

联友说娱
2025-04-16 15:10:27
汪峰好眼力!34岁森林北游桂林晒美照,一双大长腿太抢镜了!

汪峰好眼力!34岁森林北游桂林晒美照,一双大长腿太抢镜了!

西瓜爱娱娱
2025-04-16 11:38:32
明天开始幸运降临,横财缠身,惊喜与财富倍增的生肖,恭喜

明天开始幸运降临,横财缠身,惊喜与财富倍增的生肖,恭喜

人閒情事
2025-04-16 17:31:50
孙颖莎3比1完胜简彤娟,晋级乒乓球世界杯女单16强

孙颖莎3比1完胜简彤娟,晋级乒乓球世界杯女单16强

直播吧
2025-04-16 13:55:11
难以置信!网传一大厂高管凌晨2点组织开会,不到就被边缘离职…

难以置信!网传一大厂高管凌晨2点组织开会,不到就被边缘离职…

火山诗话
2025-04-15 07:25:29
美国终于发布:6大长寿食物,鱼只能排第3,第1名你绝对想不到

美国终于发布:6大长寿食物,鱼只能排第3,第1名你绝对想不到

牛锅巴小钒
2025-04-13 13:13:18
中国转向巴西采购至少240万吨大豆!美大豆协会主席慌了:关税战将使不少农民破产

中国转向巴西采购至少240万吨大豆!美大豆协会主席慌了:关税战将使不少农民破产

红星新闻
2025-04-15 19:11:18
巴萨跨过了多特蒙德,然而……

巴萨跨过了多特蒙德,然而……

张佳玮写字的地方
2025-04-16 13:34:56
黑色织物下的时尚与矛盾美学

黑色织物下的时尚与矛盾美学

丽影绘卷
2025-04-13 18:30:03
李显龙一语道破:老美能熬死苏联,同样就能熬死东大?天方夜谭!

李显龙一语道破:老美能熬死苏联,同样就能熬死东大?天方夜谭!

大道无形我有型
2025-04-13 20:36:49
美防长结束亚太行程后,央视随即发问:如何击沉一艘美国航母?

美防长结束亚太行程后,央视随即发问:如何击沉一艘美国航母?

小晨同学啊
2025-04-16 15:24:22
美炸了!梁洛施珍珠裙造型封神,历尽千帆归来才36岁!

美炸了!梁洛施珍珠裙造型封神,历尽千帆归来才36岁!

梦涵说体育
2025-04-16 09:11:43
浙江女子家中现金无处存放!重达四吨,网友:这钱山能把房子压塌

浙江女子家中现金无处存放!重达四吨,网友:这钱山能把房子压塌

肆时说
2025-04-16 16:14:55
周总理接见鲁迅夫人许广平时,随口叫声婶婶,许广平:您喊我啥?

周总理接见鲁迅夫人许广平时,随口叫声婶婶,许广平:您喊我啥?

野史日记
2025-03-28 14:10:07
受重用!新秀扎克-埃迪11中4得14分 狂收17篮板但防守被针对

受重用!新秀扎克-埃迪11中4得14分 狂收17篮板但防守被针对

直播吧
2025-04-16 13:01:25
胡静夫妇回马来西亚参加聚会,46岁生图发际线高,朱兆祥面相好凶

胡静夫妇回马来西亚参加聚会,46岁生图发际线高,朱兆祥面相好凶

南南说娱
2025-04-16 11:56:38
退休后才发现:大多数退休老人不旅游,去旅游的一般是这4类人

退休后才发现:大多数退休老人不旅游,去旅游的一般是这4类人

布拉旅游说
2025-04-15 14:33:55
特朗普关税新政,泼天富贵砸向淘宝商家

特朗普关税新政,泼天富贵砸向淘宝商家

螳螂观察
2025-04-16 14:46:44
2025-04-16 20:23:00
量子位 incentive-icons
量子位
追踪人工智能动态
10325文章数 176104关注度
往期回顾 全部

科技要闻

华为问界M8售价公布:36.98万元起

头条要闻

拜登批特朗普"不到百天破坏力惊人" 多名前政要也发声

体育要闻

诺坎普奇迹的两位当事人,差点灵魂互换

娱乐要闻

娱乐圈的“现实”在岳云鹏身上应验了

财经要闻

增长5.4% 一季度GDP增速为何超预期?

汽车要闻

又帅又快超实用 极氪007GT猎装车才是完美的车?

态度原创

手机
旅游
游戏
本地
公开课

手机要闻

荣耀Power线下上手体验:不吐不快,说说真实感受

旅游要闻

热闻|清明假期将至,热门目的地有哪些?

《龙腾世纪4》价格还在跌!豪华版已降至30美元

本地新闻

云游湖北 | 七仙女都爱的山水,双峰米酒一口上头

公开课

李玫瑾:为什么性格比能力更重要?