网易首页 > 网易号 > 正文 申请入驻

金融大模型应用面临三大挑战,联邦学习是否是破局关键?

0
分享至

界面新闻记者 | 刘晨光

近年来,以大模型为代表的AI技术进入发展快车道,成为当下最受大众瞩目的热点话题。

伴随大模型技术的飞速发展,全球人工智能技术发展和应用迭代速度都得到了极大提升,大模型技术也被认为是通用人工智能技术的核心引擎。

工信部发布的数据显示,截至2023年6月,我国人工智能核心产业规模已经达到5000亿,人工智能企业数量超过4400家。

7月2日,在“大模型时代AI前沿与金融应用”为主题的微众媒体学院会议上,业内专家普遍认为,以金融为代表的大模型技术在发展应用中显现三大挑战:一是从算力角度,大模型的训练过程中需要庞大的硬件算力资源支撑,大模型参数规模呈持续扩张趋势,对算力提出了更高要求;二是从算法角度,大模型生成内容可能存在安全风险,同时广泛存在隐形偏见的可能性;三从数据角度,近年来各项法律法规对私域数据的使用有“数据可用不可见”的要求,在医疗、金融等行业都存在海量自治的高质量数据,但受限于隐私无法共享利用。

事实上,在大模型的实践应用中,金融行业由于具备数字化程度高、商业化应用场景潜在价值高等优势,成为了AI大模型落地应用的最佳场景之一。

微众银行首席人工智能官杨强指出,大模型的应用落地涉及数据管理、算法优化、系统设计和成本控制等多方面的综合挑战,需要持续的技术创新和策略调整,以推动AI技术更加成熟、高效地服务于社会各个领域。“AI Agent(人工智能业务助理)是大模型面向应用端发展的下一阶段,其基于大模型的通用能力,并结合相关领域知识适应不同场景需求。”

此外,在杨强看来,随着大模型的发展,如果面临数据缺乏的问题,会衍生出一个概念即联邦大模型。这个联邦的概念实际上是一个分布式概念。现在的大模型基本上都是一个中心化训练出来的结果,会利用大量算力、数据和电力来做训练。

杨强认为,当大模型的数据载量大到一定程度,社会就没办法承担相关成本,最好是分解成一些分布式的算力中心,这些小的算力中心可以用来训练一个个小的大模型。“他们之间的连接帮助形成一个全局的大模型。这个全局大模型,第一个是具有分布式的能力,第二个是可以在保护隐私的前提下,利用好每一个地点的数据。”杨强分析说。

杨强认为,未来每一个人的手机都是一个算力中心。陌生人之间也可以合作,联成一个网络,共同训练在某个领域的大模型。这些模型都是在本地训练、本地使用,通过联网的方式,这个分布式网络叫联邦网络,既能保护隐私,又能够做到分布式训练。

杨强指出,通过纵向联邦学习,可以帮助企业之间解决数据合作的问题,使用各自的特有数据,共同建立更加强大的模型。

“比方说一方是金融机构,另一方是非金融机构。非金融机构有丰富的数据,但由于企业用户数据隐私安全的要求无法直接互通数据。这种情况下两边可以合作,形成一个全局模型,来帮助金融机构建立更好的风控模型或者营销模型。”

杨强坦言,如何最好地保护隐私,如何能够把算法效率给提升到最高,并且让这个模型最准,这三个目标是互相牵制的。因此需要通过研究不同的联邦学习范式来解决这三个目标的协调问题。

“联邦学习就像是让模型去作为沟通的方式,而不是利用数据作为沟通的方式,这样原始数据可以不出本域也可以把模型给做出来。”杨强说。

微众银行人工智能首席科学家范力欣认为,联邦学习作为一种先进的分布式机器学习范式,允许参与方在不直接共享原始数据的情况下协作训练模型,为解决大模型应用落地的技术难题提供了创新路径。

“联邦大模型技术路线通过其独特的设计,不仅解决了数据时效性、模型幻觉、专业知识融合及算力资源消耗等挑战,而且在保护数据隐私和促进AI技术公平性方面迈出了重要一步,为大模型在以金融为代表的各领域的广泛应用开辟了新的可能。”范力欣表示。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
若韩国和朝鲜统一,该叫什么名?金日成一早取好,国名霸气响亮

若韩国和朝鲜统一,该叫什么名?金日成一早取好,国名霸气响亮

红色先驱
2024-06-14 09:58:15
许晓婷取代丁霞?网传女排奥运名单换人,理论可行实际操作难度大

许晓婷取代丁霞?网传女排奥运名单换人,理论可行实际操作难度大

排球黄金眼
2024-07-06 15:41:27
张雪峰直言:这十大专业,让你未来十年不用担心失业

张雪峰直言:这十大专业,让你未来十年不用担心失业

今日搞笑分享
2024-07-05 13:58:29
南方医科大学校长露面讲话,出口惊人,让广大群众无法接受!

南方医科大学校长露面讲话,出口惊人,让广大群众无法接受!

华庭讲美食
2024-07-03 09:36:39
《沙丘2》很大,好看!

《沙丘2》很大,好看!

大师兄爱写作
2024-06-18 06:36:35
女市委书记高速路上被警车别停,两名便衣下车对其进行搜身揩油

女市委书记高速路上被警车别停,两名便衣下车对其进行搜身揩油

神奇的锤子
2024-05-19 14:16:07
复旦院长:掼蛋之风横扫大江南北,是社会失去动力,是颓废之风

复旦院长:掼蛋之风横扫大江南北,是社会失去动力,是颓废之风

华人星光
2024-07-04 17:29:04
詹姆斯:与库里做队友,早该如此。别说NBA,打遍全球也是无敌手

詹姆斯:与库里做队友,早该如此。别说NBA,打遍全球也是无敌手

好火子
2024-07-06 15:53:21
《繁花》拍摄地“黄河路”将在7月27日开放!外围街景带大家先睹为快

《繁花》拍摄地“黄河路”将在7月27日开放!外围街景带大家先睹为快

周到上海
2024-07-06 13:19:53
丑牛:就在明天上午9点40分,家庭里或有“肝肠寸断”的坏事发生

丑牛:就在明天上午9点40分,家庭里或有“肝肠寸断”的坏事发生

书中自有颜如玉
2024-07-06 12:21:24
3年前还是华人首富,如今给美国515亿罚款,成被“榨富”大冤种?

3年前还是华人首富,如今给美国515亿罚款,成被“榨富”大冤种?

蓝色海边
2024-07-06 16:40:47
“消失”的沪上精英:暴跌的联洋,降佣的公募,虚幻的金融民工

“消失”的沪上精英:暴跌的联洋,降佣的公募,虚幻的金融民工

五环外
2024-07-05 15:36:17
金融圈突发!易映森被查

金融圈突发!易映森被查

中国基金报
2024-07-05 22:18:10
清华才女武亦姝毕业现状曝光,董宇辉一针见血:放任的代价太残酷

清华才女武亦姝毕业现状曝光,董宇辉一针见血:放任的代价太残酷

周冲的影像声色
2024-07-04 11:23:28
“中国是美国的六倍!”联合国承认:这回中国是真吊打美国

“中国是美国的六倍!”联合国承认:这回中国是真吊打美国

小鹿姐姐情感说
2024-07-06 13:14:05
7月6日下午,突传来1重大消息,与咱中国息息相关!要来大动作吗

7月6日下午,突传来1重大消息,与咱中国息息相关!要来大动作吗

股市皆大事
2024-07-06 11:43:58
草虾基围虾成了市民心头好

草虾基围虾成了市民心头好

苏州新闻网
2024-07-05 18:32:13
你知道有钱人有多毁三观吗1?网友:玩的真花!我十辈子都想不出来

你知道有钱人有多毁三观吗1?网友:玩的真花!我十辈子都想不出来

奇特短尾矮袋鼠
2024-06-24 07:22:27
中专“数学天才”姜萍,该散去了

中专“数学天才”姜萍,该散去了

刁博
2024-06-30 16:51:56
预测俄罗斯的下场!

预测俄罗斯的下场!

青年的背包
2024-07-06 11:46:02
2024-07-06 18:24:49
界面新闻
界面新闻
只服务于独立思考的人群
610414文章数 1294154关注度
往期回顾 全部

科技要闻

AI公司没看上去有钱

头条要闻

朔尔茨批评欧尔班访俄后匈牙利取消外长会谈 德方回应

头条要闻

朔尔茨批评欧尔班访俄后匈牙利取消外长会谈 德方回应

体育要闻

糟糕的裁判,毁了“提前上演的决赛”

娱乐要闻

49岁林志玲在日本带娃被偶遇

财经要闻

李迅雷建议每年发5万亿国债十年50万亿

汽车要闻

预售12.3万-15.7万 吉利银河E5开启预售

态度原创

数码
游戏
教育
旅游
公开课

数码要闻

华擎发布修订版Intel Arc A770和A750 Challenger SE GPU 更新散热设计

《超越善恶》20周年纪念版包含对已故设计师的致敬

教育要闻

#数学口算 #口算题卡 口算是数学最基础的能力,趁暑假让孩子坚持每天打卡100道口算题,开学你会...

旅游要闻

7月8日起,广州这些旅游景区取消实名预约→

公开课

连中三元是哪三元?

无障碍浏览 进入关怀版