网易首页 > 网易号 > 正文 申请入驻

云从曦和申请文档数据过滤等专利,优化文档数据集的数据质量

0
分享至

金融界2024年11月11日消息,国家知识产权局信息显示,江苏云从曦和人工智能有限公司申请一项名为“文档数据过滤方法、大语言模型训练方法、设备及介质”的专利,公开号CN 118916336 A,申请日期为2024年7月。

专利摘要显示,本申请涉及计算机技术领域,具体提供一种文档数据过滤方法、大语言模型训练方法、设备及介质。旨在解决大语言模型的训练数据质量不佳的技术问题。本申请的文档数据过滤方法包括:获取文档数据集,文档数据集包括多个文档数据;对文档数据集中的文档数据执行分类操作,确定每个文档数据对应的文档类别;对文档数据集中的文档数据进行质量评估,确定文档数据的质量分数;基于文档数据对应的文档类别和质量分数,判断文档数据是否符合过滤条件;若是,则将文档数据进行过滤。本申请通过文档数据的文档类别和质量分数将符合过滤条件的低质量文档数据进行过滤,有效地优化了文档数据集的数据质量。

本文源自:金融界

作者:情报员

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
提高“西引力”!新疆党政“一把手”现场揭牌

提高“西引力”!新疆党政“一把手”现场揭牌

政知新媒体
2024-11-23 22:50:38
太阳报:C罗涉嫌拖欠一名医生4万镑账单,后者专精肉毒杆菌等领域

太阳报:C罗涉嫌拖欠一名医生4万镑账单,后者专精肉毒杆菌等领域

直播吧
2024-11-24 09:32:25
杨仪反击,我玩的那些玩意够开两个博物馆了,郭德纲在火三回你都玩不起

杨仪反击,我玩的那些玩意够开两个博物馆了,郭德纲在火三回你都玩不起

圈里的甜橙子
2024-11-22 18:04:24
微信突然更新,界面进行调整!

微信突然更新,界面进行调整!

全是技能
2024-11-24 10:21:43
开始“变脸”了?台积电、三星纷纷宣布,外媒:大陆不要了

开始“变脸”了?台积电、三星纷纷宣布,外媒:大陆不要了

小蘑菇壹号
2024-11-23 17:20:45
蒙古交通真差!男篮回酒店50公里花了四小时,今天干脆取消训练!

蒙古交通真差!男篮回酒店50公里花了四小时,今天干脆取消训练!

篮球资讯达人
2024-11-24 13:08:34
阳痿是中年人福报?万人研究证明:服用伟哥,6年降低12.4%死亡率

阳痿是中年人福报?万人研究证明:服用伟哥,6年降低12.4%死亡率

番茄健康
2024-11-20 12:22:59
菲律宾政坛巨变!

菲律宾政坛巨变!

星辰故事屋
2024-11-18 20:28:21
子女最大的悲哀不是收入低,而是父母50、60岁了,还做这8件事

子女最大的悲哀不是收入低,而是父母50、60岁了,还做这8件事

娱乐洞察点点
2024-11-24 11:56:57
2025年财运大爆发!紫气东来的五个生肖你属哪个?

2025年财运大爆发!紫气东来的五个生肖你属哪个?

十二生肖运势分析
2024-11-21 05:02:43
奥沙利文爆冷出局!丁俊晖收获利好?首先要战胜42岁世界冠军

奥沙利文爆冷出局!丁俊晖收获利好?首先要战胜42岁世界冠军

思考体育
2024-11-24 12:23:00
湖人惨败掘金!詹眉状态全无,克内克特球权太少,里弗斯一人死顶

湖人惨败掘金!詹眉状态全无,克内克特球权太少,里弗斯一人死顶

篮球资讯达人
2024-11-24 13:52:43
手术室“潜规则”:做手术时,医生为什么不穿内裤?一文揭秘

手术室“潜规则”:做手术时,医生为什么不穿内裤?一文揭秘

DrX说
2024-11-21 12:42:49
英超2-5名仅差1分!布莱顿2连胜与车厂同分 三笘薰极限反越位破门

英超2-5名仅差1分!布莱顿2连胜与车厂同分 三笘薰极限反越位破门

直播吧
2024-11-24 10:36:36
杜锋喜欢也不行,广东队很可能永远得不到京城双雄两悍将

杜锋喜欢也不行,广东队很可能永远得不到京城双雄两悍将

大眼瞄世界
2024-11-24 11:53:00
乔冠华酒后对李克农不敬,周总理怒斥:不知几斤几两,回去作检查

乔冠华酒后对李克农不敬,周总理怒斥:不知几斤几两,回去作检查

悠然谈历史
2023-11-25 14:01:44
奶奶临终前分财产,收养的大伯主动离开,我父亲拦住:我有话说

奶奶临终前分财产,收养的大伯主动离开,我父亲拦住:我有话说

农村情感故事
2024-11-19 06:54:21
看看海港3-1泰山的足协杯决赛阵容,中国足球的未来在哪里……?

看看海港3-1泰山的足协杯决赛阵容,中国足球的未来在哪里……?

田先生篮球
2024-11-23 22:22:09
业界女神NO.1!气质出众,身材颜值完美,令人惊叹!

业界女神NO.1!气质出众,身材颜值完美,令人惊叹!

打麻将的仔
2024-11-24 09:00:07
小伙回首百日长江漂流:想了13年,途中死里逃生

小伙回首百日长江漂流:想了13年,途中死里逃生

澎湃新闻
2024-11-24 07:38:32
2024-11-24 14:03:00
金融界
金融界
投资者信赖的财经金融门户网站
4281759文章数 542501关注度
往期回顾 全部

科技要闻

“这是中国的非凡机遇,德日远远落后了”

头条要闻

富豪每年花1000万美元求长生不老 网友:从大叔变大婶

头条要闻

富豪每年花1000万美元求长生不老 网友:从大叔变大婶

体育要闻

卡文迪什:公路自行车传奇谢幕

娱乐要闻

一个月被爆两次,王宝强得罪谁了?

财经要闻

卖一台车亏10万,蔚来李斌慌不慌?

汽车要闻

尊界S800首张官图发布 双色车身"尊的"很亮

态度原创

亲子
本地
艺术
健康
手机

亲子要闻

有闺女的爸爸要上个班真不容易,心眼必须比孩子多一个

本地新闻

云游中国 | 拒绝特种兵!北方也有“真江南”

艺术要闻

故宫珍藏的墨迹《十七帖》,比拓本更精良,这才是地道的魏晋写法

花18万治疗阿尔茨海默病,值不值?

手机要闻

荣耀 MagicOS 9.0 首批公测机型获 122 版本升级

无障碍浏览 进入关怀版