网易首页 > 网易号 > 正文 申请入驻

云从曦和申请文档数据过滤等专利,优化文档数据集的数据质量

0
分享至

金融界2024年11月11日消息,国家知识产权局信息显示,江苏云从曦和人工智能有限公司申请一项名为“文档数据过滤方法、大语言模型训练方法、设备及介质”的专利,公开号CN 118916336 A,申请日期为2024年7月。

专利摘要显示,本申请涉及计算机技术领域,具体提供一种文档数据过滤方法、大语言模型训练方法、设备及介质。旨在解决大语言模型的训练数据质量不佳的技术问题。本申请的文档数据过滤方法包括:获取文档数据集,文档数据集包括多个文档数据;对文档数据集中的文档数据执行分类操作,确定每个文档数据对应的文档类别;对文档数据集中的文档数据进行质量评估,确定文档数据的质量分数;基于文档数据对应的文档类别和质量分数,判断文档数据是否符合过滤条件;若是,则将文档数据进行过滤。本申请通过文档数据的文档类别和质量分数将符合过滤条件的低质量文档数据进行过滤,有效地优化了文档数据集的数据质量。

本文源自:金融界

作者:情报员

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
令特朗普恼火的佩洛西:年轻时颜值堪比赫本,比伊万卡还美

令特朗普恼火的佩洛西:年轻时颜值堪比赫本,比伊万卡还美

米君文史
2024-11-14 23:40:55
果然对沙特的豪橫还是低估了,真是双十一狂欢啊!评论区纷纷炸锅

果然对沙特的豪橫还是低估了,真是双十一狂欢啊!评论区纷纷炸锅

艾米手工作品
2024-11-14 16:51:28
C组积分榜:国足1-0绝杀巴林、升至第4位,积分追平澳大利亚沙特

C组积分榜:国足1-0绝杀巴林、升至第4位,积分追平澳大利亚沙特

草根体育
2024-11-15 00:17:43
勇士消息:裁判报告出炉,库里咆哮真相曝光,名宿看衰前景

勇士消息:裁判报告出炉,库里咆哮真相曝光,名宿看衰前景

冷月小风风
2024-11-14 10:01:04
大动作!成都蓉城计划花重金引进中超冠军外援!亚冠前景大猜想!

大动作!成都蓉城计划花重金引进中超冠军外援!亚冠前景大猜想!

评球论事
2024-11-14 16:00:57
恭喜巴萨!法蒂解套,转投土超,1.2亿引援组两翼齐飞

恭喜巴萨!法蒂解套,转投土超,1.2亿引援组两翼齐飞

球文速递
2024-11-14 15:54:44
4天在库尔斯克损失88个装甲单位!长驱直入,俄军闯进库皮扬斯克

4天在库尔斯克损失88个装甲单位!长驱直入,俄军闯进库皮扬斯克

鹰眼Defence
2024-11-14 17:10:25
奥巴马警告特朗普:白宫不是你的家族企业,网友: 太自以为是了

奥巴马警告特朗普:白宫不是你的家族企业,网友: 太自以为是了

现代春秋
2024-11-14 12:28:51
向全世界宣布!50亿光刻机厂落地浙江,阿斯麦傻了:越来越强大?

向全世界宣布!50亿光刻机厂落地浙江,阿斯麦傻了:越来越强大?

素年文史
2024-08-08 08:05:02
保罗:不知自己经历过多少球员单场50分的比赛 文班只用了32分钟

保罗:不知自己经历过多少球员单场50分的比赛 文班只用了32分钟

直播吧
2024-11-14 13:57:46
还签同质化球星?皇马1.3亿引援,这次轮到贝林厄姆危险了

还签同质化球星?皇马1.3亿引援,这次轮到贝林厄姆危险了

球文速递
2024-11-14 15:55:59
德国大选逆转,首个总理竞争者出现,默克尔或王者归来,英法回避

德国大选逆转,首个总理竞争者出现,默克尔或王者归来,英法回避

牛哥说文史
2024-11-13 21:51:35
伊万真大胆,首发6人身背黄牌,归化集体放弃,球迷:破釜沉舟!

伊万真大胆,首发6人身背黄牌,归化集体放弃,球迷:破釜沉舟!

我就是一个说球的
2024-11-14 21:11:15
李璇:在国家队打封闭出战的国脚大有人在,只是人家不愿意宣传

李璇:在国家队打封闭出战的国脚大有人在,只是人家不愿意宣传

直播吧
2024-11-14 13:57:46
62岁杨紫琼现身洛杉矶首映礼,一头金发十分抢镜,可看脸真的老了

62岁杨紫琼现身洛杉矶首映礼,一头金发十分抢镜,可看脸真的老了

南城无双
2024-11-15 00:06:28
变盘,警惕!重要发布会明日召开!

变盘,警惕!重要发布会明日召开!

摩尔金融
2024-11-14 19:13:24
从0-1到1-0!18强赛神剧本!国足从地狱到天堂,6分逆袭进前四!

从0-1到1-0!18强赛神剧本!国足从地狱到天堂,6分逆袭进前四!

绿茵舞着
2024-11-15 00:24:13
韦德:我也想一人一城 我TMD值得一份养老合同 但热火不给我

韦德:我也想一人一城 我TMD值得一份养老合同 但热火不给我

直播吧
2024-11-14 22:09:43
全球最赚钱的车企集体崩盘,油车的天花板塌了!

全球最赚钱的车企集体崩盘,油车的天花板塌了!

蒋东文
2024-11-13 09:33:22
下周气温突降!接下来10天多阴雨!网友:谁能想到秋天要开除湿丨静宝聊天室

下周气温突降!接下来10天多阴雨!网友:谁能想到秋天要开除湿丨静宝聊天室

上海静安
2024-11-14 19:29:52
2024-11-15 01:22:44
金融界
金融界
投资者信赖的财经金融门户网站
4093898文章数 542411关注度
往期回顾 全部

科技要闻

官宣!极氪领克合并,吉利走向大整合

头条要闻

世预赛:国足客场1-0巴林收获两连胜 张玉宁绝杀

头条要闻

世预赛:国足客场1-0巴林收获两连胜 张玉宁绝杀

体育要闻

本季英超最炸裂的瓜,由一名裁判制造

娱乐要闻

娜扎张云龙恋情曝光!甜蜜细节被扒

财经要闻

"机构举报游资"导致A股大跌?

汽车要闻

七块屏幕四座布局 仰望U7中式百万座舱

态度原创

本地
艺术
房产
手机
公开课

本地新闻

重庆记忆|别再CityWalk了 来云端之眼CityClimb

艺术要闻

故宫珍藏的墨迹《十七帖》,比拓本更精良,这才是地道的魏晋写法

房产要闻

左小鹏右网易!天河智慧城地块产品怎么打,值得期待!

手机要闻

vivo S20 Pro详细参数流出:旗舰同款影像方案,配置也少有短板!

公开课

一块玻璃,如何改变人类世界?

无障碍浏览 进入关怀版