金融界2024年8月21日消息,天眼查知识产权信息显示,微民保险代理有限公司申请一项名为“任务处理方法、装置、电子设备及计算机存储介质“,公开号 CN202410435383.9,申请日期为2024年4月。
专利摘要显示,本申请提供了一种任务处理方法、装置、电子设备及计算机存储介质,方法包括:查询出现数据倾斜的任务,获取任务的倾斜类型;当确定倾斜类型为第一类型时,获取任务中小文件的数量;根据小文件的数量,确定对任务进行处理的第一目标处理策略;按照第一目标处理策略对任务进行处理;当确定倾斜类型为第二类型时,获取任务的聚合操作节点;根据聚合操作节点,确定对任务进行处理的第二目标处理策略;按照第二目标处理策略对任务进行处理;其中,任务包括第一任务阶段和第二任务阶段,聚合操作节点为任务在第二阶段中用于处理从第一任务阶段复制的数据的节点。由此能够实现高效且快速地对发生数据倾斜的任务进行自动优化。
本文源自:金融界
作者:情报员
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.