佳格天地斩获欧洲计算机视觉大会（ECCV）三维深度学习算法大赛冠军

点蓝字关注，回复白皮书

马上领高清版农业白皮书

近期，欧洲计算机视觉国际大会（ECCV）于以色列特拉维夫举办，佳格天地算法选手在Urban 3D三维算法挑战赛中斩获 “实例分割”赛道冠军 与 “语义分割”赛道亚军 。这意味着在 无人机倾斜摄影等三维测绘领域的人工智能算法应用取得独特进展 。

▼图为“实例分割”赛道冠军证书

▼图为“语义分割”赛道亚军证书

代表佳格天地出战大赛的是一位已在公司实习4年时间的95后计算机系博士。在最近一年多时间中，他先后斩获国际计算机视觉大会（ICCV）Urban 3D挑战赛世界冠军、计算机视觉模式识别大会（CVPR）超分辨率算法大赛亚军，连同本次获得的奖项，至此 已包揽世界三大AI顶级学术会议的算法竞赛奖项 。

带着对前沿技术与夺冠背后故事的好奇，我们也向他抛出了问题：

Q1：三维点云的“语义分割”与“实例分割”是什么，有哪些应用场景？

Q2：为什么选择来佳格实习，并长久地留了下来？

01

技术分享

三维点云分割蓬勃发展

助力数字城市建设

我们生活的环境中包含建筑、道路、桥梁、树木、河流等丰富多样的元素，测量仪器可以把这些元素变成一个个带有三维坐标、颜色等信息的“点”，无数的“点”进而组成“点云”，常见如从无人机倾斜摄影的照片中生成点云。对点云进行分割即是赋予机器精确区分和标记不同物体元素的能力。

▼图为原始点云

针对三维点云分割中的“语义分割”与“实例分割”，这位双赛道奖项获得者介绍道：“语义分割是指为点云中的每一个点分配一个语义标签，例如这个点是属于建筑物、还是汽车或者树木。”

▼图为语义分割结果，不同的颜色代表了不同的物体类别，如下图中用深绿色的图斑代表该区域内的树木

“实例分割是在语义分割的基础上，把每个不同的物体也分割出来，例如这个属于建筑物的点具体是建筑物A，还是建筑物B。”

▼图为实例分割结果。例如下图在识别出所有建筑物的基础上，进一步用不同的颜色将不同建筑区分开来

谈及三维点云分割的具体应用场景，他表示：“三维点云是用以表达真实三维世界的数据格式之一，准确地对点云数据进行场景（语义）和物体（实例）分割，有利于我们与其进行更加良好的交互。在 物体级机器人抓取 、 场景级机器人导航 和 自动驾驶 领域都有着至关重要的应用。而大规模的城市点云分割，更是直接关系到 未来数字城市建设 和 智慧城市规划管理 这两个重要应用。”

02

实习漫谈

被“鸡兔同笼”问题吸引而来

重要的是研究自由与信任

从ICCV到CVPR再到ECCV，连续斩获遥感领域算法大赛名次的他却是一名AI医学数据方向的计算机系博士。谈及为什么来到佳格天地实习，他坦言，是 被面试中“鸡兔同笼”的问题吸引 。

“硕士期间研究的是通用方法，就想要到实际生产环境中感受一下，看看学校里面学到的和目前工业环境所需要的有什么差异。当时也面试了很多家公司，但面试中遇到的更多是一些偏向技术、有标准答案的模式化问题。选择佳格的理由就比较有趣，当时leader宋宽博士最后问了一个很开放性的‘鸡兔同笼’问题，引发了我的一些思考和兴趣，觉得和这么一个leader干活的话应该很有趣。”

至于能长久留在佳格实习工作4年的原因，“是因为这里的工作和研究氛围吧。同组的同事们都是非常优秀和有趣的合作伙伴，每次跟他们一起讨论和解决问题，我都觉得收获良多。还有宋博士对待问题总是有自己独特的理解，并总是能够给予我们有效的帮助，更重要的是给予我很多的研究自由和信任。”

在佳格建筑物自动识别普查产品“高绘”大规模部署前，他针对遥感影像数据提出了“自监督学习”的方法，认为遥感数据量大但是标注成本高的特点很适合这一方法。尽管当时大家觉得自监督可能没有什么用，但他依旧在组会上努力“安利”并得到了宋博士的耐心倾听。目前，他提出的自监督学习方法已经在“高绘”产品中得到了广泛应用。

他还提到了另一个例子。“当时参加ICCV 2021比赛的时候，我还没有任何点云方面的基础，没有跑过任何一个点云模型。但是跟宋博士交流后，宋博士当即表示了支持，并时不时关心我在点云方面的进展，还给出了建议。”在他看来，正是这样的一件件小事共同组成了吸引他长久留下来的“氛围”。“能够及时接收到正反馈也很重要”，他最后说道。

对于部门实习生在三大国际顶级赛事中取得如此优异的成绩，作为leader的宋宽博士认为：“这对于一个AI医学数据方向的计算机系博士，可以算是跨行业的成绩斐然了。这是其本身的能力特长、教育背景，融合佳格的实践氛围而产生的‘化学反应’。古人米芾有诗‘漫仕平生四方走,多与英才并肩肘’，这些来自五湖四海的天才少年将会成为夜空中最闪亮的星辰。”

·End

写在最后：佳格天地2023届校园招聘正在进行中，我们也欢迎更多优秀的同学加入。了解岗位信息可在公众号后台回复“校招”。

*文中头图来自Giphy

佳格天地是全国率先将目标智能识别和机器深度学习技术应用于遥感影像并成功实现商业化应用落地的时空大数据企业。

目前，佳格天地所提供的农业大数据应用已服务中国约4亿亩耕地，范围涵盖省级农业政府部门、农业金融、中大型种植企业，客户遍布国内百余个县区。从“看天吃饭”到“知天而作”，佳格天地正在助力农业大数据驱动的中国现代农业快速发展。