案例分享:自动驾驶3D点云语义分割数据标注

2022年07月15日12:03:28 科技 1156

在自动驾驶环境感知系统中,如何获取高精度实时路况数据,是决定自动驾驶系统行车安全的关键。

目前主流的两种感知技术路径“纯视觉”与“高精地图+激光雷达”中,由于激光雷达采集的3D点云路况数据更为密集、准确且具备三维地理信息,因此以3D点云数据为基础的感知算法即成为部分自动驾驶企业的核心技术路径,并诞生了规模庞大的3D点云数据标注需求。

一.何为3D点云语义分割

对3D点云数据的标注处理,依据处理方式和使用标注工具的不同,大致可以分为三类:

1)纯点云

纯点云使用的标注工具以3D立体框为主,待标注对象以3D立体框形式标出,并附上相对应的属性信息标签,具体形式如下:


案例分享:自动驾驶3D点云语义分割数据标注 - 天天要闻

图片来源:曼孚科技SEED数据服务平台


2)融合标注

融合标注使用的3D标注工具仍以3D立体框为主,但在3D点云数据以外,还需要使用2D标注工具在点云数据相对应的2D图像中进行标注,3D点云数据中的标注对象与2D图像中的标注对象一一对应,具体形式如下:


案例分享:自动驾驶3D点云语义分割数据标注 - 天天要闻

图片来源:曼孚科技SEED数据服务平台


3)3D点云语义分割

与2D图像语义分割标注逻辑类似,3D点云语义分割也是对不同的待标注对象进行上色分割、赋予语义标签,不同的是3D点云语义分割需要在3维立体点云中对每个像素点指定一个类别标签,比如车辆,行人,道路,建筑物等,具体形式如下:


案例分享:自动驾驶3D点云语义分割数据标注 - 天天要闻

(图片来源:曼孚科技SEED数据服务平台)


相较于前两种标注方式,在需要更为精细的空间信息时(比如自动泊车),立体框标注场景中如铰接式公交车等形状可变的物体,3D点云语义分割标注对路况数据的反馈更为精准,因此,3D点云语义分割标注在自动驾驶感知算法中所占的比重也越来越高。

二.常见标注规则与标注对象

不同算法、不同应用场景对点云语义分割的标注需求与规则也不尽相同,常见的相对简单的自动驾驶3D点云语义分割标注对象包括:

1.行人:通常指未骑乘交通工具的人,但包含骑滑板车、平衡车的人。

2.骑车人:通常包括骑摩托车、自行车、三轮车、电动车等的人。

3.车辆:车辆是3D点云语义分割标注场景下最为常见,且子分类较多的对象。子对象的划分有依据车辆具体车型,比如轿车、卡车、公交车、救护车等,也有依据类别,比如客车、货车、工程车等。

以类别为例,具体如下:

1)微型车:如代步车、各类三轮车等;

2)小型汽车:如轿车、SUV等;

3)客车:如大、中型巴士、双层巴士等载人车辆;

4)货车:如厢式货车等载货车辆;

5)工程车:洒水车、消防车、垃圾车等;

6)其他车辆。

4.路面相关:与路面相关的各种对象,可具体细分为马路可行驶区域、人行道、车道线等。

5.建筑物:如楼房、隧道桥面、桥墩、高架桥等。

6.植物:如草地、树木等

7.路面物体:路面物体也是一个子对象较多的种类,常见的包括:

1)护栏:如交通隔离栏、交通护栏等;

2)栅栏:临时性的如交通水马等;

3)交通标注:如红绿灯、标识牌、杆等;

4)障碍物:如交通锥桶、警示牌、防撞桶、石墩等;

5)其他物体。

8.噪声点云:如水雾、烟雾、汽车尾气、雨水等各类噪声点云。

以上是3D点云语义分割常见的各类标注对象,但不同场景,具体的对象划分规则以及待标注对象种类都存在巨大差异,并没有统一的标准。

而在更为具体的标注规则上,差异同样十分巨大。

常见的标注规则如物体起标范围,通常会规定点云数量超过X以上,该物体即需要标注,此外还会规定模糊无法判定物体的具体标注规则等等,不一而足。

具象化的标注实例如下:


案例分享:自动驾驶3D点云语义分割数据标注 - 天天要闻

标注前(图片来源:曼孚科技SEED数据服务平台)


案例分享:自动驾驶3D点云语义分割数据标注 - 天天要闻

标注后(图片来源:曼孚科技SEED数据服务平台)


随着自动驾驶商业量产进入新阶段,开放路段场景复杂且多变,需要自动驾驶算法有更深的场景积累度与迭代能力,以满足感知算法与行车安全的需求。

3D点云语义分割更精细的场景信息反馈,在帮助算法建立更贴合现实的场景模型,以及提升感知安全方面具备天然优势,在自动驾驶迈向大规模商业化应用的今天,势必将扮演更重要的角色。

科技分类资讯推荐

特斯拉中国宣布:涨价 - 天天要闻

特斯拉中国宣布:涨价

(文/观察者网周盛明 编辑/高莘)2025年7月1日,特斯拉中国宣布,Model 3长续航全轮驱动版车型售价上涨1万元,至28.55万元。 特斯拉中国 在涨价的同时,该车型的续航和加速得到了提升——CLTC续航由713km提升至753km,百公里加速时间由4.4秒提升至3.8秒。值得注意的是,特斯拉Model 3的其他两个版本售价不变。Model 3后轮驱.
储能与锂电领域动态频出:巨头竞逐、项目签约与跨界调整并行 - 天天要闻

储能与锂电领域动态频出:巨头竞逐、项目签约与跨界调整并行

【环球网财经综合报道】近期,储能与锂电领域动态不断。阳光电源(300274.SZ)与宁德时代(300750.SZ)围绕第三代储能电芯定义权展开激烈争夺。6月,阳光电源发布搭载684Ah电芯的新款储能系统,电芯由欣旺达供应;宁德时代宣布587Ah电芯于4月投产。当前储能行业处于二代向三代电芯过渡期,二代容量为314Ah,两大阵营分化明...
亚马逊CEO:生成式AI或致员工数量减少,但也将带来新机遇 - 天天要闻

亚马逊CEO:生成式AI或致员工数量减少,但也将带来新机遇

【环球网财经综合报道】亚马逊CEO安迪·贾西周一表示,生成式人工智能的快速推出,意味着公司未来或需更少员工完成计算机可处理的工作,如同每次技术转型,一些工作将因自动化而用人减少,但也会有新工作产生。东方IC尽管人工智能会消除部分职位需求,贾西称亚马逊仍会在人工智能、机器人等领域招聘更多员工。不过,本月早...
25万起售的小米YU7,三分钟大定20万台,数据是真的吗? - 天天要闻

25万起售的小米YU7,三分钟大定20万台,数据是真的吗?

相信这几天小米YU7的火爆程度大家都看到了,这款车发布后开启预定,打开预定通道后不久,小米官方就公布了一个数据,3分钟大定超20万台。没过多久,小米官方又公布了一个更炸裂的数据,小米YU7在1小时内,大定已突破289000万台。
邹晖出任格力集团董事长 - 天天要闻

邹晖出任格力集团董事长

本文来源:时代财经 珠海格力集团官网更新信息显示,邹晖已正式出任该集团党委书记、董事长。公开资料显示,邹晖于1982年生,本科学历。邹晖曾担任珠海市人大常委会农村农业工作委员会副主任,后转任珠海市国资委副主任。此次调整后,格力集团领导班子为:邹晖担任集团党委书记、董事长,王轶任党委副书记、董事、总裁,吴...
【产业互联网周报】阿里合伙人名单最新变动:9人已退出;美团在AI投入超百亿元;黄仁勋:机器人技术是芯片制造商继AI之后的最大机遇 - 天天要闻

【产业互联网周报】阿里合伙人名单最新变动:9人已退出;美团在AI投入超百亿元;黄仁勋:机器人技术是芯片制造商继AI之后的最大机遇

图片系AI生成【产业互联网周报是由钛媒体TMTpost发布的特色产品,将整合本周最重要的企业级服务、云计算、大数据领域的前沿趋势、重磅政策及行研报告。】国内资讯北京经信局:北京累计备案上线大模型132款,全国占比35%在2025全球数字经济大会新闻发布会上,北京市经济和信息化局党组成员、副局长、新闻发言人刘维亮表示,...