案例分享:自动驾驶3D点云语义分割数据标注

2022年07月15日12:03:28 科技 1156

在自动驾驶环境感知系统中,如何获取高精度实时路况数据,是决定自动驾驶系统行车安全的关键。

目前主流的两种感知技术路径“纯视觉”与“高精地图+激光雷达”中,由于激光雷达采集的3D点云路况数据更为密集、准确且具备三维地理信息,因此以3D点云数据为基础的感知算法即成为部分自动驾驶企业的核心技术路径,并诞生了规模庞大的3D点云数据标注需求。

一.何为3D点云语义分割

对3D点云数据的标注处理,依据处理方式和使用标注工具的不同,大致可以分为三类:

1)纯点云

纯点云使用的标注工具以3D立体框为主,待标注对象以3D立体框形式标出,并附上相对应的属性信息标签,具体形式如下:


案例分享:自动驾驶3D点云语义分割数据标注 - 天天要闻

图片来源:曼孚科技SEED数据服务平台


2)融合标注

融合标注使用的3D标注工具仍以3D立体框为主,但在3D点云数据以外,还需要使用2D标注工具在点云数据相对应的2D图像中进行标注,3D点云数据中的标注对象与2D图像中的标注对象一一对应,具体形式如下:


案例分享:自动驾驶3D点云语义分割数据标注 - 天天要闻

图片来源:曼孚科技SEED数据服务平台


3)3D点云语义分割

与2D图像语义分割标注逻辑类似,3D点云语义分割也是对不同的待标注对象进行上色分割、赋予语义标签,不同的是3D点云语义分割需要在3维立体点云中对每个像素点指定一个类别标签,比如车辆,行人,道路,建筑物等,具体形式如下:


案例分享:自动驾驶3D点云语义分割数据标注 - 天天要闻

(图片来源:曼孚科技SEED数据服务平台)


相较于前两种标注方式,在需要更为精细的空间信息时(比如自动泊车),立体框标注场景中如铰接式公交车等形状可变的物体,3D点云语义分割标注对路况数据的反馈更为精准,因此,3D点云语义分割标注在自动驾驶感知算法中所占的比重也越来越高。

二.常见标注规则与标注对象

不同算法、不同应用场景对点云语义分割的标注需求与规则也不尽相同,常见的相对简单的自动驾驶3D点云语义分割标注对象包括:

1.行人:通常指未骑乘交通工具的人,但包含骑滑板车、平衡车的人。

2.骑车人:通常包括骑摩托车、自行车、三轮车、电动车等的人。

3.车辆:车辆是3D点云语义分割标注场景下最为常见,且子分类较多的对象。子对象的划分有依据车辆具体车型,比如轿车、卡车、公交车、救护车等,也有依据类别,比如客车、货车、工程车等。

以类别为例,具体如下:

1)微型车:如代步车、各类三轮车等;

2)小型汽车:如轿车、SUV等;

3)客车:如大、中型巴士、双层巴士等载人车辆;

4)货车:如厢式货车等载货车辆;

5)工程车:洒水车、消防车、垃圾车等;

6)其他车辆。

4.路面相关:与路面相关的各种对象,可具体细分为马路可行驶区域、人行道、车道线等。

5.建筑物:如楼房、隧道桥面、桥墩、高架桥等。

6.植物:如草地、树木等

7.路面物体:路面物体也是一个子对象较多的种类,常见的包括:

1)护栏:如交通隔离栏、交通护栏等;

2)栅栏:临时性的如交通水马等;

3)交通标注:如红绿灯、标识牌、杆等;

4)障碍物:如交通锥桶、警示牌、防撞桶、石墩等;

5)其他物体。

8.噪声点云:如水雾、烟雾、汽车尾气、雨水等各类噪声点云。

以上是3D点云语义分割常见的各类标注对象,但不同场景,具体的对象划分规则以及待标注对象种类都存在巨大差异,并没有统一的标准。

而在更为具体的标注规则上,差异同样十分巨大。

常见的标注规则如物体起标范围,通常会规定点云数量超过X以上,该物体即需要标注,此外还会规定模糊无法判定物体的具体标注规则等等,不一而足。

具象化的标注实例如下:


案例分享:自动驾驶3D点云语义分割数据标注 - 天天要闻

标注前(图片来源:曼孚科技SEED数据服务平台)


案例分享:自动驾驶3D点云语义分割数据标注 - 天天要闻

标注后(图片来源:曼孚科技SEED数据服务平台)


随着自动驾驶商业量产进入新阶段,开放路段场景复杂且多变,需要自动驾驶算法有更深的场景积累度与迭代能力,以满足感知算法与行车安全的需求。

3D点云语义分割更精细的场景信息反馈,在帮助算法建立更贴合现实的场景模型,以及提升感知安全方面具备天然优势,在自动驾驶迈向大规模商业化应用的今天,势必将扮演更重要的角色。

科技分类资讯推荐

特斯拉官宣Model 3长续航全轮驱动版28.55万起售 - 天天要闻

特斯拉官宣Model 3长续航全轮驱动版28.55万起售

7月1日,特斯拉官方微博宣布Model 3长续航全轮驱动版车型升级,CLTC续航升至753公里,百公里加速升至3.8秒,售价28.55万元起。特斯拉表示,7月31日(含)前下单,还可享8000元限时保险补贴、5年0息、8000元车漆选装金等购车优惠政策。...
央视新闻报道:全国加能站充电桩配置率达45% - 天天要闻

央视新闻报道:全国加能站充电桩配置率达45%

报名 | 扫描上图二维码,锁定超级沙龙重庆站席位 产品 | 扫描上方二维码提交需求 可高效对接 本文来源 | 中国石油石化6月28日,2025能源产业生态论坛在北京召开。论坛上发布了《中国加油(能)站发展蓝皮书2024-2025》,数据显示,当前,传统加油站正从单一能源供给,向综合服务生态深度转型。《蓝皮书》显示,截至2024年底...
韦东奕,民族的脊梁,崇尚他,国家民族更有前途和希望 - 天天要闻

韦东奕,民族的脊梁,崇尚他,国家民族更有前途和希望

最近,北大韦神韦东奕又“霸屏”了。这位北京大学助理教授、数学科学学院微分方程教研室研究员,因开通个人网络账号,两天涨粉两千万。这是什么概念?一般头部网络主播,即便有团队共同打造账号,要涨粉两千万,没有几年时间也难以达成。这说明什么?
厉害!荣耀400系列三周激活量超70万台 - 天天要闻

厉害!荣耀400系列三周激活量超70万台

上周行业消息显示荣耀400系列全球激活量已经突破100万台,还引起了行业的热议。大家都在讲这一次荣耀400系列的销量确实牛,市场认可度确实高。不过当时给出的是全球数据,并不知道国内与海外的占比。
YU7销量为何没受前段时间小米负面的影响? - 天天要闻

YU7销量为何没受前段时间小米负面的影响?

为什么前段时间小米负面不断,但是现在SU7发布之后,一样是卖爆了呢?其实我之前就说过了,这些负面不会影响到小米的销量。互联网是健忘的。之前那个小米手机发生高速车祸,很多人在说小米的自驾问题。但是实际上大家要明白,真正会去买小米这个汽车的人,他们的侧重点是什么?
华为发布新一代OceanStor Dorado 3000融合全闪存存储:最高1600块SSD、8PiB容量 - 天天要闻

华为发布新一代OceanStor Dorado 3000融合全闪存存储:最高1600块SSD、8PiB容量

快科技6月30日消息,华为今日正式发布新一代OceanStor Dorado 3000融合全闪存存储。最大支持2 TB内存、1600块SSD,提供高达8 PiB(‌1PiB=1024TB)可用容量,单系统最大可扩展到16个控制器。具有以下三大优势:全新融合:华为新一代OceanStor Dorado 3000采用原生块、文件、对象并行架构,一套存储满足多种业