百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 热门文章 > 正文

3D点云深度学习-浅谈点云分割

bigegpt 2024-08-07 17:45 2 浏览

先说一点题外话

研究生三年,开始学了一年的图像检测,还没学明白,然后实验室都开始做点云,就转到点云方向做了两年,没什么大成就,因为感觉我学了两年时间刚刚入门,而且大多数的学习都是跑跑现成的代码,有一些结果就算有输出了,还没有真正的自己改的大网络或者写一整套代码,但是长期下来对这个方向也算是有点熟悉了。现在毕业了,没机会再做这个方向了,就按照自己了解的接触路线为一些刚接触的同学们介绍一下吧,说的也不一定都对,但是有空我就来整理补充一下。

背景

1.点云是什么?

官方解释:点云是在同一空间参考系下表达目标空间分布和目标表面特性的海量点集合。

实际上:点云是一组三维点(x,y,z)的集合。

2.深度学习是什么?

不知道,就是各种卷,跟上班一样,卷就完了。

3.点云深度学习的难点在哪里?

其实在图像中深度学习已经取得了很好的效果了,商用的模型随处可见,而点云最大的难点就是怎么解决点云的无序性问题,就是同一个物体的那么多点排列顺序不同,所得到的效果应该是相同的,目前都在想怎么更好的解决这个问题,当然,点云里面还有遮挡,嘈杂点等等因素的困难。

4.为什么点云深度学习最近比较火?

一方面是深度学习目前的学习能力比较强,另一方面,3D传感器发展的很多,更加接近真实世界,而且近期出现了很多3D应用,可能再有就是电云可能相对容易发论文一些吧,哈哈哈~

5.点云深度学习领域包括哪些领域的学习?

图像卷积神经网络、数据处理、可视化、TF/Torch框架

6.点云的研究方向有哪些?

点云检测、点云分割、点云识别、点云补全、点云数据增强、点云数据集制作及Benchmark

点云数据集

深度学习任务一定少不了数据集,模型需要大量的训练样本,当然也可以用深度相机或者激光雷达实时采集处理,那是模型训练好以后的应用层面了吧,因为参与过一个数据集综述文章的编写,所以数据集接触的多一些,点云领域的数据集各式各样吧,应为大家的采集设备不同,采集策略不同,后期的一些处理和标记格式等都有所不同,对了,他们采集的场景规模,类型等也都不同,所以大家可以针对某一个场景类型去进行点云方向的研究,比如专门做点云物体的识别,室内场景的点云分割,室外场景的点云分割等,介绍一些常用的数据集吧。

1.Semantic3D

这个应该是最经典的室外场景的电云分割数据集,固定的一个激光雷达一直扫描周围场景得到的数据集,精度还是不错的,很多论文的效果比较都是基于这个数据集的,而且他提供官方网站提交你跑的结果。

2.S3DIS

S3DIS数据集是斯坦福大学开发的带有像素级语义标注的语义数据集。室内场景点云数据集,一般是3D相机或者iPad什么的进行采集。

3.SemanticKITTI

连续多帧点云数据集,好像就是kitti数据集后面又经过处理得到的,汽车采集。

4.SensatUrban

室外大场景点云数据集,是真的大,无人机分区域采集组合得到的数据集。

5.Modelnet

竟然忘记了最经典的分类数据集-ModelNet,该系列延伸出很多数据集,包括ModelNet-10和ModelNet-40,都是最开始接触点云领域用到的数据集。

6.ShapeNet

也算是经典,很早的数据集~

点云深度学习模型

深度学习模型目前主要分为几个方向:基于原始点云、基于图像、基于图神经网络、基于3DCNN的方向去做,主要的区别就是将点云数据转化为不同的数据源去处理。介绍几个比较经典的网络模型。

1.PointNet/PointNet++

最最最最最经典的点云处理网络,感觉现在都被人家当成模块用了,不得不说,很好用。

2.RandLA-Net

牛津大学胡庆拥CVPR2020的一篇文章,也是我毕设跑的最多的代码,SensatUrban也是这个作者提出数据集,并且也举办了挑战赛

结语

周末在公司闲下来随便整理一点,有时间再来补充,还有很多很多内容,先列个小框架~

相关推荐

【Docker 新手入门指南】第十章:Dockerfile

Dockerfile是Docker镜像构建的核心配置文件,通过预定义的指令集实现镜像的自动化构建。以下从核心概念、指令详解、最佳实践三方面展开说明,帮助你系统掌握Dockerfile的使用逻...

Windows下最简单的ESP8266_ROTS_ESP-IDF环境搭建与腾讯云SDK编译

前言其实也没啥可说的,只是我感觉ESP-IDF对新手来说很不友好,很容易踩坑,尤其是对业余DIY爱好者搭建环境非常困难,即使有官方文档,或者网上的其他文档,但是还是很容易踩坑,多研究,记住两点就行了,...

python虚拟环境迁移(python虚拟环境conda)

主机A的虚拟环境向主机B迁移。前提条件:主机A和主机B已经安装了virtualenv1.主机A操作如下虚拟环境目录:venv进入虚拟环境:sourcevenv/bin/active(1)记录虚拟环...

Python爬虫进阶教程(二):线程、协程

简介线程线程也叫轻量级进程,它是一个基本的CPU执行单元,也是程序执行过程中的最小单元,由线程ID、程序计数器、寄存器集合和堆栈共同组成。线程的引入减小了程序并发执行时的开销,提高了操作系统的并发性能...

基于网络安全的Docker逃逸(docker)

如何判断当前机器是否为Docker容器环境Metasploit中的checkcontainer模块、(判断是否为虚拟机,checkvm模块)搭配学习教程1.检查根目录下是否存在.dockerenv文...

Python编程语言被纳入浙江高考,小学生都开始学了

今年9月份开始的新学期,浙江省三到九年级信息技术课将同步替换新教材。其中,新初二将新增Python编程课程内容。新高一信息技术编程语言由VB替换为Python,大数据、人工智能、程序设计与算法按照教材...

CentOS 7下安装Python 3.10的完整过程

1.安装相应的编译工具yum-ygroupinstall"Developmenttools"yum-yinstallzlib-develbzip2-develope...

如何在Ubuntu 20.04上部署Odoo 14

Odoo是世界上最受欢迎的多合一商务软件。它提供了一系列业务应用程序,包括CRM,网站,电子商务,计费,会计,制造,仓库,项目管理,库存等等,所有这些都无缝集成在一起。Odoo可以通过几种不同的方式进...

Ubuntu 系统安装 PyTorch 全流程指南

当前环境:Ubuntu22.04,显卡为GeForceRTX3080Ti1、下载显卡驱动驱动网站:https://www.nvidia.com/en-us/drivers/根据自己的显卡型号和...

spark+python环境搭建(python 环境搭建)

最近项目需要用到spark大数据相关技术,周末有空spark环境搭起来...目标spark,python运行环境部署在linux服务器个人通过vscode开发通过远程python解释器执行代码准备...

centos7.9安装最新python-3.11.1(centos安装python环境)

centos7.9安装最新python-3.11.1centos7.9默认安装的是python-2.7.5版本,安全扫描时会有很多漏洞,比如:Python命令注入漏洞(CVE-2015-2010...

Linux系统下,五大步骤安装Python

一、下载Python包网上教程大多是通过官方地址进行下载Python的,但由于国内网络环境问题,会导致下载很慢,所以这里建议通过国内镜像进行下载例如:淘宝镜像http://npm.taobao.or...

centos7上安装python3(centos7安装python3.7.2一键脚本)

centos7上默认安装的是python2,要使用python3则需要自行下载源码编译安装。1.安装依赖yum-ygroupinstall"Developmenttools"...

利用本地数据通过微调方式训练 本地DeepSeek-R1 蒸馏模型

网络上相应的教程基本都基于LLaMA-Factory进行,本文章主要顺着相应的教程一步步实现大模型的微调和训练。训练环境:可自行定义,mac、linux或者window之类的均可以,本文以ma...

【法器篇】天啦噜,库崩了没备份(天啦噜是什么意思?)

背景数据库没有做备份,一天突然由于断电或其他原因导致无法启动了,且设置了innodb_force_recovery=6都无法启动,里面的数据怎么才能恢复出来?本例采用解析建表语句+表空间传输的方式进行...