百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 热门文章 > 正文

AI每日一解丨计算机视觉——目标检测与跟踪(4)

bigegpt 2024-08-19 12:04 4 浏览

概述

目标检测和目标跟踪是计算机视觉中的两个重要任务,目标检测的任务是找出图像中所有感兴趣的目标(物体),确定它们的类别和位置。而目标跟踪则是对于任意目标的跟踪,即事先是不知道跟踪的具体目标的,理想跟踪器应该可以跟踪人们需要的任意目标。

目标检测偏向于单帧下的物体定位识别,目标跟踪多帧之间的物体会有关联,重在跟踪和重识别,现在的跟踪算法有很大一部分是基于检测和滤波,目标检测会应用到目标跟踪中。


目标检测

  • 基于目标检测算法

目标检测算法主要分为两类:基于深度学习的目标检测算法和传统的目标检测算法。

基于深度学习的目标检测算法使用的是卷积神经网络(Convolutional Neural Networks,CNN)学习特征的方式,这种特征学习方式能自动发现检测及分类目标所需要的特征,同时通过卷积神经网络将原始输入信息转化成更抽象、更高维的特征,这种高维特征具有强大的特征表达能力和泛化性,所以其在复杂场景下的性能表现较好,可满足工业界的大部分应用需求。

(1)传统目标检测算法

传统目标检测算法主要可以分为三大步骤:候选区域选择、特征提取、分类器。

传统的目标检测算法主要包括以下几种:Haar-like特征+Adaboost、HOG+SVM、LBP+SVM等

(2)基于深度学习的目标检测算法

基于深度学习的目标检测算法主要包括以下几种:Faster R-CNN、YOLO、SSD、RetinaNet、EfficientDet等。

而基于深度学习的目标检测算法又发展成了两条技术路线: Anchor based 方法 (一阶段,二阶段)和 Anchor free 方法。

Anchor-based方法是目标检测中的一种方法,它主要包括一阶段和二阶段检测算法。其中一阶段的检测技术包括SSD,DSSD,RetinaNet,RefineDet,YOLOV3等,二阶段技术包括Faster-RCNN,R-FCN,FPN,Cascade R-CNN,SNIP等。

Anchor-free方法是目标检测中的另一种方法。它不需要预先定义anchor box,而是直接在图像中预测目标的位置和大小。Anchor-free方法主要包括CornerNet、ExtremeNet、CenterNet、FCOS等。

  • 目标检测步骤

目标检测的一般步骤如下:

  1. 数据准备:收集、标注、划分数据集。
  2. 特征提取:提取图像特征,如HOG、SIFT、SURF等。
  3. 建立模型:选择合适的模型,如SVM、Adaboost等。
  4. 模型训练:使用训练数据对模型进行训练。
  5. 模型测试:使用测试数据对模型进行测试,评估模型性能。
  6. 模型优化:对模型进行优化,提高检测精度和速度。

基于深度学习的目标检测算法已经取得了很大的进展,如Faster R-CNN、YOLO、SSD、RetinaNet、EfficientDet等。这些算法不需要手工设计特征,而是通过卷积神经网络(CNN)自动学习特征,从而大大提高了检测精度和速度。

传统目标检测算法主要基于手工提取特征,在候选区域选择:首先从输入图像上划定一些目标存在性较大的区域,对目标可能存在的区域进行初步定位。

  • 目标检测评价指标

目标检测的评价指标有很多,以下是一些常见的评价指标:

  • 精度评价指标:map(平均准确度均值,精度评价),准确率(Accuracy),精确率(Precision),召回率(Recall),平均正确率(AP),mean Average Precision(mAP),交除并(IoU),ROC + AUC,非极大值抑制(NMS)。
  • FPS和mAP是目标检测算法的两个重要评估指标,FPS 是用来评估目标检测的速度,即每秒内可以处理的图片数量或者处理一张图片所需时间来评估检测速度,时间越短,速度越快。
  • 目标检测数据集

目标检测的数据集有很多,以下是一些常见的数据集:

  • PASCAL VOC:PASCAL VOC是一个视觉对象分类的竞赛和系列工作坊,其中包括一个视觉对象检测挑战。该数据集包含20个对象类别,其中包括人、动物和交通工具等1。
  • COCO:COCO是微软构建的一个目标检测大型基准数据集,包括检测、分割、关键点估计等任务。该数据集包含80个对象类别,其中包括人、动物和交通工具等。
  • ImageNet:ImageNet是一个大型图像数据库,用于视觉对象识别软件研究。该数据集包含超过1400万张图像,其中有超过2万个类别。
  • 目标检测应用场景

目标检测技术广泛应用于安防、交通等行业内图像场景的目标检测与跟踪。应用领域包括人脸检测、行人检测、车辆检测、卫星图像中道路的检测、车载摄像机图像中的障碍物检测、医学影像在的病灶检测等。以下是一些目标检测的案例:

  • YOLOv4目标检测完成对道路上的车辆、行人的检测、跟踪和计数
  • 高清地图障碍物(汽车)检测标注项目
  • 通过目标检测技术,可以实现对图像中的人脸进行识别

在自动驾驶中,目标检测技术可以用于识别和跟踪道路上的车辆、行人、交通标志等物体,从而帮助自动驾驶汽车做出决策。例如,当自动驾驶汽车检测到前方有行人时,它会自动减速或停车以避免碰撞。目前,许多自动驾驶汽车都采用了基于深度学习的目标检测技术,如YOLO。


基于目标跟踪算法

基于目标跟踪的算法可以分为传统算法和基于深度学习的算法两种。

  • 基于传统算法

常见的有:

  1. 基于相关滤波的跟踪算法
  2. 基于卡尔曼滤波的跟踪算法
  3. 基于粒子滤波的跟踪算法
  4. 基于模板匹配的跟踪算法
  5. 基于背景差分的跟踪算法
  • 基于深度学习

常见的有:

  1. 基于卷积神经网络的目标跟踪算法
  2. 基于循环神经网络的目标跟踪算法
  3. 基于生成对抗网络的目标跟踪算法
  4. 基于强化学习的目标跟踪算法
  • 目标跟踪步骤

一般包括以下几个部分:

运动模型、特征提取、观测模型、模型更新、方法集成。

  • 目标跟踪评价指标

常见的评价指标:

  1. MOTA(Multiple Object Tracking Accuracy)多目标跟踪的准确度,用于统计在跟踪中的误差积累情况;
  2. MOTP(Multiple Object Tracking Precision)多目标跟踪精确度,衡量单摄像头多目标跟踪位置误差的一个指标;
  3. IDF1(Identification F1-score)以1为最佳情况,数值越高代表跟踪特定目标的精度越好;
  4. MT(Mostly Tracked)代表在80%的帧中被正确跟踪的轨迹占所有轨迹的比重;
  5. ML(Mostly Lost)代表在20%的帧中被错误跟踪或丢失的轨迹占所有轨迹的比重。
  • 目标跟踪数据集

目前常用的目标跟踪数据集有OTB、VOT、TrackingNet等。

OTB数据集是单目标跟踪领域最常用的数据集之一,包含了100多个视频序列,涵盖了多种场景和物体。

VOT数据集是一个大规模的单目标跟踪数据集,包含了60个视频序列,涵盖了各种场景和物

TrackingNet是一个大规模的目标跟踪数据集,包含了30643个视频片段,平均每个视频片段时长16.6s。

  • 目标跟踪应用场景

目标跟踪技术主要应用于以下领域:智能监控、机器人视觉系统、虚拟现实(人体跟踪)、医学诊断(细胞状态跟踪)等。其中,多目标跟踪主要应用于安防监控和自动驾驶等领域,这些场景中我们往往需要对众多目标同时进行追踪

相关推荐

悠悠万事,吃饭为大(悠悠万事吃饭为大,什么意思)

新媒体编辑:杜岷赵蕾初审:程秀娟审核:汤小俊审签:周星...

高铁扒门事件升级版!婚宴上‘冲喜’老人团:我们抢的是社会资源

凌晨两点改方案时,突然收到婚庆团队发来的视频——胶东某酒店宴会厅,三个穿大红棉袄的中年妇女跟敢死队似的往前冲,眼瞅着就要扑到新娘的高额钻石项链上。要不是门口小伙及时阻拦,这婚礼造型团队熬了三个月的方案...

微服务架构实战:商家管理后台与sso设计,SSO客户端设计

SSO客户端设计下面通过模块merchant-security对SSO客户端安全认证部分的实现进行封装,以便各个接入SSO的客户端应用进行引用。安全认证的项目管理配置SSO客户端安全认证的项目管理使...

还在为 Spring Boot 配置类加载机制困惑?一文为你彻底解惑

在当今微服务架构盛行、项目复杂度不断攀升的开发环境下,SpringBoot作为Java后端开发的主流框架,无疑是我们手中的得力武器。然而,当我们在享受其自动配置带来的便捷时,是否曾被配置类加载...

Seata源码—6.Seata AT模式的数据源代理二

大纲1.Seata的Resource资源接口源码2.Seata数据源连接池代理的实现源码3.Client向Server发起注册RM的源码4.Client向Server注册RM时的交互源码5.数据源连接...

30分钟了解K8S(30分钟了解微积分)

微服务演进方向o面向分布式设计(Distribution):容器、微服务、API驱动的开发;o面向配置设计(Configuration):一个镜像,多个环境配置;o面向韧性设计(Resista...

SpringBoot条件化配置(@Conditional)全面解析与实战指南

一、条件化配置基础概念1.1什么是条件化配置条件化配置是Spring框架提供的一种基于特定条件来决定是否注册Bean或加载配置的机制。在SpringBoot中,这一机制通过@Conditional...

一招解决所有依赖冲突(克服依赖)

背景介绍最近遇到了这样一个问题,我们有一个jar包common-tool,作为基础工具包,被各个项目在引用。突然某一天发现日志很多报错。一看是NoSuchMethodError,意思是Dis...

你读过Mybatis的源码?说说它用到了几种设计模式

学习设计模式时,很多人都有类似的困扰——明明概念背得滚瓜烂熟,一到写代码就完全想不起来怎么用。就像学了一堆游泳技巧,却从没下过水实践,很难真正掌握。其实理解一个知识点,就像看立体模型,单角度观察总...

golang对接阿里云私有Bucket上传图片、授权访问图片

1、为什么要设置私有bucket公共读写:互联网上任何用户都可以对该Bucket内的文件进行访问,并且向该Bucket写入数据。这有可能造成您数据的外泄以及费用激增,若被人恶意写入违法信息还可...

spring中的资源的加载(spring加载原理)

最近在网上看到有人问@ContextConfiguration("classpath:/bean.xml")中除了classpath这种还有其他的写法么,看他的意思是想从本地文件...

Android资源使用(android资源文件)

Android资源管理机制在Android的开发中,需要使用到各式各样的资源,这些资源往往是一些静态资源,比如位图,颜色,布局定义,用户界面使用到的字符串,动画等。这些资源统统放在项目的res/独立子...

如何深度理解mybatis?(如何深度理解康乐服务质量管理的5个维度)

深度自定义mybatis回顾mybatis的操作的核心步骤编写核心类SqlSessionFacotryBuild进行解析配置文件深度分析解析SqlSessionFacotryBuild干的核心工作编写...

@Autowired与@Resource原理知识点详解

springIOCAOP的不多做赘述了,说下IOC:SpringIOC解决的是对象管理和对象依赖的问题,IOC容器可以理解为一个对象工厂,我们都把该对象交给工厂,工厂管理这些对象的创建以及依赖关系...

java的redis连接工具篇(java redis client)

在Java里,有不少用于连接Redis的工具,下面为你介绍一些主流的工具及其特点:JedisJedis是Redis官方推荐的Java连接工具,它提供了全面的Redis命令支持,且...