百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 热门文章 > 正文

约克大学公开11k Hands数据集:使用手部图像数据集进行性别识别

bigegpt 2025-02-16 19:56 9 浏览

原文来源:arXiv

作者:Mahmoud Afifi

「雷克世界」编译:嗯~阿童木呀

11k Hands数据集涵盖了来自190个18 - 75岁之间的实验对象的11076幅手部图像(1600 x 1200像素)。按照要求,每个实验对象都要张开或是握紧左右手的手指,然后,在统一的白色背景,且手距离相机位置大致相同的情况下,分别从每只手的背侧和手掌侧进行拍摄。有一个与每个图像相关的元数据的记录,其中包括:(1)实验对象ID、(2)性别、(3)年龄、(4)肤色、以及(5)有关所捕捉到的手的一组信息,即右手或左手、手的部位(手背或手掌)以及逻辑指标,即指示手部图像是否包含配饰、指甲油或不符合规则处。所提出的数据集具有大量附加更为详尽的元数据的手部图像。该数据集是免费的,可用于合理的学术研究直接使用。

有关论文

你可以点击链接阅读论文预印本:
https://arxiv.org/pdf/1711.04322.pdf

有关引用

如果你想要使用本网页所提供的数据集、源代码或经过训练的模型,请引用以下文章:

Mahmoud Afifi:《使用手部图像的大数据集进行性别识别和生物特征识别》。arXiv preprint arXiv:1711.04322 (2017)

统计

下面的图显示了所提出的数据集的基本统计数据。

第一张图包含以下内容:

顶部:显示数据集中肤色的分布。每种肤色类别的图像数量写在图的右上角。使用Conaire等人提出的皮肤检测算法执行皮肤检测过程。

底部:统计(1)实验对象人数、(2)手部图像(手背和手掌)、(3)带有配饰的手部图像、(4)涂有指甲油的手部图像。

第二张图显示了实验对象的年龄分布以及所提出的数据集中的图像。

与其他数据集的比较

基础模型

我们提出了使用提出的数据集进行性别分类的双流CNN。然后,我们使用这个训练过的双流CNN作为性别分类和生物特征识别的特征提取器。而后者可以使用两种不同的方法进行处理。在第一种方法中,我们从提取训练过的CNN中的深度特征中构造特征向量,以训练支持向量机(SVM)分类器。在第二种方法中,三个SVM分类器是由从已训练CNN的不同层提取的深度特征馈送的,并且其中一个SVM分类器是使用局部二进制模式(LBP)特征来训练的,以便提高通过对所有SVM分类器的分类得分总计所得到的正确识别率。

你可以下面链接中下载经过训练的模型和分类器。

手部图像:
https://drive.google.com/open?id=
0BwO0RMrZJCiocGlvdnJxb0lTaHM

元数据:
https://drive.google.com/open?id=
0BwO0RMrZJCioMWJFVDZxczFaWEE

性别分类源码:
https://drive.google.com/open?id=
1HTNfs4-VCLGkufDnZ_8L_l13qVZ8cypq

生物识别源代码:
https://drive.google.com/open?id=
1Fmk1KCbIzSfQVGsISwFUwhp2HykGE43R

使用Conaire等人提出的皮肤检测技术来获得皮肤掩码图像:

https://drive.google.com/open?id=0B6CktEG1p54Wa2VzdktNY2Q0YlU

性别分类

由于我们对女性手部图像数量存在一个偏差(参见上面的统计数据),我们使用每个性别的1000张背部手部图像进行训练,并且使用每个性别的500张背部手部图像进行测试。这些图像是随机挑选的,从而使得训练和测试集是来自不相交的实验对象,这意味着如果这个实验对象的手部图像出现在训练数据中,则将实验对象从测试数据中排除,反之亦然。同样,对于手掌侧手部图像也是一样的。对于每一方,我们重复实验10次以避免过度拟合问题,并将平均精确度作为评估度量。

为了进行比较,我们使用10组训练和测试对来对不同的图像分类方法进行训练。这些方法是:(1)视觉词包(BoW)、(2)Fisher向量、(3)Alexnet(CNN)、(4)VGG-16(CNN)、(5)VGG-19(CNN)和(6)Googlenet(CNN)。对于第一个图像分类框架(BoW和FV),我们使用了三个不同的特征描述符:(1)SIFT、(2)C-SIFT和(3)rgSIFT。为了进行进一步比较,我们建议使用相同的评估标准。下表为实验中使用的10组训练和测试对,请参见下表:

每个集包含以下文件:

g_imgs_training_d.txt:用于训练的图像文件名(背侧)

g_imgs_training_p.txt:训练的图像文件名(手掌侧)

g_imgs_testing_d.txt:用于测试的图像文件名(背侧)

g_imgs_testing_p.txt:用于测试的图像文件名(手掌侧)

g_training_d.txt:g_imgs_training_d.txt中每个相应图片文件名的真实性别

g_training_p.txt:g_imgs_training_p.txt中每个对应图片文件名的真实性别

g_testing_d.txt:g_imgs_testing_d.txt中每个对应图像文件名的真实性别

g_testing_p.txt:g_imgs_testing_p.txt中每个对应图像文件名的真实性别

你可以使用这个Matlab代码(
https://drive.google.com/open?id=
0BwO0RMrZJCioelRhLTFmVFgwUTQ)来提取每个实验中所使用的图像。代码生成10个目录,每个目录包含每个性别的训练和测试集。然后你可以使用imageDatastore函数(
https://cn.mathworks.com/help/matlab/ref/imagedatastore.html?requestedDomain=www.mathworks.com)来加载它们(请参阅CNN_training.m源代码)。

训练的CNN模型、SVM分类器及结果

如果你未安装用于网络支持包的Matlab神经网络工具箱模型,则该函数将提供指向附加资源管理器中所需支持包的链接。

正如论文中所描述的那样,使用我们的CNN模型作为特征提取器来训练SVM分类器。SVM分类器是使用级联特征向量进行训练的,其中来自第一个流中的fc9、第二个流中的fc10,而融合完全连接层的特征将被级联到一个向量中。

生物识别

对于生物识别,我们使用不同的训练和测试集。我们使用80、100和120个实验对象的(手掌或背侧)图像中的10张手部图像进行训练,4张手部图像用于测试。我们将重复实验10次,且每次随机挑选实验对象和图像。我们采用平均识别精度作为评估指标。为了进行进一步比较,我们建议使用相同的评估标准。下面为我们实验中使用的10组训练和测试对,请参见下表:

每个集包含以下文件:

id_imgs_training_d_S.txt:用于训练的图像文件名(背侧)

id_imgs_training_p_S.txt:用于训练的图像文件名(手掌侧)

id_imgs_testing_d_S.txt:用于测试的图像文件名(背侧)

id_imgs_testing_p_S.txt:用于测试的图像文件名(手掌侧)

id_training_d_S.txt:id_imgs_training_d_S.txt中每个对应图片文件名的ID

id_training_p_S.txt:id_imgs_training_p_S.txt中每个对应图片文件名的ID

id_testing_d_S.txt:id_imgs_testing_d_S.txt中每个对应图片文件名的真实ID

id_testing_d_S.txt:id_imgs_testing_p_S.txt中每个对应图片文件名的真实ID

注意:S代表实验对象数量:80、100和120。更多细节可阅读论文了解。

你可以使用这个Matlab代码,提取每个实验中所使用的图像。代码生成10个目录,每个目录包含每组实验对象的训练和测试集。每个文件名都包含实验对象的ID。例如,0000000_Hand_0000055.jpg表示实验对象编号为0000000的图像,其余文件名称为原始图像名称。你可以使用这个Matlab代码来加载所有的图像文件名,并提取相应的ID。

训练的SVM分类器和结果

如本文所述,使用我们的CNN模型作为特征提取器来训练SVM分类器。每个.mat文件都包含一个Classifier对象,其中:

?Classifier.low:是使用从输入图像平滑版本中提取的特征进行训练的SVM分类器。这些CNN特征是从第一个流中的f9获得的。

?Classifier.high:是使用从输入图像的细节层提取的特征进行训练的SVM分类器。这些CNN特征是从第二个流中的f10获得的。

?Classifier.fusion:是使用从我们的CNN的融合层提取的特征进行训练的SVM分类器。

?Classifier.lbp:是使用LBP特征训练的SVM分类器。

?Classifier.all:是使用级联特征向量训练的SVM分类器,其中来自第一个流中的fc9、第二个流中的fc10和融合完全连接层的特征被级联成一个向量。

相关推荐

Linux 系统启动完整流程

一、启动系统流程简介如上图,简述系统启动的大概流程:1:硬件引导UEFi或BIOS初始化,运行POST开机自检2:grub2引导阶段系统固件会从MBR中读取启动加载器,然后将控制权交给启动加载器GRU...

超专业解析!10分钟带你搞懂Linux中直接I/O原理

我们先看一张图:这张图大体上描述了Linux系统上,应用程序对磁盘上的文件进行读写时,从上到下经历了哪些事情。这篇文章就以这张图为基础,介绍Linux在I/O上做了哪些事情。文件系统什么是...

linux入门系列12--磁盘管理之分区、格式化与挂载

前面系列文章讲解了VI编辑器、常用命令、防火墙及网络服务管理,本篇将讲解磁盘管理相关知识。本文将会介绍大量的Linux命令,其中有一部分在“linux入门系列5--新手必会的linux命令”一文中已经...

Linux环境下如何设置多个交叉编译工具链?

常见的Linux操作系统都可以通过包管理器安装交叉编译工具链,比如Ubuntu环境下使用如下命令安装gcc交叉编译器:sudoapt-getinstallgcc-arm-linux-gnueab...

可算是有文章,把Linux零拷贝技术讲透彻了

阅读本文大概需要6.0分钟。作者:卡巴拉的树链接:https://dwz.cn/BaQWWtmh本文探讨Linux中主要的几种零拷贝技术以及零拷贝技术适用的场景。为了迅速建立起零拷贝的概念...

linux软链接的创建、删除和更新

大家都知道,有的时候,我们为了省下空间,都会使用链接的方式来进行引用操作。同样的,在系统级别也有。在Windows系列中,我们称其为快捷方式,在Linux中我们称其为链接(基本上都差不多了,其中可能...

Linux 中最容易被黑客动手脚的关键目录

在Linux系统中,黑客攻击后常会针对关键目录和文件进行修改以实现持久化、提权或隐藏恶意活动。本文介绍下黑客最常修改的目录及其手法。一、/etc目录关键文件有:/etc/passwd和/et...

linux之间传文件命令之Rsync傻瓜式教程

1.前言linux之间传文件命令用什么命令?本文介绍一种最常用,也是功能强大的文件同步和传输工具Rsync,本文提供详细傻瓜式教程。在本教程中,我们将通过实际使用案例和最常见的rsync选项的详细说...

Linux下删除目录符号链接的方法

技术背景在Linux系统中,符号链接(symlink)是一种特殊的文件,它指向另一个文件或目录。有时候,我们可能需要删除符号链接,但保留其指向的目标目录。然而,在删除符号链接时可能会遇到一些问题,例如...

阿里云国际站注册教程:aa云服务器怎么远程链接?

在全球化的今天,互联网带给我们无以计数的便利,而云服务器则是其中的重要基础设施之一。这篇文章将围绕阿里云国际站注册、aa云服务器如何远程链接,以及服务器安全防护如Ddos防火墙、网站应用防护waf防火...

Linux 5.16 网络子系统大范围升级 多个新适配器驱动加入

Linux在数据中心中占主导地位,因此每个内核升级周期的网络子系统变化仍然相当活跃。Linux5.16也不例外,周一最新与网络相关的更新加入了大量的驱动和新规范的支持。一个较新硬件的驱动是Realt...

搭建局域网文件共享服务(Samba),手机电脑都能看喜欢的影视剧

作为一名影视爱好者,为了方便地观看自己喜欢的影视作品,在家里搞一个专门用来存放电影的服务器是有必要的。蚁哥选则用一台Ubuntu系统的电脑做为服务器,共享影音文件,其他同一个局域网内的电脑或手机可以...

分享一个实用脚本—centos7系统巡检

概述这周闲得慌,就根据需求写了差不多20个脚本(部分是之前分享过的做了一些改进),今天主要分享一个给平时运维人员用的centos7系统巡检的脚本,或者排查问题检查系统情况也可以用..实用脚本#!/bi...

Linux 中创建符号链接的方法

技术背景在Linux系统里,符号链接(SymbolicLink),也被叫做软链接(SoftLink),是一种特殊的文件,它指向另一个文件或者目录。符号链接为文件和目录的管理带来了极大的便利,比...

一文掌握 Linux 符号链接

符号链接(SymbolicLink),通常被称为“软链接”,是Linux文件系统中一种强大而灵活的工具。它允许用户创建指向文件或目录的“快捷方式”,不仅简化了文件管理,还在系统配置、软件开发和日...