百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 热门文章 > 正文

R数据分析:如何用R做多重插补,实例操练

bigegpt 2024-09-17 12:32 3 浏览

一篇文章写清楚一个问题,关注我,自学python!

哈哈,写了好几篇R了,应该改成关注我自学R了,R和python我都会写,今天给大家写写如何用R做多重插补。

多重插补介绍

多重插补(MI)是一种基于重复模拟的处理缺失值的方法。在面对复杂的缺失值问题时,MI是最常用的方法,它将从一个包含缺失值的数据集生成一组完整的数据集(通常是3到10个)。在每个模拟数据集中,缺失数据将用蒙特卡洛方法来填补。此时,标准的统计方法便可应用到每个模拟的数据集上,通过组合输出结果给出估计的结果,以及引入缺失值时的置信区间。R语言中可利用Amelia.mice和mi包来执行这些操作。今天写一写mice包中提供的方法。

实例操练

本文使用airquality这个数据集(R中自带的,哈哈)

首先我制造一点缺失数据,代码如下:

data <- airquality
data[4:10,3] <- rep(NA,7)
data[1:5,4] <- NA

然后把数据集中的分类变量去除,并看一看数据分布情况,代码如下:

data <- data[-c(5,6)]
summary(data)


可以看到数据集中有4个连续性变量的分布和每个变量的缺失值个数。

缺失数据分类

缺失数据的分类大概有3中(详细请看我之前的文章):

  • 非随机缺失
  • 随机缺失
  • 完全随机缺失

基本上,我们最期望自己的缺失数据是完全随机缺失,因为这种缺失最好处理,但是也不能缺多,最多不要超过5%。如果一个样本的特征或者一个变量缺失超过了5%我们就会考虑将这个样本或者特征剔除。所以接下来要做的就是看一看在我们的数据集中样本或者变量的缺失比例,代码如下

pMiss <- function(x){sum(is.na(x))/length(x)*100}
apply(data,2,pMiss)
apply(data,1,pMiss)


我们可以看到Ozone这个变量的缺失比例都快到25%了,这个时候就要考虑丢掉它或者补数据。再看样本,因为我们每一个样本就4个变量,如果一个样本的变量缺失达到2肯定得丢掉。

使用mice查看数据缺失类型

mice包有一个非常好用的查看缺失的方法md.pattern()

library(mice)
md.pattern(data)



从上面的表格和图形,我们很容易看出数据集中有104个完整样本,其中Ozone这个变量缺失最多。

当然啊,上面的方法并不直接告诉我们数据集缺失数据的比例,看缺失比例,代码如下:

library(VIM)
aggr_plot <- aggr(data, col=c('navyblue','red'), 
                  numbers=TRUE, sortVars=TRUE, labels=names(data), 
                  cex.axis=.7, gap=3, ylab=c("Histogram of missing data","Pattern"))


上面的输出就可以很清晰的让我们知道,数据缺失比例是多少,很容易看出,我们的数据集中,有70%是完整数据。

插补缺失

多重插补的代码如下:

tempData <- mice(data,m=5,maxit=50,meth='pmm',seed=500)
summary(tempData)


上面的代码会输出插补的迭代过程和上图,给大家解释一下各个参数的意思:

  • m=5 代表插补的数据集个数,默认为5
  • meth='pmm' 代表插补方法,PMM为默认方式:预测均值匹配,你也可以输入methods(mice)看一看R提供的别的插补方法。

怎么看插补完成的数据呢?很简单,比如我现在想看Ozone这个变量的完整数据,只需要以下代码:

tempData$imp$Ozone


现在不是已经插补完成了嘛,此时就需要获取完整数据集,代码很简单

completedData <- complete(tempData,1)

上面的代码就是取我们插补的第一个数据集,我相信,你肯定知道取第二个数据集的代码怎么写了。

对比原始数据和插补数据

我们可以画个图看看插补数据和原始数据的分布情况,首先是点图,代码如下

xyplot(tempData,Ozone ~ Wind+Temp+Solar.R,pch=18,cex=1)


在上面这个图中,我们需要看的是紫红色的点也就是插补的点和蓝色的点也就是原始数据的分布是不是一样的,上面的图大概可以看出来,插补的数据和原始数据的分布还是差不多的,说明插补的还好。

还有另一个图:密度图也可以看看

densityplot(tempData)


在上图中,紫红色的都是插补数据集的分布情况,蓝色的是真实数据的分布情况,但是好像这个图也不能分清楚哪个插补的数据集最好,不过也没关系。最终我们都要合并的。

合并

假设我们要对数据做的分析是线性回归,你可能会问我到底该选哪一个数据集做呢?哈,mice直接可以都做好直接给我输出最终合并的结果。

代码如下:

modelFit1 <- with(tempData,lm(Temp~ Ozone+Solar.R+Wind))
summary(pool(modelFit1))


在上面的代码中,modelFit1中就包含了用插补数据集做出来的模型结果,然后用pool方法可以将将所有的模型结果合并在一起,从输出的结果看,只有Ozone这个变量是显著的。

小结

今天给大家写了多重插补的做法,感谢大家耐心看完。发表这些东西的主要目的就是督促自己,希望大家关注评论指出不足,一起进步。内容我都会写的很细,用到的数据集也会在原文中给出链接,你只要按照文章中的代码自己也可以做出一样的结果,一个目的就是零基础也能懂,因为自己就是什么基础没有从零学Python的,加油。

(站外链接发不了,请关注后私信回复“数据链接”获取本头条号所有使用数据)

往期精彩:

R数据分析:如何用R做验证性因子分析及画图,实例操练

R数据分析:结构方程模型画图以及模型比较,实例操练

python数据分析:数据缺失机制及利用missingno库对缺失可视化

相关推荐

方差分析简介(方差分析通俗理解)

介绍方差分析(ANOVA,AnalysisofVariance)是一种广泛使用的统计方法,用于比较两个或多个组之间的均值。单因素方差分析是方差分析的一种变体,旨在检测三个或更多分类组的均值是否存在...

正如404页面所预示,猴子正成为断网元凶--吧嗒吧嗒真好吃

吧嗒吧嗒,绘图:MakiNaro你可以通过加热、冰冻、水淹、模塑、甚至压溃压力来使网络光缆硬化。但用猴子显然是不行的。光缆那新挤压成型的塑料外皮太尼玛诱人了,无法阻挡一场试吃盛宴的举行。印度政府正...

Python数据可视化:箱线图多种库画法

概念箱线图通过数据的四分位数来展示数据的分布情况。例如:数据的中心位置,数据间的离散程度,是否有异常值等。把数据从小到大进行排列并等分成四份,第一分位数(Q1),第二分位数(Q2)和第三分位数(Q3)...

多组独立(完全随机设计)样本秩和检验的SPSS操作教程及结果解读

作者/风仕在上一期,我们已经讲完了两组独立样本秩和检验的SPSS操作教程及结果解读,这期开始讲多组独立样本秩和检验,我们主要从多组独立样本秩和检验介绍、两组独立样本秩和检验使用条件及案例的SPSS操作...

方差分析 in R语言 and Excel(方差分析r语言例题)

今天来写一篇实际中比较实用的分析方法,方差分析。通过方差分析,我们可以确定组别之间的差异是否超出了由于随机因素引起的差异范围。方差分析分为单因素方差分析和多因素方差分析,这一篇先介绍一下单因素方差分析...

可视化:前端数据可视化插件大盘点 图表/图谱/地图/关系图

前端数据可视化插件大盘点图表/图谱/地图/关系图全有在大数据时代,很多时候我们需要在网页中显示数据统计报表,从而能很直观地了解数据的走向,开发人员很多时候需要使用图表来表现一些数据。随着Web技术的...

matplotlib 必知的 15 个图(matplotlib各种图)

施工专题,我已完成20篇,施工系列几乎覆盖Python完整技术栈,目标只总结实践中最实用的东西,直击问题本质,快速帮助读者们入门和进阶:1我的施工计划2数字专题3字符串专题4列表专题5流程控制专题6编...

R ggplot2常用图表绘制指南(ggplot2绘制折线图)

ggplot2是R语言中强大的数据可视化包,基于“图形语法”(GrammarofGraphics),通过分层方式构建图表。以下是常用图表命令的详细指南,涵盖基本语法、常见图表类型及示例,适合...

Python数据可视化:从Pandas基础到Seaborn高级应用

数据可视化是数据分析中不可或缺的一环,它能帮助我们直观理解数据模式和趋势。本文将全面介绍Python中最常用的三种可视化方法。Pandas内置绘图功能Pandas基于Matplotlib提供了简洁的绘...

Python 数据可视化常用命令备忘录

本文提供了一个全面的Python数据可视化备忘单,适用于探索性数据分析(EDA)。该备忘单涵盖了单变量分析、双变量分析、多变量分析、时间序列分析、文本数据分析、可视化定制以及保存与显示等内容。所...

统计图的种类(统计图的种类及特点图片)

统计图是利用几何图形或具体事物的形象和地图等形式来表现社会经济现象数量特征和数量关系的图形。以下是几种常见的统计图类型及其适用场景:1.条形图(BarChart)条形图是用矩形条的高度或长度来表示...

实测,大模型谁更懂数据可视化?(数据可视化和可视化分析的主要模型)

大家好,我是Ai学习的老章看论文时,经常看到漂亮的图表,很多不知道是用什么工具绘制的,或者很想复刻类似图表。实测,大模型LaTeX公式识别,出乎预料前文,我用Kimi、Qwen-3-235B...

通过AI提示词让Deepseek快速生成各种类型的图表制作

在数据分析和可视化领域,图表是传达信息的重要工具。然而,传统图表制作往往需要专业的软件和一定的技术知识。本文将介绍如何通过AI提示词,利用Deepseek快速生成各种类型的图表,包括柱状图、折线图、饼...

数据可视化:解析箱线图(box plot)

箱线图/盒须图(boxplot)是数据分布的图形表示,由五个摘要组成:最小值、第一四分位数(25th百分位数)、中位数、第三四分位数(75th百分位数)和最大值。箱子代表四分位距(IQR)。IQR是...

[seaborn] seaborn学习笔记1-箱形图Boxplot

1箱形图Boxplot(代码下载)Boxplot可能是最常见的图形类型之一。它能够很好表示数据中的分布规律。箱型图方框的末尾显示了上下四分位数。极线显示最高和最低值,不包括异常值。seaborn中...