百度360必应搜狗淘宝本站头条
mqtt服务器xftp6mybatiscollectionkeyerrorc#var
当前位置：网站首页 > 热门文章 > 正文

同事给你迷之Excel数据，4个数据处理案例教你Python数据对比更新

bigegpt 2024-10-23 08:53 3 浏览

转发本文并私信我"python"，即可获得Python资料以及更多系列文章(持续更新的)

经常听别人说 Python 在数据领域有多厉害，结果学了很长时间，连数据处理都麻烦得要死。后来才发现，原来不是 Python 数据处理厉害，而是他有数据分析神器—— pandas

前言

有时候我们需要对比两份数据有哪些不同值，在 Excel 中虽然没有实现对比功能，但通过公式也可以简单完成。不过你可能没想到的是，在 pandas 中实现对比功能，与 Excel 有异曲同工之处。

案例1

你千辛万苦整理了一份数据表，发给了同事，几小时后，同事在表格中修改了某些单元格的值，然后扔下一句话：麻烦你看看修改的对不对？

  • 此时你很想问一句：可以告诉我哪些修改了？

Excel 中，我们可以简单写一个等号，把两个表的值都对比一下：

虽然上述方式操作简单，但是你每次编写公式范围都要靠"手感"。现在看看 pandas 中怎么实现：

  • pandas 中的原理其实与 Excel 操作是一样的，不过我们只需要写一次"双等号"，pandas 会自动让2个表的每个值做对比

案例2

你会埋怨说，上面给我一堆 bool 值，有啥用？！你当然希望看看那些被修改的值。上面代码简单修改即可：

  • cond = df_mdf != df_src ， 这次我们把判断条件写成"!="，是"不等于"的意思
  • df_mdf[cond] ，紧接着只要把那些"不等于"的结果放入"修改表"，即可显示那些被修改的值

案例3

你的同事喜欢给你"开玩笑"，这次他发过来的数据表，不小心把人名的顺序给打乱了：

  • 现在修改后的表格数据，是按销量降序排列

这次我们不能直接根据位置判断，不过只需要简单调整即可：

  • 关键1(红线部分)，加载数据时，把第一列作为行索引
  • 关键2(蓝线部分)，让"乱序表"按"原始表"的索引重置一下
  • 其他部分不变

实际上，pandas 中的判断是根据行列索引自动对齐

案例4

有时候，同事不会给你完整的数据表，他只提供修改的记录：

这次你不再需要关心哪些被修改了，而是怎么把修改后的结果更新到"原始表"。

pandas 当然不会让你失望：

  • 关键在最后一行，DataFrame.update() ，按传入的 DataFrame 作为标准，更新原始表
  • 时刻谨记，一切按行列索引自动对齐

你会发现，即使是非常复杂的表头，也能完成这些操作，因为 DataFrame 可以包含各种多层行列索引。因此，这案例中的列顺序有变化，同样可以完成操作

如果希望从零开始系统学习 pandas ，这个 pandas 专栏不容错过。内含多个数据分析案例。

总结

  • 注意 DataFrame 的行列索引，所有操作都自带索引对齐功能
  • DataFrame.update ，能以另一个 DataFrame 为基准，做更新操作

需要源码的小伙伴请转发本文并私信我"python"

相关推荐

Docker篇(二):Docker实战，命令解析

大家好，我是杰哥上周我们通过几个问题，让大家对于Docker有了一个全局的认识。然而，说跟练往往是两个概念。从学习的角度来说，理论知识的学习，往往只是第一步，只有经过实战，才能真正掌握一门技术所以，本...

docker学习笔记——安装和基本操作

今天学习了docker的基本知识,记录一下docker的安装步骤和基本命令(以CentOS7.x为例)一、安装docker的步骤：1.yuminstall-yyum-utils2.yum-con...

不可错过的Docker完整笔记（dockerhib）

简介一、Docker简介Docker是一个开源的应用容器引擎，基于Go语言并遵从Apache2.0协议开源。Docker可以让开发者打包他们的应用以及依赖包到一个轻量级、可移植的容器中，...

扔掉运营商的 IPTV 机顶盒，全屋全设备畅看 IPTV!

其实现在看电视节目的需求确实大大降低了，折腾也只是为了单纯的让它实现，享受这个过程带来的快乐而已，哈哈！预期构想家里所有设备直接接入网络随时接收并播放IPTV直播（电信点播的节目不是太多，但好在非常稳...

第五节 Docker 入门实践:从 Hello World 到容器操作

一、Docker容器基础运行（一）单次命令执行通过dockerrun命令可以直接在容器中执行指定命令，这是体验Docker最快捷的方式：#在ubuntu:15.10容器中执行ech...

替代Docker build的Buildah简单介绍

Buildah是用于通过较低级别的coreutils接口构建OCI兼容镜像的工具。与Podman相似，Buildah不依赖于Docker或CRI-O之类的守护程序，并且不需要root特权。Builda...

Docker 命令大全（docker命令大全记录表）

容器生命周期管理run-创建并启动一个新的容器。start/stop/restart-这些命令主要用于启动、停止和重启容器。kill-立即终止一个或多个正在运行的容器rm-于删除一个或...

docker常用指令及安装rabbitMQ（docker安装rabbitmq配置环境）

一、docker常用指令启动docker：systemctlstartdocker停止docker：systemctlstopdocker重启docker：systemctlrestart...

使用Docker快速部署Storm环境（docker部署confluence）

Storm的部署虽然不是特别麻烦，但是在生产环境中，为了提高部署效率，方便管理维护，使用Docker来统一管理部署是一个不错的选择。下面是我开源的一个新的项目，一个配置好了storm与mono环境的D...

Docker Desktop安装使用指南:零基础教程

在之前的文章中，我多次提到使用Docker来安装各类软件，尤其是开源软件应用。鉴于不少读者对此有需求，我决定专门制作一期关于Docker安装与使用的详细教程。我主要以Macbook（Mac平台）为例进...

Linux如何成功地离线安装docker（linux离线安装httpd）

系统环境：Redhat7.2和Centos7.4实测成功近期因项目需要用docker，所以记录一些相关知识，由于生产环境是不能直接连接互联网，尝试在linux中离线安装docker。步骤1.下载...

Docker 类面试题(常见问题)（docker面试题目）

Docker常见问题汇总镜像相关1、如何批量清理临时镜像文件？可以使用sudodockerrmi$(sudodockerimages-q-fdanging=true)命令2、如何查看...

面试官:你知道Dubbo怎么优雅上下线的吗?你:优雅上下线是啥?

最近无论是校招还是社招，都进行的如火如荼，我也承担了很多的面试工作，在一次面试过程中，和候选人聊了一些关于Dubbo的知识。Dubbo是一个比较著名的RPC框架，很多人对于他的一些网络通信、通信协议、...

【Docker 新手入门指南】第五章:Hello Word

适合人群：完全零基础新手|学习目标：30分钟掌握Docker核心操作一、准备工作：先确认是否安装成功打开终端（Windows用户用PowerShell或GitBash），输入：docker--...

松勤软件测试:详解Docker，如何用portainer管理Docker容器

镜像管理搜索镜像dockersearch镜像名称拉取镜像dockerpullname[:tag]列出镜像dockerimages删除镜像dockerrmiimage名称或id删除...

一周热门
最近发表
标签列表