Python之容器:字典(dict)缺失值处理不优雅?试试defaultdict
bigegpt 2024-12-22 14:25 4 浏览
引言
前面我们已经介绍了Python中字典(dict)的使用,在处理字典缺失键时,一种方式是加分支判断处理,但是有点繁琐;另外一种,是使用setdefault()方法,似乎已经简化了缺失值的处理。但是,setdefault()方法,其实还是有两个问题的:
1、setdefault()这个方法的名字比较怪,对不熟悉的童鞋来说,可读性比较差,需要在脑子里绕一会儿,一时半会儿难以理解这个代码要干啥;
2、还是不够高效,代码行数似乎还可以精简
针对缺失键的场景,Python提供了更加好用的工具,这就是collections包中的defaultdict。
本文的主要内容大致如下:
1、回顾一下使用dict在应对缺失值的做法
2、defaultdict的使用
dict缺失键的常规做法
以人员按照年龄的分组计数为例,来说明缺失值的应对场景。
首先生成测试数据,然后以常规的分支判断来统计:
from faker import Faker
from rich import print
fk = Faker('zh_CN')
# 为了数据尽量聚集,我们生成18~28年龄的测试数据
persons = [(fk.unique.name(), fk.random_int(18, 28)) for _ in range(100)]
print(persons)
# 按照年龄统计人数
count_by_age = {}
# 通过判断键值是否存在,分支处理
for name, age in persons:
if age in count_by_age:
count_by_age[age] += 1
else:
count_by_age[age] = 1
print(count_by_age)
执行结果:
我们也可以试着用前面提到过的setdefault()方法来处理,可以把分支判断的代码省掉:
count_by_age = {}
# 使用setdefault()方法来处理
for name, age in persons:
cnt = count_by_age.setdefault(age, 0)
count_by_age[age] += 1
print(count_by_age)
虽然有点奇怪……
接下来试试defaultdict来处理。
defaultdict的使用
简单看下defaultdict的定义:
传入一个default_factory的“函数”,这个函数会在当key不存在时,被调用,用来生成一个新的默认值。
接下来,看下上面的例子,使用defaultdict的实现:
from faker import Faker
from collections import defaultdict
fk = Faker('zh_CN')
# 为了数据尽量聚集,我们生成18~28年龄的测试数据
persons = [(fk.unique.name(), fk.random_int(18, 28)) for _ in range(100)]
# 按照年龄统计人数,这次不使用dict,改用defaultdict
count_by_age = defaultdict(int)
# 通过判断键值是否存在,分支处理
for name, age in persons:
count_by_age[age] += 1
print(count_by_age)
count_by_age2 = {}
# 使用setdefault()方法来处理
# 用来跟defaultdict处理的结果做对比
for name, age in persons:
cnt = count_by_age2.setdefault(age, 0)
count_by_age2[age] += 1
print(count_by_age2)
# 从定义来看,defaultdict与dict中元素相同时,比较时会返回True
print(count_by_age == count_by_age2)
执行结果:
可以看到,使用defaultdict时,我们直接通过索引的方式对不存在的key进行索引并执行更新操作,一行代码就搞定了。
其内部的实现逻辑是,首先判断key不存在时,会通过构造defaultdict对象时,传入的“函数”构造一个默认值,比如:
int()默认会创建一个值为0的整数对象,str()会创建一个值为""的字符串对象。
# 0
print(int())
# ''空字符串
print(str())
# 长度为0
print(len(str()))
其实,当需要进行分组收集时,defaultdict会更加好用。
比如,不同于前面的分组计数,我们这次要把每个年龄的人名都放在一起,放到一个list中,我们通过defaultdict来实现:
from faker import Faker
from rich import print
from collections import defaultdict
fk = Faker('zh_CN')
# 为了数据尽量聚集,我们生成18~28年龄的测试数据
persons = [(fk.unique.name(), fk.random_int(18, 28)) for _ in range(100)]
# 按照年龄分组收集
collect_by_age = defaultdict(list)
# 通过判断键值是否存在,分支处理
for name, age in persons:
collect_by_age[age].append(name)
print(collect_by_age)
代码中,我们使用list作为工厂函数进行默认值的构造,当key不存在时,创建一个空列表对象。
执行结果:
我们还可以自定义工厂函数来指定默认值,比如,我们默认每个人的年龄都是18:
def default_age():
return 18
persons = defaultdict(default_age)
print(persons['zs'])
persons['zs'] = 25
print(persons['zs'])
执行结果:
首次访问时,不存在,则会创建默认值18。
前面,之所以在函数上面打了引号,其实并不一定只能是函数,其实,只要是可调用的对象,比如,我们传入一个自定义类名,则会默认调用其__init__方法:
class Student:
def __init__(self):
self.name = 'unknown'
self.age = 0
def __str__(self):
return f"Student(name: {self.name}, age: {self.age})"
stus = defaultdict(Student)
print(stus['zs'])
stus['zs'].name = '张三'
stus['zs'].age = 18
print(stus['zs'])
执行结果:
总结
关于字典中缺失值处理的场景,本文首先介绍了dict中常规的分支判断的处理方法,以及通过setdefault()简化分支处理的方法。之后,引入defaultdict,介绍了更加灵活、强大的处理方法。根据实际使用场景,可以自行选择!
相关推荐
- 了解Linux目录,那你就了解了一半的Linux系统
-
大到公司或者社群再小到个人要利用Linux来开发产品的人实在是多如牛毛,每个人都用自己的标准来配置文件或者设置目录,那么未来的Linux则就是一团乱麻,也对管理造成许多麻烦。后来,就有所谓的FHS(F...
- Linux命令,这些操作要注意!(linux命令?)
-
刚玩Linux的人总觉得自己在演黑客电影,直到手滑输错命令把公司服务器删库,这才发现命令行根本不是随便乱用的,而是“生死簿”。今天直接上干货,告诉你哪些命令用好了封神!喜欢的一键三连,谢谢观众老爷!!...
- Linux 命令速查手册:这 30 个高频指令,拯救 90% 的运维小白!
-
在Linux系统的世界里,命令行是强大的武器。对于运维小白而言,掌握一些高频使用的Linux命令,能极大提升工作效率,轻松应对各种系统管理任务。今天,就为大家奉上精心整理的30个Linu...
- linux必学的60个命令(linux必学的20个命令)
-
以下是Linux必学的20个基础命令:1.cd:切换目录2.ls:列出文件和目录3.mkdir:创建目录4.rm:删除文件或目录5.cp:复制文件或目录6.mv:移动/重命名文件或目录7....
- 提高工作效率的--Linux常用命令,能够决解95%以上的问题
-
点击上方关注,第一时间接受干货转发,点赞,收藏,不如一次关注评论区第一条注意查看回复:Linux命令获取linux常用命令大全pdf+Linux命令行大全pdf为什么要学习Linux命令?1、因为Li...
- 15 个实用 Linux 命令(linux命令用法及举例)
-
Linux命令行是系统管理员、开发者和技术爱好者的强大工具。掌握实用命令不仅能提高效率,还能解锁Linux系统的无限潜力,本文将深入介绍15个实用Linux命令。ls-列出目录内容l...
- Linux 常用命令集合(linux常用命令全集)
-
系统信息arch显示机器的处理器架构(1)uname-m显示机器的处理器架构(2)uname-r显示正在使用的内核版本dmidecode-q显示硬件系统部件-(SMBIOS/DM...
- Linux的常用命令就是记不住,怎么办?
-
1.帮助命令1.1help命令#语法格式:命令--help#作用:查看某个命令的帮助信息#示例:#ls--help查看ls命令的帮助信息#netst...
- Linux常用文件操作命令(linux常用文件操作命令有哪些)
-
ls命令在Linux维护工作中,经常使用ls这个命令,这是最基本的命令,来写几条常用的ls命令。先来查看一下使用的ls版本#ls--versionls(GNUcoreutils)8.4...
- Linux 常用命令(linux常用命令)
-
日志排查类操作命令查看日志cat/var/log/messages、tail-fxxx.log搜索关键词grep"error"xxx.log多条件过滤`grep-E...
- 简单粗暴收藏版:Linux常用命令大汇总
-
号主:老杨丨11年资深网络工程师,更多网工提升干货,请关注公众号:网络工程师俱乐部下午好,我的网工朋友在Linux系统中,命令行界面(CLI)是管理员和开发人员最常用的工具之一。通过命令行,用户可...
- 「Linux」linux常用基本命令(linux常用基本命令和用法)
-
Linux中许多常用命令是必须掌握的,这里将我学linux入门时学的一些常用的基本命令分享给大家一下,希望可以帮助你们。总结送免费学习资料(包含视频、技术学习路线图谱、文档等)1、显示日期的指令:d...
- Linux的常用命令就是记不住,怎么办?于是推出了这套教程
-
1.帮助命令1.1help命令#语法格式:命令--help#作用:查看某个命令的帮助信息#示例:#ls--help查看ls命令的帮助信息#netst...
- Linux的30个常用命令汇总,运维大神必掌握技能!
-
以下是Linux系统中最常用的30个命令,精简版覆盖日常操作核心需求,适合快速掌握:一、文件/目录操作1.`ls`-列出目录内容`ls-l`(详细信息)|`ls-a`(显示隐藏文件)...
- Linux/Unix 系统中非常常用的命令
-
Linux/Unix系统中非常常用的命令,它们是进行文件操作、文本处理、权限管理等任务的基础。下面是对这些命令的简要说明:**文件操作类:*****`ls`(list):**列出目录内容,显...
- 一周热门
- 最近发表
- 标签列表
-
- mybatiscollection (79)
- mqtt服务器 (88)
- keyerror (78)
- c#map (65)
- resize函数 (64)
- xftp6 (83)
- bt搜索 (75)
- c#var (76)
- mybatis大于等于 (64)
- xcode-select (66)
- mysql授权 (74)
- 下载测试 (70)
- linuxlink (65)
- pythonwget (67)
- androidinclude (65)
- logstashinput (65)
- hadoop端口 (65)
- vue阻止冒泡 (67)
- oracle时间戳转换日期 (64)
- jquery跨域 (68)
- php写入文件 (73)
- kafkatools (66)
- mysql导出数据库 (66)
- jquery鼠标移入移出 (71)
- 取小数点后两位的函数 (73)