百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 热门文章 > 正文

DAY5-step9 使用CSV模块和Pandas在Python中读取和写入CSV文件

bigegpt 2024-09-20 13:58 3 浏览

什么是CSV文件?

CSV文件是一种纯文本文件,其使用特定的结构来排列表格数据。 CSV是一种紧凑,简单且通用的数据交换通用格式。 许多在线服务允许其用户将网站中的表格数据导出到CSV文件中。 CSV文件将在Excel中打开,几乎所有数据库都具有允许从CSV文件导入的工具。 标准格式由行和列数据定义。 此外,每行以换行符终止,以开始下一行。 同样在行内,每列用逗号分隔。

CSV样本文件。

表格形式的数据也称为CSV(逗号分隔值)-字面上是“逗号分隔值”。 这是用于表示表格数据的文本格式。 文件的每一行都是表的一行。 各个列的值由分隔符-逗号(,),分号(;)或另一个符号分隔。 CSV可以通过Python轻松读取和处理。

考虑下表


您可以在csv中表示此表,如下所示。

CSV数据

编程语言,设计者,出现,扩展

Python,Guido van Rossum,1991,.py

Java,James Gosling,1995,.java

C ++,Bjarne Stroustrup,1983,.cpp

如您所见,每一行都是换行符,每一列都用逗号分隔。 这是一个CSV文件外观的示例。

Python CSV模块

Python提供了一个CSV模块来处理CSV文件。 要读取/写入数据,您需要遍历CSV行。 您需要使用split方法从指定的列获取数据。

CSV模块功能

在CSV模块文档中,您可以找到以下功能:

  • csv.field_size_limit –返回最大字段大小
  • csv.get_dialect –获取与名称相关的方言
  • csv.list_dialects –显示所有已注册的方言
  • csv.reader –从csv文件读取数据
  • csv.register_dialect-将方言与名称相关联
  • csv.writer –将数据写入csv文件
  • csv.unregister_dialect-删除与方言注册表名称关联的方言
  • csv.QUOTE_ALL-引用所有内容,无论类型如何。
  • csv.QUOTE_MINIMAL-引用带有特殊字符的字段
  • csv.QUOTE_NONNUMERIC-引用所有非数字值的字段
  • csv.QUOTE_NONE –在输出中不引用任何内容

在本教程中,我们将仅专注于读取器和写入器功能,这些功能使您可以编辑,修改和操作CSV文件中的数据。

如何读取CSV文件

要从CSV文件读取数据,必须使用阅读器功能来生成阅读器对象。

开发阅读器功能是为了获取文件的每一行并列出所有列。 然后,您必须选择想要变量数据的列。

听起来比它复杂得多。 让我们看一下这个例子,我们会发现使用csv文件并不是那么困难。

#import necessary modules
import csv
with open('X:\data.csv','rt')as f:
  data = csv.reader(f)
  for row in data:
        print(row)

当您执行上述程序时,输出将是:

['Programming language; Designed by; Appeared; Extension']
['Python; Guido van Rossum; 1991; .py']
['Java; James Gosling; 1995; .java']
['C++; Bjarne Stroustrup;1983;.cpp']

如何将CSV作为字典阅读

您也可以使用DictReader读取CSV文件。 结果被解释为字典,其中标题行是键,其他行是值。

考虑以下代码

#import necessary modules
import csv

reader = csv.DictReader(open("file2.csv"))
for raw in reader:
    print(raw)

结果是

OrderedDict([('Programming language', 'Python'), ('Designed by', 'Guido van Rossum'), (' Appeared', ' 1991'), (' Extension', ' .py')])
OrderedDict([('Programming language', 'Java'), ('Designed by', 'James Gosling'), (' Appeared', ' 1995'), (' Extension', ' .java')])
OrderedDict([('Programming language', 'C++'), ('Designed by', ' Bjarne Stroustrup'), (' Appeared', ' 1985'), (' Extension', ' .cpp')])

而且这种从CSV文件读取数据的方法比以前的方法要容易得多。 但是,这并不是读取数据的最佳方法。

如何写CSV文件

当您有一组要存储在CSV文件中的数据时,必须使用writer()函数。 要遍历行(行)上的数据,必须使用writerow()函数。

考虑以下示例。 我们将数据写入文件“ writeData.csv”,其中定界符是撇号。

#import necessary modules
import csv

with open('X:\writeData.csv', mode='w') as file:
    writer = csv.writer(file, delimiter=',', quotechar='"', quoting=csv.QUOTE_MINIMAL)

    #way to write to csv file
    writer.writerow(['Programming language', 'Designed by', 'Appeared', 'Extension'])
    writer.writerow(['Python', 'Guido van Rossum', '1991', '.py'])
    writer.writerow(['Java', 'James Gosling', '1995', '.java'])
    writer.writerow(['C++', 'Bjarne Stroustrup', '1985', '.cpp'])

Result in csv file is:

Programming language, Designed by, Appeared, Extension 
Python, Guido van Rossum, 1991, .py
Java, James Gosling, 1995, .java
C++, Bjarne Stroustrup,1983,.cpp

使用Pandas读取CSV文件

Pandas是一个开源库,可让您使用Python执行数据操作。 Pandas提供了一种创建,操作和删除数据的简便方法。

您必须使用命令<code> pip install pandas </ code>安装pandas库。 在Windows中,在Linux的终端中,您将在命令提示符中执行此命令。

将CSV读入pandas DataFrame非常简单快捷:

#import necessary modules
import pandas
result = pandas.read_csv('X:\data.csv')
print(result)

Result:

Programming language, Designed by, Appeared, Extension 
0    Python, Guido van Rossum, 1991, .py
1    Java, James Gosling, 1995, .java
2    C++, Bjarne Stroustrup,1983,.cpp	

非常有用的库。 在仅三行代码中,您将获得与之前相同的结果。 Pandas知道CSV的第一行包含列名,它将自动使用它们。

用Pandas写入CSV文件

使用Pandas写入CSV文件就像阅读一样容易。 在这里您可以说服它。 首先,您必须基于以下代码创建DataFrame。

from pandas import DataFrame
C = {'Programming language': ['Python','Java', 'C++'],
        'Designed by': ['Guido van Rossum', 'James Gosling', 'Bjarne Stroustrup'],
        'Appeared': ['1991', '1995', '1985'],
        'Extension': ['.py', '.java', '.cpp'],
    }
df = DataFrame(C, columns= ['Programming language', 'Designed by', 'Appeared', 'Extension'])
export_csv = df.to_csv (r'X:\pandaresult.csv', index = None, header=True) # here you have to write path, where result file will be stored
print (df)

Here is the output

Programming language, Designed by, Appeared, Extension
0    Python, Guido van Rossum, 1991, .py
1    Java, James Gosling, 1995, .java
2    C++, Bjarne Stroustrup,1983,.cpp

并在指定位置创建CSV文件。

结论

因此,现在您知道如何使用方法“ csv”以及以CSV格式读取和写入数据。 CSV文件易于阅读和管理,并且尺寸较小,因此相对较快地进行处理和传输,因此在软件应用程序中得到了广泛使用。

csv模块提供了各种功能和类,使您可以轻松地进行读写。 您可以查看Python的官方文档,并找到更多有趣的技巧和模块。 CSV是保存,查看和发送数据的最佳方法。 实际上,它并不像开始时那样难学。 但是只要稍作练习,您就可以掌握它。

熊猫是读取CSV文件的绝佳选择。

另外,还有其他方法可以使用ANTLR,PLY和PlyPlus之类的库来解析文本文件。 它们都可以处理繁重的解析,并且如果简单的String操作不起作用,则可以使用正则表达式。

相关推荐

方差分析简介(方差分析通俗理解)

介绍方差分析(ANOVA,AnalysisofVariance)是一种广泛使用的统计方法,用于比较两个或多个组之间的均值。单因素方差分析是方差分析的一种变体,旨在检测三个或更多分类组的均值是否存在...

正如404页面所预示,猴子正成为断网元凶--吧嗒吧嗒真好吃

吧嗒吧嗒,绘图:MakiNaro你可以通过加热、冰冻、水淹、模塑、甚至压溃压力来使网络光缆硬化。但用猴子显然是不行的。光缆那新挤压成型的塑料外皮太尼玛诱人了,无法阻挡一场试吃盛宴的举行。印度政府正...

Python数据可视化:箱线图多种库画法

概念箱线图通过数据的四分位数来展示数据的分布情况。例如:数据的中心位置,数据间的离散程度,是否有异常值等。把数据从小到大进行排列并等分成四份,第一分位数(Q1),第二分位数(Q2)和第三分位数(Q3)...

多组独立(完全随机设计)样本秩和检验的SPSS操作教程及结果解读

作者/风仕在上一期,我们已经讲完了两组独立样本秩和检验的SPSS操作教程及结果解读,这期开始讲多组独立样本秩和检验,我们主要从多组独立样本秩和检验介绍、两组独立样本秩和检验使用条件及案例的SPSS操作...

方差分析 in R语言 and Excel(方差分析r语言例题)

今天来写一篇实际中比较实用的分析方法,方差分析。通过方差分析,我们可以确定组别之间的差异是否超出了由于随机因素引起的差异范围。方差分析分为单因素方差分析和多因素方差分析,这一篇先介绍一下单因素方差分析...

可视化:前端数据可视化插件大盘点 图表/图谱/地图/关系图

前端数据可视化插件大盘点图表/图谱/地图/关系图全有在大数据时代,很多时候我们需要在网页中显示数据统计报表,从而能很直观地了解数据的走向,开发人员很多时候需要使用图表来表现一些数据。随着Web技术的...

matplotlib 必知的 15 个图(matplotlib各种图)

施工专题,我已完成20篇,施工系列几乎覆盖Python完整技术栈,目标只总结实践中最实用的东西,直击问题本质,快速帮助读者们入门和进阶:1我的施工计划2数字专题3字符串专题4列表专题5流程控制专题6编...

R ggplot2常用图表绘制指南(ggplot2绘制折线图)

ggplot2是R语言中强大的数据可视化包,基于“图形语法”(GrammarofGraphics),通过分层方式构建图表。以下是常用图表命令的详细指南,涵盖基本语法、常见图表类型及示例,适合...

Python数据可视化:从Pandas基础到Seaborn高级应用

数据可视化是数据分析中不可或缺的一环,它能帮助我们直观理解数据模式和趋势。本文将全面介绍Python中最常用的三种可视化方法。Pandas内置绘图功能Pandas基于Matplotlib提供了简洁的绘...

Python 数据可视化常用命令备忘录

本文提供了一个全面的Python数据可视化备忘单,适用于探索性数据分析(EDA)。该备忘单涵盖了单变量分析、双变量分析、多变量分析、时间序列分析、文本数据分析、可视化定制以及保存与显示等内容。所...

统计图的种类(统计图的种类及特点图片)

统计图是利用几何图形或具体事物的形象和地图等形式来表现社会经济现象数量特征和数量关系的图形。以下是几种常见的统计图类型及其适用场景:1.条形图(BarChart)条形图是用矩形条的高度或长度来表示...

实测,大模型谁更懂数据可视化?(数据可视化和可视化分析的主要模型)

大家好,我是Ai学习的老章看论文时,经常看到漂亮的图表,很多不知道是用什么工具绘制的,或者很想复刻类似图表。实测,大模型LaTeX公式识别,出乎预料前文,我用Kimi、Qwen-3-235B...

通过AI提示词让Deepseek快速生成各种类型的图表制作

在数据分析和可视化领域,图表是传达信息的重要工具。然而,传统图表制作往往需要专业的软件和一定的技术知识。本文将介绍如何通过AI提示词,利用Deepseek快速生成各种类型的图表,包括柱状图、折线图、饼...

数据可视化:解析箱线图(box plot)

箱线图/盒须图(boxplot)是数据分布的图形表示,由五个摘要组成:最小值、第一四分位数(25th百分位数)、中位数、第三四分位数(75th百分位数)和最大值。箱子代表四分位距(IQR)。IQR是...

[seaborn] seaborn学习笔记1-箱形图Boxplot

1箱形图Boxplot(代码下载)Boxplot可能是最常见的图形类型之一。它能够很好表示数据中的分布规律。箱型图方框的末尾显示了上下四分位数。极线显示最高和最低值,不包括异常值。seaborn中...