python合并csv文件、并利用结果进行计算

学一点总结一点，积少成多^_^

需求：有两个csv文件，需要按列合并。举例如下：

a.csv:

column1 column2 column3

a1 a21 a22 a31 a32

b1 b21 b2 b3 b32

b.csv:

column1 column2 column3

a1 a21 a22 a33

c c1 c2 c31 c3

c.csv

column1 column2 column3

a1 a21 a22 a31 a32 a33

b1 b21 b2 b3 b32

c c1 c2 c31 c3

要求：把 a.csv 和 b.csv 按列合并，得到 c.csv。

实现：

hdr = 'column1, column2, column3'.split(',')

1. 核心算法函数：

def merge_dict1_into_dict2(dict1, dict2):

for k2, value2 in dict2.items():

if k2 in dict1:

for idx in hdr:

if value2 [idx] != dict1[k2][idx]

set1 = set(dict1[k2][idx].split(' '))

set2 = set(value2[idx].split(' '))

dict1[k2] = ' '.join(set1 | set2)

else:

dict1[k2] = value2

2. 把 a.csv 和 b.csv 分别读到两个二维字典里：dict1, dict2

//明天再写...

dict1 = dict([(iter['column1'], iter) for iter in csv.DictReader(open('a.csv', 'r')) if 'column1' in iter])

merge_dict2_into_dict1(dict1, dict2)

3. 把用函数处理过的 dict1 写入 c.csv文件。

4. 有木有人知道tab键怎么敲，手工输‘’太累了。。。

python合并csv文件、并利用结果进行计算_python合并csv文件相关推荐

win7 打开文件计算机,如何在win7计算机上打开dat文件，如何在win7计算机上打开dat文件...
详细地,许多计算机用户知道计算机中dat文件的两种主要格式. 一个是纯文本文件,类似于txt文件,可以用记事本,书写板dat格式文件用什么打开方式,ue,winhex等工具打开,另一个是多媒体图像文件 ...
python 读写csv文件(创建、追加、覆盖)_python 读写csv文件（创建，追加，覆盖）...
总述: 这篇博客讲述python怎样创建,读写,追加csv文件创建: 利用csv包中的writer函数,如果文件不存在,会自动创建,需要注意的是,文件后缀一定要是.csv,这样才会创建csv文件这 ...
python csv模块一次读多行_python中csv模块读取reader只能读取一次
各位好,请问python读取csv文件时只能读取一次是为什么现在有一个csv文件大概是这个样子现在对ID和length进行读取 import csv with open('ccc.csv','r ...
python文件读写用到的库_python 读写txt文件并用jieba库进行中文分词
python用来批量处理一些数据的第一步吧. 对于我这样的的萌新.这是第一步. #encoding=utf-8 file='test.txt'fn=open(file,"r")pr ...
python写ini文件不能保持原有顺序问题_python 生成 xml文件属性的顺序问题
需求很奇葩. 文档示例用python 的xml 导出的xml文件,相应的内容是我们都知道,属性的顺序是不影响,xml值的读取的. 但是,就是有奇葩的需求,需求方还非常强势,说了不影响,但还是要求顺 ...
lsof查看进程占用文件_Linux 利用lsof命令查找已经删除的文件来释放磁盘空间
测试环境一台服务器/ 根目录空间使用率达到94%,但是通过du -sh * 发现实际空间没没用用到那么多,初步怀疑,之前删除的文件,有运行中的进程一直占用,导致空间没有释放,如图通过du -sh * ...
在python中对文件操作的一般步骤是_python中对文件的操作
{"moduleinfo":{"card_count":[{"count_phone":1,"count":1}],&q ...
在解压缩某些文件时出现问题检查计算机上,解压缩超大文件时出现问题
我已经得到了一些压缩的文件,但是解压是30GB+的,而且是在Windows中压缩的.我试图使用EC2实例创建一个系统来解压这些实例,但是我一直在耗尽内存(错误IOError: [Errno 28] N ...
python合并excel文件关键字_python合并多个excel文件的示例
工作中经常遇到要将十几个Excel(不管是xls.或者是CSV)合并到同一个文件中去,手工一个一个复制是不可能的,此时就轮到Python出马了主要是利用for循环,读取每一个文件,作为df,然后再通 ...

python合并csv文件、并利用结果进行计算_python合并csv文件

python合并csv文件、并利用结果进行计算_python合并csv文件相关推荐

最新文章

热门文章