如何使用python将大量数据导出到Excel中的小技巧

(1) 问题描述:为了更好地展示数据,Excel格式的数据文件往往比文本文件更具有优势,但是具体到python中,该如何导出数据到Excel呢?如果碰到需要导出大量数据又该如何操作呢?本文主要解决以上两个问题。

PS注意:很多人学Python过程中会遇到各种烦恼问题,没有人帮答疑容易放弃。为此小编建了个Python全栈免费答疑.裙 :七衣衣九起起巴而五(数字的谐音)转换下可以找到了,不懂的问题有老司机解决里面还有最新Python教程项目可拿,,一起相互监督共同进步!

(2)具体步骤如下:

1.第一步,安装openpyxl,

使用pip install openpyxl即可,但是在windows下安装的是2.2.6版本,但是centos自动安装的是4.1版本,

写的代码在windows下运行没问题,但centos上却报错了,说是ew=ExcelWriter(workbook=wb)少提供一个参数,于是果断在 237服务器上我已安装2.2.6版本的,问题解决。

pip install openpyxl==2.2.6

2.第二步,哈哈,没有啦,废话不说了,直接上代码,ps,代码中包含xlwt和openpyxl的两个实现版本。

(3)扩展阅读:通过查阅资料,发现网上众说纷纭,总结起来有如下几点:

python Excel相关的操作的module lib有两组,一组是xlrd、xlwt、xlutils,另一组是openpyxl,

但是前一组(xlrd,xlwt)比较老,只能处理由Excel 97-2003 或者Excel 97 以前版本生成的xls格式的excel文件,xlwt甚至不支持07版以后的excel,这个格式excel文件一般来说,最大只能支持256列或者65536行的excel文件。

因此面对需要导出大量数据到excel的情况,你将有如下三种选择,1)换一种存储格式,如保存为CSV文件 2)使用openpyxl—,因为它支持对Excel 2007+ xlsx/xlsm format的处理 3) win32 COM (Windows only)

当然,我们要直面困难了,为了更好地展示数据给产品和用户,我们依然选择的第二种。

ps,非常lucky,一番搜索后我找到了openpyxl,支持07+的excel,一直有人在维护,文档清晰易读,参照Tutorial和API文档很快就能上手,就是它了~

【20180713 add ps,以下代码在 openpyxl 的__version__ = '2.2.6' 和 openpyxl 的__version__ = '2.4.8' 测试通过 ,考虑到openpyxl的最新版本是__version__ = '2.5.4' , 如需最新版本python操作excel的例子

(4)闲话少说,直接上代码,敬请参考

# coding:utf-8

'''

# 希望对大家有帮助哈,请多提问题

create by yaoyz

date: 2017/01/24

'''

importxlrd

importxlwt

# workbook相关

fromopenpyxl.workbookimportWorkbook

# ExcelWriter,封装了很强大的excel写的功能

fromopenpyxl.writer.excelimportExcelWriter

# 一个eggache的数字转为列字母的方法

fromopenpyxl.utilsimportget_column_letter

fromopenpyxl.reader.excelimportload_workbook

classHandleExcel():

'''Excel相关操作类'''

def__init__(self):

self. head_row_labels = [u'学生ID',u'学生姓名',u'联系方式',u'知识点ID',u'知识点名称']

"""

function:

读出txt文件中的每一条记录,把它保存在list中

Param:

filename: 要读出的文件名

Return:

res_list: 返回的记录的list

"""

defread_from_file(self,filename):

res_list=[]

file_obj=open(filename,"r")

forlineinfile_obj.readlines():

res_list.append(line)

file_obj.close()

returnres_list

"""

function:

读出*.xlsx中的每一条记录,把它保存在data_dic中返回

Param:

excel_name: 要读出的文件名

Return:

data_dic: 返回的记录的dict

"""

defread_excel_with_openpyxl(self, excel_name="testexcel2007.xlsx"):

# 读取excel2007文件

wb = load_workbook(filename=excel_name)

# 显示有多少张表

print"Worksheet range(s):", wb.get_named_ranges()

print"Worksheet name(s):", wb.get_sheet_names()

# 取第一张表

sheetnames = wb.get_sheet_names()

ws = wb.get_sheet_by_name(sheetnames[0])

# 显示表名,表行数,表列数

print"Work Sheet Titile:",ws.title

print"Work Sheet Rows:",ws.get_highest_row()

print"Work Sheet Cols:",ws.get_highest_column()

# 获取读入的excel表格的有多少行,有多少列

row_num=ws.get_highest_row()

col_num=ws.get_highest_column()

print"row_num: ",row_num," col_num: ",col_num

# 建立存储数据的字典

data_dic = {}

sign=1

# 把数据存到字典中

forrowinws.rows:

temp_list=[]

# print "row",row

forcellinrow:

printcell.value,

temp_list.append(cell.value)

print""

data_dic[sign]=temp_list

sign+=1

printdata_dic

returndata_dic

"""

function:

读出*.xlsx中的每一条记录,把它保存在data_dic中返回

Param:

records: 要保存的,一个包含每一条记录的list

save_excel_name: 保存为的文件名

head_row_stu_arrive_star:

Return:

data_dic: 返回的记录的dict

"""

defwrite_to_excel_with_openpyxl(self,records,head_row,save_excel_name="save.xlsx"):

# 新建一个workbook

wb = Workbook()

# 新建一个excelWriter

ew = ExcelWriter(workbook=wb)

# 设置文件输出路径与名称

dest_filename = save_excel_name.decode('utf-8')

# 第一个sheet是ws

ws = wb.worksheets[0]

# 设置ws的名称

ws.title ="range names"

# 写第一行,标题行

forh_xinrange(1,len(head_row)+1):

h_col=get_column_letter(h_x)

#print h_col

ws.cell('%s%s'% (h_col,1)).value ='%s'% (head_row[h_x-1])

# 写第二行及其以后的那些行

i =2

forrecordinrecords:

record_list=str(record).strip().split("\t")

forxinrange(1,len(record_list)+1):

col = get_column_letter(x)

ws.cell('%s%s'% (col, i)).value ='%s'% (record_list[x-1].decode('utf-8'))

i +=1

# 写文件

ew.save(filename=dest_filename)

"""

function:

测试输出Excel内容

读出Excel文件

Param:

excel_name: 要读出的Excel文件名

Return:

"""

defread_excel(self,excel_name):

workbook=xlrd.open_workbook(excel_name)

printworkbook.sheet_names()

# 获取所有sheet

printworkbook.sheet_names()# [u'sheet1', u'sheet2']

sheet2_name = workbook.sheet_names()[1]

# 根据sheet索引或者名称获取sheet内容

sheet2 = workbook.sheet_by_index(1)# sheet索引从0开始

sheet2 = workbook.sheet_by_name('Sheet1')

# sheet的名称,行数,列数

printsheet2.name,sheet2.nrows,sheet2.ncols

# 获取整行和整列的值(数组)

rows = sheet2.row_values(3)# 获取第四行内容

cols = sheet2.col_values(2)# 获取第三列内容

printrows

printcols

# 获取单元格内容

printsheet2.cell(1,0).value

printsheet2.cell_value(1,0)

printsheet2.row(1)[0].value

# 获取单元格内容的数据类型

printsheet2.cell(1,0).ctype

# 通过名称获取

returnworkbook.sheet_by_name(u'Sheet1')

"""

function:

设置单元格样式

Param:

name: 字体名字

height: 字体高度

bold: 是否大写

Return:

style: 返回设置好的格式对象

"""

defset_style(self,name,height,bold=False):

style = xlwt.XFStyle()# 初始化样式

font = xlwt.Font()# 为样式创建字体

font.name = name# 'Times New Roman'

font.bold = bold

font.color_index =4

font.height = height

borders= xlwt.Borders()

borders.left=6

borders.right=6

borders.top=6

borders.bottom=6

style.font = font

style.borders = borders

returnstyle

"""

function:

按照 设置单元格样式 把计算结果由txt转变为Excel存储

Param:

dataset:要保存的结果数据,list存储

Return:

将结果保存为 excel对象中

"""

defwrite_to_excel(self, dataset,save_excel_name,head_row):

f = xlwt.Workbook()# 创建工作簿

# 创建第一个sheet:

# sheet1

count=1

sheet1 = f.add_sheet(u'sheet1', cell_overwrite_ok=True)# 创建sheet

# 首行标题:

forpinrange(len(head_row)):

sheet1.write(0,p,head_row[p],self.set_style('Times New Roman',250,True))

default=self.set_style('Times New Roman',200,False)# define style out the loop will work

forlineindataset:

row_list=str(line).strip("\n").split("\t")

forppinrange(len(str(line).strip("\n").split("\t"))):

sheet1.write(count,pp,row_list[pp].decode('utf-8'),default)

count+=1

f.save(save_excel_name)# 保存文件

defrun_main_save_to_excel_with_openpyxl(self):

print"测试读写2007及以后的excel文件xlsx,以方便写入文件更多数据"

print"1. 把txt文件读入到内存中,以list对象存储"

dataset_list=self.read_from_file("test_excel.txt")

'''test use openpyxl to handle EXCEL 2007'''

print"2. 把文件写入到Excel表格中"

head_row_label=self.head_row_labels

save_name="test_openpyxl.xlsx"

self.write_to_excel_with_openpyxl(dataset_list,head_row_label,save_name)

print"3. 执行完毕,由txt格式文件保存为Excel文件的任务"

defrun_main_save_to_excel_with_xlwt(self):

print" 4. 把txt文件读入到内存中,以list对象存储"

dataset_list=self.read_from_file("test_excel.txt")

'''test use xlwt to handle EXCEL 97-2003'''

print" 5. 把文件写入到Excel表格中"

head_row_label=self.head_row_labels

save_name="test_xlwt.xls"

self.write_to_excel_with_openpyxl(dataset_list,head_row_label,save_name)

print"6. 执行完毕,由txt格式文件保存为Excel文件的任务"

if__name__ =='__main__':

print"create handle Excel Object"

obj_handle_excel=HandleExcel()

# 分别使用openpyxl和xlwt将数据写入文件

obj_handle_excel.run_main_save_to_excel_with_openpyxl()

obj_handle_excel.run_main_save_to_excel_with_xlwt()

'''测试读出文件,注意openpyxl不可以读取xls的文件,xlrd不可以读取xlsx格式的文件'''

#obj_handle_excel.read_excel_with_openpyxl("testexcel2003.xls") # 错误写法

#obj_handle_excel.read_excel_with_openpyxl("testexcel2003.xls") # 错误写法

obj_handle_excel.read_excel("testexcel2003.xls")

obj_handle_excel.read_excel_with_openpyxl("testexcel2007.xlsx")

以上就是本次分享,都懂了吗?注意:很多人学Python过程中会遇到各种烦恼问题,没有人帮答疑容易放弃。为此小编建了个Python全栈免费答疑.裙 :七衣衣九起起巴而五(数字的谐音)转换下可以找到了,不懂的问题有老司机解决里面还有最新Python教程项目可拿,,一起相互监督共同进步!

本文的文字及图片来源于网络加上自己的想法,仅供学习、交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理。

python获取excel整行数据如何保存到新的工作簿中_如何使用python将大量数据导出到Excel中的小技巧之一...相关推荐

  1. wps里的茶色字体怎么设置_《excel颜色筛选》 WPS2019的EXCEL整行填充一种颜色保存后关闭再打开就变成两种深浅不同的颜色是怎么回事呢?请大神帮忙解决...

    WPS2019的EXCEL整行填充一种颜色保存后关闭再打开就变成两种深浅不同的颜色是怎么回事呢?请大神帮忙解决 格式刷提取那个单元格格式复制后颜色,保存后打开也的吗? 还有你可以右键单元格后下两种的图 ...

  2. Excel整行拆分可实现间隔插入不同的N行!

    今天要和大家分享的是,Excel整行拆分可实现间隔插入不同的N行的操作,有的人可能已经会了间隔1行插入1行,间隔1行插入N行,间隔N行插入1行,间隔N行插入N行,那这里的N要是不同呢? (方方格子插件 ...

  3. excel整行删除,图片一起删除

    excel整行删除时候为什么行里面的图片不能一起删除 如下方箭头所示,点击上方的选项卡"开始",打开"开始"界面. 4 如箭头所示,在"开始" ...

  4. Excel 2010 VBA 入门 004 保存带有宏的工作薄

    目录 操作方法 步骤1 单击"文件"菜单中的"另存为"子菜单. 步骤2  在"另存为"窗口中,保存类型选择"Excel启用宏的工作 ...

  5. Excel整行数据自动标颜色

    一.设置下拉菜单选项 为了更好的方便操作,先设置下拉选项,通过菜单栏,数据-->数据验证--->数据验证 设置下拉选项 二.设置整行变色 通过条件格式根据表格中等级选择的不同内容,进行整行 ...

  6. 如何将python数据输入到excel中_如何使用python将大量数据导出到Excel中的小技巧之一...

    如何使用python将大量数据导出到Excel中的小技巧 (1) 问题描述:为了更好地展示数据,Excel格式的数据文件往往比文本文件更具有优势,但是具体到python中,该如何导出数据到Excel呢 ...

  7. vb excel 整行删除_6个Excel表格制作技巧,熟练掌握工作效率加倍,再也不用加班...

    作为一个整天对着电脑的办公一族,Excel表格的使用大家自然是不陌生的,但是如果要问起是否能熟练使用,并且可以将各种功能和小技巧都用的很好,那恐怕点头的人就不会有多少个了. 所以,接下来小编就教给大家 ...

  8. vb excel 整行删除_Excel中常用的批量处理都不掌握,那就真的Out了

    针对一些有规律,能批量处理的数据,必须采用批量处理的方法,否则对于工作效率就会有很大的影响.今天我们来学习的内容是Excel中的6个批量处理技巧. 一.Excel批量技巧:批量求和. 目的:按照&qu ...

  9. python数据导出excel模板中的脚本_Python实现将数据库一键导出为Excel表格的实例...

    数据库数据导出为excel表格,也可以说是一个很常用的功能了.毕竟不是任何人都懂数据库操作语句的. 下面先来看看完成的效果吧. 数据源 导出结果 依赖 由于是Python实现的,所以需要有Python ...

最新文章

  1. oracle merge
  2. shell脚本编程之函数
  3. 读书笔记:《少的力量》
  4. IDEA实际开发中的常用优化设置
  5. 【Android 插件化】Hook 插件化框架 ( 从源码角度分析加载资源流程 | Hook 点选择 | 资源冲突解决方案 )
  6. go-ethereum环境搭建及目录结构介绍
  7. java迪杰斯特拉算法介绍_178-迪杰斯特拉(Dijkstra)算法基本介绍
  8. 跨域(Cross-Domain) AJAX for IE8 and IE9
  9. word List 33
  10. python自动化办公真的好用吗-Python做什么更合适?|老男孩Python自动化运维
  11. Julia: rand
  12. 一天一看————以太网交换机的基本原理与配置!
  13. Google Earth影像数据破解之旅
  14. RAW to FITS
  15. BZOJ_P1123 [POI2008]BLO(无向图割点)
  16. Trim函数的用法(笔记)
  17. 钱多多软件制作第三天
  18. 外观模式--牛市股票还会亏钱
  19. 全面解析:服务蓝图的应用逻辑
  20. 【项目实战】基于Python的校园二手交易网站Django二手商城系统

热门文章

  1. OpenCV + CPP 系列(九)颜色空间
  2. 曲面积分的投影法_曲线曲面积分与重积分知识点汇总
  3. 3-9xss的盲打以及盲打实验演示
  4. 计算机改考408的学校,2020考研 河北工业大学计算机改考408
  5. 互联网协议-简单理解和介绍
  6. 把经纬度转换成十进制
  7. Zema自学--3(实际操作)
  8. 如何向天翼云服务器上传文件,天翼云盘如何上传文件?
  9. html滚动条固定前几行,bootstrapTable定位行固定滚动条
  10. GD32F103 USB 虚拟U盘实验一(内部Flash)