工作中,常常需要将HIVE数据库或者HDFS中文件通过EXCEL格式,通过邮箱发给业务人员。但是,SHELL又不能直接将txt文件转换为EXCEL可读的格式,因此编写了以下两类python脚本:

一,将txt文档转换为xls格式(EXCEL2010提示:兼容模式):
注意,该代码需要下载xlwt包。(由于写的时间太长了,大家就自行下载安装包吧)
import sys
import os.path
import os
import xlwt
print “txt2xls.py test.txt test.xls”

inputpath =str(sys.argv[1])
outputpath=str(sys.argv[2])f=open(inputpath)
wb=xlwt.Workbook()
ws1 = wb.add_sheet("Sheet1")
i=0
for line in f.readlines():j=0for item in line.split('\t'):try:item=item.strip().decode('utf-8')except UnicodeDecodeError:print i,j,itemws1.write(i,j,"NULL")else:ws1.write(i,j,item)j=j+1i=i+1f.close()
wb.save(outputpath)

二, 在一些场景中,必须保存为xlsx格式,即EXCEL2007以上的格式,
注意:该码依赖openpyxl模块
* 相关网站:http://openpyxl.readthedocs.org/en/latest/index.html
* openpyxl 地址:https://bitbucket.org/openpyxl/openpyxl/get/2.2.1.tar.bz2
* jdcal 下载地址: https://pypi.python.org/pypi/jdcal/

       其中,openpyxl 依赖于jdcal ,故在安装过程中应优先安装jdcal--解压缩到某目录,    cd到该目录,运行"python setup.py install"。 然后安装openpyxl,方法相同。另外,Python的标准库中,文件对象提供了三个“读”方法: read()、.readline()      和.readlines()。每种方法可以接受一个变量以限制每次读取的数据量,但它们通常不    使用变量。 .read() 每次读取整个文件,它通常用于将文件内容放到一个字符串变量  却是不必要的,并且如果文件大于可用内存,则不可能实现这种处理。  readline() 和 readlines()之间的差异是后者一次读取整个文件,像 .read()一样。   .readlines()自动将文件内容分析成一个行的列表,该列表可以由 Python 的 for... in ...      结构进行处理。另一方面,readline()每次只读取一行,通常比 .readlines()慢得多。    仅当没有足够内存可以一次读取整个文件时,才应该使用.readline()。

代码如下:
from openpyxl.workbook import Workbook
from openpyxl.reader.excel import load_workbook
from openpyxl.styles import PatternFill, Border, Side, Alignment, Protection, Font
import re
from openpyxl.writer.excel import ExcelWriter
import xlrd
import sys
import os
print “python txt2xlsx.py test.txt test.xlsx”

#根据输入移除已经存在的目标文件
patch_file_name = sys.argv[1]
patch_goal_name=sys.argv[2]
print patch_file_name
print patch_goal_name
os.remove(patch_goal_name)#创建目标文件,在再目标文件中创建sheet,名字为goal
wb = Workbook()
ws = wb.active
ws.title="goal"
wb.save(patch_goal_name)#打开文件
patch_file=open(patch_file_name)        #get data patch text
wb=load_workbook(patch_goal_name)          #open excel to write
sheetnames = wb.get_sheet_names()
ws = wb.get_sheet_by_name("goal")                    #get sheet#根据打开文件逐行扫描写入
i=1
for line in patch_file.readlines():j=1for item in line.split('\t'):try:item=item.strip().decode('utf-8')except UnicodeDecodeError:print i,j,itemws.cell(row=i,column=j).value = "NULL"#ws1.write(i,j,"NULL")else:ws.cell(row=i,column=j).value = item#ws1.write(i,j,item)j=j+1i=i+1#关闭输入数据流,并保存写入文件
patch_file.close()
wb.save(patch_goal_name)

shell中txt转EXCEL相关推荐

  1. python中for语句涉及的序列可以是字符串吗_用for循环,可以遍历字符串、列表、元组、字典、数字序列、文件(TXT、excel)。...

    [单选题]以上代码输出的结果是( ) if None: print("Hello") [单选题]在循环语句中,_______语句的作用是提前进入下一次循环. [单选题]在循环语句中 ...

  2. r导入txt乱码_R学习笔记系列—R语言从文本和Excel文件中读取数据-excel打开是乱码...

    1.4.1 从文本文件中导入数据 可以使用 read.table() 函数从带分隔符的文本文件中导入数.调用格式为: 这个函数看上去很复杂,但其实很多参数在使用时不用明确指出来,使用默认值可以满足绝大 ...

  3. linux的shell的功能,linux shell中${ }的一些特异功能

    linux shell中${ }的一些特异功能,这部分内容是shell中的比较经典的部分之一,建议认真学习,深刻体会. 假设我们定义一个变量为: file=/dir1/dir2/dir3/my.fil ...

  4. shell中执行脚本并显示到终端和保存到日志文件中

    我们知道,在shell中执行脚本会返回一定信息到终端屏幕上 ,但是有一些特殊情况,如以下情况: 1)显示到终端中 echo  "abck" 以上在手动执行脚本中是可以的,如果是编写 ...

  5. shell中的函数及脚本调试方法

    1.函数格式 目的:将一些相对对立的代码变成函数,提供可读性和重用性,避免重复编写相同代码. 函数格式: 函数关键字:function可以省略,可不带任何参数; 符号{表示函数体的开始(可在函数名后单 ...

  6. shell中的IFS

    一.IFS 介绍 Shell 脚本中有个变量叫 IFS(Internal Field Seprator) ,内部域分隔符.完整定义是The shell uses the value stored in ...

  7. Day25 linux shell中的特殊符号与命令

    2019独角兽企业重金招聘Python工程师标准>>> linux shell中的特殊符号 *:代表零个或多个任意字符 ?:只代表一个任意字符,不管是数字还是字母,只要是一个字符,都 ...

  8. Shell中常用的引号

    Shell之引号 在Shell中经常会使用到单引号.双引号.反引号(键盘中Tab键上方的按键).反斜线(转换某些Shell元字符的含义).如我们有时希望echo命令输出的字符中就包含$符号本身,但一般 ...

  9. python获取耗时的shell_python获取耗时的shell_关于Linux:在shell中获取程序执行时间...

    我想在Linux shell中在几个不同的条件下执行一些东西,并且能够输出每次执行的执行时间. 我知道我可以编写一个Perl或python脚本来完成这个任务,但是有没有一种方法可以在shell中完成呢 ...

  10. shell中sed命令的用法

    sed (stream editor)流编辑器也是linux中的一条命令,在shell中经常需要用到的非交互式修改文件内容的命令.sed处理文本是按行处理,也就是读一行处理一行. sed的命令基本格式 ...

最新文章

  1. 强大的 IDEA 代码生成
  2. 汇编call指令详解_我也能写出雷军的的代码吗?最好的汇编语言入门教程在这里!...
  3. Qt修炼手册1_溢美之词和Designer设计
  4. 如何使用CSS创建巧妙的动画提示框
  5. 20172324 2017-2018-2《程序设计与数据结构》实验三报告
  6. C#LeetCode刷题之#852-山脉数组的峰顶索引(Peak Index in a Mountain Array)
  7. Sr Software Engineer - Big Data Team
  8. 强悍的 Linux —— grep 与 egrep
  9. 桌面壁纸的deepin或者uos水印如何去除
  10. OTT系统和IPTV方案哪个更适合用于搭建局域网视频点播直播
  11. Ubuntu下安装VSCODE并输入中文
  12. 麦当劳将携手逾100所职业院校提升就业能力;百胜中国一季度开设315家新店 | 美通企业日报
  13. 清理windows10系统垃圾文件-bat批处理命令
  14. python 工具变量_工具变量读书笔记
  15. Linux系统基础操作管理
  16. 书论55 郝经《移诸生论书法书》
  17. art-pi lvgl添加触摸事件部分代码
  18. IP协议与IP地址那些事
  19. push时git报错 error: failed to push some refs to 'git@gitee.com:git_zn/jianli.git' 解决办法...
  20. ***Java之父:詹姆斯高斯林的传奇人生***

热门文章

  1. iOS 开发比较实用的框架总结(上)
  2. eclipse中tomcat能正常启动,但是访问不了tomcat首页(问题解决)
  3. 挖地雷_1996年分区联赛提高组之三_ssl1071_dfs
  4. pycharm debug 单步调试太卡太慢解决方案
  5. [看过不再忘]详细解析chmod修改文件权限
  6. NLTK was unable to find the megam file!
  7. QT_布局管理器 网格布局管理器 QGridLayout 超简单
  8. ubuntu 使用gspca安装摄像头
  9. 简单测试Content-Length和Chunked两种不同的数据传输方式
  10. SpringMVC中解决POST和GET请求中文乱码问题