提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档

文章目录

  • 前言
  • 一、pandas是什么?
  • 二、使用步骤
    • 1.引入库
    • 2.读取数据
      • loc和iloc方法:
        • loc方法提取:
        • iloc方法:
      • 通过某一字段筛选数据
        • 1. 通过某一列中数据初步筛选
        • 2.只选择其中一列或几列
        • 3.获取表单数据行数
      • 4.获取表单中某一列或行中数据的长度
      • 5. 通过数据长度筛选数据
        • 1.属于
        • 2.不属于
    • 3.数据转换
      • 1. DataFrom转字典
      • 2 . 字典转DataFrom
    • 4.写入数据
      • 1.更改DataFrame数据
      • 2 . 写入excel中
      • openpyxl使用(指定excel指定位置插入数据)
        • 复制原来的文件
        • 打开新生成的文件
        • 写入数据
        • 插入图片
        • 保存数据直接覆盖原数据
    • 5、处理重复数据
  • 三、后缀是xls文件的输入追加方式
    • 1.打开已保存文件
    • 2.写入
  • 总结

前言


提示:以下是本篇文章正文内容,下面案例可供参考

一、pandas是什么?

示例:pandas 是基于NumPy 的一种工具,该工具是为了解决数据分析任务而创建的。

二、使用步骤

1.引入库

代码如下(示例):

import pandas as pd

2.读取数据

数据结构

# 读取excel文件内容
def read(file_path):data_from = pd.read_excel(io=file_path,sheet_name='Sheet1',keep_default_na=False,dtype=str,engine='openpyxl')print(data_from) #输出的是一个DataFrom表单

参数解析

  • io : 文件路径
  • sheet_name : excel文件那一个 sheet
  • keep_default_na=False : 空值的NaN不显示
  • dtype : 设置数据类型,不设置有时候开头是0的数据不读取
  • engine : 指定驱动

loc和iloc方法:

区别:
loc函数:通过行索引 “Index” 中的具体值来取行数据
iloc函数:通过行号来取行数据
获取行时写法差不多,

loc方法提取:

ps : data_from.iloc[初始行:结束行,初始列:结束列]
loc方法是通过行、列的名称或者标签来寻找我们需要的值。
1.获取某一行,会带着标题行

data_from.loc[1]

2。获取某一列,通过列名

data_from.loc[:,'列名]


3.获取全部数控

data_from.iloc[:,:]

4.获取第一到第二列

data_from.loc[:,1.1:1.2]

iloc方法:

1.获取第一行,和loc方法写法一样

data_from.iloc[1]

2.获取第一列,通过index

data_from.iloc[:,0]

3.获取全部数控

data_from.iloc[:,:]

4.获取第一到第二列

data_from.iloc[:,1:2]

通过某一字段筛选数据

1. 通过某一列中数据初步筛选

df=data_from[data_from['船公司']=='COSCO']

2.只选择其中一列或几列

 number = df.iloc[:,0]goal = df.iloc[:,10]

3.获取表单数据行数

data_from.shape[0]  # data_from 是表单数据

4.获取表单中某一列或行中数据的长度

goal = df.iloc[:,10].str.len()  # str.len() 获取字符串长度

5. 通过数据长度筛选数据

1.属于

data = [11,14]# 属于data的 ,data是可迭代数据data_frome_no_length = df[df.iloc[:, 0].str.len().isin(data )]# 获取筛选后数据行数if data_frome_no_length.shape[0] != 0:pass

2.不属于

data = [11,14]data_frome_no_length = df[~df.iloc[:, 0].str.len().isin(data)]if data_frome_no_length.shape[0] != 0:pass

3.数据转换

1. DataFrom转字典

转换数据可以通过下标取出对应列数据

data_dic = data_from.to_dict(orient='index')

也可以通过列名

data_dic =data_from.to_dict('records')

2 . 字典转DataFrom

pd.DataFrame(data_dic)

4.写入数据

1.更改DataFrame数据

 #循环遍历每一行count = 1for i in data_dic:if i[1.5] is None or i[1.5] == '':i[1.5] = 5# continueelse:# print(i)i[1.5] = 5print(data_dic)

2 . 写入excel中

实现步骤:
字典数据转DataFrame
这里 df 是 DataFrame简称

df = pd.DataFrame(data_dic)
df.to_excel('./cs.xlsx')

### 单列数据由转list DataFrame中的单列数据是pandas.core.series.Series,通过下标进行循环提取时可能数据不全,这里是转换成list

type(number)  #输出pandas.core.series.Seriesnumber = number.values.tolist()  #转换之后就是list类型数据

openpyxl使用(指定excel指定位置插入数据)

复制原来的文件

 shutil.copy(old_file_name, new_file_path)

打开新生成的文件

wb = openpyxl.load_workbook(new_file_path)
ws = wb['Sheet1'] # 第一个Sheet页

写入数据

ws.cell(row=5, column=15).value = ’测试‘

插入图片

img = Image(r'D:\ZJGL\img.png')  # 选择你的图片
ws.add_image(img, 'G47')

保存数据直接覆盖原数据

wb.save(new_file_path)

5、处理重复数据

  • 标记重复记录下标

       df2= df.loc[df.duplicated(subset=['取证链接', '敏感内容', '正确表述', '报告类型', '目标名称']), '办公地址'] = 'true'
    
    • 解释:
    • df2 = df.loc[行索引, 列名] = ‘指定值’
    • df.duplicated(subset=[‘字段1’,‘字段2’])
    • subset: 对比字段
    • keep:
      • ‘last’:保留最后一个重复数据
      • ‘first’: 保留第一个重复数据
      • Flast : 重复值是标记True
    • df.loc[] : [行索引, 列名]
      • 通过索引行(True的那一行)更改字段value
  • 去除重复数据

    df.drop_duplicates(subset=['取证链接', '敏感内容', '正确表述', '报告类型', '目标名称'], keep=False, inplace=True)
    
    • 解释: subset与keep上同
    • inplace : 是否对数据集本身进行修改,默认False , 覆盖就用True

三、后缀是xls文件的输入追加方式

1.打开已保存文件

file_path = '.xls文件路径'
rb = open_workbook(file_path,formatting_info=True)   # formatting_info=True 保留格式
r_sheet = rb.sheet_by_index(0) # 切换到第一个Sheet 页面
wb = copy(rb) #  复制file_path路径的文件
w_sheet = wb.get_sheet(0) # 写入的页(Sheet)

2.写入

w_sheet.write(row_index, col_summer1, 'data')

w_sheet.write(row, line, ‘data’) , 行和列都从0开始

总结

提示:这里对文章进行总结:
例如:以上就是今天要讲的内容,本文仅仅简单介绍了pandas的使用,而pandas提供了大量能使我们快速便捷地处理数据的函数和方法。

python中pandas库的使用(excel读取)相关推荐

  1. Python中pandas库实现数据缺失值判断isnull()函数

    [小白从小学Python.C.Java] [Python全国计算机等级考试] [Python数据分析考试必会题] ● 标题与摘要 Python中pandas库实现数据缺失值判断 isnull()函数 ...

  2. 【python】pandas库pd.read_excel操作读取excel文件参数整理与实例

    除了使用xlrd库或者xlwt库进行对excel表格的操作读与写,而且pandas库同样支持excel的操作:且pandas操作更加简介方便. 首先是pd.read_excel的参数:函数为: pd. ...

  3. python read_excel header_详解pandas库pd.read_excel操作读取excel文件参数整理与实例

    除了使用xlrd库或者xlwt库进行对excel表格的操作读与写,而且pandas库同样支持excel的操作:且pandas操作更加简介方便. 首先是pd.read_excel的参数:函数为: pd. ...

  4. python read_excel 参数_详解pandas库pd.read_excel操作读取excel文件参数整理与实例

    详解pandas库pd.read_excel操作读取excel文件参数整理与实例 来源:中文源码网    浏览: 次    日期:2019年11月5日 详解pandas库pd.read_excel操作 ...

  5. pandas读取csv写入mysql_使用python的pandas库读取csv文件保存至mysql数据库

    第一:pandas.read_csv读取本地csv文件为数据框形式 data=pd.read_csv('G:\data_operation\python_book\chapter5\\sales.cs ...

  6. python中pandas是指什么_Python中的神器Pandas,但是有人说Pandas慢...

    原标题:Python中的神器Pandas,但是有人说Pandas慢... 如果你从事大数据工作,用Python的Pandas库时会发现很多惊喜.Pandas在数据科学和分析领域扮演越来越重要的角色,尤 ...

  7. 学习 Python 之 Pandas库

    学习 Python 之 Pandas库 Pandas库 什么是Pandas库? DataFrame 创建和存储 1. 使用DataFrame构造函数 (1). 使用列表创建 (2). 使用字典创建 ( ...

  8. Python中用pandas和openpyxl向Excel填入数据,不覆盖源数据和格式

    Python中用pandas和openpyxl向Excel填入数据,不覆盖源数据和格式 Python中处理Excel数据时,正常遇到需要Excel表中对几项数据统计后,填入源表对应的单元格里,平时我们 ...

  9. Py之Pandas:Python的pandas库简介、安装、使用方法详细攻略

    Py之Pandas:Python的pandas库简介.安装.使用方法详细攻略 目录 pandas库简介 pandas库安装 pandas库使用方法 1.函数使用方法 2.使用经验总结 3.绘图相关操作 ...

最新文章

  1. IAR建立stm32工程
  2. 2017二级c语言成绩,2017全国计机等级考试二级C语言知识点超全整(打印版).docx
  3. python自动测试n_接口自动化:Jenkins 自动构建python+nose测试
  4. MYSQL添加约束的两种方法
  5. c语言5-34答案,C语言答案第5章.doc
  6. 简单使用Spring Boot+JpaRepository+hibernate搭建项目
  7. jquery validate的验证规则和验证提示
  8. Julia: ...的作用,有意思!
  9. android日记功能的实现6,我的android studio学习日记
  10. 人工智能|人工智能语音识别系统的重要性
  11. 优缺点 快速扫描 硬盘监测_对手中SSD的性能做到心中有数,十款SSD测试软件介绍...
  12. vscode更换主题颜色(护眼色)
  13. 海南大学考研经验之(考研英语)
  14. Python开发款短链生成器,来满足我的需求!
  15. 仙境传说 第一章之四 卢渊*梦魇过后的情缘
  16. 单片机编程系列之分层设计2(怎样合理拆分子系统)
  17. java简单程序彩票系统!
  18. h5py is running against HDF5 1.10.5 when it was built against 1.10.4
  19. C#基础--LINQ
  20. 贫血模型与充血模型再讨论

热门文章

  1. 自我管理-管理者的职责
  2. vChain: Enabling Verifiable Boolean Range Queries over Blockchain Databases
  3. 修改android 开机画面
  4. matlab伪随机数(以及如何得到真正的随机数)
  5. 公共基础知识:元杂剧之“四大悲剧”
  6. 项目测试分析报告 模板
  7. 单片机音乐盒c语言,基于单片机的音乐盒设计与实现
  8. 关于分布式存储,这是你应该知道的
  9. 异地访问公司的ERP解决方案(完美部署上线,超级详细)
  10. linux pci 网卡驱动,linux网络设备驱动_pci网卡