采用集合去重,在新文件里逐行写入,达成目的


old_file = "D:/testdata/memberId.txt"  #old
result_file = "D:/testdata/memberId_new.txt" #new
lines_seen = set()
out_file = open(result_file, "w")
f = open(old_file, "r")
for line in f:if line not in lines_seen:out_file.write(line)lines_seen.add(line)
out_file.close()
print("distinct_success")

转载于:https://www.cnblogs.com/pingguo-softwaretesting/p/10382552.html

1.需要对txt存放的测试数据做去重处理,代码如下相关推荐

  1. python导入txt文件并绘图-Python实现读取txt文件并画三维图简单代码示例

    记忆力差的孩子得勤做笔记! 刚接触python,最近又需要画一个三维图,然后就找了一大堆资料,看的人头昏脑胀的,今天终于解决了!好了,废话不多说,直接上代码! #由三个一维坐标画三维散点 #codin ...

  2. python读取txt文件代码-Python实现读取txt文件并画三维图简单代码示例

    记忆力差的孩子得勤做笔记! 刚接触python,最近又需要画一个三维图,然后就找了一大堆资料,看的人头昏脑胀的,今天终于解决了!好了,废话不多说,直接上代码! #由三个一维坐标画三维散点 #codin ...

  3. 突然讨厌做前端,讨厌代码_为什么用户讨厌重新设计

    突然讨厌做前端,讨厌代码 重点 (Top highlight) The core of design thinking is to only design something that will br ...

  4. 突然讨厌做前端,讨厌代码_不要讨厌HATEOAS

    突然讨厌做前端,讨厌代码 或我如何学会不再担心和爱HATEOAS REST已成为实现Web服务的事实上的解决方案,至少已成为一种流行的解决方案. 这是可以理解的,因为REST在使用HTTP规范时提供了 ...

  5. 突然讨厌做前端,讨厌代码_有关互联网用户最讨厌的广告类型的新数据

    突然讨厌做前端,讨厌代码 You know that feeling when you're scrolling through a blog post and then - BAM! - one o ...

  6. 突然讨厌做前端,讨厌代码_你讨厌正则表达式吗? 那么,我为您提供解决方案......

    突然讨厌做前端,讨厌代码 by Bukhari Muhammad 通过布哈里·穆罕默德(Bukhari Muhammad) 你讨厌正则表达式吗? 那么,我为您提供解决方案... (Do you hat ...

  7. 突然讨厌做前端,讨厌代码_如何安全清洁讨厌的游戏控制器

    突然讨厌做前端,讨厌代码 Roobcio/ShutterstockRoobcio /快门 Game controllers are magnets for dirt and grime. It doe ...

  8. txt文件所有大写字母转小写代码

    txt文件所有大写字母转小写代码 注意:源码是以追加方式写入文件 def TXTRead_Writeline(path,newpath): #读取文件ms = open(path,encoding=& ...

  9. 做数据集的代码在这里

    最近秋招找工作,一直没上博客,很多同学私信留言要做数据集的代码的,没时间发,这里直接共享出来给你们下载吧,之前花了积分的朋友们不好意思了 0.0. 链接: https://pan.baidu.com/ ...

最新文章

  1. 机器学习——XGBoost大杀器,XGBoost模型原理,XGBoost参数含义
  2. 骚操作!阿里对业务中台痛下杀手!但却继续推进数据中台?
  3. poj 2513(欧拉路径+字典树映射)
  4. 计算机没有搜索筛选功能,EXCEL中筛选工具怎么没有搜索功能
  5. mysql题目_MySQL练习题
  6. C语言函数一章教学,c语言案例教程:函数教学讲义.ppt
  7. GetTickCount()总结
  8. dw做注册登录页面HTML代码,用DW做的简单的个人网站(可以用来当网页作业)
  9. dell笔记本指示灯闪烁_Dell笔记本电源灯黄灯一直闪烁是什么问题 争决方法
  10. 4r照片尺寸是多大_数码照片4D、4R、6RW是什么意思?4R照片尺寸是多大图片?
  11. 用python解决放苹果问题_放苹果问题(组合数学经典)
  12. 你很牛,且是刚毕业的,那就到华为上班吧!--绝对隐私:华为员工待遇全面揭秘
  13. 3DMAX渲染慢技巧分享,建模初学者必看
  14. idr寄存器、_STM32F103设置上拉输入后GPIOE-IDR寄存器疑惑 PA按键有效PE key2按键无效...
  15. sigmod 求导计算
  16. [附源码]SSM计算机毕业设计高校奖学金评定管理系统JAVA
  17. gregorian(格里高力)历转换公历
  18. ActionEnglish Notes
  19. pygame的小飞机游戏终于完成了
  20. 大闹天竺里的机器人_数字看清王宝强《大闹天竺》里的植入

热门文章

  1. python分析服务器日志_python实现web服务器日志分析脚本
  2. mysql+distinct+max_MySQL中distinct与group by之间的性能进行比较
  3. Java定义变量x初始值为3,JAVA 第一章
  4. 《计算机导论》课程论文,计算机导论课程论文
  5. oracle查询可更新结果集,jdbc 可更新结果集
  6. python隐藏启动台_如何在Python中启动后台进程?
  7. python无所不能_python-列表
  8. 2012 安装mysql 5.6_如何安装mysql server 5.6
  9. C++ bitset类
  10. C++ class和struct的区别