使用新的数据集API(作为TF 1.4版本的一部分发布)来加快整个过程

读取CSV文件的步骤:

1)读取CSV文件名

2) 通过提供CSV文件名创建TextLineDataset

3) 为解码创建Parse函数,并对输入数据执行任何预处理工作

4) 使用前面步骤中创建的数据集创建批处理、重复(epoch编号)和无序处理

5) 创建迭代器,将所需的输入作为批处理(即小批量)

Eg代码:from matplotlib.image import imread

def input_model_function():

csv_filename =['images.txt']

dataset = tf.data.TextLineDataset(csv_filename)

dataset = dataset.map(_parse_function)

dataset = dataset.batch(20)# you can use any number of batching

iterator = dataset.make_one_shot_iterator()

sess = tf.Session()

batch_images, batch_labels = sess.run(iterator.get_next())

return {'x':batch_images}, batch_labels

def _parse_function(line):

image, labels= tf.decode_csv(line,record_defaults=[[""], [0]])

# Decode the raw bytes so it becomes a tensor with type.

image = imread(image)# give full path name of image

return image, labels

最后将批处理数据集输入模型(使用任何预先制作的估计器或自定义估计器API创建)

python怎么读取图像的txt标注_使用包含文件名的.txt文件读取图像数据相关推荐

  1. python写excel文件不覆盖_如何写入现有的Excel文件而不覆盖数据(使用pandas)?...

    如何写入现有的Excel文件而不覆盖数据(使用pandas)? 我使用pandas以下列方式写入excel文件: import pandas writer = pandas.ExcelWriter(' ...

  2. python爬取股票大单历史记录_利用bs4爬取股票的历史交易数据

    听起来,爬取股票的所有历史交易数据跟高大上,有木有? 不过写这个爬虫的时候,发现基于网易财经的股票历史数据的爬取其实挺简单,最后再写到txt文档里(暂时写txt,以后会写csv的.可以在用机器学习干一 ...

  3. python抓取网站访客手机号_电商 生意参谋 抓取 访客数据 Python版

    import requests import json import pandas as pd import time # getRtVisitor.json session = requests.S ...

  4. python爬取app中的音频_喜马拉雅app 爬取音频文件

    ============== 2019-10-28更新 ================= 因为喜马拉雅的源码格式改了,所以爬虫代码也更新了一波 # -*- coding: utf-8 -*- # w ...

  5. python gzip压缩后传给前端_Python 3,从/向gzip文件读取/写入压缩的json对象

    小编典典 这里有四个转换步骤. Python数据结构(嵌套字典,列表,字符串,数字,布尔值) 包含该数据结构(" JSON")的序列化表示形式的Python字符串 包含该字符串表示 ...

  6. shell导出txt乱码_【转】Shell乱码文件中的控制字符处理

    一.显示文件中的控制字符 当从其他系统下载文件时,有时要删除整个文件的控制字符(非打印字符),从菜单中捕获一个应用的屏幕输出有时也会将控制字符输出进文件,怎样知道文件中是否有控制字符?使用cat-vf ...

  7. pandas写入excel指定行_如何使用 Pandas 从excel文件读取特定行_pandas_酷徒编程知识库...

    我有一个excel文件,需要从某个工作表的行中提取某些数据.import pandas as pd xl_file = pd.ExcelFile((xlfilePath) dfs = {sheet_n ...

  8. java 读取流的字符编码格式_如何使用Java代码获取文件、文件流或字符串的编码方式...

    标签: 今天通过网络资源研究了一下如何使用Java代码获取文件.文件流或字符串的编码方式,现将代码与大家分享: package com.ghj.packageoftool; import info.m ...

  9. python循环删除包含字符串_删除包含完全字符串的文件中的行(Python)

    re.match匹配字符串开头的字符串 . 您可以在表达式中添加单词分隔符 name + r'\b' 但在你的情况下,重新是一种矫枉过正,简单的比较会做 name == line.partition( ...

最新文章

  1. 华为nova7se能云闪付吗_如何看待11月5日发布的华为nova8 se,性价比怎样?
  2. partial 分布类
  3. 简单理解Python中的if __name__ == '__main__'
  4. qt designer 插入图片_真的不错,宁波棉服图片
  5. LeetCode Algorithm 559. N 叉树的最大深度
  6. SQL——快速定位相关的外键表
  7. Oracle监听的静态注册和动态注册
  8. Photoshop切图学习
  9. java 03_Java基础03—流程控制
  10. 一个使用Logging Application Block的小问题[xgluxv]
  11. access文本框如何分开_ACCESS 2007 如何在窗体中将一个文本框的内容复制给另外一个文本框?...
  12. java 数组详解_java_day03:数组详解
  13. 怎么使用oracle的加权平均数_什么是均线?均线怎么看
  14. 主流微波雷达感应语音播报雷达感应照明灯LD602模块
  15. Linux图形终端与字符终端
  16. 树莓派wiringPi输出PMW
  17. echarts折线图设置横向基准线/水平线
  18. Sketch教程如何实现背景局部模糊
  19. 学习-Java字符串之String类常用方法之字符串长度
  20. 魔戒世界服务器维护,我的世界1.7.10服务器魔戒 The Lord of the Rings

热门文章

  1. 关于WPF中Popup中的一些用法的总结
  2. idea maven dependencies 总是报红
  3. Swift教程之继承
  4. 【python】time,datetime,string相互转换
  5. Storm 起步 Zookeeper Storm 单机部署
  6. 【解决】make: 警告:检测到时钟错误。您的创建可能是不完整的
  7. Android 百度推送使用总结
  8. 新闻中限制显示字数目
  9. 云开发是啥?看看它在编程导航项目的实践
  10. 程序员总结的:最没有学习效率的 5 种方法!你在用其中哪一种?