TensorFlow文件读取 --TFRecords文件

TFRecords文件

是一种二进制文件,能够很好的利用内存,更方便复制和移动,并且不需要单独的标签文件

使用步骤

1)获取数据

2)将数据填入到Example协议内存块(protocol buffer)

3)将协议内存块序列化为字符串,并且通过 tf.python_io.TFRecordWriter写入到TFRecords文件

文件格式  *.tfrecords

     Example结构

●tf. train. Example协议内存块(protocol buffer)(协议内存块包含了字段  Features )
●Features包含了一个Feature 字段
●Feature 中包含要写入的数据、并指明数据类型。
   这是一个样本的结构,批数据需要循环存入这样的结构

  • tf.train.Example(features=None)

          写入tfrecords文件

         features: tf.train.Features类型的特征实例

         return: example格式协议块

  • tf.train.Features(feature=None)

         构建每个样本的信息键值对

         feature: 字典数据,key为要保存的名字

         value为tf.train.Feature实例

         return: Features类型

  • tf.train.Feature(options)

         options: 例如

              bytes_ litftrain. BytesList(value=[Bytes])

              int64. lststf.train. Int64List(value=[Value)

支持存入的类型如下

       tf.train.Int64List(value=Malue])

       tf.train.BytesList(value=[Bytes])

       tf.train.FloatList(value=[value]

流程分析

1)构造存储实力  tf.python_io.TFRecordWriter(patch)

2)循环将数据填入到Example协议内存块(protocol buffer)

example解析

●tf.parse. single_ example(serialized, features=None, name=None)
      解析一个单一的Example原型

     serialized: 标量字符串Tensor, - 一个序列化的Example
     features: dict字典数据,键为读取的名字,值为FixedLenFeature
     return:一 个键值对组成的字典,键为读取的名字
●tf.FixedL enFeature(shape, dtype)
     shape: 输入数据的形状,一般不指定,为空列表
     dtype: 输入数据类型,与存储进文件的类型要一致
     类型只能是float32, int64, string
 

案例:

写入:

读取:

流程:

   1)构造文件名队列

    2)读取和解码    

              读取

              解析example

              解码

   3)构造批处理队列

      

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:/a/564157.html

如若内容造成侵权/违法违规/事实不符,请联系我们进行投诉反馈qq邮箱809451989@qq.com,一经查实,立即删除!

相关文章

冯唐成事心法笔记

文章目录 卷首语 管理是一生的日常,成事是一生的修行PART 1 知己 用好自己的天赋如何管理自我用好你的天赋成大事无捷径如何平衡工作和生活做一个真猛人做自己熟悉的行业掌控情绪如何对待妒忌和贪婪如何战胜自己,战胜逆境真正的高手都有破局思维有时候…

利用动态规划在有向图上实现高效语音识别算法

在现代语音识别系统中,动态规划是一种非常关键的技术。它能够帮助我们将复杂的语音信号转换为可理解的文字信息。在本文中,我们将探讨如何使用动态规划方法在有向图上实现语音识别。我们将首先介绍问题的背景和基本概念,然后提供一个高效的算…

基于开源CrashRpt与微软开源Detours技术深度改造的异常捕获库分享

目录 1、异常捕获模块概述 2、为什么需要异常捕获模块? 3、在有些异常的场景下是没有生成dump文件的 4、开源异常捕获库CrashRpt介绍 5、对开源库CrashRpt的改进 C软件异常排查从入门到精通系列教程(专栏文章列表,欢迎订阅,持…

NX二次开发UF_VEC(向量运算)常用函数

目录 一、概述 二、函数的介绍 2.1 UF_VEC3_add(两向量相加) 2.2 UF_VEC3_affine_comb(未缩放和缩放后的和) 2.3 UF_VEC3_angle_between(使用第三个向量确定连个向量的夹角) 2.4 UF_VEC3_ask_perpendicu…

【状态机dp 动态规划】100290. 使矩阵满足条件的最少操作次数

本文涉及知识点 动态规划汇总 状态机dp LeetCode100290. 使矩阵满足条件的最少操作次数 给你一个大小为 m x n 的二维矩形 grid 。每次 操作 中,你可以将 任一 格子的值修改为 任意 非负整数。完成所有操作后,你需要确保每个格子 grid[i][j] 的值满足…

人人可拥有刘强东同款数字人分身!

每个人都可以拥有东哥同款数字人分身直播间进行直播带货,怎样克隆自己的数字人形象? 青否数字人克隆源码的克隆效果媲美真人: 仅需将真人录制的2-6分钟视频上传至克隆端后台,系统便会自动启动自动克隆。3-5小时后,即可…

LR系统关联错误

报错提示: 開日:Vuser艳湾辫触?mdrv.dat函欢?CCI聞/珞涓ECCIDebug剧涓?off?璀:十cciext.dll钙筑婧?ExtPerProcessInitialize踩整伴叔璇?-19797:缩跨v涓?璋幂椹下动清鳄"叶璐…

Oracle交换分区测试

1、用exchange分区表减少初始化过程中对业务中断的影响 2、创建分区表 create table t_p (id number,name varchar2(30),addr varchar2(50)) partition by range(id) (partition p1 values less than(10), partition p2 values less than(20), partition p3 values less …

免费听音乐,下载音乐mp3,mp4,歌词的网站分享(2024-04-22)

亲测!!! 1、音乐客 免费听和免费下载 经典老歌 - 音乐客音乐客,yinyueke.net,免费音乐,免费在线音乐播放器,免费下载音乐,音乐,播放器,下载,播放,DJ,免费,mp3,高音质,…

A4云打印仅需5分/页?云打印多少钱?云打印怎么收费?

随着互联网技术的发展,越来越多的同学在打印资料的时候都开始转向线上,转向云打印服务了。云打印服务不仅可以给我们节省很多时间,价格方面较打印店也更有优势。那么云打印多少钱?云打印怎么收费?今天小易就带大家来了…

git 某个分支代码回滚到某次push的步骤

切换到需要操作的分支 git checkout 分支名称 命令: git log 获取代码的提交记录,按小写q退出当前命令对话。 获取某次提交或者合并的hash值:如:2cf0f19ab21aa62f5ebffa5f08caed3f63842346 使用reset命令对当前分支进行回退到某…

sklearn【AUC-ROC】原理,以及绘制ROC曲线!

一、AUC-ROC 介绍 在分类任务中,特别是当数据集中的类别分布不平衡时,评估模型的性能变得尤为重要。AUC-ROC(Area Under the Receiver Operating Characteristic Curve,受试者工作特征曲线下的面积)是一种有效的评估指…

Rancher 应用商店离线环境使用

前言 Rancher (v2.5 ) 应用商店可以方便的安装 Helm3 构建的应用,并且支持私有 helm 应用仓库,方便了内网离线环境下的使用。本文以内网离线环境为前提、以 MySQL 5.7.43 版本为应用举例,从零开始手把手教你如何制作并应用。 1、环境准备 1.…

自然资源领域-点状用地和乡村振兴产业用地办理指引

自然资源领域-点状用地和乡村振兴产业用地办理指引(广州借鉴) “点状供地”是相对于传统的“片状供地”而言的一种新型供地方式,是办理项目建设用地报批及供地手续的关键环节,也是项目开发建设的重要依据。 通俗说:“…

半导体制造工艺之分类浅述

半导体制造工艺分为逻辑制程(也叫逻辑工艺)和特殊制程(也叫特色工艺)。 1、逻辑工艺概述 随着集成电路行业沿着摩尔定律不断发展,晶体管数量增加的同时,工艺节点不断缩小。先进逻辑工艺是相对的概念,2005年全球先进逻辑工艺的工艺节点在65/55纳米,现在则变为3纳米。中…

AOP容器面向切面编程(动态代理)

aop面向切面编程 动态代理方式进行 <dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-aop</artifactId></dependency> 面向特定的方法进行编程 统计方法的执行耗时&#xff0c;要执行的是哪个方…

Vue前端框架如何调用天聚数行API?

Vue是一个业内优秀的前端解决方案&#xff0c;采用了最新流行的MVVM框架模式&#xff0c;深受web前端开发者的喜爱&#xff0c;在相关开发者社区也一直都是热门交流话题。那么&#xff0c;如何通过Vue调用天行数据的API接口呢&#xff0c;下面就具体给大家示例。 vue采用的是数…

【Interconnection Networks 互连网络】Flattened Butterfly 扁平蝶形拓扑

Flattened Butterfly 扁平蝶形拓扑 1. 传统蝶形网络 Butterfly Topology2. 扁平蝶形拓扑 Flattened Butterfly3.On-Chip Flattened Butterfly 扁平蝶形拓扑应用于片上网络 Flattened Butterfly 扁平蝶形拓扑 扁平蝶形拓扑是一种经济高效的拓扑&#xff0c;适用于高基数路由器…

护眼落地灯哪个牌子好?落地灯十大知名品牌

一款优异的落地灯不只有照明的作用&#xff0c;更有装修作用。只不过&#xff0c;市面上的落地灯产品很多&#xff0c;质量良莠不齐&#xff0c;很多人不知道怎么挑选是好。小编的主张是从品牌下手&#xff0c;挑选口碑上佳的品牌落地灯产品。若问护眼落地灯哪个牌子好&#xf…

【学习】人工智能在软件测试中的作用有哪些

随着科技的飞速发展&#xff0c;人工智能&#xff08;AI&#xff09;已经渗透到各个领域&#xff0c;并发挥着不可或缺的作用。其中&#xff0c;在软件测试方面&#xff0c;AI的应用也愈发普遍。本文将探讨人工智能在软件测试领域的关键作用以及其带来的积极影响。 一、提升测…