TensorFlow 数据IO(Python函数)

由 Carrie 创建, 最后一次修改 2017-08-22

TFRecords 文件表示(二进制)字符串的序列.格式不是随机访问,因此适合于流量大量数据,但是如果需要快速分片或其他非顺序访问,则不适合.

TFRecords 格式详细信息

TFRecords 文件包含具有 CRC 散列的字符串序列,每个记录都有格式:

uint64 length
uint32 masked_crc32_of_length
byte   data[length]
uint32 masked_crc32_of_data

并将记录连接起来生成文件。CRC32 在这里被描述,CRC的掩码是:

masked_crc = ((crc >> 15) | (crc << 17)) + 0xa282ead8ul
以上内容是否对您有帮助:
二维码
建议反馈
二维码