Tensorflow: hdf5에서 스트리밍 지원

이 기능 요청은 매우 광범위하며 가까운 장래에 작업하지 않을 것입니다. 이슈 트래커에 계속 집중하기 위해 이 이슈를 닫겠습니다.

글쎄, 내가 실제로 요구하는 것은 스트리밍/랜덤 액세스를 모두 지원하는 tf.TextLineReader 라인에 따른 것입니다. 요청은 예를 들어 #2089에서 이전에 발생했습니다. 이러한 기능 요청을 항상 닫을 때의 문제는 쉽고 새로운 기여를 찾는 사람들이 TF 코드 기반에 대한 좋은 첫 단계일 수 있지만 이를 보지 못할 수도 있다는 것입니다.

+1. 참고로 https://www.tensorflow.org/api_guides/python/reading_data 에서 지원되는 파일 형식은 csv, binary, tfrecord 뿐입니다. 그러나 hdf5는 꽤 일반적인 형식입니다. 큰 데이터 세트의 경우 이 예제와 같이 .hdf5 형식의 전체 데이터 세트를 로드할 수 없습니다. https://github.com/tensorflow/tensorflow/blob/master/tensorflow/examples/learn/hdf5_classification.py. 대신 각 샘플에 대해 작은 hdf5 파일을 사용합니다.

이를 처리할 수 있는 유일한 방법은 먼저 hdf5 파일을 tfrecord 또는 바이너리 파일로 전송하는 것입니다.