How to use TfRecordDataset DatasetToTfRecord tf.io.tfRecordReader
Chưa có ai nhận issue này.
- Ngôn ngữ chính
- Java
- Star
- 928
- Fork
- 227
- Chỉ số merge pull request
- Không có pull request nào được merge trong 30 ngày
Mô tả
tensorflow-java 0.4
spark 3.1
java 11
Hi :
Now I use tensorflow-java to read tfrecord file ,but can not get the data, and our not have example for it ,the TfRecordDataset DatasetToTfRecord tf.io.tfRecordReader java class have not same api like python ,could we give some example for how to use them. thank
import org.tensorflow.{Operand, Session,EagerSession}
import org.tensorflow.op.Ops
import org.tensorflow.op.data.TfRecordDataset
import org.tensorflow.op.data.{DatasetToTfRecord, TfRecordDataset}
val session = EagerSession.create
val tf = Ops.create(session)
val scope = tf.scope()
// val fileName =tf.constant( "/Users/zhanghaining/Downloads/tfrecord-kk2-test/")
val fileName = tf.constant("/Users/zhanghaining/Downloads/BigDL/spark/dl/src/test/resources/tf/mnist_train.tfrecord")
val compress = tf.constant("")
val bufferSize = tf.constant(0l)
val recordDataSet = TfRecordDataset.create(scope,fileName,compress,bufferSize)
val record = DatasetToTfRecord.create(scope, recordDataSet,fileName,compress)
val reader = tf.io.tfRecordReader()
println(record.op().name() )
println(record.op().`type`())
println(recordDataSet.op().numOutputs() )
println(recordDataSet.asOutput().dataType())
Hướng dẫn đóng góp
Bắt đầu từ đâu
- Đọc hết issue, rồi đọc hướng dẫn đóng góp của dự án.
- Bình luận trên issue rằng bạn sẽ nhận — tránh hai người làm cùng một việc.
- Fork repository và làm thay đổi trên một nhánh.
- Mở pull request có tham chiếu số hiệu của issue.
Hướng nghiên cứu
Bắt đầu với các entry point TfRecordDataset, DatasetToTfRecord và tf.io.tfRecordReader được nêu trong issue, rồi so sánh các Java API của chúng với cách sử dụng Python được yêu cầu. Được xem là hoàn tất khi cung cấp một ví dụ tensorflow-java hoạt động, đọc dữ liệu TFRecord và giải thích cách sử dụng các API này.
Do mô hình lập chỉ mục viết ra từ nội dung của issue.
Đánh giá
- Công nghệ
- java, tensorflow
- Lĩnh vực
- data, machine-learning
- Loại issue
- Tài liệu
- Độ khó
- 3/5
- Thời gian dự kiến
- 1-2 ngày
- Mức độ hoạt động
- Đình trệ
- Độ rõ ràng
- Cần làm rõ
- Mức phù hợp với người mới
- 25/100