как обучить модель API обнаружения объектов tf без использования записей tf

#python #tensorflow #object-detection-api

#python #тензорный поток #object-detection-api

Вопрос:

Я хочу обучить модель mobilenet ssd v2 с использованием API обнаружения объектов tf чтобы использовать этот api, вам нужно преобразовать ваш набор данных в запись tf и записать путь к нему в конфигурационном файле

Всякий раз, когда я просматриваю ее, я нахожу ответы, которые включают записи tf, либо одну запись tf, содержащую весь набор данных, либо несколько файлов с его разделами (но idk, как заставить обучение использовать все разделы набора данных в каждую эпоху)


Как мне обучить модель, не загружая весь набор данных в память?

Есть ли способ обучения без использования tfrecords?

Если я преобразоваю весь свой набор данных в tfrecords, у меня будет 15 ГБ дублированного пространства, или есть способ не загружать всю запись tf, загружая ее фрагменты за раз, но все равно просматривая весь набор данных очень долго.

Комментарии:

1. использование tfrecord не загружает весь набор данных в память .. и если вы сохраняете TF OD API tfrecord нотацию сегментов (т. е. …..-00000-of-000100), то вы можете определить в файле конфигурации обучения, чтобы использовать все сегменты