В моей работе создание модели машинного обучения, особенно с изображениями фреймов данных, которые имеют большой объем файла, имеют много ограничений для этого. Несколько ограничений, с которыми мы столкнулись, связаны со спецификациями оборудования и используемого программного обеспечения. Для решения этой проблемы я нашел статью в StackOverflow, в которой предлагается использовать rsync.

Когда я открываю меню справки в терминале, rsync — это программа, которая помогает нам эффективно передавать файл, используя их алгоритм. Эта программа имеет несколько функций для копирования файла, которые мы можем использовать.

Терминальное приложение для запуска rsync. Я использую эту программу для копирования поля в другой каталог, но она не будет копировать, если файл уже находится в целевом каталоге.

> rsync -a -v src/ dst/

Объяснение :
a : режим архива
v : увеличение детализации
src/ : исходный каталог
dst/ : целевой каталог

Когда вы добавляете каталог, добавьте «/» после имени каталога, который вы используете, чтобы иметь возможность копировать весь файл, а не только каталог.

Возможно, эта статья выглядит просто для копирования файла в операционной системе Linux с помощью терминала. Но эта статья может быть полезна, когда данных больше. Если есть какие-то методы более эффективные и действенные, давайте об этом поговорим!