Медленный sftp.mget при извлечении большого количества файлов (10 000 )

#ftp #sftp #mget

#ftp #sftp #mget

Вопрос:

Мы извлекаем тысячи файлов (10 000 ) с удаленного сервера с помощью подстановочного знака. Файлы небольшие, а производительность самой передачи отличная. Однако неявная производительность «ls .856» ужасна. Предположительно, логика перечисления файлов имеет неявную сортировку, поэтому большое количество файлов имеет значительные накладные расходы. В идеале mget начнет передачу, как только найдет первое совпадение.

Любые предложения или мысли о том, как сделать это лучше?

Комментарии:

1. rsync может быть вашим лучшим решением.

2. Наша система RHEL 7. Понятия не имею, в удаленной системе. Это скрипт BASH.

3. Почему rsync будет улучшением?