Назад | Перейти на главную страницу

Потоковое сжатие для больших файлов

Мы хотим сжимать большие файлы резервных копий и отправлять их в облако. Я ищу приложение / утилиту / кодовую базу, которая позволит нам эффективно сжимать на лету как часть передачи.

Я обнаружил, что WinRAR требует в 40 раз больше времени для сжатия наших файлов размером 100 ГБ по сравнению со сжатием Sql Native, но он намного лучше уменьшает размер файла. Я хочу что-то, что обеспечивает хорошее сжатие, не тратя на это часы.

Наши файлы - это резервные копии Sql Server с использованием тестовой базы данных размером 100 ГБ с собственным сжатием резервных копий sql, это уменьшает размер файла в 3 раза, а время резервного копирования изменяется с 10 минут до 25. 15 минут процессорного времени экономят 66 ГБ полосы пропускания. , который мы можем использовать для других файлов, отправляемых в облако.

Я пробовал использовать WinRAR для файла резервной копии 100 Гб и получил коэффициент сжатия 9, что в 3 раза лучше, чем в собственном sql, и это здорово, поскольку теперь мы можем помещать в облако в 9 раз больше контента. Но на сжатие уходит 7 часов!

Мы не можем быть единственным магазином, столкнувшимся с этой проблемой? Каково ваше решение для максимального использования драгоценной пропускной способности.