Перейти на главную страницу

large-data – список вопросов по тегу – страница №1

Я переношу свой сервер из США в Великобританию из одного центра обработки данных в другой. Мой хозяин сказал, что я смогу достичь 11 мегабайт в секунду. На обоих концах...
Гарантированно ли расширение подстановочного знака в Bash в алфавитном порядке? Я вынужден разбить большой файл на части по 10 Мб, чтобы их можно было принять в моем...
Как компании, которые обрабатывают большие объемы данных, например Google или Facebook, делают резервные копии всего? Согласно этому Платформа Google В статье в Википедии...
Я отвечаю за новый веб-сайт в нишевой отрасли, на котором хранится много данных (более 10 ТБ на клиента, скоро количество клиентов увеличится до 2 или 3). Мы рассматриваем...
У меня действительно большой csv ~ 260 ГБ, и я хочу импортировать его в MySQL. Я использую следующий сценарий mysql в MacOS УДАЛИТЬ ТАБЛИЦУ ЕСЛИ СУЩЕСТВУЕТ tmp_catpath_5;...
Я скачиваю большой файл http через wget, 1,2 ТБ. Загрузка занимает около недели и уже дважды содержала повреждения (не удалось выполнить проверку md5, на выполнение которой...
У меня большой набор данных (+100 ГБ), который можно хранить в файлах. Большинство файлов будут в диапазоне от 5 до 50 000 (80%), затем от 50 до 500 000 (15%) и> 500 000...
Я использую материнскую плату Supermicro X9SRE-3F с последней версией BIOS и двумя дисками по 4 ТБ, подключенными к встроенному контроллеру SATA. Если я настрою BIOS на RAID и...
Я задал этот вопрос об ITSecurity, но мне показалось, что этот вопрос лучше разместить здесь. В ходе недавней оценки я обнаружил, что отправка больших (> 5 МБ) запросов на...
В настоящее время я отвечаю за сервер Red Hat и веб-приложение биоинформатики, которое работает с огромными файлами, некоторые из которых имеют размер более 100 ГБ в несжатом...