Я пытался запустить скрипт python в компьютерном кластере, но продолжаю сталкиваться с ошибкой, говоря, что предел памяти RSS превышен. Я использую эту программу для анализа набора данных, состоящего примерно из 40000 случаев. Я пробовал его на своем компьютере для 1000 элементов, и, похоже, он использует очень небольшой объем памяти. Инструмент системного монитора в Fedora показывает около 23% использования памяти для моего компьютера, что эквивалентно 1,7 ГБ (в основном используется самой ОС), но когда я запускаю его в кластере, память RSS превышает 14 ГБ.
Я понятия не имею, что происходит и почему существует такая разница в использовании памяти между моим компьютером и кластером. Любая помощь приветствуется.