Я помню, как год назад пытался использовать s3fs, пытаясь использовать какое-то ведро S3 в качестве файловой системы FUSE. Я помню, что он был довольно медленным, особенно в сочетании с операциями над ним git (у забывчивого системного архитектора было такое странное требование).
Перенесемся на несколько месяцев вперед, и я обнаружил Lustre и AWS FSx для Lustre в сочетании с S3, который якобы обеспечивает очень похожий вариант использования для него:
Amazon FSx for Lustre изначально работает с Amazon S3, что упрощает обработку облачных наборов данных с помощью высокопроизводительных файловых систем. При связывании с корзиной S3 файловая система FSx for Lustre прозрачно представляет объекты S3 в виде файлов и позволяет записывать результаты обратно в S3.
Так как же Lustre сравнивается по производительности с файловыми системами FUSE для S3, такими как s3fs (и другими подобными тупицами)?
Спасибо :)