Ограничение вывода команды 'ls' в s3fs

Question

Ограничение вывода команды 'ls' в s3fs

Моя корзина Amazon S3 содержит миллионы файлов, и я монтирую ее, используя s3fs, В любое время ls подана команда (не умышленно), терминал зависает.

Есть ли способ ограничить количество результатов, возвращаемых до 100, когда ls Команда выдается в s3fs смонтированный путь?

1

amazon-s3 s3fs

Источник

user5353255 19 сен '15 в 09:36

2 ответа

Другие вопросы по тегам amazon-s3 s3fs

user3879341 02 дек '15 в 00:25 2015-12-02 00:25 · Answer 1 · 2015-12-02 00:25

Попробуйте goofys ( https://github.com/kahing/goofys). Не ограничивает количество возвращаемых предметов для ls, но ls примерно в 40 раз быстрее, чем s3fs, когда файлов много.

2

Источник

user3879341 02 дек '15 в 00:25

user174777 21 сен '15 в 03:43 2015-09-21 03:43 · Answer 2 · 2015-09-21 03:43

Не рекомендуется использовать s3fs в производственных ситуациях. Amazon S3 не является файловой системой, поэтому попытка его монтирования может привести к некоторым проблемам с синхронизацией (и другим подобным проблемам).

Было бы лучше использовать интерфейс командной строки AWS (CLI), который имеет команды для вывода, копирования и синхронизации файлов в / из Amazon S3. Это может также сделать частичный листинг S3 сегментов по пути.