Описание тега lustre
Распределенная файловая система с высокой степенью масштабируемости.
2
ответа
Что такое пустое пространство / файловая система в HPC
Я изучаю приложения HPC и параллельные файловые системы. Я столкнулся с термином "чистое пространство" и "файловая система". Я не могу представить, где существует это пространство для царапин. Это на вычислительном узле в виде смонтированной файлово…
21 янв '15 в 11:32
2
ответа
Ошибка происходит при попытке размонтировать файловую систему Luster
Когда я вынимаю Luste r FS, он отображает: [root@cn17663-ens4 mnt]# umount /mnt/lustre umount: /mnt/lustre: target is busy. (In some cases useful info about processes that use the device is found by lsof(8) or fuser(1)) и если я добавлю опцию силы -…
08 июн '17 в 09:52
1
ответ
Можно ли перегрузить базовую файловую систему, используя Docker-контейнер?
Я хочу использовать bazel для создания тензорного потока в кластере CentOS 6.6, который использует файловую систему Luster. Эта файловая система не поддерживает блокировку. Пошлите эту проблему на GitHub. Я читал, что докер может обеспечить виртуали…
24 фев '18 в 15:17
2
ответа
Блеск: отправка разных запросов на запись в разные OST
У меня есть типичный сценарий, когда параллельно можно писать запросы, и каждый файл имеет размер в несколько сотен ГБ. Моя тестовая система, файловая система Luster, имеет 4 OST (по 3 ТБ каждая) и 1 MDS. Я практически заметил, что при отключенном ч…
26 июн '13 в 16:34
1
ответ
Блеск висит при монтаже oss
Я установил параллельную файловую систему "Luster" вместе с этим слайдом с RPM. Установить узел A, B. Установил mds и mdt на узел A. Его монтирование прошло успешно. Но после форматирования oss на узле B, используя mkfs.lustre, я подключил его, но н…
21 сен '15 в 00:56
1
ответ
Можно ли получить улучшенную производительность при параллельном чтении на Фортране?
У меня есть код fortran90, который тратит (безусловно) большую часть времени на ввод-вывод, потому что очень большие файлы данных (по крайней мере 1 ГБ и выше) должны быть прочитаны. Меньшие, но все еще большие файлы данных с результатами расчетов д…
08 дек '15 в 12:55
1
ответ
Монгодб из-за блеска?
Мне нужно установить экземпляр mongodb с большим объемом данных. У нас есть Luster FS с сотнями терабайт, но при запуске monogdb покажите мне эту ошибку: Mon Jul 15 12:06:50.898 [initandlisten] exception in initAndListen: 10310 Unable to lock file: …
15 июл '13 в 10:45
1
ответ
MongoDB "Невозможно установить блокировку" ошибка на смонтированном диске, используя Docker и Lustre
Я пытаюсь использовать Docker для контейнера экземпляра MongoDB, используя диск, смонтированный на хосте. С использованием mongo:latest образ: [user@dcos-master ~]$ docker run -d --name mongo -v /local/cluster/drive:/data/db mongo:latest Но постоянн…
07 июн '17 в 16:17
1
ответ
SBT принудительно блокирует файловую систему, даже в распределенных файловых системах
Я намеревался запустить обширный набор тестов, который использует SBT на нашем высокопроизводительном вычислительном кластере университета (он использует файловую систему Luster). Поскольку у меня есть базовые пользовательские привилегии, я смог поп…
12 апр '15 в 18:40
1
ответ
Ошибка: SERVER не появляется в AM_CONDITIONAL
Я пытаюсь установить Luster на CentOS 7. Я перешел по этой ссылке. Когда я пытаюсь бежать sh ./autogen.sh для генерации скрипта configure я получаю вышеуказанную ошибку, как показано ниже. [root@localhost lustre-release]# sh ./autogen.sh configure.a…
11 окт '18 в 10:59
2
ответа
Что произойдет, если число моих полос будет больше, чем количество полос?
У меня есть сомнения относительно файловой системы Luster. Если у меня есть файл размером 64 ГБ, и я установил размер полосы в 1 ГБ, мое число полос становится равным 64. Но если я установлю количество полос в 128, что будет делать Lustre в этом слу…
08 апр '15 в 05:16
2
ответа
Блеск файловой системы: сколько OST?
Есть ли способ, помимо ошибок системных администраторов, определить, сколько LST OST в параллельной системе?
03 авг '16 в 16:08
1
ответ
Блокировка блеска файла для одновременного доступа
Я пытаюсь разработать приложение, которое будет работать на нескольких компьютерах, связанных с общим хранилищем Luster, и выполнять различные действия, включая, но не ограничиваясь: Добавление данных в файл. Чтение данных из файла. Чтение и запись …
07 июн '18 в 13:27
1
ответ
openmpi: MPI_recv зависает для определенного числа процессов
Я запускаю тест HPC (IOR - http://sourceforge.net/projects/ior-sio/) на блеск. Я скомпилировал исходный код IOR и запустил его с openmpi 1.5.3. Проблема в том, что зависает при количестве процессов (-np) меньше 6, что странно. Удаляя все остальное, …
19 дек '14 в 15:10
1
ответ
Параллельно HDF5: "make check" зависает при запуске t_mpi
Я изо всех сил пытаюсь заставить параллельную HDF5 работать на кластере целую неделю, но без какого-либо прогресса. Я хотел бы, чтобы кто-нибудь мог помочь мне с этим. Спасибо! Я собираю Parallel HDF5 (hdf5-1.8.15-patch1) в блестящей файловой систем…
11 июн '15 в 14:56
1
ответ
CentOS 7 - необходимо изменить порядок загрузки для автоматического запуска sge
Похоже, что sge пытается запуститься до того, как при загрузке сервера будет смонтирован блеск, что приводит к ошибке автоматического запуска при перезагрузке. Может кто-нибудь сказать мне, как изменить порядок при загрузке, чтобы sge запускался пос…
12 авг '16 в 18:34
1
ответ
Невозможно запустить имя узла при настройке Hadoop для блеска
Я пытаюсь интегрировать Hadoop с Intel Lustre. я добавил hadoop-lustre-plugin-3.1.0 в hadoop-2.7.3/lib/native папка. Блеск установлен на /mnt/lustre, Я получаю следующее сообщение об ошибке при запуске Hadoop с помощью start-all.sh [root@master hado…
13 апр '17 в 12:17
1
ответ
Длительность запуска Mysqld слишком велика в файловой системе Luster (InnoDB: невозможно заблокировать./ibdata1, ошибка: 38)
Я могу запустить mysqld и использовать его как обычно. Но продолжительность старта очень большая (более 3 минут). Когда я проверяю файл журнала (/var/log/mysqld.log), Я нашел InnoDB: Unable to lock ./ibdata1, error: 38, Недавно я перенес свои данные…
27 окт '14 в 12:07
1
ответ
Lustre Client в Linux Kernel 4+
Кто-нибудь знает, возможно ли установить программное обеспечение клиента блеска на Linux-машине с ядром 4+? Из того, что я экспериментировал до сих пор, все рабочие примеры находятся на ядре 3.10. И если я попытаюсь установить kmod-luster-client на …
20 ноя '18 в 19:55
1
ответ
Запуск LevelDB в файловой системе Luster
Я бегу кусок кода, который основан на LevelDB. Он отлично работает на моей рабочей станции, но когда я внедряю его в кластер (с файловой системой Luster), программа завершается с ошибкой "Недопустимый аргумент". Эта ошибка генерируется LevelDB. Посл…
24 апр '14 в 21:08