Огромная файловая система?

Сайт должен быть в локальной зоне интранет для использования интегрированной аутентификации (от компьютера домена, к которому присоединяются)

6
задан 12 July 2011 в 22:41
6 ответов

Двумя опциями, которые приходят на ум, является GlusterFS и Hadoop HDFS.

7
ответ дан 3 December 2019 в 00:00

GPFS IBM может сделать это (примечание: не открытый исходный код).

С GPFS можно создать Сетевые совместно используемые диски (NSDs), которые состоят из любого типа блочной системы хранения (локальный или представленный через iSCSI или FC, например). Было бы совершенно возможно создать файловую систему GPFS (устройство), которое состоит из NSDs, которые охватывают каждый жесткий диск на 2 ТБ через Ваши 100 серверов.

Я не симулирую вспоминать все сумасшедшие маркетинговые числа, но GPFS среди самых популярных кластерных файловых систем для суперкомпьютеров в "Лучших 500" списках, потому что он поддерживает чрезвычайно большие объемы данных и невероятно высокого параллельного ввода-вывода. Википедия имеет некоторые числа.

GPFS может копировать блоки данных и блоки метаданных через файловую систему. При создании NSDs, Вы определяете "группу отказа", Вы делаете это так, чтобы GPFS сделал пишут Ваши копии блока в другом месте (то есть, Вы не хотите обе копии своего блока в той же группе отказа). Можно также разделить устройство хранения данных на уровни с помощью их понятия "пулов хранения данных", через которые можно определить поведение как... файлы, к которым получают доступ на прошлой неделе живой на моей Fusion io или твердотельных дисках, но после того перемещения блоки к более дешевому устройству хранения данных.

Все узлы в Вашем кластере имели бы доступ к устройству (как/dev/gpfs0), который они могли смонтировать и доступ как он, целая файловая система была локальна для каждого узла. Вы упомянули NFS; в этой модели однако, не необходимо представить дополнительный протокол, если у Вас нет систем вне 100 кластеров узла, которые действуют как потребители/клиенты данных, и Вы не хотите делать их GPFS clients/NSD серверы (путем загрузки модуля ядра GPFS). Однако можно тривиально экспортировать файловые системы GPFS через NFS и даже усилить кластеризованный NFS (CNFS) при необходимости.

  • Я не работаю на IBM, но я играл с GPFS немного, и мне понравился он.
4
ответ дан 3 December 2019 в 00:00

У меня не было шанса играть с ним все же, таким образом, я не могу дать полный обзор, но я сказал бы, взглянули на облачные материалы OpenStack-> http://www.openstack.org/projects/storage/

3
ответ дан 3 December 2019 в 00:00

Вы, вероятно, хотите что-то как PVFS.

2
ответ дан 3 December 2019 в 00:00

На Википедию существует полный список.

2
ответ дан 3 December 2019 в 00:00

Ceph - другой, хотя не подталкивают готовый все же. http://ceph.newdream.net/wiki/Main_Page

1
ответ дан 3 December 2019 в 00:00

Теги

Похожие вопросы