Выпуск распределенной файловой системы GlusterFS 3.5 Печать
02.05.14 20:50

Сообщество Gluster объявило о выходе распределенной файловой системы GlusterFS 3.5, позволяющей организовать работу распределённого на несколько узлов хранилища, развёртываемого поверх штатных POSIX ФС, таких как Ext4, XFS и Btrfs, с использованием механизма FUSE (ФС в пользовательском пространстве). GlusterFS предоставляет средства автоматического восстановления после сбоев и обеспечивает практически неограниченную масштабируемость, благодаря отсутствию привязки к централизованному серверу мета-данных (используются распределённые хэш-таблицы). Готовые для установки бинарные пакеты с GlusterFS 3.5 подготовлены для Fedora, RHEL, CentOS, Debian, openSUSE, SLES и Ubuntu.

Основные новшества:

  • Поддержка создания снапшотов отдельных файлов. С практической стороны данная возможность может быть востребована для создания снапшотов образов работающих виртуальных машин, что позволяет вернуть состояние виртуальной машины на момент в прошлом только силами GlusterFS без задействования дополнительных инструментов. В будущих выпусках ожидается поддержка создания снапшотов разделов;
  • Возможность сжатия данных при передаче по сети, что позволяет сократить общую нагрузку на сеть при выполнении операций, инициированных клиентом. В зависимости от характера данных применение сжатия может существенно повысить производительность работы с разделами при незначительном увеличении нагрузки на CPU, особенно в ситуациях когда пропускная способность канала связи клиента является узким местом;
  • Поддержка шифрования данных дисковых разделов на стороне сервера с использованием ключей, доступных только клиенту. Шифруется только содержимое файлов, имена и метаданные остаются незашифрованными. Кроме того, шифрование не применимо при использовании NFS;
  • Автоматическое обнаружение отказа отдельного хранилища (Brick Failure Detection);
  • Увеличено качество ведения логов, добавлено отображение дополнительной статистики и указание причин возникновения тех или иных событий, а также данных о том, какие файлы затрагивают данные события;
  • Новый метод прямого доступа к данным через GFID, позволяющий обратиться к данным в трансляторе изменений;
  • Уход от необходимости перезапуска NFS-сервера при изменении параметров раздела;
  • Расширение числа возможных конфигураций квот от нескольких сотен до 65536 для раздела;
  • Поддержка упреждающего чтения (readdir_ahead) списка директорий для увеличения производительности последовательного чтения директорий;
  • Поддержка операции zerofill для заполнения нулями новых образов виртуальных машин;
  • Переработана архитектура системы геораспределённой репликации (Geo-Replication). Если раньше процесс репликации gsyncd выступал в качестве единой точки отказа, так как он запускался на одном узле кластера, выход которого из строя сулил прекращение geo-репликации, то в новой реализации репликация выполняется на всех узлах, обслуживающих раздел (каждый узел теперь отвечает за синхронизацию хранимых на нём данных). Для определения изменившихся файлов, для которых необходимо выполнить синхронизацию, теперь используется журнал изменений (changelog xlator). Кроме rsync добавлена поддержка нового метода синхронизации "tar+ssh", который может быть востребован в конфигурациях с большим числом мелких файлов.
  1. Главная ссылка к новости (http://www.gluster.org/2014/05/glusterfs...)
  2. OpenNews: Компания Red Hat представила GlusterFS 3.4
  3. OpenNews: Релиз распределенной файловой системы GlusterFS 3.3
  4. OpenNews: Для развития GlusterFS сформирован независимый управляющий совет
  5. OpenNews: Red Hat покупает компанию-разработчика распределенной файловой системы GlusterFS
  6. OpenNews: Вышел релиз кластерной файловой системы GlusterFS 2.0
Автор новости: YetAnotherOnanym
Тип: Программы
Ключевые слова: glusterfs, (найти похожие документы)
При перепечатке указание ссылки на opennet.ru обязательно
Реклама
id=adv>
  1.1, Аноним, 00:20, 03/05/2014 [ответить] [смотреть все] +/
Хм А причём тут он Простите, давно смотрю на сию поделку, но не в курсе тон... весь текст скрыт [показать]
 
  2.3, BratSinot, 00:45, 03/05/2014 [^] [ответить] [смотреть все] [показать ветку]  +3 +/
А вам ничего не говорит о том, что FS распределенная, а это делают через сеть ... весь текст скрыт [показать] [показать ветку]
 
  3.6, Аноним, 01:11, 03/05/2014 [^] [ответить] [смотреть все]  +3 +/
FibreChannel Не, не слышал ... весь текст скрыт [показать]
 
  4.17, Аноним, 10:24, 03/05/2014 [^] [ответить] [смотреть все]  +/
Ну давай, протени FibreChannel через океан, морским кабелем ... весь текст скрыт [показать]
 
  5.21, Аноним, 12:53, 03/05/2014 [^] [ответить] [смотреть все]  +/
И что в этом такого wdm, tdm вещицы заказываешь у оператора и будет fc через ок... весь текст скрыт [показать]
 
  6.24, Аноним, 13:03, 03/05/2014 [^] [ответить] [смотреть все]  +/
Ты забыл уточнить сколько это будет стоить ... весь текст скрыт [показать]
 
6.27, anonymous, 13:50, 03/05/2014 [^] [ответить] [смотреть все]  
+/
> И что в этом такого? wdm, tdm вещицы заказываешь у оператора и
> будет fc через океан.

задержки, даже за деньги не уменьшишь, а если задержки большие, FC не сильно эффективен, соответственно его целесообразность под сомнением.

 
  7.36, Аноним, 19:28, 03/05/2014 [^] [ответить] [смотреть все]  +1 +/
И где это написано - про связь задержек с неэффективностью fc ... весь текст скрыт [показать]
 
7.39, t28, 02:02, 04/05/2014 [^] [ответить] [смотреть все]  +/ > задержки, даже за деньги не уменьшишь, а если задержки большие, FC не
> сильно эффективен, соответственно его целесообразность под сомнением.

Да что ты говоришь?

 
  8.47, anonymous, 13:18, 04/05/2014 [^] [ответить] [смотреть все]  +/
прикинь, да, такая ерунда, задержки мешают.
 
  9.48, Аноним, 14:00, 04/05/2014 [^] [ответить] [смотреть все]  +/
А расшифровать Чему и как мешают И как другим, не-fc вещичкам, эти задержки по... весь текст скрыт [показать]
 
  10.50, anonymous, 17:49, 04/05/2014 [^] [ответить] [смотреть все]  +/
задержки всем кровь портят, речь идёт о целесообразности использования FC на каналах с большими задержками, тут нужно каждый случай рассматривать отдельно.
 
  11.53, Аноним, 09:00, 05/05/2014 [^] [ответить] [смотреть все]     [к модератору]  +/
Значит, у спутников на геостационарных орбитах пинг 10 секунд не портит кровь, а... весь текст скрыт [показать]
 
6.29, Аноним, 14:46, 03/05/2014 [^] [ответить] [смотреть все]  +/
не будет, у FC есть жёсткие ограничения на RTT, максимум это один ДЦ... весь текст скрыт [показать]
 
  7.32, anonymous, 16:27, 03/05/2014 [^] [ответить] [смотреть все]  +2 +/
у FC нет таких огрничений.
 
3.8, Аноним, 01:38, 03/05/2014 [^] [ответить] [смотреть все]  +2 +/
а ты не знаешь случайно, что nfs не распределённая fs И она распределённости ни... весь текст скрыт [показать]
 2.4, Аноним, 01:04, 03/05/2014 [^] [ответить] [смотреть все] [показать ветку]  +3 +/
Ты походу ваще не в курсе как оно работает Ты точно ДАВНО111 смотришь на эту... весь текст скрыт [показать] [показать ветку]
 2.25, YetAnotherOnanym, 13:18, 03/05/2014 [^] [ответить] [смотреть все] [показать ветку]  +/ Она умеет экспортироваться по NFS.
Кст, спасибо редактору за превращение коротенькой заметки в полнотекстовую новость.
 
1.5, Аноним, 01:05, 03/05/2014 [ответить] [смотреть все]  +2 +/
Ceph круче, точка ... весь текст скрыт [показать]
 
  2.7, AnonymousRex, 01:24, 03/05/2014 [^] [ответить] [смотреть все] [показать ветку]  +2 +/
это другой подход и скорее всего скоро их объединят в один продукт, где можно в... весь текст скрыт [показать] [показать ветку]
 
2.9, Аноним, 01:50, 03/05/2014 [^] [ответить] [смотреть все] [показать ветку]  +/ 
  3.10, nonym, 02:31, 03/05/2014 [^] [ответить] [смотреть все]  +2 +/
 
3.11, Аноним, 02:43, 03/05/2014 [^] [ответить] [смотреть все]  +1 +/
Скоростью как минимум Архитектура лучше, перспективы гораздо лучше Не зря редх... весь текст скрыт [показать]
 
  4.20, аноном, 12:06, 03/05/2014 [^] [ответить] [смотреть все]  +1 +/
Глустер имеет фатальный недостаток, система распределяет запись файлов не учитывая размер файла и размер хранилища, тупо пихает последовательно на каждую ноду. В итоге хранилища на нодах забиваются неравномерно и нужно следить сторонними средствами за забитостью винтов и подпихивать новые объемы. Перераспределить данные нельзя, так как в названии файла хэшируется путь к нему, тоесть нода на которой лежит файл.
 
  5.28, anonymous, 13:58, 03/05/2014 [^] [ответить] [смотреть все]  +/
> Глустер имеет фатальный недостаток, система распределяет запись файлов не учитывая размер
> файла и размер хранилища, тупо пихает последовательно на каждую ноду. В
> итоге хранилища на нодах забиваются неравномерно и нужно следить сторонними средствами
> за забитостью винтов и подпихивать новые объемы. Перераспределить данные нельзя, так
> как в названии файла хэшируется путь к нему, тоесть нода на
> которой лежит файл.

ребаланс не работает?

 
3.12, Добрый Дохтур, 04:16, 03/05/2014 [^] [ответить] [смотреть все]  +1 +/
глустер на операциях с метаданными медленный как чёрт знает что и это не лечит... весь текст скрыт [показать]
 
  4.13, AnonymousRex, 04:21, 03/05/2014 [^] [ответить] [смотреть все]  +/
багрепорт есть ... весь текст скрыт [показать]
 
4.19, zed_0xff, 10:38, 03/05/2014 [^] [ответить] [смотреть все]  +/
если backend-fs ext4 - то да на reiserfs, zfs, xfs - быстрее в 100500 раз ... весь текст скрыт [показать]
 
  5.42, t28, 02:07, 04/05/2014 [^] [ответить] [смотреть все]  +/
> на reiserfs, zfs, xfs - быстрее в 100500 раз.

Поначалу кажется, что быстро, но при заполнении хранилища возвращаются старые тормоза.

 
5.46, Добрый Дохтур, 12:50, 04/05/2014 [^] [ответить] [смотреть все]  +1 +/ > если backend-fs ext4 - то да
> на reiserfs, zfs, xfs - быстрее в 100500 раз.

фс тут роли не играет.

на глустерной шаре:

for i in 'seq 0 255'; do mkdir $i; done
for i in 'seq 0 10'; do time ls; done


и вы увидите, что время за которое отрабатывает ls никак не меняется, т.к. ничего не кешируется.
глустер на каждый ls обходит все брики, получает содержимое каталогов и потом "склеивает" результаты. если сделать еще второй уровень каталогов, глустер превращается в тыкву, а find по такому дереву всегда выполняется минуты.

 2.18, Аноним, 10:25, 03/05/2014 [^] [ответить] [смотреть все] [показать ветку]  +/ 
1.14, Аноним, 05:09, 03/05/2014 [ответить] [смотреть все]  –4 +/
Будущее за облаками Скоро на планшете будет только маленькая быстрая клиентская... весь текст скрыт [показать]
 
  2.15, bOOster, 08:33, 03/05/2014 [^] [ответить] [смотреть все] [показать ветку]  +2 +/
 
  3.23, Аноним, 13:02, 03/05/2014 [^] [ответить] [смотреть все]  +1 +/
А прикинь как клево - США ввинчивают санкции, а у тебя получается бесполезный ки... весь текст скрыт [показать]
 
  4.43, t28, 02:08, 04/05/2014 [^] [ответить] [смотреть все]  +/
> А прикинь как клево - США ввинчивают санкции, а у тебя получается
> бесполезный кирпич.

Санкции — хорошее лекарство от тупости ІТ-руководства.

 
2.16, freehck, 10:09, 03/05/2014 [^] [ответить] [смотреть все] [показать ветку]  +/
Извините, но что значит скоро У тех, кто хотел иметь копию чего бы там ни был... весь текст скрыт [показать] [показать ветку]
 2.22, Аноним, 12:59, 03/05/2014 [^] [ответить] [смотреть все] [показать ветку]  +1 +/ 
  3.26, Аноним, 13:48, 03/05/2014 [^] [ответить] [смотреть все]  +/
Так он и сейчас при отпадании инета в тыкву превращается, кучеры в мышей и тд ... весь текст скрыт [показать]
 
  4.44, Аноним, 02:45, 04/05/2014 [^] [ответить] [смотреть все]  +/
У кого-то - в тыкву, а у кого-то - в читалку, и заодно плеер ... весь текст скрыт [показать]
 
4.49, Аноним, 16:35, 04/05/2014 [^] [ответить] [смотреть все]  +/
Вредно все время в интернете сидеть Лучше книжки почитай, за одно ничего в тыкв... весь текст скрыт [показать]
 
  5.54, Аноним, 09:01, 05/05/2014 [^] [ответить] [смотреть все]     [к модератору]  +/
Оно и видно, как ты читаешь Заодно пишется слитно Эй, двумя Розенталями этог... весь текст скрыт [показать]
 
3.31, Аноним, 14:49, 03/05/2014 [^] [ответить] [смотреть все]  +/
он и так тыква, даже с интернетом... весь текст скрыт [показать]
 2.30, Аноним, 14:48, 03/05/2014 [^] [ответить] [смотреть все] [показать ветку]  +4 +/
Всё тупое хомячьё, которое хотело подсесть на облако, уже это сделало Лошарорын... весь текст скрыт [показать] [показать ветку]
 2.37, anonymous, 21:49, 03/05/2014 [^] [ответить] [смотреть все] [показать ветку]  +/ > Будущее за облаками!
> Скоро на планшете будет только маленькая быстрая клиентская часть ОС, а всё
> остальное будет подгружаться из специльной системы, соединяющей все компьютеры в мире,
> по мере необходимости с помощью специальных волн, распостраняющихся по воздуху, благодаря
> спутникам и башням с антеннами.

Мне лет десять тому назад что-то подобное похапэшники говорили.

 
1.34, Аноним, 18:58, 03/05/2014 [ответить] [смотреть все]  +1 +/
у сабжа перед хаммерфс2, только одиен плюс - портируемость на линукс впрочем, с... весь текст скрыт [показать]
 
  2.35, Аноним, 19:25, 03/05/2014 [^] [ответить] [смотреть все] [показать ветку]  +/
 
  3.51, Аноним, 20:55, 04/05/2014 [^] [ответить] [смотреть все]  +/
он заканчивает тестирование phomeliquid, пока коючевой компонент, на работу кот... весь текст скрыт [показать]
 
2.45, Аноним, 02:45, 04/05/2014 [^] [ответить] [смотреть все] [показать ветку]  +/ 
  3.52, Аноним, 20:55, 04/05/2014 [^] [ответить] [смотреть все]  +/
стрекоза, если быть точным фряха хаммер2 не подымет по тем-же причинам, по каки... весь текст скрыт [показать]
 

Ваш комментарий  

Read more http://www.opennet.ru/opennews/art.shtml?num=39692