Spider Group стала использовать для портала Mediazona.ru систему Glusterfs

24 Марта 2011
Компания Spider Group впервые в России для крупнейшего в ЮФО сервиса файлового обмена портала http://mediazona.ru использовала линейно-масштабируемую кластерную файловую систему Glusterfs.

Glusterfs на портале успешно эксплуатируется уже более 2-x лет. За это время ежемесячный трафик сервиса вайлового обмена вырос до 250 TiB. Средняя суммарная скорость отдачи данных с сервиса - около 1.3 GiB/s.

Суммарный объём хранения составляет до 20 TiB. С сервиса постоянно подключено до 2-x с половиной тысяч клиентов. Glusterfs развёрнута на пяти серверах, являющихся так же и клиентами glusterfs, соединённых локальной гигабитной сетью. Клиенты получают доступ к каждому серверу, с которого раздаются файлы. Благодаря динамическому управлению томами, доступному в последних версиях Glusterfs, большинство манипуляций, связанных с добавлением дополнительных дисковых массивов и перераспределением хранящихся файлов по дисковым массивам, происходит незаметно для клиентов.

Также в случае одиночных отказов дисковых массивов клиенты временно теряют доступ не ко всем данным, а только к той части, которая находилась на отказавшем массиве. При восстановлении после сбоя отказавшая часть тома Glusterfs совершенно прозрачно для клиентов подключается обратно.

Благодаря такой гибкости специалистам Spider Group удалось практически незаметно для клиентов разделить всё дисковое пространство файлообменника на несколько частей в зависимости от востребованности файлов клиентами. То есть самые востребованные файлы хранятся на быстрых HDD с интерфейсом Fibre Channel, а файлы, к которым обращаются достаточно редко - на более медленных SATA дисках. Таким образом, кластерная файловая система Glusterfs удачно вписалась в проект и позволила с лёгкостью масштабировать сервис.
Тарас Шевченко
Spider Group
(861)265-80-35
taras@spider.ru